KR100588901B1 - 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법 - Google Patents

움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법 Download PDF

Info

Publication number
KR100588901B1
KR100588901B1 KR1020040032217A KR20040032217A KR100588901B1 KR 100588901 B1 KR100588901 B1 KR 100588901B1 KR 1020040032217 A KR1020040032217 A KR 1020040032217A KR 20040032217 A KR20040032217 A KR 20040032217A KR 100588901 B1 KR100588901 B1 KR 100588901B1
Authority
KR
South Korea
Prior art keywords
motion
image
inter
generating
block
Prior art date
Application number
KR1020040032217A
Other languages
English (en)
Other versions
KR20050107060A (ko
Inventor
정우석
Original Assignee
주식회사 대우일렉트로닉스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 대우일렉트로닉스 filed Critical 주식회사 대우일렉트로닉스
Priority to KR1020040032217A priority Critical patent/KR100588901B1/ko
Publication of KR20050107060A publication Critical patent/KR20050107060A/ko
Application granted granted Critical
Publication of KR100588901B1 publication Critical patent/KR100588901B1/ko

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/01Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012Conversion between an interlaced and a progressive signal
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/16Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter for a given display mode, e.g. for interlaced or progressive display mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Television Systems (AREA)

Abstract

본 발명은 인터 프레임의 생성을 위한 움직임 추정 및 보상에 움직임 벡터와 관련 정보를 이용함으로써, 복잡한 계산량을 필요로 하지 않으면서도 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정할 수 있도록 한다는 것으로, 이를 위하여 본 발명은, 인트라 또는 인터 영상으로의 디인터레이스 결정을 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 종래 방식과는 달리, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 크기 정보에 의거하여 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정함으로써, 복잡한 계산량을 필요로 하지 않으면서도 영상의 움직임에 적응적인 영상 디인터레이싱을 실현할 수 있는 것이다.

Description

움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치 및 그 방법{APPARATUS AND METHOD FOR DE-INTERLACING ADAPTIVELY FIELD IMAGE BY USING MOTION COMPENSATE TECHNIQUE}
도 1은 본 발명의 바람직한 실시 예에 따른 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치의 블록구성도,
도 2a는 움직임 추정을 위한 블록의 예시도, 2b는 움직임 추정 블록보다 적어도 큰 사이즈를 갖는 움직임 보상 블록의 예시도, 2c는 움직임 탐색 영역 단위로 하나의 움직임 벡터를 검출하는 것을 설명하기 위한 예시도,
도 3은 종래의 움직임 보상 기법을 이용한 영상 디인터레이스 장치의 블록구성도.
<도면의 주요부분에 대한 부호의 설명>
102 : 필드 데이터 전처리 블록
104 : 인트라 프레임 발생 블록
106 : 정방향 인터 프레임 생성 블록
108 : 역방향 인터 프레임 생성 블록
110 : 인터 프레임 발생 블록
112 : 인트라/인터 결정 블록
114 : 프레임 선택 블록
본 발명은 영상신호 디인터레이스 기법에 관한 것으로, 더욱 상세하게는 오드(홀수) 필드와 이븐(짝수) 필드로 된 인터레이스 영상에 대해 인트라 또는 인터 프레임의 디인터레이스 영상으로 변환하는데 적합한 영상 디인터레이스 장치 및 그 방법에 관한 것이다.
통상적으로, 디스플레이를 위한 영상신호는 인터레이스 영상과 디인터레이스 영상으로 구분할 수 있는데, 인터레이스 영상은 오드 필드와 이븐 필드로 이루어져 격행 주사를 통해 디스플레이되는 영상을 나타내고, 디인터레이스 영상은 하나의 프레임으로 이루어져 순차 주사를 통해 디스플레이되는 영상을 나타낸다.
잘 알려진 바와 같이, NTSC 방송의 영상신호는 인터레이스 영상(즉, 오드 필드와 이븐 필드의 격행 주사를 통해 하나의 영상 프레임을 표현하는 방식)으로 이루어져 있는데, 최근 들어 보급이 확산되고 있는 PDP, LCD 등의 디스플레이 소자는 디인터레이스 방식(즉, 즉, 영상을 한 라인씩 순차적으로 주사하여 한 프레임을 표현하는 방식)의 영상 모드를 지원하고 있다. 따라서, 이러한 PDP 등에서는 NTSC 방송의 인터레이스 영상을 디인터레이스 영상으로 재배열하는 수단을 채용하고 있다.
전형적인 종래 디인터레이스 방식으로는 두 라인 데이터를 그대로 이용하여 디인터레이스 영상을 생성하는 방법과 화소(픽셀) 단위의 움직임을 추정 결과에 의 거하여 인터레이스 영상을 생성하는 방법이 있다.
상기한 종래 방법들 중 라인 데이터를 그대로 이용하는 방식은 오드 필드 라인 데이터와 이븐 필드 라인 데이터를 라인별로 겹쳐서 끼워 넣는 방식(라인 삽입 방식)으로 디인터레이스 영상을 생성하는 기법인데, 이러한 기법의 경우 프레임용 보간 데이터의 생성을 위한 계산량이 간단하다는 장점을 갖는 반면에 필드별로 움직임이 심한 동영상일 경우 필드간의 영상 차이가 심하기 때문에 에지 근처에서 영상의 화질 열화를 필연적으로 수반되는 문제가 있다.
또한, 상기한 종래 방법들 중 화소 단위의 움직임을 추정하는 방식은 화소 단위의 움직임을 추정하고, 이 움직임 추정 결과에 의거하여 현재 필드의 인접하는 화소들 및/또는 이전 필드의 대응하는 위치의 인접 화소들을 이용하는 방식으로 디인터레이스 영상을 생성하는 기법인데, 이러한 기법의 경우 영상의 움직임에 매우 강한 특성을 갖는 반면에 하드웨어적인 구성 및 계산량이 매우 복잡하다는 문제가 있으며, 이러한 문제는 결국 디인터레이스 장치의 상용화 및 저가격화를 저해시키는 요인으로 작용하고 있는 실정이다.
한편, 상기한 종래 기술의 문제점을 해결하기 위한 하나의 방편으로서, 라인 삽입 방식과 움직임 추정/보상을 이용한 보간(interpolation) 방식을 혼합하여 사용하는 새로운 방법이 제안되었으며, 이러한 새로운 방법을 실현하는 하드웨어적인 구성이 도 3에 도시되어 있다.
도 3은 종래의 움직임 보상 기법을 이용한 영상 디인터레이스 장치의 블록구성도로서, 필드 데이터 전처리 블록(302), 인트라 프레임 발생 블록(304), 정방향 인터 프레임 생성 블록(306), 역방향 인터 프레임 생성 블록(308), 인터 프레임 발생 블록(310), 제1차분 발생 블록(312), 제2차분 발생 블록(314), 인트라/인터 결정 블록(316) 및 프레임 선택 블록(318)을 포함한다.
도 3을 참조하면, 필드 데이터 전처리 블록(302)은, 비록 도면에서의 상세한 도시는 생략하였으나, 다수의 필드 메모리와 움직임 추정 블록을 포함하는 것으로, 외부로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 인트라 프레임 발생 블록(304)으로 제공하고, 시간축 상으로 연속하는 한쪽의 필드 데이터(예를 들면, 오드 필드)들 이용하여 N×N 블록 단위로 움직임을 추정하여 각 블록 단위의 움직임 벡터를 발생하며, 이와 같이 발생된 움직임 벡터들을 선택된 필드 데이터(예를 들면, 오드 필드 데이터)와 함께 정방향 및 역방향 인터 프레임 생성 블록(306, 308)으로 각각 제공하는 등의 기능을 수행한다.
다음에, 인트라 프레임 발생 블록(304)은 필드 데이터 전처리 블록(302)으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 이용하여 라인 데이터를 순차 삽입하는 방식으로 인트라 프레임 데이터, 즉 인트라 프레임의 디인터레이스 영상 데이터를 생성하는 것으로, 여기에서 생성된 인트라 프레임 데이터(디인터레이스 영상 데이터)는 라인 L31을 통해 제2차분 발생 블록(314) 및 프레임 선택 블록(318)으로 각각 제공된다.
또한, 정방향 인터 프레임 생성 블록(306)은 필드 데이터 전처리 블록(302)으로부터 제공되는 n번째 필드 데이터(예컨대, n번째 오드 필드 데이터)와 n-1번째 및 n번째 필드 데이터간의 N×N 블록의 단위 움직임 추정을 통해 얻어진 움직임벡 터들을 이용하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 n번째 필드를 이용하는 라인 데이터 삽입 방식을 통해 정방향의 인터 프레임, 즉 정방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 정방향의 인터 프레임은 라인 L32를 통해 인터 프레임 발생 블록(310)과 제1차분 발생 블록(312)으로 각각 제공된다.
이어서, 역방향 인터 프레임 생성 블록(308)은 필드 데이터 전처리 블록(302)으로부터 제공되는 n-1번째 필드 데이터(예컨대, n-1번째 오드 필드 데이터)와 n-1번째 및 n번째 필드 데이터간의 N×N 블록의 단위 움직임 추정을 통해 얻어진 움직임벡터들을 이용하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 n-1번째 필드를 이용하는 라인 데이터 삽입 방식을 통해 역방향의 인터 프레임, 즉 역방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 역방향의 인터 프레임은 라인 L33을 통해 인터 프레임 발생 블록(310)과 제1차분 발생 블록(312)으로 각각 제공된다.
이에 응답하여, 인터 프레임 발생 블록(310)에서는 라인 L32를 통해 제공되는 정방향의 인터 프레임과 라인 L33을 통해 제공되는 역방향의 인터 프레임의 대응하는 각 픽셀 값들을 가산한 후 다시 평균(즉, 1/2)을 취하는 방식으로 인터 프레임을 생성하며, 여기에서 생성된 인터 프레임은 라인 L34를 통해 제2차분 발생 블록(314)과 프레임 선택 블록(318)으로 각각 제공된다.
또한, 제1차분 발생 블록(312)에서는 라인 L32를 통해 제공되는 정방향의 인터 프레임과 라인 L33을 통해 제공되는 역방향의 인터 프레임간의 차분값(에러신호 들)들을 추출, 즉 모든 픽셀들에 대한 픽셀 차분값들을 추출하고, 이 추출된 차분값들을 모두 가산하여 인터 프레임 차분 총합값을 산출한 후 다음 단의 인트라/인터 결정 블록(316)으로 제공한다.
다음에, 제2차분 발생 블록(314)에서는 라인 L31을 통해 제공되는 인트라 프레임과 라인 L34를 통해 제공되는 인터 프레임간의 차분값(에러신호들)들을 추출, 즉 모든 픽셀들에 대한 픽셀 차분값들을 추출하고, 이 추출된 차분값들을 모두 가산하여 인트라/인터 프레임 차분 총합값을 산출한 후 다음 단의 인트라/인터 결정 블록(316)으로 제공한다.
이에 응답하여, 인트라/인터 결정 블록(316)에서는 제1차분 발생 블록(312)으로부터 제공되는 인터 프레임 차분 총합값과 제2차분 발생 블록(314)으로부터 제공되는 인트라/인터 프레임 차분 총합값을 비교하고, 그 비교 결과에 의거하여 디인터레이싱된 인트라 영상 혹은 디인터레이싱된 인터 영상을 선택하기 위한 절환신호를 발생하여 라인 L35를 통해 프레임 선택 블록(318)으로 제공한다. 예를 들어, 인터 프레임 차분 총합값이 인트라/인터 프레임 차분 총합값보다 적어도 클 때 인터 모드로 디인터레이싱된 영상을 선택하도록 하고 반대의 경우 인트라 모드로 디인터레이싱된 영상을 선택하도록 하는 절환신호를 발생하여 라인 L35를 통해 프레임 선택 블록(318)으로 제공한다.
그 결과, 프레임 선택 블록(318)에서는, 라인 L35를 통해 제공되는 절환신호에 응답하여, 라인 L31 상의 디인터레이싱된 인트라 영상을 출력으로 선택하거나 혹은 라인 L34 상의 디인터레이싱된 인터 영상을 출력으로 선택한다. 여기에서, 디 인터레이싱된 영상의 출력 선택은 하나의 프레임 단위로 이루어진다.
즉, 움직임 보상 기법을 이용한 종래의 디인터레이스 장치에서는 정방향의 인터 프레임 및 역방향의 인터 프레임간의 인터 프레임 차분값을 산출하고, 인트라 프레임 및 인터 프레임간의 인트라/인터 프레임 차분값을 산출하며, 이와 같이 산출된 두 차분값들에 의거하여 인터레이스 영상을 인트라 영상으로 디인터레이스할 것인지 혹은 인터 영상으로 디인터레이스 할 것인지를 판단 및 결정한다.
그러나, 상술한 바와 같은 종래의 디인터레이스 장치의 경우, 인터레이스 영상을 인트라 영상으로 디인터레이스할 것인지 또는 인터 영상으로 디인터레이스할 것인지를 판단하기 위해서는, 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값의 산출하고 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출해야만 하기 때문에, 별도의 복잡한 계산을 필요로 한다는 문제가 있으며, 하드웨어적인 구현에 있어서도 구조적인 복잡도가 증가할 수밖에 없는 단점을 갖는다.
따라서, 본 발명은 상기한 종래 기술의 문제점을 해결하기 위한 것으로, 인터 프레임의 생성을 위한 움직임 추정 및 보상에 움직임 벡터와 관련 정보를 이용함으로써, 복잡한 계산량을 필요로 하지 않으면서도 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정할 수 있는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치 및 그 방법을 제공하는데 그 목적이 있다.
상기 목적을 달성하기 위한 일 관점에 따른 본 발명은, 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환 하는 장치로서, 오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 인트라 영상을 발생하는 수단과, 시간적으로 연속하는 필드간의 움직임 추정 및 보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 인터 영상을 발생하는 수단과, 상기 움직임 추정 및 보상에 이용되는 움직임 정보에 의거하여 상기 인트라 영상과 인터 영상의 출력을 선택하기 위한 절환신호를 발생하는 수단과, 상기 발생된 절환신호에 응답하여, 상기 발생된 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 수단을 포함하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치를 제공한다.
상기 목적을 달성하기 위한 다른 관점에 따른 본 발명은, 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 방법으로서, 오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 인트라 영상을 발생하는 과정과, 시간적으로 연속하는 필드간의 움직임 추정 및 보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 인터 영상을 발생하는 과정과, 상기 움직임 추정 및 보상에 이용되는 움직임 정보에 의거하여 상기 인트라 영상 또는 인터 영상의 출력 선택을 위한 계수 k를 산출하는 과정과, 상기 산출된 계수 k와 기 설정된 기준값을 비교하는 과정과, 상기 비교 결과에 의거하여, 상기 발생된 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 과정을 포함하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법을 제공한다.
본 발명의 상기 및 기타 목적과 여러 가지 장점은 이 기술분야에 숙련된 사람들에 의해 첨부된 도면을 참조하여 하기에 기술되는 본 발명의 바람직한 실시 예로부터 더욱 명확하게 될 것이다.
이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예에 대하여 상세하게 설명한다.
본 발명의 핵심 기술요지는, 인트라 또는 인터 영상으로의 디인터레이스 결정을 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 전술한 종래 방식과는 달리, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기 정보에 의거하여 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정한다는 것으로, 이러한 기술적 수단을 통해 본 발명에서 목적으로 하는 바를 쉽게 달성할 수 있다.
도 1은 본 발명의 바람직한 실시 예에 따른 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치의 블록구성도로서, 필드 데이터 전처리 블록(102), 인트라 프레임 발생 블록(104), 정방향 인터 프레임 생성 블록(106), 역방향 인터 프레임 생성 블록(108), 인터 프레임 발생 블록(310), 인트라/인터 결정 블록(112) 및 프레임 선택 블록(114)을 포함한다.
도 1을 참조하면, 필드 데이터 전처리 블록(102)은, 비록 도면에서의 상세한 도시는 생략하였으나, 다수의 필드 메모리와 움직임 추정 블록을 포함하는 것으로, 외부로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 인트라 프레임 발생 블록(104)으로 제공하고, 시간축 상으로 연속하는 한쪽의 필드 데이터(예를 들면, 오드 필드)들 이용하여 N×N 블록 단위로 움직임을 추정하여 각 블록 단위의 움직임 벡터를 발생하며, 이와 같이 발생된 움직임 벡터들을 선택된 필드 데이터(예를 들면, 오드 필드 데이터)와 함께 정방향 및 역방향 인터 프레임 생성 블록(106, 108)으로 각각 제공하는 등의 기능을 수행한다. 예를 들어, n-1 오드 필드(이전 오드 필드)와 n 오드 필드(현재 오드 필드)간의 움직임 추정을 통해 N×N 블록 단위로 움직임 벡터를 발생한다. 여기에서의 움직임 추정은, 예를 들면 영상 인코딩 분야에서 이미 널리 알려진 블록 매칭 알고리즘 등을 이용할 수 있다.
이때, 움직임 추정을 위한 계산량 등을 고려할 때, 모든 N×N 블록에 대해 움직임을 추정하는 것이 아니라 N×N 블록에서 추출한 움직임 벡터를 (N+M)×(N+M) 블록으로 확장하여 적용할 수도 있으며, 이러한 움직임 확장 적용 방식을 통해 움직임 추정 및 보상에 소요되는 계산량을 효과적으로 절감할 수 있다. 여기에서, (N+M)×(N+M) 블록은 움직임 추정 블록인 N×N 블록의 움직임 탐색 영역일 수 있다.
일 예로서, 도 2a 및 2b에 도시된 바와 같이, 4×4 블록에 대해 20×20의 움직임 탐색 영역에서 움직임을 추정하여 움직임 벡터를 추출하고, 이 추출된 움직임 벡터를 20×20 블록 단위로 적용, 즉 도 2c에 도시된 바와 같이, 하나의 4×4 블록에 대해 움직임을 추정하고 다음 블록은 16픽셀 건너뛰어 움직임을 추정한 후 20×20 블록 단위로 적용하는 것이다. 이를 위하여, 필드 데이터 전처리 블록(102)에서는 라인 L12를 통해 움직임 벡터, 움직임 추정 블록(N×N)의 크기, 움직임 탐 색 영역의 크기 또는 움직임 보상에 이용될 확장 블록((N+M)×(N+M))의 크기 정보를 정방향 인터 프레임 생성 블록(106)과 역방향 인터 프레임 생성 블록(108)으로 전달한다. 도 2c에 있어서, 참조번호 202는 필드(예컨대, 오드 필드) 데이터를 의미한다.
한편, 본 실시 예에서는 움직임 추정 블록의 크기를 4×4로 하고 움직임 보상을 위한 확장 블록의 크기를 20×20으로 하는 것으로 하여 설명하였으나, 본 발명이 반드시 이에 한정되는 것은 아니며, 필요 또는 용도에 따라 움직임 추정 블록의 크기와 화장 블록의 크기를 적응적으로 조절할 수 있음은 물론이다.
다음에, 인트라 프레임 발생 블록(104)은 필드 데이터 전처리 블록(102)으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 이용하여 라인 평균값을 취하는 방식으로 인트라 프레임 데이터, 즉 인트라 프레임의 디인터레이스 영상 데이터를 생성하는 것으로, 여기에서 생성된 인트라 프레임 데이터(디인터레이스 영상 데이터)는 라인 L11을 통해 프레임 선택 블록(114)으로 제공된다.
한편, 정방향 인터 프레임 생성 블록(106)은 필드 데이터 전처리 블록(102)으로부터 제공되는 n번째 필드 데이터(예컨대, n번째 오드 필드 데이터)와 라인 L12를 통해 제공되는 움직임 벡터, 움직임 추정 블록(N×N)의 크기 및 움직임 보상용 확장 블록((N+M)×(N+M))의 크기 정보를 이용하는 움직임 보상을 수행하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 n번째 필드를 이용하는 라인 데이터 삽입 방식으로 정방향의 인터 프레임, 즉 정방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 정방향의 인터 프레임은 라인 L13을 통해 인터 프레임 발생 블록(110)으로 제공된다.
또한, 역방향 인터 프레임 생성 블록(108)은, 상기한 정방향 인터 프레임 생성 블록(106)과 유사하게, 필드 데이터 전처리 블록(102)으로부터 제공되는 n-1번째 필드 데이터(예컨대, n-1번째 오드 필드 데이터)와 라인 L12를 통해 제공되는 움직임 벡터, 움직임 추정 블록(N×N)의 크기 및 움직임 보상용 확장 블록((N+M)×(N+M))의 크기 정보를 이용하는 움직임 보상을 수행하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 n-1번째 필드를 이용하는 라인 데이터 삽입 방식으로 역방향의 인터 프레임, 즉 역방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 역방향의 인터 프레임은 라인 L14를 통해 인터 프레임 발생 블록(110)으로 제공된다.
따라서, 본 발명에서는 움직임 추정 블록의 크기보다 적어도 큰 크기를 확장 블록으로 움직임 벡터를 적용하고, 이를 통해 확장 블록 단위(예를 들면, 움직임 탐색 영역 단위)로 움직임 보상을 해 주기 때문에 움직임 추정 및 보상을 위한 계산량을 대폭적으로 절감할 수 있으며, 이를 통해 영상 디인터레이싱의 고속 처리를 실현할 수 있다.
다음에, 인터 프레임 발생 블록(110)에서는 라인 L13을 통해 정방향 인터 프레임 생성 블록(106)으로부터 제공되는 정방향의 인터 프레임과 라인 L14를 통해 역방향 인터 프레임 생성 블록(108)으로부터 제공되는 역방향의 인터 프레임의 대응하는 각 픽셀 값들을 가산한 후 다시 평균(즉, 1/2)을 취하는 방식으로 인터 프레임(즉, 인터 모드의 디인터레이스 영상)을 생성하며, 여기에서 생성된 인터 프레 임은 라인 L15를 통해 프레임 선택 블록(114)으로 제공된다.
한편, 인트라/인터 결정 블록(112)은 라인 L12를 통해 필드 데이터 전처리 블록(102)으로부터 제공되는 움직임 벡터, 움직임 추정 블록(N×N)의 크기, 움직임 탐색 영역 또는 움직임 보상용 확장 블록((N+M)×(N+M))의 크기 정보를 이용하여 아래의 수학식과 같이 인트라 또는 인터 모드 결정용의 계수 k를 산출하고, 이 산출된 계수 k와 기 설정된 기준값 간을 비교하며, 그 비교 결과에 의거하여 디인터레이싱된 인트라 영상 혹은 디인터레이싱된 인터 영상을 선택하기 위한 절환신호를 발생하여 라인 L16을 통해 프레임 선택 블록(114)으로 제공한다. 예를 들어, 산출된 계수 k값이 기 설정된 기준값보다 적어도 클 때 인트라/인터 결정 블록(112)에서는 인트라 영상을 선택하도록 하는 절환신호를 라인 L16 상에 발생하고, 산출된 계수 k값이 기 설정된 기준값보다 작을 때 인트라/인터 결정 블록(112)에서는 인터 영상을 선택하도록 하는 절환신호를 라인 L16 상에 발생한다. 여기에서, 계수 k값이 크다는 것은 상대적으로 움직임이 많다는 것을 의미하고, 반대로 작다는 것은 상대적으로 움직임이 많지 않다는 것을 의미하기 때문에 계수 k값이 기준값보다 클 때 인트라 영상을 선택하도록 하고 기준값보다 작을 때 인터 영상을 선택하도록 한다.
Figure 112004019256708-pat00001
상기한 수학식 1에서, Vx는 x축상의 움직임 좌표 값을, Vy는 y축상의 움직임 좌표 값을 각각 의미하며, SR(search range)은 (움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 크기 - 움직임 추정 블록의 크기)/2를 의미한다.
한편, 본 발명의 디인터레이스 장치는 인트라 또는 인터 영상으로 디인터레이스를 할 때, 인트라 또는 인터 모드의 선택을 움직임 탐색 영역(또는 움직임 보상용 확장 블록) 단위로 하거나, 움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 라인 수와 대응하는 다수의 라인 단위로 하거나 혹은 한 프레임 단위로 할 수 있다. 여기에서, 움직임 탐색 영역의 라인 수에 대응하는 다수의 라인 단위로 인트라 모드 또는 인터 모드를 선택한다는 것은, 예를 들어 움직임 탐색 영역이 20×20 크기라고 가정할 때 20 라인 단위로 모드를 선택한다는 것을 의미하며, 이 경우 20 라인에 존재하는 모든 움직임 벡터에 대해 계수 k를 산출하고, 산출된 모든 계수 k를 가산한 후 움직임 벡터의 개수로 나눔으로서 최종 계수 k를 계산할 수 있을 것이다. 마찬가지로, 한 프레임 단위로 인트라 영상 및 인터 영상의 선택을 절환하는 경우, 프레임 전체에 존재하는 모든 움직임 벡터에 대해 계수 k를 산출하고, 산출된 모든 계수 k를 가산한 후 움직임 벡터의 총 개수로 나눔으로서 최종 계수 k를 계산할 수 있을 것이다.
따라서, 프레임 선택 블록(114)에서는, 라인 L16을 통해 인트라/인터 결정 블록(112)으로부터 제공되는 절환신호에 응답하여, 라인 L11 상의 디인터레이싱된 인트라 영상을 출력으로 선택하거나 혹은 라인 L14 상의 디인터레이싱된 인터 영상을 출력으로 선택한다. 여기에서, 디인터레이싱된 영상의 출력 선택은 움직임 탐색 영역(또는 움직임 보상용 확장 블록) 단위, 움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 라인 수와 대응하는 다수의 라인 단위 또는 하나의 프레임 단위로 이루어질 수 있다.
즉, 상술한 바와 같이, 본 발명이 디인터레이스 장치에서는 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기 정보에 의거하여 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정한다.
이상 설명한 바와 같이 본 발명에 따르면, 인트라 또는 인터 영상으로의 디인터레이스 결정을 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 전술한 종래 방식과는 달리, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 크기 정보에 의거하여 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정함으로써, 복잡한 계산량을 필요로 하지 않으면서도 영상의 움직임에 적응적인 영상 디인터레이싱을 실현할 수 있다.

Claims (20)

  1. 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 장치로서,
    오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 인트라 영상을 발생하는 수단과,
    시간적으로 연속하는 필드간의 움직임 추정 및 보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 인터 영상을 발생하는 수단과,
    상기 움직임 추정 및 보상에 이용되는 움직임 정보에 의거하여 상기 인트라 영상과 인터 영상의 출력을 선택하기 위한 절환신호를 발생하는 수단과,
    상기 발생된 절환신호에 응답하여, 상기 발생된 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 수단
    을 포함하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  2. 제 1 항에 있어서,
    상기 움직임 정보는, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기 정보를 포함하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  3. 제 1 항에 있어서,
    상기 인터 영상 발생 수단은,
    시간적으로 연속하는 이전 필드와 현재 필드를 이용하여 N×N의 움직임 추정 블록 단위로 (N+M)×(N+M)의 움직임 탐색 영역에서의 움직임 추정을 통해 움직임 벡터들을 발생하는 수단과,
    상기 움직임 벡터들, 움직임 탐색 영역 및 상기 현재 필드를 이용한 움직임 보상을 수행하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 상기 현재 필드를 이용하여 정방향의 인터 프레임을 생성하는 수단과,
    상기 움직임 벡터들, 움직임 탐색 영역 및 상기 이전 필드를 이용한 움직임 보상을 수행하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 상기 이전 필드를 이용하여 역방향의 인터 프레임을 생성하는 수단과,
    상기 생성된 정방향의 인터 프레임과 역방향의 인터 프레임을 이용하여 상기 인터 프레임을 발생하는 수단
    을 포함하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  4. 제 3 항에 있어서,
    상기 움직임 벡터 발생 수단은 상기 움직임 탐색 영역에 대응하는 크기의 확장 블록별로 하나의 N×N의 움직임 추정 블록에 대한 움직임 벡터를 발생하고, 상기 정방향 및 역방향의 인터 프레임 생성 수단은 상기 확장 블록 단위로 움직임 보 상을 수행하여 상기 정방향 및 역방향의 예측 필드를 생성하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  5. 제 4 항에 있어서,
    상기 움직임 추정 블록은 4×4 블록이고, 상기 움직임 탐색 영역은 20×20 블록인 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  6. 제 3 항에 있어서,
    상기 인터 프레임 발생 수단은, 상기 생성된 정방향의 인터 프레임과 역방향의 인터 프레임을 대응하는 각 픽셀별로 가산한 후 각 픽셀의 평균값을 취하여 상기 인터 프레임을 발생하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  7. 제 3 항에 있어서,
    상기 절환신호 발생 수단은, 상기 (N+M)×(N+M)의 움직임 탐색 영역 단위로 상기 인트라 영상 또는 인터 영상의 선택을 절환하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  8. 제 3 항에 있어서,
    상기 절환신호 발생 수단은, 상기 (N+M)×(N+M)의 움직임 탐색 영역의 라인수에 대응하는 다수의 라인 단위로 상기 인트라 영상 또는 인터 영상의 선택을 절환하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  9. 제 3 항에 있어서,
    상기 절환신호 발생 수단은, 한 프레임 단위로 상기 인트라 영상 또는 인터 영상의 선택을 절환하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 장치.
  10. 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 방법으로서,
    오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 인트라 영상을 발생하는 과정과,
    시간적으로 연속하는 필드간의 움직임 추정 및 보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 인터 영상을 발생하는 과정과,
    상기 움직임 추정 및 보상에 이용되는 움직임 정보에 의거하여 상기 인트라 영상 또는 인터 영상의 출력 선택을 위한 계수 k를 산출하는 과정과,
    상기 산출된 계수 k와 기 설정된 기준값을 비교하는 과정과,
    상기 비교 결과에 의거하여, 상기 발생된 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 과정
    을 포함하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  11. 제 10 항에 있어서,
    상기 움직임 정보는, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기 정보를 포함하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  12. 제 10 항에 있어서,
    상기 인터 영상 발생 과정은,
    시간적으로 연속하는 이전 필드와 현재 필드를 이용하여 N×N의 움직임 추정 블록 단위로 (N+M)×(N+M)의 움직임 탐색 영역에서의 움직임 추정을 통해 움직임 벡터들을 발생하는 과정과,
    상기 움직임 벡터들, 움직임 탐색 영역, 현재 필드 및 이전 필드를 이용한 움직임 보상을 각각 수행하여 정방향 및 역방향의 예측 필드를 각각 생성하고, 이 생성된 정방향 및 역방향의 예측 필드와 상기 현재 필드 및 이전 필드를 이용하여 정방향 및 역방향의 인터 프레임을 생성하는 과정과,
    상기 생성된 정방향 및 역방향의 인터 프레임을 이용하여 상기 인터 프레임을 발생하는 과정
    을 포함하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  13. 제 12 항에 있어서,
    상기 방법은, 상기 움직임 탐색 영역에 대응하는 크기의 확장 블록별로 하나의 N×N의 움직임 추정 블록에 대한 움직임 벡터를 발생하고, 상기 확장 블록 단위로 움직임 보상을 수행하여 상기 정방향 및 역방향의 예측 필드를 생성하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  14. 제 13 항에 있어서,
    상기 움직임 추정 블록은 4×4 블록이고, 상기 움직임 탐색 영역은 20×20 블록인 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  15. 제 12 항에 있어서,
    상기 방법은, 상기 생성된 정방향 및 역방향의 인터 프레임을 대응하는 각 픽셀별로 가산한 후 각 픽셀의 평균값을 취하여 상기 인터 프레임을 발생하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  16. 제 12 항에 있어서,
    상기 방법은, 상기 (N+M)×(N+M)의 움직임 탐색 영역 단위로 상기 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  17. 제 12 항에 있어서,
    상기 방법은, 상기 (N+M)×(N+M)의 움직임 탐색 영역의 라인수에 대응하는 다수의 라인 단위로 상기 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  18. 제 12 항에 있어서,
    상기 방법은, 한 프레임 단위로 상기 인트라 영상 또는 인터 영상을 디인터레이스 영상으로 선택하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
  19. 제 10 항에 있어서,
    상기 계수 k는, 다음의 수학식과 같이 결정되는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
    Figure 112004019256708-pat00002
    (상기 수학식에서, Vx는 x축상의 움직임 좌표 값을, Vy는 y축상의 움직임 좌표 값을, SR은 상기 움직임 탐색 영역의 크기에서 상기 움직임 추정 블록의 크기를 뺀 값을 2로 나눈 값을 각각 의미)
  20. 제 19 항에 있어서,
    상기 방법은, 상기 계수 k가 기 설정된 기준값보다 적어도 클 때 상기 발생된 인트라 영상을 디인터레이스 영상으로 선택하는 것을 특징으로 하는 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스 방법.
KR1020040032217A 2004-05-07 2004-05-07 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법 KR100588901B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040032217A KR100588901B1 (ko) 2004-05-07 2004-05-07 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040032217A KR100588901B1 (ko) 2004-05-07 2004-05-07 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법

Publications (2)

Publication Number Publication Date
KR20050107060A KR20050107060A (ko) 2005-11-11
KR100588901B1 true KR100588901B1 (ko) 2006-06-09

Family

ID=37283720

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040032217A KR100588901B1 (ko) 2004-05-07 2004-05-07 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR100588901B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100813986B1 (ko) 2006-10-25 2008-03-14 삼성전자주식회사 움직임 적응적 디인터레이싱 방법 및 그 장치

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010045333A (ko) * 1999-11-04 2001-06-05 윤종용 연속하는 4개의 인터레이스 필드를 이용한 디인터레이스장치 및 방법
KR20020001951A (ko) * 2000-06-22 2002-01-09 구자홍 순차주사 영상 변환 장치 및 방법과, 그를 이용한 수직주사율 변환 장치
JP2004007719A (ja) 2003-06-03 2004-01-08 Matsushita Electric Ind Co Ltd インタレース走査ディジタルビデオ信号の符号化装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010045333A (ko) * 1999-11-04 2001-06-05 윤종용 연속하는 4개의 인터레이스 필드를 이용한 디인터레이스장치 및 방법
KR20020001951A (ko) * 2000-06-22 2002-01-09 구자홍 순차주사 영상 변환 장치 및 방법과, 그를 이용한 수직주사율 변환 장치
JP2004007719A (ja) 2003-06-03 2004-01-08 Matsushita Electric Ind Co Ltd インタレース走査ディジタルビデオ信号の符号化装置

Also Published As

Publication number Publication date
KR20050107060A (ko) 2005-11-11

Similar Documents

Publication Publication Date Title
US5689305A (en) System for deinterlacing digitally compressed video and method
JP2924431B2 (ja) 符号化方式
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
JP4563603B2 (ja) 両方向動きベクトルを用いたフォーマット変換装置及びその方法
US7057665B2 (en) Deinterlacing apparatus and method
KR101127220B1 (ko) 움직임 보상 적응형 순차주사화 장치 및 그 방법
US7720150B2 (en) Pixel data selection device for motion compensated interpolation and method thereof
KR20100114499A (ko) 후광현상이 줄어든 영상보간 장치 및 방법
JP2000134585A (ja) 動きベクトル決定方法、画像信号のフレーム数変換方法および回路
US7324160B2 (en) De-interlacing apparatus with a noise reduction/removal device
US5760835A (en) Video coding device
JP3293561B2 (ja) 画像表示装置及び画像表示方法
KR100968642B1 (ko) 비월된 비디오 신호로부터 움직임 벡터를 계산하기 위한 방법 및 보간 디바이스와, 보간 디바이스를 포함하는 디스플레이 디바이스와, 컴퓨터 판독가능 매체
JP4222090B2 (ja) 動画像時間軸補間方法及び動画像時間軸補間装置
KR100588901B1 (ko) 움직임 보상 기법을 이용한 적응적인 영상 디인터레이스장치 및 그 방법
KR100726552B1 (ko) 움직임을 이용한 적응적인 영상 디인터레이스 장치 및 그방법
KR100624304B1 (ko) 움직임을 이용한 적응적인 영상 디인터레이스 장치 및 그방법
JP2004320278A (ja) 動画像時間軸補間方法及び動画像時間軸補間装置
JP3576618B2 (ja) 動きベクトル検出方法および装置
KR100616164B1 (ko) 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치및 그 방법
KR100624303B1 (ko) 움직임 카운트를 이용한 적응적인 영상 디인터레이스 장치및 그 방법
KR20020026042A (ko) 움직임 보상형 보간을 이용한 디-인터레이싱 장치 및 그방법
JP2606572B2 (ja) 動画像符号化装置
US7405767B2 (en) Video image conversion method for interlaced image to progressive image and system thereof
KR100588902B1 (ko) 영상 디인터레이스 장치 및 그 방법

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130603

Year of fee payment: 8

FPAY Annual fee payment

Payment date: 20140602

Year of fee payment: 9

LAPS Lapse due to unpaid annual fee