KR20040048478A - Apparatus and method for deinterlacing - Google Patents
Apparatus and method for deinterlacing Download PDFInfo
- Publication number
- KR20040048478A KR20040048478A KR1020020076223A KR20020076223A KR20040048478A KR 20040048478 A KR20040048478 A KR 20040048478A KR 1020020076223 A KR1020020076223 A KR 1020020076223A KR 20020076223 A KR20020076223 A KR 20020076223A KR 20040048478 A KR20040048478 A KR 20040048478A
- Authority
- KR
- South Korea
- Prior art keywords
- motion
- pixel value
- value
- interpolated
- pixel
- Prior art date
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
- H04N7/012—Conversion between an interlaced and a progressive signal
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
- H04N7/014—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes involving the use of motion vectors
Abstract
Description
본 발명은 신호변환 장치 및 방법에 관한 것으로, 보다 상세하게는 비월주사 신호를 순차주사 신호로 변환시키는 디인터레이싱 시에 움직임 벡터의 신뢰도에 따라 적응적으로 픽셀값(Intensity value of pixel)을 보상하여 블록킹 아티펙트와 저더 현상을 줄이는 디인터레이싱 장치 및 방법에 관한 것이다.The present invention relates to a signal conversion apparatus and a method, and more particularly, to block blocking by adaptively compensating an intensity value of a pixel according to the reliability of a motion vector during deinterlacing to convert an interlaced signal into a progressive scan signal. A deinterlacing apparatus and method for reducing artifacts and judder.
NTSC(National Television System Committee) 신호의 주사 방식은 라인간 깜빡거림(Flickering)과 번짐(Blurring) 현상, 수직 해상도가 떨어지는 비월주사 방식을 채택하고 있다. 비월주사 방식이 한 프레임을 두 번에 나누어 주사하는 방식임에 반해, 순차 방식은 한 프레임을 연속적으로 주사한다. 따라서 순차주사 방식은 비월주사 방식에 비하여 한 프레임을 보여줄 때 필드간 시간축 상의 잡음이 없고, 각 라인들간의 깜빡거림 현상도 줄일 수 있다. HDTV(High Definition Television)는 비월주사 방식뿐만 아니라 순차주사 방식도 채택하고 있다. 따라서, 비월주사 신호를 순차주사 신호로 변환시키는 효과적인 디인터레이싱 기법이 절실히 요구되고 있다. 또한 종래의 시공간(Spatio-temporal) 보간을 이용한 디인터레이싱 방법에서는 라인간 깜빡거림과 번짐 현상이 발생하는 문제점이 있으며, 이를 해결하기 위해 움직임 보상을 이용한 디인터레이싱 방법 및 IC가 소개되고 있다.NTSC (National Television System Committee) scan method adopts flickering, blurring, and interlaced scanning with low vertical resolution. While the interlaced scanning method scans one frame twice, the sequential scanning method continuously scans one frame. Therefore, the progressive scan method has no noise on the time axis between fields when showing one frame, and flickering between lines can be reduced compared to the interlaced scan method. High Definition Television (HDTV) adopts not only interlaced scanning but also progressive scanning. Therefore, there is an urgent need for an effective deinterlacing technique for converting interlaced signals into progressive scan signals. In addition, in the conventional deinterlacing method using spatial-temporal interpolation, there is a problem that flickering and smearing occur between lines, and a deinterlacing method and IC using motion compensation have been introduced to solve this problem.
도 1은 디인터레이싱의 기본 개념을 설명하기 위한 도면으로, 디인터레이싱은 수직 방향으로 홀수 또는 짝수 번째의 샘플만을 포함하는 필드를 프레임으로 변경하는 과정을 의미한다. 이렇게 변경된 출력 프레임은 하기 수학식 1과 같이 정의한다.FIG. 1 is a diagram for explaining a basic concept of deinterlacing. Deinterlacing refers to a process of changing a field including only odd or even samples to a frame in a vertical direction. This changed output frame Is defined as in Equation 1 below.
[수학식 1][Equation 1]
여기서(=(x,~ y)^T)는 공간적 위치를 의미하고, n은 필드 번호이다. 또한은 입력 필드이고,는 보간될 픽셀을 의미한다.here (= (x, ~ y) ^ T) means spatial location, and n is field number. Also Is an input field, Means the pixel to be interpolated.
움직임 보상을 이용하지 않는 디인터레이싱 방법 중에서 가장 대표적인 방법이 ELA(Edge-based Line Averaging) 디인터레이싱 방법이다. ELA 디인터레이싱 방법은 시공간 필터링을 이용하는 다른 디인터레이싱 방법들과 비교하여 성능이 우수하며, 구현이 용이한 장점을 갖는다. 그러나, ELA 디인터레이싱 방법은 움직임이 존재하는 영역에서 깜빡거림이 발생하는 문제점이 있다.The most representative method of deinterlacing without using motion compensation is edge-based line averaging (ELA) deinterlacing. The ELA deinterlacing method has superior performance and easy implementation in comparison with other deinterlacing methods using space-time filtering. However, the ELA deinterlacing method has a problem in that flickering occurs in a region where motion exists.
움직임 보상을 이용하는 디인터레이싱 방법 중에서 가장 대표적인 방법이 TR(Time-Recursive) 디인터레이싱 방법이다. TR 디인터레이싱 방법은 이전 필드가 완벽하게 디인터레이싱 되었다고 가정하고, 현재 필드의 Missing 데이터에 대하여 움직임을 보상해 주는 방법이다. TR 디인터레이싱 방법에서 보간될 픽셀은 이전 필드의 원(Original) 픽셀이 될 수도 있고, 이전 필드에서 보간된 픽셀이 될 수 도 있다. TR 디인터레이싱 방법에서는 보간될 픽셀이 연속적으로 디인터레이싱 되기 때문에 임의의 필드에서 발생된 오류가 다른 필드로 전파될 수 있다. 따라서 이러한 오류 전파를 없애기 위해 미디언 필터를 사용하고 있다.The most representative method of the deinterlacing method using motion compensation is a time-recursive (TR) deinterlacing method. The TR deinterlacing method is a method of compensating for the motion of missing data of the current field, assuming that the previous field is completely deinterlaced. In the TR deinterlacing method, a pixel to be interpolated may be an original pixel of a previous field or a pixel interpolated in a previous field. In the TR deinterlacing method, since the pixels to be interpolated are continuously deinterlaced, an error generated in one field may be propagated to another field. Therefore, we use median filter to eliminate this error propagation.
종래의 디인터레이싱 방법은 크게 움직임 정보를 이용하지 않는 디인터레이싱 방법과 움직임 정보를 이용하는 디인터레이싱 방법으로 구분된다. 움직인 정보를 이용하지 않는 디인터레이싱 방법은 움직임 정보를 이용하지 않고 시공간 필터 또는 픽셀간의 방향성을 고려한 상관성을 이용한다. 그러나, 이 방법들은 움직임이 존재하는 영역에서 라인간 깜빡거림과 번짐 현상이 발생하는 문제점이 있다. 이러한 문제를 해결하기 위해 움직임 정보를 이용한 디인터레이싱 방법이 발명되었지만, 블록 움직임 보상 방법을 이용하는 경우 블록킹 아티펙트와 저더가 발생될 수 있다.Conventional deinterlacing methods are classified into a deinterlacing method that does not use motion information and a deinterlacing method that uses motion information. The deinterlacing method that does not use the motion information utilizes the correlation considering the directionality between the space-time filter or the pixels without using the motion information. However, these methods have a problem in that flickering and smearing occur between lines in a region where motion exists. In order to solve this problem, a deinterlacing method using motion information has been invented, but blocking artifacts and judder may be generated when the block motion compensation method is used.
본 발명이 이루고자 하는 기술적인 과제는 비월주사 신호를 순차주사 신호로 변환시키는 디인터레이싱 시에 움직임 벡터의 신뢰도에 따라 적응적으로 픽셀값을 보상하여 블록킹 아티펙트와 저더 현상을 줄이는 디인터레이싱 장치를 제공하는데 있다.The technical problem to be achieved by the present invention is to provide a deinterlacing apparatus that reduces the blocking artifacts and judder by compensating the pixel value adaptively according to the reliability of the motion vector during the deinterlacing conversion of the interlaced signal into a progressive scan signal.
본 발명이 이루고자 하는 다른 기술적인 과제는 비월주사 신호를 순차주사 신호로 변환시키는 디인터레이싱 시에 움직임 벡터의 신뢰도에 따라 적응적으로 픽셀값을 보상하여 블록킹 아티펙트와 저더 현상을 줄이는 디인터레이싱 방법을 제공하는데 있다.Another technical problem to be solved by the present invention is to provide a deinterlacing method that reduces blocking artifacts and judder by compensating pixel values adaptively according to the reliability of a motion vector during deinterlacing to convert interlaced signals into sequential scan signals. .
도 1은 디인터레이싱의 기본 개념을 설명하기 위한 도면이다.1 is a view for explaining the basic concept of de-interlacing.
도 2는 본 발명에 따른 디인터레이싱 장치의 구성을 보이는 블록도 이다.2 is a block diagram showing the configuration of a deinterlacing apparatus according to the present invention.
도 3은 도 2의 장치에서 움직임 추정부를 설명하기 위한 도면이다.FIG. 3 is a diagram for describing a motion estimation unit in the apparatus of FIG. 2.
도 4는 도 2의 장치에서 움직임 보상부를 설명하기 위한 도면이다.FIG. 4 is a diagram for describing a motion compensation unit in the apparatus of FIG. 2.
도 5는 도 2의 장치에서 시공간 보간부를 설명하기 위한 도면이다.FIG. 5 is a diagram for describing a space-time interpolation unit in the apparatus of FIG. 2.
도 6은 도 2의 장치에서 움직임 신뢰도 분석부의 상세도 이다.6 is a detailed view of a motion reliability analyzer of the apparatus of FIG. 2.
도 7은 도 2의 장치에서 적응적 움직임 보상부의 상세도 이다.7 is a detailed view of an adaptive motion compensation unit in the apparatus of FIG. 2.
도 8은 본 발명에 따른 디인터레이싱 방법의 동작을 보이는 흐름도 이다.8 is a flowchart showing the operation of the deinterlacing method according to the present invention.
본 발명이 이루고자 하는 기술적인 과제를 해결하기 위한 디인터레이싱 장치는 입력되는 영상신호, 움직임 벡터가 적용되어 움직임이 보상된 픽셀값 및 시공간 보간된 픽셀값을 바탕으로 복수 개의 움직임 신뢰 팩터를 생성하고, 상기 움직임 신뢰 팩터를 바탕으로 보간될 픽셀의 움직임 벡터에 대한 움직임 신뢰도를 분석하는 움직임 신뢰도 분석수단; 및 상기 움직임 신뢰도 분석 결과에 따라 가중치가 부여되고 저역 필터링된 상기 움직임 보상된 픽셀값 및 시공간 보간된 픽셀값의 합성 값을 나타내는 제1 적응적 움직임 보상값을 선택 출력하거나 또는 상기 시공간 보간된 픽셀값을 나타내는 제2 적응적 움직임 보상값을 선택 출력하는 적응적 움직임보상수단을 포함하는 것이 바람직하다.The de-interlacing apparatus for solving the technical problem to be achieved by the present invention generates a plurality of motion confidence factors based on the video signal input, the motion vector is applied to the motion compensated pixel value and the space-time interpolated pixel value, Motion reliability analysis means for analyzing motion reliability of the motion vector of the pixel to be interpolated based on the motion confidence factor; And selectively outputting a first adaptive motion compensation value representing a composite value of the weighted and low-pass filtered motion compensated pixel value and space-time interpolated pixel value according to the motion reliability analysis result, or the space-time interpolated pixel value. It is preferable to include an adaptive motion compensation means for selectively outputting a second adaptive motion compensation value indicating a.
본 발명에 있어서, 보간될 현재 블록의 픽셀에 추정된 움직임 벡터를 적용하고, 이전 필드에서 상기 움직임 벡터가 적용된 픽셀값을 찾아 움직임이 보상된 현재 블록의 픽셀값을 출력하는 움직임 보상수단을 더 포함하고, 상기 움직임 신뢰도 분석수단은 상기 움직임 보상수단으로부터 움직임 보상값을 수신하는 것을 특징으로 한다.The present invention may further include motion compensation means for applying an estimated motion vector to a pixel of a current block to be interpolated, and finding a pixel value to which the motion vector is applied in a previous field and outputting a pixel value of a current block whose motion is compensated. The motion reliability analysis means may receive a motion compensation value from the motion compensation means.
본 발명에 있어서, 현재 필드의 위/아래 픽셀값을 이용하여 공간 보간된 픽셀값 및 상기 보간될 픽셀의 위치와 대응하는 인접 필드의 픽셀값을 이용하여 시간 보간된 픽셀값을 구하는 시공간 보간수단을 더 포함하고, 상기 움직임 신뢰도 분석수단은 상기 시공간 보간수단으로부터 공간 보간된 픽셀값 및 시간 보간된 픽셀값을 수신하는 것을 특징으로 한다.In the present invention, a spatiotemporal interpolation means for obtaining a temporally interpolated pixel value using a pixel value interpolated spatially using the up / down pixel values of a current field and a pixel value of an adjacent field corresponding to the position of the pixel to be interpolated. The motion reliability analysis means may further include receiving spatially interpolated pixel values and temporally interpolated pixel values from the space-time interpolation means.
본 발명에 있어서, 상기 움직임 신뢰도 분석수단은 상기 현재 필드의 위/아래 픽셀값과 상기 공간 보간된 픽셀값의 차 중 더 작은 값을 출력하는 제1 움직임 신뢰 팩터 발생부; 상기 현재 필드의 위/아래 픽셀값과 상기 움직임 보상된 픽셀값의 차 중 작은 값을 출력하는 제2 움직임 신뢰 팩터 발생부; 상기 현재 필드의 위/아래 픽셀값과 이전 블록의 움직임 벡터를 현재 블록에 적용해 구한 픽셀값의 차 중 더 작은 값을 출력하는 제3 움직임 신뢰 팩터 발생부; 및 상기 제1 및 제2 움직임 신뢰 팩터의 차가 기준값 이상이고 상기 제3 움직임 신뢰 팩터가 제1 움직임 신뢰 팩터보다 큰 경우를 제외하고 움직임 신뢰 가능 신호를 상기 적응적 움직임 보상수단으로 출력하는 움직임 신뢰도 분석부를 포함하는 것을 특징으로 한다.In the present invention, the motion reliability analysis means comprises: a first motion confidence factor generator for outputting a smaller value between the difference between the up / down pixel value of the current field and the spatially interpolated pixel value; A second motion confidence factor generator for outputting a smaller value among the difference between the top / bottom pixel value of the current field and the motion compensated pixel value; A third motion confidence factor generator for outputting a smaller value of a difference between pixel values obtained by applying a motion vector of a previous block to a current block and a pixel value of the current field; And a motion reliability analysis outputting a motion reliable signal to the adaptive motion compensation means, except that the difference between the first and second motion confidence factors is greater than or equal to a reference value and the third motion confidence factor is larger than the first motion confidence factor. It is characterized by including a wealth.
본 발명에 있어서, 상기 적응적 움직임 보상수단의 가중치는 인접한 상기 두 필드 사이에서의 픽셀의 움직임 정도에 따라 결정되는 것을 특징으로 한다.In the present invention, the weight of the adaptive motion compensation means is determined according to the degree of motion of the pixel between the two adjacent fields.
본 발명에 있어서, 상기 적응적 움직임 보상수단은 상기 움직임 신뢰도 분석수단으로부터 움직임 신뢰 가능 신호가 수신되는 경우 상기 제1 적응적 움직임 보상값을 선택 출력하고, 상기 움직임 신뢰도 분석수단으로부터 움직임 신호 가능 신호가 수신되지 않은 경우 상기 제2 적응적 움직임 보상값을 선택 출력하는 것을 특징으로 한다.In the present invention, the adaptive motion compensation means selects and outputs the first adaptive motion compensation value when a motion reliable signal is received from the motion reliability analysis means, and the motion signal possible signal is output from the motion reliability analysis means. And if not received, selectively output the second adaptive motion compensation value.
본 발명이 이루고자 하는 다른 기술적인 과제를 해결하기 위한 디인터레이싱 방법은 (c) 입력되는 영상신호, 움직임 벡터가 적용되어 움직임이 보상된 픽셀값 및 시공간 보간된 픽셀값을 바탕으로 복수 개의 움직임 신뢰 팩터를 생성하는 단계; (d) 상기 움직임 신뢰 팩터를 바탕으로 보간될 픽셀의 움직임 벡터에 대한 움직임 신뢰도를 분석하는 단계; 및 (e) 상기 움직임 신뢰도 분석 결과에 따라 가중치가 부여되고 저역 필터링된 상기 움직임 보상된 픽셀값 및 시공간 보간된 픽셀값의 합성 값을 나타내는 제1 적응적 움직임 보상값을 출력하거나 또는 상기 시공간 보간된 픽셀값을 나타내는 제2 적응적 움직임 보상값을 출력하는 단계를 포함하는 것이 바람직하다.According to another aspect of the present invention, there is provided a deinterlacing method for solving a technical problem. (C) A plurality of motion confidence factors are determined based on a pixel value compensated for motion by applying an input video signal and a motion vector and a pixel value that is space-time interpolated. Generating; (d) analyzing a motion reliability of a motion vector of a pixel to be interpolated based on the motion confidence factor; And (e) outputting a first adaptive motion compensation value representing a composite value of the weighted and low-pass filtered motion compensated pixel value and space-time interpolated pixel value according to the result of the motion reliability analysis, or performing the space-time interpolation. And outputting a second adaptive motion compensation value representative of the pixel value.
본 발명에 있어서, (b) 현재 필드의 위/아래 픽셀값을 이용하여 공간 보간된 픽셀값 및 상기 보간될 픽셀의 위치와 대응하는 인접 필드의 픽셀값을 이용하여 시간 보간된 픽셀값을 구하는 단계를 더 포함하는 것을 특징으로 한다.In the present invention, (b) obtaining a temporally interpolated pixel value by using a spatially interpolated pixel value using the up / down pixel values of the current field and a pixel value of an adjacent field corresponding to the position of the pixel to be interpolated. It characterized in that it further comprises.
본 발명에 있어서, (a) 보간될 현재 블록의 픽셀에 추정된 움직임 벡터를 적용하고, 이전 필드에서 상기 움직임 벡터가 적용된 픽셀값을 찾아 움직임이 보상된 현재 블록의 픽셀값을 생성하는 단계를 더 포함하는 것을 특징으로 한다.In the present invention, (a) applying the estimated motion vector to the pixels of the current block to be interpolated, and finding the pixel value to which the motion vector is applied in the previous field to generate the pixel value of the current block whose motion is compensated. It is characterized by including.
본 발명에 있어서, 상기 (c)단계에서 상기 현재 필드의 위/아래 픽셀값과 상기 공간 보간된 픽셀값의 차 중 더 작은 값을 출력하는 제1 움직임 신뢰 팩터를 생성하고, 상기 현재 필드의 위/아래 픽셀값과 상기 움직임 보상된 픽셀값의 차 중 더 작은 값을 출력하는 제2 움직임 신뢰 팩터를 생성하고, 상기 현재 필드의 위/아래 픽셀값과 이전 블록의 움직임 벡터를 현재 블록에 적용해 구한 픽셀값의 차 중 더 작은 값을 출력하는 제3 움직임 신뢰 팩터를 생성하는 것을 특징으로 한다.In the present invention, in step (c), a first motion confidence factor is generated which outputs a smaller value among the difference between the up / down pixel value of the current field and the spatially interpolated pixel value, and the top of the current field is generated. Generate a second motion confidence factor that outputs the smaller of the difference between the lower / lower pixel value and the motion compensated pixel value, and apply the upper / lower pixel value of the current field and the motion vector of the previous block to the current block. And a third motion confidence factor for outputting a smaller value among the difference of the obtained pixel values.
본 발명에 있어서, 상기 (d)단계에서 상기 제1 및 제2 움직임 신뢰 팩터의 차가 기준값 이상이고 상기 제3 움직임 신뢰 팩터가 제1 움직임 신뢰 팩터보다 큰 경우를 제외하고, 움직임 신뢰도 분석 결과로서 움직임 신뢰 가능 신호를 출력하는 것을 특징으로 한다.In the present invention, in the step (d), except as the difference between the first and second motion confidence factor is greater than the reference value and the third motion confidence factor is larger than the first motion confidence factor, the motion as a result of the motion reliability analysis And outputting a reliable signal.
본 발명에 있어서, 상기 (e)단계에서의 가중치는 인접한 상기 두 필드 사이에서의 픽셀의 움직임 정도에 따라 결정되는 것을 특징으로 한다.In the present invention, the weight in the step (e) is characterized in that it is determined according to the degree of movement of the pixel between the two adjacent fields.
본 발명에 있어서, 상기 (e)단계는 (e-1) 상기 움직임 신뢰 가능 신호가 수신되면 상기 제1 적응적 움직임 보상값을 선택 출력하는 단계; 및 (e-2) 상기 움직임 신호 가능 신호가 수신되지 않으면 상기 제2 적응적 움직임 보상값을 선택 출력하는 단계를 포함하는 것을 특징으로 한다.In the present invention, step (e) comprises: (e-1) selectively outputting the first adaptive motion compensation value when the motion reliable signal is received; And (e-2) selectively outputting the second adaptive motion compensation value if the motion signal enabled signal is not received.
이하, 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.Hereinafter, with reference to the accompanying drawings will be described in detail the present invention.
도 2는 본 발명에 따른 디인터레이싱 장치의 구성을 보이는 블록도로서, 움직임 추정부(200), 움직임 보상부(201), 시공간 보간부(202), 움직임 신뢰도 분석부(203), 적응적 움직임 보상부(204)로 구성된다.2 is a block diagram showing the configuration of the deinterlacing apparatus according to the present invention, which includes a motion estimator 200, a motion compensator 201, a space-time interpolator 202, a motion reliability analyzer 203, and adaptive motion compensation. It consists of a part 204.
도 3은 도 2의 장치에서 움직임 추정부를 설명하기 위한 도면이다.FIG. 3 is a diagram for describing a motion estimation unit in the apparatus of FIG. 2.
도 4는 도 2의 장치에서 움직임 보상부를 설명하기 위한 도면이다.FIG. 4 is a diagram for describing a motion compensation unit in the apparatus of FIG. 2.
도 5는 도 2의 장치에서 시공간 보간부를 설명하기 위한 도면이다.FIG. 5 is a diagram for describing a space-time interpolation unit in the apparatus of FIG. 2.
도 6은 도 2의 장치에서 움직임 신뢰도 분석부의 상세도로서, 연산부(203-1) 및 움직임 신뢰도 결정부(203-2)로 구성된다.FIG. 6 is a detailed view of the motion reliability analyzer of the apparatus of FIG. 2, and includes a calculator 203-1 and a motion reliability determiner 203-2.
도 7은 도 2의 장치에서 적응적 움직임 보상부의 상세도로서, LPF(204-1) 및 선택부(204-2)로 구성된다.FIG. 7 is a detailed view of the adaptive motion compensation unit in the apparatus of FIG. 2 and includes an LPF 204-1 and a selection unit 204-2.
도 8은 본 발명에 따른 디인터레이싱 방법의 동작을 보이는 흐름도로서, 블록을 기반으로 한 움직임 추정단계(800), 움직임 보상단계(801), 보간될 픽셀의 시간 및 공간 보상(802), α, β, γ값을 계산하는 단계(803), 움직임의 신뢰도 판단단계(804), 움직임의 신뢰도를 바탕으로 적응적 움직임 보상값 선택단계(805)로 구성된다.8 is a flowchart showing the operation of the de-interlacing method according to the present invention. The block-based motion estimation step 800, the motion compensation step 801, the temporal and spatial compensation of the pixels to be interpolated 802, α, β , a step 803 of calculating a value of γ, a reliability determination step 804 of the motion, and an adaptive motion compensation value selection step 805 based on the reliability of the motion.
이어서, 도 2∼도 9를 참조하여 본 발명을 상세히 설명한다.Next, the present invention will be described in detail with reference to FIGS. 2 to 9.
움직임 추정부(200)는 이전 필드의 블록을 이용하여 현재 필드에서 보간될 블록의 움직임 벡터를 추정한다. 도 3은 움직임 추정부(200)를 설명하기 위한 도면으로, 연속적으로 입력되는 두 필드(n-1 : 이전 필드, n : 현재 필드) 사이에서 움직임이 추정된다. 움직임 추정부(200)는 현재 필드(n)를 일정한 블록의 크기로 나누고, 각 블록을 이전 필드(n-1)의 일정한 탐색 영역내에서 이동시키면서 오차를계산한다. 움직임 추정부(200)는 오차가 최소가 되는 위치를 현재 블록의 움직임 벡터로 추정한다.The motion estimator 200 estimates the motion vector of the block to be interpolated in the current field by using the block of the previous field. FIG. 3 is a diagram for explaining the motion estimation unit 200. A motion is estimated between two fields (n-1: previous field and n: current field) continuously input. The motion estimator 200 divides the current field n into a predetermined block size and calculates an error while moving each block within a constant search area of the previous field n-1. The motion estimator 200 estimates the position where the error is minimum as the motion vector of the current block.
움직임 추정부(200)에서 추정된 움직임 벡터가일 때, 움직임 보상부(201)는 도 4와 같은 움직임 보상을 수행하며, 아래 수학식 2와 같은 움직임 보상값(fMC)을 구한다.The motion vector estimated by the motion estimator 200 In this case, the motion compensator 201 performs motion compensation as shown in FIG. 4 and obtains a motion compensation value f MC as shown in Equation 2 below.
[수학식 2][Equation 2]
도 4 및 수학식 2를 통하여, 현재 블록의 움직임이 보상된 픽셀값은 이전 필드의 픽셀값에 움직임 벡터를 가산한 값이 된다. 즉, 현재 블록의 움직임이 보상된 픽셀값은 현재 필드의 보간될 픽셀 위치값(x0)에 추정된 움직임 벡터를 가산하고, 움직임 벡터가 가산된 픽셀값을 이전 필드(n-1)에서 찾아 출력한다.4 and 2, the pixel value of which the motion of the current block is compensated becomes a value obtained by adding a motion vector to the pixel value of the previous field. That is, the pixel value of which the motion of the current block is compensated is a motion vector estimated at the pixel position value x 0 of the current field to be interpolated. Is added, and the pixel value to which the motion vector is added is found in the previous field n-1 and output.
시공간 보간부(202)는 보간될 픽셀에 인접한 위/아래 픽셀값을 이용하여 공간 보간된 픽셀값(f2D)을 구하고, 보간될 픽셀에 인접한 필드의 픽셀값을 이용하여 시간 보간된 픽셀값(ft)을 구한다. 시공간 보간부(202)에서 생성되는 시공간 보간된 픽셀값(f3D)을 구하는 식이 수학식 3에 도시된다.The spatiotemporal interpolation unit 202 obtains the spatially interpolated pixel value f 2D using the up / down pixel values adjacent to the pixel to be interpolated, and uses the pixel value of the field adjacent to the pixel to be interpolated. f t ) An equation for obtaining the space-time interpolated pixel value f 3D generated by the space-time interpolator 202 is shown in Equation 3 below.
[수학식 3][Equation 3]
f3D= f(f2D, ft)f 3D = f (f 2D , f t )
도 5는 시공간 보간부(202)를 설명하기 위한 것으로, 보간될 픽셀(점선으로표시된 원, x0)의 위치에 인접한 위/아래 픽셀값(A(x-1), B(x+1))을 이용하여 공간 보간된 픽셀값(f2D)을 구하고, 보간될 픽셀(x0)의 위치에 인접한 필드의 픽셀값(C(fn-1(x0)), D(fn+1(x0)))을 이용하여 시간 보간된 픽셀값(ft)을 구한다. 공간 보간된 픽셀값 및 시간 보간된 픽셀값을 구하는 식이 수학식 4에 도시된다.5 is for explaining the space-time interpolation unit 202, and the up / down pixel values A (x −1 ) and B (x +1 ) adjacent to the position of the pixel to be interpolated (circled as dotted lines, x 0 ). ) for use by spatial interpolation of pixel values (f 2D) to obtain pixel values of the adjacent the position of the pixel (x 0) to be interpolated field (C (f n-1 ( x 0)), D (f n + 1 (x 0 ))) to obtain a time interpolated pixel value f t . The equation for obtaining the spatially interpolated pixel value and the temporally interpolated pixel value is shown in equation (4).
[수학식 4][Equation 4]
f2D(x0) = f(fn(x-1), fn(x1))f 2D (x 0 ) = f (f n (x -1 ), f n (x 1 ))
ft(x0) =f(fn-1(x0),fn+1(x0))f t (x 0 ) = f (f n-1 (x 0 ), f n + 1 (x 0 ))
움직임 신뢰도 분석부(203)는 입력신호, 움직임 추정부(200)에서 출력되는 움직임 벡터(), 움직임 보상부(201)에서 출력되는 움직임이 보상된 픽셀값(fMC) 및 시공간 보간부(202)에서 출력되는 시공간 보간된 픽셀값(f3D)으로 움직임 신뢰 팩터 α, β, γ값 생성 및 계산하고, 이를 이용하여 현재 보간될 픽셀의 움직임 벡터에 대한 움직임의 신뢰도를 판단한다.The motion reliability analyzer 203 may input a motion vector (output signal output from the input signal and the motion estimator 200). ), The motion confidence factors α, β, and γ values of the pixel value f MC compensated for the motion output from the motion compensator 201 and the pixel value f 3D interpolated from the space-time interpolator 202. It is generated and calculated, and the reliability is determined for the motion vector of the pixel to be interpolated.
도 6은 움직임 신뢰도 분석부(203)의 상세도로서, 연산부(203-1) 및 움직임 신뢰도 결정부(203-2)로 구성된다. 연산부(203-1)는 움직임 신뢰 팩터 α, β, γ값 생성 및 계산한다. 수학식 5는 연산부(203-1)에서 계산된 움직임 신뢰 팩터 α, β, γ값을 나타낸다.6 is a detailed view of the motion reliability analyzer 203, and includes a calculator 203-1 and a motion reliability determiner 203-2. The calculating unit 203-1 generates and calculates the motion confidence factors α, β, and γ values. Equation 5 shows the motion confidence factors α, β, and γ values calculated by the calculator 203-1.
[수학식 5][Equation 5]
수학식 5에서, 제1 움직임 신뢰 팩터인 α는 현재 필드(n)의 위 픽셀값(x-1)과 공간 보간된 픽셀값(f2D)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 공간 보간된 픽셀값(f2D)의 차 중에서 더 작은 값이 된다. 수학식 5에서 제2 움직임 신뢰 팩터인 β는 현재 필드(n)의 위 픽셀값(x-1)과 움직임 보상된 픽셀값(fMC)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 움직임 보상된 픽셀값(fMC)의 차 중에서 더 작은 값이 된다. 수학식 5에서 제3 움직임 신뢰 팩터인 γ는 현재 필드(n)의 위 픽셀값(x-1)과 이전 블록의 움직임 벡터를 현재 블록에 적용한 픽셀값(fMCpre)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 이전 블록의 움직임 벡터를 현재 블록에 적용한 픽셀값(fMCpre)의 차 중에서 더 작은 값이 된다.In Equation 5, the first motion confidence factor α is the difference between the pixel value x −1 above the current field n and the spatially interpolated pixel value f 2D and the pixel value below the current field n ( x 1 ) and the difference between the spatially interpolated pixel value f 2D . In Equation 5, β, which is the second motion confidence factor, is a difference between the pixel value x −1 above the current field n and the motion compensated pixel value f MC and the pixel value x below the current field n. 1 ) is smaller than the difference between the motion compensated pixel value f MC . In Equation 5, γ, the third motion confidence factor, is the difference between the pixel value x -1 of the current field n and the pixel value f MCpre applied the motion vector of the previous block to the current block and the current field n. ) Is the smaller of the difference between the pixel value x 1 of the lower pixel value and the pixel value f MCpre applied the motion vector of the previous block to the current block.
움직임 추정부(200)에서 구한 움직임 벡터()의 신뢰도는 움직임 추정부(200)의 구조 및 정확성과 밀접한 관련을 가지고 있다. 움직임 추정부(200)에서 추정한 움직임 벡터()는 움직임 추정부(200)의 특성상 에러를 포함할 가능성이 크고, 이는 결과 영상의 블록킹 아티펙트와 저더 현성으로 나타나며 시각적으로 거슬리는 영상을 만들어 화질을 떨어뜨린다. 블록킹 아티펙트와 저더 현상이 발생하는 원인은 신뢰할 수 없는 움직임 벡터()를 그대로 사용하여 움직임 보상을 하기 때문이며, 블록킹 아티펙트와 저더 현상은 움직임이 보상된 픽셀값과 결과 영상의 원래 피드 픽셀값 사이에 공간 관계를 깨드린다. 이러한 관계를 바탕으로 움직임 신뢰도 결정부(203-2)는 연산부(203-1)에서 계산된 움직임 신뢰 팩터 α, β, γ값을 바탕으로 움직임 벡터의 신뢰도를 결정하며, 이를 수학식 6으로 표현한다.The motion vector obtained by the motion estimator 200 ( ) Has a close relationship with the structure and accuracy of the motion estimation unit 200. The motion vector estimated by the motion estimator 200 ( ) Is likely to include an error due to the characteristics of the motion estimation unit 200, which appears as blocking artifacts and judging of the resulting image, and makes a visually distracting image, thereby degrading the image quality. Blocking artifacts and judder can be caused by unreliable motion vectors ( ), And the blocking artifacts and judder break the spatial relationship between the motion compensated pixel value and the original feed pixel value of the resultant image. Based on this relationship, the motion reliability determining unit 203-2 determines the reliability of the motion vector based on the motion confidence factor α, β, and γ values calculated by the calculating unit 203-1. do.
[수학식 6][Equation 6]
수학식 6에서 ε은 기준값(threshold 값)을 나타낸다. 움직임의 신뢰도 Ψ=0이라는 것은 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 없는 경우를 의미한다. 여기서 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 없는 경우는 α및 β의 차가 기준값 이상이고 γ가 α보다 큰 경우이다. 움직임 신뢰도 Ψ=1이라는 것은 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 있는 경우를 의미한다. 여기서 보간된 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 있는 경우는 상기 경우를 제외한 경우이다.In Equation 6, ε represents a threshold value. The reliability of motion Ψ = 0 means that the motion of the motion vector of the pixel to be interpolated is unreliable. The case where the motion of the motion vector of the pixel to be interpolated is unreliable is when the difference between α and β is greater than or equal to the reference value and γ is larger than α. The motion reliability Ψ = 1 means that the motion of the motion vector of the pixel to be interpolated is reliable. The case where the motion with respect to the motion vector of the interpolated pixel is reliable is the case except the above case.
적응적 움직임 보상부(204)는 LPF(204-1) 및 선택부(204-2)로 구성된다. LPF(204-1)는 움직임 보상부(201)에서 출력되는 움직임이 보상된 픽셀값(fMC) 및 시공간 보간부(202)에서 출력되는 시공간 보간된 픽셀값(f3D)에 가중치를 부여하여 저역 필터링한다. 여기서, 가중치는 인접한 두 필드(n-1, n) 사이에서 픽셀의 움직임 정도에 따라 결정된다. 선택부(204-2)는 움직임 신뢰도 Ψ=1인 경우 LPF(204-1)의 출력값을 선택하고, 움직임 신뢰도 Ψ=0인 경우 시공간 보간부(202)에서 출력되는 시공간 보간된 픽셀값(f3D)를 선택하며, 수학식 7로 표현한다.The adaptive motion compensator 204 is composed of an LPF 204-1 and a selector 204-2. The LPF 204-1 weights the pixel value f MC compensated for the motion output from the motion compensator 201 and the space time interpolated pixel value f 3D output from the spatiotemporal interpolator 202. Low pass filtering. Here, the weight is determined according to the degree of movement of the pixel between two adjacent fields n-1 and n. The selector 204-2 selects the output value of the LPF 204-1 when the motion reliability Ψ = 1, and the space-time interpolated pixel value f output by the space-time interpolator 202 when the motion reliability Ψ = 0. 3D ), and is represented by Equation 7.
[수학식 7][Equation 7]
도 8을 참조하여 디인터레이싱 방법을 설명하면, 움직임 추정부(200)는 블록을 기반으로 현재 픽셀의 움직임을 추정한다(800단계). 움직임 추정부(200)는 현재 필드(n)를 일정한 블록의 크기로 나누고, 각 블록을 이전 필드(n-1)의 일정한 탐색 영역내에서 이동시키면서 오차를 계산한다. 움직임 추정부(200)는 오차가 최소가 되는 위치를 현재 블록의 움직임 벡터로 추정한다.Referring to FIG. 8, the de-interlacing method is described. The motion estimator 200 estimates the motion of the current pixel based on the block (step 800). The motion estimator 200 divides the current field n into a predetermined block size, and calculates an error while moving each block within a constant search area of the previous field n-1. The motion estimator 200 estimates the position where the error is minimum as the motion vector of the current block.
움직임 보상부(201)는 추정된 움직임 벡터에 의해 보간될 픽셀의 움직임을 보상한다(801단계). 움직임 보상부(201)는 현재 필드의 보간될 픽셀 위치값에 움직임 추정부(200)에서 추정된 움직임 벡터를 가산하고, 움직임 벡터가 가산된 픽셀값을 이전 필드에서 찾아 출력한다.The motion compensator 201 compensates for the motion of the pixel to be interpolated by the estimated motion vector (step 801). The motion compensator 201 adds the motion vector estimated by the motion estimator 200 to the pixel position value to be interpolated in the current field, and outputs the pixel value to which the motion vector is added in the previous field.
시공간 보간부(202)는 보간될 픽셀의 시간 및 공간을 보상하여 시공간 보간된 픽셀값을 출력한다(802단계). 시공간 보간부(202)는 보간될 픽셀의 위치에 인접한 위/아래 픽셀값을 이용하여 공간 보간된 픽셀값(f2D)을 구하고, 보간될 픽셀의 위치에 인접한 필드의 픽셀값을 이용하여 시간 보간된 픽셀값(ft)을 구한다.The space-time interpolation unit 202 compensates for the time and space of the pixel to be interpolated and outputs the space-time interpolated pixel value (step 802). The space-time interpolation unit 202 obtains the spatially interpolated pixel value f 2D using the up / down pixel values adjacent to the position of the pixel to be interpolated, and temporally interpolates using the pixel value of the field adjacent to the position of the pixel to be interpolated. Get the pixel value f t .
움직임 신뢰도 분석부(203)는 보간될 픽셀의 움직임 벡터에 대한 신뢰도를분석하기 위해 움직임 신뢰 팩터 α, β, γ값을 계산한다(803단계). 제1 움직임 신뢰 팩터인 α는 현재 필드(n)의 위 픽셀값(x-1)과 공간 보간된 픽셀값(f2D)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 공간 보간된 픽셀값(f2D)의 차 중에서 더 작은 값이 된다. 수학식 5에서 제2 움직임 신뢰 팩터인 β는 현재 필드(n)의 위 픽셀값(x-1)과 움직임 보상된 픽셀값(fMC)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 움직임 보상된 픽셀값(fMC)의 차 중에서 더 작은 값이 된다. 수학식 5에서 제3 움직임 신뢰 팩터인 γ는 현재 필드(n)의 위 픽셀값(x-1)과 이전 블록의 움직임 벡터를 현재 블록에 적용한 픽셀값(fMCpre)의 차 및 현재 필드(n)의 아래 픽셀값(x1)과 이전 블록의 움직임 벡터를 현재 블록에 적용한 픽셀값(fMCpre)의 차 중에서 더 작은 값이 된다.The motion reliability analyzer 203 calculates motion confidence factors α, β, and γ in order to analyze the reliability of the motion vector of the pixel to be interpolated (step 803). Α, the first motion confidence factor, is the difference between the pixel value (x -1 ) above the current field (n) and the spatially interpolated pixel value (f 2D ), and the pixel value (x 1 ) and space below the current field (n). The smaller of the differences between the interpolated pixel values f 2D . In Equation 5, β, which is the second motion confidence factor, is a difference between the pixel value x −1 above the current field n and the motion compensated pixel value f MC and the pixel value x below the current field n. 1 ) is smaller than the difference between the motion compensated pixel value f MC . In Equation 5, γ, the third motion confidence factor, is the difference between the pixel value x -1 of the current field n and the pixel value f MCpre applied the motion vector of the previous block to the current block and the current field n. ) Is the smaller of the difference between the pixel value x 1 of the lower pixel value and the pixel value f MCpre applied the motion vector of the previous block to the current block.
움직임 신뢰도 분석부(203)는 계산된 움직임 신뢰 팩터 α, β, γ값으로 보간될 픽셀의 움직임 신뢰도을 판단한다(804단계). 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 없는 경우인 α및 β의 차가 기준값 이상이고 γ가 α보다 큰 경우를 제외하고, 나머지 경우는 보간된 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 있다. 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 없는 경우 움직임 신뢰도 분석부(203)는 Ψ=0을 출력하고, 보간될 픽셀의 움직임 벡터에 대한 움직임을 신뢰할 수 있는 경우 움직임 신뢰도 분석부(203)는 Ψ=1을 출력한다.The motion reliability analyzer 203 determines the motion reliability of the pixel to be interpolated based on the calculated motion confidence factors α, β, and γ (S804). The rest of the cases can be relied on the motion vector of the interpolated pixel except for the case where the difference between α and β is greater than the reference value and γ is larger than α, which is a case where the motion of the motion vector of the pixel to be interpolated is not reliable. If the motion for the motion vector of the pixel to be interpolated is unreliable, the motion reliability analyzer 203 outputs Ψ = 0, and if the motion for the motion vector of the pixel to be interpolated is reliable, the motion reliability analyzer 203 Outputs Ψ = 1.
적응적 움직임 보상부(204)는 움직임의 신뢰도를 바탕으로 적응적 움직임 보상값을 선택한다(805단계). 적응적 움직임 보상부(204)는 움직임 신뢰도 분석부(203)로부터 움직임 신뢰도 Ψ=1을 수신하면, 가중치가 부여되고 움직임 보상부(201)에서 출력되는 움직임이 보상된 픽셀값(fMC) 및 가중치가 부여되고 시공간 보간부(202)에서 출력되는 시공간 보간된 픽셀값(f3D)을 저역필터링한 값(제1 적응적 움직임 보상값)을 선택한다. 여기서, 가중치는 인접한 상기 두 필드 사이에서의 상기 픽셀의 움직임 정도에 따라 결정된다. 적응적 움직임 보상부(204)는 움직임 신뢰도 분석부(203)로부터 움직임 신뢰도 Ψ=0을 수신하면, 시공간 보간부(202)에서 출력되는 시공간 보간된 픽셀값(f3D)를 선택한다.The adaptive motion compensation unit 204 selects an adaptive motion compensation value based on the reliability of the motion (step 805). When the adaptive motion compensator 204 receives the motion reliability Ψ = 1 from the motion reliability analyzer 203, the pixel value f MC that is weighted and compensated for the motion output from the motion compensator 201 and A weighted and low-pass filtered value (first adaptive motion compensation value) of the space-time interpolated pixel value f 3D output from the space-time interpolation unit 202 is selected. Here, the weight is determined according to the degree of movement of the pixel between the two adjacent fields. When the adaptive motion compensator 204 receives the motion reliability Ψ = 0 from the motion reliability analyzer 203, the adaptive motion compensator 204 selects the space-time interpolated pixel value f 3D output from the space-time interpolator 202.
본 발명은 상술한 실시 예에 한정되지 않으며 본 발명의 사상 내에서 당업자에 의한 변형이 가능함은 물론이다.The present invention is not limited to the above-described embodiments and can be modified by those skilled in the art within the spirit of the invention.
상술한 바와 같이 본 발명에 따르면, 디인터레이싱 시에 움직임 벡터의 신뢰도에 따라 적응적으로 픽셀값을 보상하여 블록킹 아티펙트와 저더 현상을 줄일 수 있다.As described above, according to the present invention, blocking artifacts and judder can be reduced by adaptively compensating pixel values according to the reliability of the motion vector during deinterlacing.
Claims (13)
Priority Applications (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2002-0076223A KR100484182B1 (en) | 2002-12-03 | 2002-12-03 | Apparatus and method for deinterlacing |
| AU2003264648A AU2003264648B2 (en) | 2002-12-03 | 2003-12-02 | Deinterlacing apparatus and method |
| CNB2003101197108A CN1237782C (en) | 2002-12-03 | 2003-12-03 | Deinterlaced scanning device and method |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR10-2002-0076223A KR100484182B1 (en) | 2002-12-03 | 2002-12-03 | Apparatus and method for deinterlacing |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20040048478A true KR20040048478A (en) | 2004-06-10 |
| KR100484182B1 KR100484182B1 (en) | 2005-04-20 |
Family
ID=34270540
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR10-2002-0076223A KR100484182B1 (en) | 2002-12-03 | 2002-12-03 | Apparatus and method for deinterlacing |
Country Status (3)
| Country | Link |
|---|---|
| KR (1) | KR100484182B1 (en) |
| CN (1) | CN1237782C (en) |
| AU (1) | AU2003264648B2 (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100813986B1 (en) * | 2006-10-25 | 2008-03-14 | 삼성전자주식회사 | Method for motion adaptive deinterlacing and apparatus thereof |
| US7535513B2 (en) | 2004-11-17 | 2009-05-19 | Samsung Electronics Co., Ltd. | Deinterlacing method and device in use of field variable partition type |
| US8922711B2 (en) | 2006-08-29 | 2014-12-30 | Realtek Semiconductor Corp. | Method and apparatus for de-interlacing video data |
| KR101513395B1 (en) * | 2014-02-11 | 2015-04-17 | 인천대학교 산학협력단 | A motion adaptive deinterlacing system |
Families Citing this family (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100366071C (en) * | 2004-07-26 | 2008-01-30 | 西安交通大学 | Directional correlation motion compensation method of diintestage technology of TV. post-processing |
| KR100732683B1 (en) * | 2005-05-06 | 2007-06-27 | 삼성전자주식회사 | Image conversion apparatus to compensate motion and method thereof |
| JP4821194B2 (en) * | 2005-07-11 | 2011-11-24 | ソニー株式会社 | Signal processing apparatus, signal processing method, and program |
| CN100435087C (en) * | 2006-10-25 | 2008-11-19 | 威盛电子股份有限公司 | Image data dithering method and apparatus |
| GB2444534A (en) * | 2006-12-06 | 2008-06-11 | Sony Uk Ltd | Assessing the reliability of motion information in motion adaptive image processing |
| JP5040393B2 (en) * | 2007-03-23 | 2012-10-03 | ソニー株式会社 | Image processing apparatus, image processing method, program, and image display apparatus |
| BRPI0809627B1 (en) * | 2007-03-26 | 2019-04-16 | Pelco, Inc. | METHOD, APPARATUS AND COMPUTER-READY MEASURE TO IMPROVE A VIDEO IMAGE BY REMOVING THE EFFECTS OF CAMERA VIBRATION. |
| JP4375452B2 (en) * | 2007-07-18 | 2009-12-02 | ソニー株式会社 | Image processing apparatus, image processing method, program, and display apparatus |
| US8447130B2 (en) * | 2007-12-31 | 2013-05-21 | Intel Corporation | History-based spatio-temporal noise reduction |
| US20100046623A1 (en) * | 2008-08-19 | 2010-02-25 | Chen Xuemin Sherman | Method and system for motion-compensated frame-rate up-conversion for both compressed and decompressed video bitstreams |
| KR101035579B1 (en) * | 2008-09-05 | 2011-05-19 | 매그나칩 반도체 유한회사 | Method for dithering and apparatus for the same |
| CN101924887A (en) * | 2009-06-12 | 2010-12-22 | 纪元 | Method and device for improving de-interlacing performance |
| CN102158635B (en) * | 2011-05-04 | 2012-10-31 | 凌阳科技股份有限公司 | Motion vector improving device |
| CN106303338B (en) * | 2016-08-19 | 2019-03-22 | 天津大学 | A kind of in-field deinterlacing method based on the multi-direction interpolation of bilateral filtering |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0697788A3 (en) * | 1994-08-19 | 1997-03-26 | Eastman Kodak Co | Adaptive, global-motion compensated deinterlacing of sequential video fields with post processing |
| US6269484B1 (en) * | 1997-06-24 | 2001-07-31 | Ati Technologies | Method and apparatus for de-interlacing interlaced content using motion vectors in compressed video streams |
| JP3293561B2 (en) * | 1998-07-29 | 2002-06-17 | 日本電気株式会社 | Image display device and image display method |
| US6421090B1 (en) * | 1999-08-27 | 2002-07-16 | Trident Microsystems, Inc. | Motion and edge adaptive deinterlacing |
| US20020027610A1 (en) * | 2000-03-27 | 2002-03-07 | Hong Jiang | Method and apparatus for de-interlacing video images |
| KR100360893B1 (en) * | 2001-02-01 | 2002-11-13 | 엘지전자 주식회사 | Apparatus and method for compensating video motions |
| KR100422575B1 (en) * | 2001-07-26 | 2004-03-12 | 주식회사 하이닉스반도체 | An Efficient Spatial and Temporal Interpolation system for De-interlacing and its method |
-
2002
- 2002-12-03 KR KR10-2002-0076223A patent/KR100484182B1/en not_active IP Right Cessation
-
2003
- 2003-12-02 AU AU2003264648A patent/AU2003264648B2/en not_active Ceased
- 2003-12-03 CN CNB2003101197108A patent/CN1237782C/en not_active Expired - Fee Related
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7535513B2 (en) | 2004-11-17 | 2009-05-19 | Samsung Electronics Co., Ltd. | Deinterlacing method and device in use of field variable partition type |
| US8922711B2 (en) | 2006-08-29 | 2014-12-30 | Realtek Semiconductor Corp. | Method and apparatus for de-interlacing video data |
| KR100813986B1 (en) * | 2006-10-25 | 2008-03-14 | 삼성전자주식회사 | Method for motion adaptive deinterlacing and apparatus thereof |
| US8866967B2 (en) | 2006-10-25 | 2014-10-21 | Samsung Electronics Co., Ltd. | Method and apparatus for motion adaptive deinterlacing |
| KR101513395B1 (en) * | 2014-02-11 | 2015-04-17 | 인천대학교 산학협력단 | A motion adaptive deinterlacing system |
Also Published As
| Publication number | Publication date |
|---|---|
| AU2003264648B2 (en) | 2005-02-24 |
| KR100484182B1 (en) | 2005-04-20 |
| CN1237782C (en) | 2006-01-18 |
| AU2003264648A1 (en) | 2004-06-24 |
| CN1505386A (en) | 2004-06-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100484182B1 (en) | Apparatus and method for deinterlacing | |
| US7042512B2 (en) | Apparatus and method for adaptive motion compensated de-interlacing of video data | |
| US6900846B2 (en) | Format converter using bi-directional motion vector and method thereof | |
| KR100611517B1 (en) | Method and system for interpolation of digital signals | |
| US6473460B1 (en) | Method and apparatus for calculating motion vectors | |
| KR100412501B1 (en) | Pixel-data selection device for motion compensation and method of the same | |
| US5784115A (en) | System and method for motion compensated de-interlacing of video frames | |
| EP0757482B1 (en) | An edge-based interlaced to progressive video conversion system | |
| KR100739744B1 (en) | Method and System of Noise-adaptive Motion Detection in an Interlaced Video Sequence | |
| JP4145351B2 (en) | Video signal scanning conversion method, apparatus, and video signal display apparatus | |
| US20030086498A1 (en) | Apparatus and method of converting frame and/or field rate using adaptive motion compensation | |
| JP2009515384A (en) | Method and apparatus for space-time deinterlacing assisted by motion compensation for field-based video | |
| EP1511311A1 (en) | Method and system for de-interlacing digital images, and computer program product therefor | |
| JP3619542B2 (en) | Motion correction video signal processing apparatus and method | |
| KR100422575B1 (en) | An Efficient Spatial and Temporal Interpolation system for De-interlacing and its method | |
| KR20050025086A (en) | Image processing apparatus and image processing method | |
| KR100644601B1 (en) | Apparatus for de-interlacing video data using motion-compensated interpolation and method thereof | |
| KR100931110B1 (en) | Deinterlacing apparatus and method using fuzzy rule-based edge recovery algorithm | |
| JP2003289511A (en) | Image scan converting method and apparatus | |
| KR100850710B1 (en) | Apparatus for de-interlacing based on phase corrected field and method therefor, and recording medium for recording programs for realizing the same | |
| KR100931142B1 (en) | Deinterlacing apparatus and method | |
| KR101144435B1 (en) | Methods of edge-based deinterlacing using weight and image processing devices using the same | |
| KR101204210B1 (en) | Methods of deinterlacing using geometric duality and image processing device using the same | |
| KR100471186B1 (en) | Deinterlacing apparatus and method for interpolating of image data by region based | |
| KR101192402B1 (en) | Covariance-based adaptive deinterlacing apparatus and method, and hybrid deinterlacing apparatus and method considering degree of complexity |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant | ||
| FPAY | Annual fee payment |
Payment date: 20080328 Year of fee payment: 4 |
|
| LAPS | Lapse due to unpaid annual fee |