KR20050108235A - Apparatus and method for de-interlacing adaptively field image by using median filter - Google Patents

Apparatus and method for de-interlacing adaptively field image by using median filter Download PDF

Info

Publication number
KR20050108235A
KR20050108235A KR1020040033455A KR20040033455A KR20050108235A KR 20050108235 A KR20050108235 A KR 20050108235A KR 1020040033455 A KR1020040033455 A KR 1020040033455A KR 20040033455 A KR20040033455 A KR 20040033455A KR 20050108235 A KR20050108235 A KR 20050108235A
Authority
KR
South Korea
Prior art keywords
image
inter
motion
field
deinterlaced
Prior art date
Application number
KR1020040033455A
Other languages
Korean (ko)
Other versions
KR100616164B1 (en
Inventor
정우석
Original Assignee
주식회사 대우일렉트로닉스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 대우일렉트로닉스 filed Critical 주식회사 대우일렉트로닉스
Priority to KR1020040033455A priority Critical patent/KR100616164B1/en
Publication of KR20050108235A publication Critical patent/KR20050108235A/en
Application granted granted Critical
Publication of KR100616164B1 publication Critical patent/KR100616164B1/en

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B28WORKING CEMENT, CLAY, OR STONE
    • B28CPREPARING CLAY; PRODUCING MIXTURES CONTAINING CLAY OR CEMENTITIOUS MATERIAL, e.g. PLASTER
    • B28C5/00Apparatus or methods for producing mixtures of cement with other substances, e.g. slurries, mortars, porous or fibrous compositions
    • B28C5/08Apparatus or methods for producing mixtures of cement with other substances, e.g. slurries, mortars, porous or fibrous compositions using driven mechanical means affecting the mixing
    • B28C5/18Mixing in containers to which motion is imparted to effect the mixing
    • B28C5/20Mixing in containers to which motion is imparted to effect the mixing rotating about a horizontal or substantially horizontal axis during mixing, e.g. without independent stirrers
    • B28C5/2027Mixing in containers to which motion is imparted to effect the mixing rotating about a horizontal or substantially horizontal axis during mixing, e.g. without independent stirrers using spiral-shaped mixing drums
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B28WORKING CEMENT, CLAY, OR STONE
    • B28CPREPARING CLAY; PRODUCING MIXTURES CONTAINING CLAY OR CEMENTITIOUS MATERIAL, e.g. PLASTER
    • B28C5/00Apparatus or methods for producing mixtures of cement with other substances, e.g. slurries, mortars, porous or fibrous compositions
    • B28C5/08Apparatus or methods for producing mixtures of cement with other substances, e.g. slurries, mortars, porous or fibrous compositions using driven mechanical means affecting the mixing
    • B28C5/0806Details; Accessories
    • B28C5/0831Drives or drive systems, e.g. toothed racks, winches

Abstract

본 발명은 라인 평균값, 메디안 필터링 값 및 움직임 보상 값을 이용하는 메디안 필터링 기법을 통해 인트라/인터 영상의 선택 적용을 위한 복잡한 계산량을 배제할 수 있도록 한다는 것으로, 이를 위하여 본 발명은, 인트라 또는 인터 영상으로의 디인터레이스를 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 종래 방식과는 달리, 라인 평균값을 이용한 디인터레이스 영상의 픽셀값, 메디안 필터를 이용한 디인터레이스 영상의 픽셀값 및 움직임 보상을 이용한 디인터레이스 영상의 픽셀값들 중 중간값을 최종 픽셀 값으로 취하는 메디안 필터링을 통해 인터 프레임의 디인터레이스 영상을 생성하고, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 정보(움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기)에 의거하여 라인 교차 삽입에 의한 인트라 영상 또는 인터 영상으로의 디인터레이스를 실행하도록 함으로써, 복잡한 계산량을 필요로 하지 않으면서도 영상의 움직임에 적응적인 영상 디인터레이싱을 실현할 수 있으며, 또한 재생 영상에서의 화질 열화를 야기시키는 블록 아티팩트의 발생을 억제할 수 있는 것이다.According to the present invention, it is possible to exclude complex computations for selective application of intra / inter images through median filtering techniques using line average values, median filtering values, and motion compensation values. Unlike the conventional method of calculating the inter-frame difference and the sum total of the forward and reverse interframes and the intra and inter frame difference and the sum total for the deinterlacing, the pixel value and median filter of the deinterlaced image using the line average value Deinterlaced image of inter frame is generated through median filtering which takes the median value of pixel value of deinterlaced image using motion compensation and deinterlaced image using motion compensation as the final pixel value, and inter frame is generated through motion estimation / compensation Movement information that occurs when Based on the motion vector, the size of the motion estimation block, and the size of the motion search area, deinterlacing into an intra or inter image by intersecting lines can be performed, thereby adapting to the motion of the image without requiring complicated computation. It is possible to realize image deinterlacing and to suppress block artifacts that cause deterioration of image quality in a reproduced image.

Description

메디안 필터를 이용한 적응적인 영상 디인터레이스 장치 및 그 방법{APPARATUS AND METHOD FOR DE-INTERLACING ADAPTIVELY FIELD IMAGE BY USING MEDIAN FILTER}Adaptive image deinterlacing apparatus and method using median filter {APPARATUS AND METHOD FOR DE-INTERLACING ADAPTIVELY FIELD IMAGE BY USING MEDIAN FILTER}

본 발명은 영상신호를 디인터레이스하는 기법에 관한 것으로, 더욱 상세하게는 오드(홀수) 필드와 이븐(짝수) 필드로 된 인터레이스 영상에 대해 인트라 또는 인터 프레임의 디인터레이스 영상으로 변환하는데 적합한 움직임 카운트를 이용한 영상 디인터레이스 장치 및 그 방법에 관한 것이다.The present invention relates to a technique for deinterlacing an image signal, and more particularly, an image using a motion count suitable for converting an interlaced image having an odd (even) field and an even (even) field into an intra or interframe deinterlaced image. A deinterlacing device and a method thereof are provided.

통상적으로, 디스플레이를 위한 영상신호는 인터레이스 영상과 디인터레이스 영상으로 구분할 수 있는데, 인터레이스 영상은 오드 필드와 이븐 필드로 이루어져 격행 주사를 통해 디스플레이되는 영상을 나타내고, 디인터레이스 영상은 하나의 프레임으로 이루어져 순차 주사를 통해 디스플레이되는 영상을 나타낸다.In general, an image signal for display may be classified into an interlaced image and a deinterlaced image. The interlaced image may be an image that is displayed through an annular scan consisting of an odd field and an even field, and the deinterlaced image may be sequentially composed of one frame. Indicates an image displayed through.

잘 알려진 바와 같이, NTSC 방송의 영상신호는 인터레이스 영상(즉, 오드 필드와 이븐 필드의 격행 주사를 통해 하나의 영상 프레임을 표현하는 방식)으로 이루어져 있는데, 최근 들어 보급이 확산되고 있는 PDP, LCD 등의 디스플레이 소자는 디인터레이스 방식(즉, 즉, 영상을 한 라인씩 순차적으로 주사하여 한 프레임을 표현하는 방식)의 영상 모드를 지원하고 있다. 따라서, 이러한 PDP 등에서는 NTSC 방송의 인터레이스 영상을 디인터레이스 영상으로 재배열하는 수단을 채용하고 있다.As is well known, the video signal of NTSC broadcasting is composed of interlaced video (ie, a method of expressing a single video frame through a parallel scan of an odd field and an even field). The display device of the device supports a video mode of a deinterlacing method (ie, a method of sequentially scanning an image line by line to express one frame). Therefore, such a PDP adopts a means for rearranging NTSC broadcast interlaced video into deinterlaced video.

전형적인 종래 디인터레이스 방식으로는 두 라인 데이터를 그대로 이용하여 디인터레이스 영상을 생성하는 방법과 픽셀(화소) 단위의 움직임을 추정 결과에 의거하여 인터레이스 영상을 생성하는 방법이 있다.Typical deinterlacing methods include a method of generating a deinterlaced image using two lines of data as it is and a method of generating an interlaced image based on the estimation result of pixel (pixel) motion.

상기한 종래 방법들 중 라인 데이터를 그대로 이용하는 방식은 오드 필드 라인 데이터와 이븐 필드 라인 데이터를 라인별로 겹쳐서 끼워 넣는 방식(라인 교차 삽입 방식)으로 디인터레이스 영상을 생성하는 기법인데, 이러한 기법의 경우 프레임용 보간 데이터의 생성을 위한 계산량이 간단하다는 장점을 갖는 반면에 필드별로 움직임이 심한 동영상일 경우 필드간의 영상 차이가 심하기 때문에 에지 근처에서 영상의 화질 열화를 필연적으로 수반되는 문제가 있다.Among the conventional methods, the method of using the line data as it is is a technique of generating a deinterlaced image by inserting the odd field line data and even field line data by overlapping line by line (line cross-insertion method). On the other hand, there is a problem that the quality of the interpolation data is simple, but in the case of a video having a lot of motion in each field, the image difference between the fields is inevitably accompanied by deterioration of image quality near the edge.

또한, 상기한 종래 방법들 중 픽셀 단위의 움직임을 추정하는 방식은 픽셀 단위의 움직임을 추정하고, 이 움직임 추정 결과에 의거하여 현재 필드의 인접하는 픽셀들 및/또는 이전 필드의 대응하는 위치의 인접 픽셀들을 이용하는 방식으로 디인터레이스 영상을 생성하는 기법인데, 이러한 기법의 경우 영상의 움직임에 매우 강한 특성을 갖는 반면에 하드웨어적인 구성 및 계산량이 매우 복잡하다는 문제가 있으며, 이러한 문제는 결국 디인터레이스 장치의 상용화 및 저가격화를 저해시키는 요인으로 작용하고 있는 실정이다.In addition, the method of estimating the motion in pixels among the above-described conventional methods estimates motion in pixels, and based on the motion estimation result, adjacent pixels in the current field and / or adjacent positions in the previous field. A technique for generating a deinterlaced image by using pixels, which has a very strong characteristic in the movement of the image, but the hardware configuration and calculation amount is very complicated, and this problem leads to the commercialization of the deinterlaced device. It is acting as a deterrent to lowering prices.

한편, 상기한 종래 기술의 문제점을 해결하기 위한 하나의 방편으로서, 라인 삽입 방식과 움직임 추정/보상을 이용한 보간(interpolation) 방식을 혼합하여 사용하는 새로운 방법이 제안되었으며, 이러한 새로운 방법을 실현하는 하드웨어적인 구성이 도 4에 도시되어 있다.On the other hand, as a way to solve the above problems of the prior art, a new method using a mixture of the interpolation method using the line insertion method and motion estimation / compensation has been proposed, the hardware to realize the new method An exemplary configuration is shown in FIG.

도 4는 종래의 영상 디인터레이스 장치의 블록구성도로서, 필드 데이터 전처리 블록(402), 인트라 프레임 발생 블록(404), 정방향 인터 프레임 생성 블록(406), 역방향 인터 프레임 생성 블록(408), 인터 프레임 발생 블록(410), 제1차분 발생 블록(412), 제2차분 발생 블록(414), 인트라/인터 결정 블록(416) 및 프레임 선택 블록(418)을 포함한다.4 is a block diagram of a conventional video deinterlacing apparatus, in which a field data preprocessing block 402, an intra frame generation block 404, a forward inter frame generation block 406, a reverse inter frame generation block 408, and an inter frame are shown. A generation block 410, a first difference generation block 412, a second difference generation block 414, an intra / inter decision block 416, and a frame selection block 418.

도 4를 참조하면, 필드 데이터 전처리 블록(402)은, 비록 도면에서의 상세한 도시는 생략하였으나, 다수의 필드 메모리와 움직임 추정 블록을 포함하는 것으로, 외부로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 인트라 프레임 발생 블록(404)으로 제공하고, 시간축 상으로 연속하는 한쪽의 필드 데이터(예를 들면, 오드 필드)들 이용하여 N×N 블록 단위로 움직임을 추정하여 각 블록 단위의 움직임 벡터를 발생하며, 이와 같이 발생된 움직임 벡터들을 선택된 필드 데이터(예를 들면, 오드 필드 데이터)와 함께 정방향 및 역방향 인터 프레임 생성 블록(406, 408)으로 각각 제공하는 등의 기능을 수행한다.Referring to FIG. 4, the field data preprocessing block 402 includes a plurality of field memories and a motion estimation block, although detailed illustration in the drawings is omitted. Field data (or field and even fields) are provided from outside. ) Is provided to the intra frame generation block 404, and motion vector of each block unit is estimated by estimating the motion in units of N × N blocks using one field data (for example, an odd field) continuous on the time axis. And generate the generated motion vectors along with the selected field data (eg, odd field data) to the forward and reverse inter frame generation blocks 406 and 408, respectively.

다음에, 인트라 프레임 발생 블록(404)은 필드 데이터 전처리 블록(402)으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 이용하여 라인 데이터를 순차 삽입하는 방식으로 인트라 프레임 데이터, 즉 인트라 프레임의 디인터레이스 영상 데이터를 생성하는 것으로, 여기에서 생성된 인트라 프레임 데이터(디인터레이스 영상 데이터)는 라인 L41을 통해 제2차분 발생 블록(414) 및 프레임 선택 블록(418)으로 각각 제공된다.The intra frame generation block 404 then deinterlaces the intra frame data, i.e., the intra frame, in such a manner as to insert line data sequentially using the field data (or field and even fields) provided from the field data preprocessing block 402. In generating the image data, the intra frame data (deinterlaced image data) generated here is provided to the second difference generating block 414 and the frame selection block 418 through line L41, respectively.

또한, 정방향 인터 프레임 생성 블록(406)은 필드 데이터 전처리 블록(402)으로부터 제공되는 n번째 필드 데이터(예컨대, n번째 오드 필드 데이터)와 n-1번째 및 n번째 필드 데이터간의 N×N 블록의 단위 움직임 추정을 통해 얻어진 움직임벡터들을 이용하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 n번째 필드를 이용하는 라인 데이터 삽입 방식을 통해 정방향의 인터 프레임, 즉 정방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 정방향의 인터 프레임은 라인 L42를 통해 인터 프레임 발생 블록(410)과 제1차분 발생 블록(412)으로 각각 제공된다.In addition, the forward inter frame generation block 406 is used for the N × N block between the n th field data (eg, the n th odd field data) provided from the field data preprocessing block 402 and the n−1 th and n th field data. A forward prediction field is generated using the motion vectors obtained through unit motion estimation, and a forward inter frame, that is, a forward deinterlaced image is generated through a line data insertion method using the generated forward prediction field and the n th field. The forward inter frames generated therein are provided to the inter frame generation block 410 and the first difference generation block 412 through the line L42, respectively.

이어서, 역방향 인터 프레임 생성 블록(408)은 필드 데이터 전처리 블록(402)으로부터 제공되는 n-1번째 필드 데이터(예컨대, n-1번째 오드 필드 데이터)와 n-1번째 및 n번째 필드 데이터간의 N×N 블록의 단위 움직임 추정을 통해 얻어진 움직임벡터들을 이용하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 n-1번째 필드를 이용하는 라인 데이터 삽입 방식을 통해 역방향의 인터 프레임, 즉 역방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 역방향의 인터 프레임은 라인 L43을 통해 인터 프레임 발생 블록(410)과 제1차분 발생 블록(412)으로 각각 제공된다.Subsequently, the reverse inter frame generation block 408 is configured to provide an N-th field data (eg, n-1 th odd field data) and n-1 th and n th field data provided from the field data preprocessing block 402. A backward prediction field is generated using the motion vectors obtained through the unit motion estimation of the × N block, and a reverse interframe, i.e., a line data insertion method using the generated backward prediction field and the n-1 th field, that is, A reverse deinterlaced image is generated, and the generated reverse inter frames are provided to the inter frame generation block 410 and the first difference generation block 412 through the line L43, respectively.

이에 응답하여, 인터 프레임 발생 블록(410)에서는 라인 L42를 통해 제공되는 정방향의 인터 프레임과 라인 L43을 통해 제공되는 역방향의 인터 프레임의 대응하는 각 픽셀 값들을 가산한 후 다시 평균(즉, 1/2)을 취하는 방식으로 인터 프레임(즉, 움직임 보상(MC) 인터 프레임)을 생성하며, 여기에서 생성된 인터 프레임은 라인 L44를 통해 제2차분 발생 블록(414)과 프레임 선택 블록(418)으로 각각 제공된다.In response, the inter frame generation block 410 adds the corresponding respective pixel values of the forward inter frame provided through the line L42 and the reverse inter frame provided through the line L43 and then averages (i.e., 1/1). 2) generate an inter frame (i.e., a motion compensation (MC) inter frame) in which the inter frame is generated to the second difference generation block 414 and the frame selection block 418 via line L44. Each is provided.

또한, 제1차분 발생 블록(412)에서는 라인 L42를 통해 제공되는 정방향의 인터 프레임과 라인 L43을 통해 제공되는 역방향의 인터 프레임간의 차분값(에러신호들)들을 추출, 즉 모든 픽셀들에 대한 픽셀 차분값들을 추출하고, 이 추출된 차분값들을 모두 가산하여 인터 프레임 차분 총합값을 산출한 후 다음 단의 인트라/인터 결정 블록(416)으로 제공한다.Further, the first difference generating block 412 extracts the difference values (error signals) between the forward inter frame provided through the line L42 and the reverse inter frame provided through the line L43, that is, the pixels for all the pixels. The difference values are extracted, and the extracted difference values are added together to calculate an inter frame difference total value and then provided to the next stage intra / inter decision block 416.

다음에, 제2차분 발생 블록(414)에서는 라인 L41을 통해 제공되는 인트라 프레임과 라인 L44를 통해 제공되는 인터 프레임간의 차분값(에러신호들)들을 추출, 즉 모든 픽셀들에 대한 픽셀 차분값들을 추출하고, 이 추출된 차분값들을 모두 가산하여 인트라/인터 프레임 차분 총합값을 산출한 후 다음 단의 인트라/인터 결정 블록(416)으로 제공한다.Next, the second difference generating block 414 extracts difference values (error signals) between the intra frame provided through the line L41 and the inter frame provided through the line L44, that is, the pixel difference values for all the pixels. The sum of these extracted difference values is added to calculate an intra / inter frame difference total value and then provided to the next stage intra / inter decision block 416.

이에 응답하여, 인트라/인터 결정 블록(416)에서는 제1차분 발생 블록(412)으로부터 제공되는 인터 프레임 차분 총합값과 제2차분 발생 블록(414)으로부터 제공되는 인트라/인터 프레임 차분 총합값을 비교하고, 그 비교 결과에 의거하여 디인터레이싱된 인트라 영상 혹은 디인터레이싱된 인터 영상을 선택하기 위한 절환신호를 발생하여 라인 L45를 통해 프레임 선택 블록(418)으로 제공한다. 예를 들어, 인터 프레임 차분 총합값이 인트라/인터 프레임 차분 총합값보다 적어도 클 때 인터 모드로 디인터레이싱된 영상을 선택하도록 하고 반대의 경우 인트라 모드로 디인터레이싱된 영상을 선택하도록 하는 절환신호를 발생하여 라인 L45를 통해 프레임 선택 블록(418)으로 제공한다.In response, the intra / inter decision block 416 compares the inter frame difference total value provided from the first difference generation block 412 with the intra / inter frame difference total value provided from the second difference generation block 414. Based on the comparison result, a switching signal for selecting a deinterlaced intra image or a deinterlaced inter image is generated and provided to the frame selection block 418 through the line L45. For example, when the inter frame difference total value is at least greater than the intra / inter frame difference total value, a switching signal is generated to select the deinterlaced image in the inter mode, and vice versa, to select the deinterlaced image in the intra mode. Provided to frame selection block 418 through L45.

그 결과, 프레임 선택 블록(418)에서는, 라인 L45를 통해 제공되는 절환신호에 응답하여, 라인 L41 상의 디인터레이싱된 인트라 영상을 출력으로 선택하거나 혹은 라인 L44 상의 디인터레이싱된 인터 영상(움직임 보상 인터 영상)을 출력으로 선택한다. 여기에서, 디인터레이싱된 영상의 출력 선택은 하나의 프레임 단위로 이루어진다.As a result, in the frame selection block 418, in response to the switching signal provided through the line L45, a deinterlaced intra image on the line L41 is selected as an output or a deinterlaced inter image (motion compensation inter image) on the line L44 is selected. Select as output. Here, the output selection of the deinterlaced image is made in one frame unit.

즉, 종래의 디인터레이스 장치에서는 정방향의 인터 프레임 및 역방향의 인터 프레임간의 인터 프레임 차분값을 산출하고, 인트라 프레임 및 인터 프레임간의 인트라/인터 프레임 차분값을 산출하며, 이와 같이 산출된 두 차분값들에 의거하여 인터레이스 영상을 인트라 영상으로 디인터레이스할 것인지 혹은 움직임 보상(MC) 인터 영상으로 디인터레이스 할 것인지를 판단 및 결정한다.That is, in the conventional deinterlacing apparatus, the inter frame difference value between the forward inter frame and the reverse inter frame is calculated, the intra / inter frame difference value between the intra frame and the inter frame is calculated, and the two difference values calculated as described above are calculated. Based on this, it is determined and determined whether to deinterlace an interlaced image into an intra image or to deinterlace a motion compensation (MC) inter image.

그러나, 상술한 바와 같은 종래의 디인터레이스 장치의 경우, 인터레이스 영상을 인트라 영상으로 디인터레이스할 것인지 또는 움직임 보상 인터 영상으로 디인터레이스할 것인지를 판단하기 위해서는, 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값을 산출하고 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출해야만 하기 때문에, 별도의 복잡한 계산을 필요로 한다는 문제가 있다.However, in the conventional deinterlace apparatus as described above, in order to determine whether to deinterlace an interlaced image into an intra image or to deinterlace a motion compensated inter image, a difference value and a sum total difference between forward and reverse interframes are determined. Since it is necessary to calculate the difference between the intra and inter frames and the difference total value, there is a problem that a separate complicated calculation is required.

또한, 움직임이 없는 부분에서는 움직임 보상 인터 영상을 주로 취하고, 움직임이 있는 부분에서는 인트라 영상을 주로 취하는 전술한 종래 방식의 경우, 움직임이 상대적으로 큰 경우에 제대로 된 값을 찾지 못하게 되는 문제가 있으며, 또한 비록 움직임이 없는 부분에서 움직임 보상 인터 영상을 취한다고 하더라도 여전히 블록 아티팩트(block artifact)가 잔존하게 되는 문제가 있으며, 이러한 문제들은 결국 화질 열화를 초래하는 원인을 제공하고 있다.In addition, in the above-described conventional method of mainly taking a motion compensation inter image in a part without a motion and an intra image in a part in a motion, there is a problem in that a correct value is not found when the motion is relatively large. In addition, even if the motion compensation inter image is taken in the non-motion part, block artifacts remain, and these problems provide a cause of deterioration of image quality.

따라서, 본 발명은 상기한 종래 기술의 문제점을 해결하기 위한 것으로, 라인 평균값, 메디안 필터링 값 및 움직임 보상 값을 이용하는 메디안 필터링 기법을 통해 인트라/인터 영상의 선택 적용을 위한 복잡한 계산량을 배제할 수 있는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치 및 그 방법을 제공하는데 그 목적이 있다.Accordingly, the present invention is to solve the above problems of the prior art, it is possible to exclude the complex computation for the selective application of the intra / inter image through the median filtering technique using the line average value, median filtering value and the motion compensation value An object of the present invention is to provide an apparatus and method for adaptive image deinterlacing using a median filter.

본 발명의 다른 목적은 라인 평균값, 메디안 필터링 값 및 움직임 보상 값을 이용하는 메디안 필터링 기법을 통해 블록 아티팩트의 발생을 억제할 수 있는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치 및 그 방법을 제공하는데 있다.Another object of the present invention is to provide an apparatus and method for adaptive image deinterlacing using a median filter capable of suppressing generation of block artifacts through a median filtering technique using a line average value, median filtering value, and a motion compensation value.

상기 목적을 달성하기 위한 일 관점에 따른 본 발명은, 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 장치로서, 오드 필드와 이븐 필드의 라인을 교차 삽입하여 디인터레이스된 인트라 영상을 발생하는 수단과, 상기 오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 제 1 인터 영상을 발생하는 제 1 수단과, 인접하는 주변 N개의 픽셀값들을 이용하는 메디안 필터링을 통해 디인터레이스된 제 2 인터 영상을 발생하는 제 2 수단과, 시간적으로 연속하는 필드간의 움직임 추정/보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 움직임 보상 인터 영상을 발생하는 제 3 수단과, 제 1 수단 내지 제 3 수단으로부터의 각 출력을 이용하는 메디안 필터링을 수행하여 최종 인터 영상을 결정하는 수단과, 상기 움직임 추정/보상시에 발생하는 기 설정된 각 블록의 움직임 정보에 의거하여 상기 인트라 영상 또는 최종 인터 영상의 출력을 디인터레이스 영상으로 선택하는 수단을 포함하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치를 제공한다.According to an aspect of the present invention, there is provided an apparatus for converting an interlaced image into a deinterlaced image in an image system supporting a deinterlaced image mode, and interleaving a deinterlaced intra image by interposing a line of an odd field and an even field. First means for generating a deinterlaced first inter-image using means for generating, line average values of the odd and even fields, and second inter-image deinterlaced through median filtering using adjacent N pixel values. Third means for generating a prediction field through motion estimation / compensation between successive fields in time, and generating a deinterlaced motion compensation inter-image using the generated prediction field and the corresponding field; Using each output from the first to third means Means for determining a final inter image by performing median filtering; and means for selecting an output of the intra image or the final inter image as a deinterlaced image based on motion information of each block generated during the motion estimation / compensation. An adaptive image deinterlacing apparatus using a median filter is provided.

상기 목적을 달성하기 위한 다른 관점에 따른 본 발명은, 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 방법으로서, 오드 필드와 이븐 필드의 라인을 교차 삽입하여 디인터레이스된 인트라 영상을 발생하는 제 1 과정과, 라인 평균값을 이용하여 생성한 제 1 인터 영상, 인접하는 다수 픽셀값을 이용하는 메디안 필터링을 통해 생성한 제 2 인터 영상 및 필드간의 움직임 추정/보상을 통해 생성한 제 3 인터 영상에 대해 메디안 필터링을 수행하여 최종 인터 영상을 결정하는 제 2 과정과, 상기 움직임 추정/보상시에 발생하는 움직임 정보에 의거하여 상기 인트라 영상 또는 최종 인터 영상의 출력을 디인터레이스 영상으로 선택하는 제 3 과정을 포함하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법을 제공한다.According to another aspect of the present invention, there is provided a method for converting an interlaced image into a deinterlaced image in an image system supporting a deinterlaced image mode, and interleaving a deinterlaced intra image by interleaving lines of an odd field and an even field. A first inter image generated by using a first process, a first inter image generated using a line average value, a second inter image generated by median filtering using adjacent multiple pixel values, and a third inter image generated by motion estimation / compensation between fields. A second process of performing a median filtering on the image to determine a final inter image, and a third step of selecting an output of the intra image or the final inter image as a deinterlaced image based on motion information generated during the motion estimation / compensation Adaptive Image Decoding Using Median Filters It provides the interlace method.

본 발명의 상기 및 기타 목적과 여러 가지 장점은 이 기술분야에 숙련된 사람들에 의해 첨부된 도면을 참조하여 하기에 기술되는 본 발명의 바람직한 실시 예로부터 더욱 명확하게 될 것이다.The above and other objects and various advantages of the present invention will become more apparent from the preferred embodiments of the present invention described below with reference to the accompanying drawings by those skilled in the art.

이하 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예에 대하여 상세하게 설명한다.Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

본 발명의 핵심 기술요지는, 인트라 또는 인터 영상으로의 디인터레이스를 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 전술한 종래 방식과는 달리, 라인 평균값을 이용한 디인터레이스 영상의 픽셀값, 메디안 필터를 이용한 디인터레이스 영상의 픽셀값 및 움직임 보상을 이용한 디인터레이스 영상의 픽셀값들 중 중간값을 최종 픽셀 값으로 취하는 메디안 필터링을 통해 인터 프레임의 디인터레이스 영상을 생성하고, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 정보(움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기)에 의거하여 라인 교차 삽입에 의한 인트라 영상 또는 인터 영상으로의 디인터레이스를 실행한다는 것으로, 이러한 기술적 수단을 통해 본 발명에서 목적으로 하는 바를 쉽게 달성할 수 있다.Key technical aspects of the present invention include the above-described conventional methods for calculating the inter-frame difference and the difference total value and the intra and inter-frame difference value and the difference total value in the forward and reverse directions for deinterlacing into an intra or inter image. In contrast, the interframe deinterlace is performed through median filtering which takes the median value of the pixel value of the deinterlaced image using the line average value, the pixel value of the deinterlaced image using the median filter and the pixel value of the deinterlaced image using the motion compensation as the final pixel value. Intra image or inter image by intersecting lines based on motion information (motion vector, size of motion estimation block and size of motion search region) generated when generating an image and generating inter frame through motion estimation / compensation By deinterlacing Through these technical means it can easily attain the bar for the purpose of the present invention.

도 1은 본 발명의 바람직한 실시 예에 따른 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치의 블록구성도로서, 인트라 프레임 발생 블록(102), 제 1 인터 프레임 발생 블록(104), 제 2 인터 프레임 발생 블록(106), 제 3 인터 프레임 발생 블록(108), 메디안 필터링 블록(110), 인트라/인터 결정 블록(112) 및 프레임 생성 블록(114)을 포함한다.1 is a block diagram of an adaptive image deinterlacing apparatus using a median filter according to an exemplary embodiment of the present invention, wherein an intra frame generation block 102, a first inter frame generation block 104, and a second inter frame generation block are shown. 106, a third inter frame generation block 108, a median filtering block 110, an intra / inter decision block 112, and a frame generation block 114.

도 1을 참조하면, 본 발명의 적응적인 영상 디인터레이스 장치는, 라인 교차 삽입 방식을 이용하여 인트라 프레임을 발생하고, 라인 평균값을 이용하여 인터 프레임을 발생하며, 주변 픽셀값들을 이용하는 메디안 필터링을 이용하여 인터 프레임을 발생하고, 움직임 추정/보상 기법을 이용하여 인터 프레임을 발생하도록 하는 데이터 처리 경로를 갖는다는 점에 첫 번째 기술적 특징을 가지며, 또한 라인 평균값을 이용한 디인터레이스 영상, 메디안 필터를 이용한 디인터레이스 영상 및 움직임 보상을 이용한 디인터레이스 영상에 대해 다시 한번 메디안 필터링을 수행하여 원하는 인터 프레임의 디인터레이스 영상을 생성한다는 점에 두 번째 기술적 특징을 가지며, 움직임 정보(움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기)를 이용하여 인트라 영상 또는 메디안 필터링을 통해 얻은 인터 영상을 최종 디인터레이스 영상으로 선택하도록 한다는 점에 세 번째 기술적 특징을 갖는다.Referring to FIG. 1, the adaptive image deinterlacing apparatus of the present invention generates an intra frame using a line crossing insertion method, generates an inter frame using a line average value, and uses median filtering using peripheral pixel values. The first technical feature is that it has an interframe, and has a data processing path for generating an interframe using a motion estimation / compensation technique, and also has a deinterlaced image using a line average value, a deinterlaced image using a median filter, and The second technical feature is that median filtering is performed once again on the deinterlaced image using motion compensation to generate a deinterlaced image of a desired interframe. ) This And it has a third technical feature in that to select the inter-image obtained by the intra-image or a median filter to the final deinterlaced image.

먼저, 인트라 프레임 발생 블록(102)은, 도시 생략된 필드 메모리 블록으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 이용하여 오드 라인과 이븐 라인을 교차 삽입하는 방식으로 인트라 프레임 데이터, 즉 인트라 프레임의 디인터레이스 영상 데이터를 생성하는 것으로, 여기에서 생성된 인트라 프레임 데이터(디인터레이스 영상 데이터)는 라인 L11을 통해 프레임 생성 블록(114)으로 전달된다.First, the intra frame generation block 102 performs intra frame data, i.e., intra frame in such a manner as to cross-insert an odd line and an even line using field data (or odd field and even field) provided from a field memory block (not shown). To generate the deinterlaced image data, and the generated intra frame data (deinterlaced image data) is transferred to the frame generation block 114 via the line L11.

다음에, 제 1 인터 프레임 발생 블록(104)은 도시 생략된 필드 메모리 블록으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)를 이용하여 라인 평균값을 취하는 방식으로 인터 프레임 데이터, 즉 인터 프레임의 디인터레이스 영상 데이터를 생성하는 것으로, 여기에서 생성된 인터 프레임 데이터(디인터레이스 영상 데이터)는 라인 L12를 통해 메디안 필터링 블록(110)으로 제공된다.Next, the first inter frame generation block 104 uses the field data (odd field and even field) provided from the field memory block (not shown) to take the line average value, thereby deinterlacing the image of the inter frame. By generating the data, the inter frame data (deinterlaced image data) generated here is provided to the median filtering block 110 via the line L12.

또한, 제 2 인터 프레임 발생 블록(106)은 도시 생략된 필드 메모리 블록으로부터 제공되는 필드 데이터(오드 필드 및 이븐 필드)에 대해 메디안 필터링을 적용, 즉 오드 필드와 이븐 필드 내 인접하는 다수의 픽셀, 일 예로서 도 3에서 참조부호 A로서 도시된 바와 같이, 대상 픽셀의 상하 픽셀((X, Y-1), (X, Y+1)), 대각 방향의 좌상 및 우하 픽셀((X-1, Y), (X+1, Y+1)), 다른 대각 방향의 우상 및 좌하 픽셀((X+1, Y-1), (X-1, Y+1))로 된 6개의 인접하는 픽셀을 이용하는 메디안 필터링을 통해 디인터레이스 영상용 픽셀을 발생하여 라인 L13을 통해 메디안 필터링 블록(110)으로 제공하는 것으로, 여기에서 해당 픽셀 값은 인접하는 6개 픽셀의 평균값을 취하는 방식으로 얻어지며, 오드 필드와 이븐 필드 각각에 대해 수행되어 디인터레이스 영상을 위한 두 라인의 해당 픽셀 값들을 얻게 된다.Further, the second inter frame generation block 106 applies median filtering on field data (odd field and even field) provided from the field memory block, not shown, that is, a plurality of adjacent pixels in the odd field and even field, As an example, as shown by reference numeral A in FIG. 3, the upper and lower pixels ((X, Y-1), (X, Y + 1)) of the target pixel, the left and right pixels in the diagonal direction ((X-1) , Y), (X + 1, Y + 1)), and six adjacent, upper and lower left pixels ((X + 1, Y-1), (X-1, Y + 1)) in different diagonal directions Median filtering using pixels is used to generate pixels for the deinterlaced image and provide them to the median filtering block 110 via line L13, where the pixel values are obtained by taking the average of six adjacent pixels. The corresponding pixel values of the two lines for the deinterlaced image, performed for each field and even field To be gained.

이어서, 제 3 인터 프레임 발생 블록(108)은 시간적으로 인접하는 필드(오드 필드 또는 이븐 필드)간의 블록 매칭 알고리즘을 이용한 움직임 추정/보상을 통해 움직임 보상(MC)된 인터 프레임을 발생, 예를 들어 N×N(예컨대, 4×4)의 움직임 추정 블록, (N+M)×(N+M)(예컨대, 20×20)의 움직임 탐색 영역, 움직임 추정을 통해 얻어지는 각 블록별 움직임 벡터 등을 이용하여 움직임 보상된 인터 프레임을 발생하여 라인 L14를 통해 메디안 필터링 블록(110)으로 전달하는데, 그 구체적인 과정에 대해서는 상세 블록구성도를 보여주는 도 2를 참조하여 보다 상세하게 설명한다.The third inter frame generation block 108 then generates, for example, a motion compensated (MC) inter frame through motion estimation / compensation using a block matching algorithm between temporally adjacent fields (either field or even field). N × N (e.g., 4x4) motion estimation block, (N + M) x (N + M) (e.g., 20x20) motion search region, motion vector for each block obtained through motion estimation, etc. A motion compensated inter frame is generated and transmitted to the median filtering block 110 through the line L14. A detailed process will be described in detail with reference to FIG. 2 showing a detailed block diagram.

도 2는 도 1에 도시된 제3인터 프레임 발생 블록의 세부 블록구성도로서, 필드 메모리 블록(1081), 움직임 추정 블록(1083), 정방향 인터 프레임 생성 블록(1085), 역방향 인터 프레임 생성 블록(1087) 및 MC 인터 프레임 발생 블록(1089)을 포함한다.FIG. 2 is a detailed block diagram of the third inter frame generation block shown in FIG. 1, which includes a field memory block 1081, a motion estimation block 1083, a forward inter frame generation block 1085, and a reverse inter frame generation block ( 1087 and MC inter frame generation block 1089.

도 2를 참조하면, 필드 메모리 블록(1081)은 디인터레이스를 위해 외부로부터 입력되는 필드 데이터들을 저장하는 것으로, 라인 L21 상에 n번째 필드(예컨대, n번째 오드 필드)를 발생하여 움직임 추정 블록(1083) 및 정방향 인터 프레임 생성 블록(1085)으로 제공하고, 라인 L23 상에 n-1번째 필드(예컨대, n번째 필드에 시간적으로 인접하는 n-1번째 오드 필드)를 발생하여 움직임 추정 블록(1083) 및 정방향 인터 프레임 생성 블록(1087)으로 제공한다.Referring to FIG. 2, the field memory block 1081 stores field data input from the outside for deinterlacing. The field memory block 1081 generates an n-th field (eg, an n-th field) on a line L21 to generate a motion estimation block 1083. And the forward inter frame generation block 1085, and generate an n-1 th field (e.g., an n-1 th odd field that is temporally adjacent to the n th field) on a line L23. And forward inter frame generation block 1087.

다음에, 움직임 추정 블록(1081)은 시간축 상으로 연속하는 한쪽의 필드 데이터(예를 들면, 오드 필드), 즉 라인 L23 상의 n-1번째 오드 필드(이전 오드 필드)와 라인 L21 상의 n번째 오드 필드(현재 오드 필드)에 대해 N×N 블록(예를 들면, 4×4 블록) 단위로 (N+M)×(N+M)(예를 들면, 20×20)의 움직임 탐색 영역에서 움직임을 추정하여 각 블록 단위의 움직임 벡터를 발생하며, 이와 같이 발생된 움직임 벡터들은 라인 L25를 통해 정방향 인터 프레임 생성 블록(1085) 및 역방향 인터 프레임 생성 블록(1087)으로 각각 전달되고, 또한 라인 l25 상의 움직임 정보(즉, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기)는 인트라/인터 결정 블록(112)으로 제공된다.Next, the motion estimation block 1081 has one field data (e.g., an odd field) continuous on the time axis, i.e., the n-1th odd field (previous odd field) on the line L23 and the nth odd on the line L21. Movement in the motion search area of (N + M) × (N + M) (eg 20 × 20) in units of N × N blocks (eg 4 × 4 blocks) relative to the field (current odd field) And generate a motion vector of each block unit, and the generated motion vectors are transferred to the forward inter frame generation block 1085 and the reverse inter frame generation block 1087 through the line L25, respectively. The motion information (ie, the motion vector, the size of the motion estimation block, the size of the motion search region) is provided to the intra / inter decision block 112.

이어서, 정방향 인터 프레임 생성 블록(1085)은 라인 L21을 통해 필드 메모리 블록(1081)으로부터 제공되는 n번째 필드 데이터(예컨대, n번째 오드 필드 데이터)와 라인 L25를 통해 움직임 추정 블록(1083)으로부터 제공되는 움직임 벡터를 이용하는 움직임 보상을 수행하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 n번째 필드를 이용하는 라인 데이터 교차 삽입 방식으로 정방향의 인터 프레임, 즉 정방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 정방향의 인터 프레임은 라인 L26을 통해 MC(움직임 보상) 인터 프레임 발생 블록(1089)으로 제공된다.Next, the forward inter frame generation block 1085 is provided from the motion estimation block 1083 through line L25 and the n th field data (eg, the n th odd field data) provided from the field memory block 1081 on line L21. A forward prediction field is generated by performing motion compensation using a motion vector, and a forward interframe, that is, a forward deinterlaced image, is generated by a line data cross-insertion method using the generated forward prediction field and the nth field. The forward inter frame generated here is provided to the MC (motion compensation) inter frame generation block 1089 via line L26.

또한, 역방향 인터 프레임 생성 블록(1087)은, 상기한 정방향 인터 프레임 생성 블록(1085)과 유사하게, 라인 L23을 통해 필드 메모리 블록(1081)으로부터 제공되는 n-1번째 필드 데이터(예컨대, n-1번째 오드 필드 데이터)와 라인 L25를 통해 움직임 추정 블록(1083)으로부터 제공되는 움직임 벡터를 이용하는 움직임 보상을 수행하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 n-1번째 필드를 이용하는 라인 데이터 교차 삽입 방식으로 역방향의 인터 프레임, 즉 역방향의 디인터레이스 영상을 생성하며, 여기에서 생성된 역방향의 인터 프레임은 라인 L27을 통해 MC 인터 프레임 발생 블록(1089)으로 제공된다.In addition, the reverse inter frame generation block 1087 is similar to the forward inter frame generation block 1085 described above, and the n−1 th field data provided from the field memory block 1081 through the line L23 (eg, n−). Motion compensation using the motion vector provided from the motion estimation block 1083 through the first odd field data) and the line L25 to generate a reverse prediction field, and generate the reverse prediction field and the n-1 th field. A reverse interframe, that is, a reverse deinterlaced image, is generated by a line data cross-insertion scheme using the reverse data, and the generated reverse interframe is provided to the MC interframe generation block 1089 through a line L27.

이에 응답하여, MC 인터 프레임 발생 블록(1089)에서는 라인 L26을 통해 정방향 인터 프레임 생성 블록(1085)으로부터 제공되는 정방향의 인터 프레임과 라인 L27을 통해 역방향 인터 프레임 생성 블록(1087)으로부터 제공되는 역방향의 인터 프레임의 대응하는 각 픽셀 값들을 가산한 후 다시 평균(즉, 1/2)을 취하는 방식으로 움직임 보상(MC)된 인터 프레임(즉, MC 인터 모드의 디인터레이스 영상)을 생성하며, 여기에서 생성된 인터 프레임(인터 영상)은 도 1의 메디안 필터링 블록(110)으로 전달된다.In response, the MC inter frame generation block 1089 includes a forward inter frame provided from the forward inter frame generation block 1085 through line L26 and a reverse direction provided from the reverse inter frame generation block 1087 through line L27. A motion compensated inter frame (i.e., deinterlaced image of MC inter mode) is generated by adding the corresponding respective pixel values of the inter frame and then taking the average again (i.e. 1/2) The inter frame (inter image) is transmitted to the median filtering block 110 of FIG. 1.

다시 도 1을 참조하면, 메디안 필터링 블록(110)은 라인 L12를 통해 제공되는 라인 평균값을 이용한 픽셀값, 라인 L13을 통해 제공되는 메디안 필터링된 픽셀값 및 라인 L14를 통해 제공되는 움직임 보상된 픽셀값을 이용하는 메디안 필터링을 수행하여 최종적인 인터 프레임을 생성, 즉 일 예로서 도 3에 도시된 바와 같이, 라인 평균값을 이용한 픽셀값(LA), 메디안 필터링을 이용한 픽셀값(X,Y) 및 움직임 보상을 이용한 픽셀값(MC) 중에 중간값을 선택하는 방식으로 메디안 필터링을 수행하여 최종적인 인터 프레임용 픽셀값들을 생성하며, 여기에서 생성된 인터 프레임용 픽셀값들은 라인 L16을 통해 프레임 생성 블록(114)으로 제공된다. 여기에서, X,Y값이 인접하는 주변 6픽셀의 평균값을 취한 픽셀값이라는 점을 고려할 때 움직임이 상대적으로 큰 영상일수록 X,Y값이 최종 픽셀값으로 선택될 확률은 증가하게 될 것이다.Referring back to FIG. 1, the median filtering block 110 includes a pixel value using a line average value provided through line L12, a median filtered pixel value provided through line L13, and a motion compensated pixel value provided through line L14. Median filtering is performed to generate a final inter frame, i.e., as shown in FIG. 3, the pixel value LA using a line average value, the pixel value X and Y using median filtering, and motion compensation. Median filtering is performed by selecting an intermediate value among the pixel values MC to generate final inter frame pixel values, and the generated pixel values for the inter frame are generated through the line L16. Is provided. Herein, considering that the X and Y values are pixel values obtained by taking an average of 6 adjacent pixels, the probability that the X and Y values are selected as the final pixel value will increase as the motion is relatively large.

한편, 인트라/인터 결정 블록(112)은 L15를 통해 제 3 인터 프레임 발생 블록(108)으로부터 제공되는 움직임 정보(즉, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기 정보)를 이용하여 아래의 수학식과 같이 인트라 또는 인터 모드 결정용의 계수 k를 산출하고, 이 산출된 계수 k와 기 설정된 기준값 간을 비교하며, 그 비교 결과에 의거하여 디인터레이싱된 인트라 영상(라인 L11 상의 영상) 혹은 디인터레이싱된 인터 영상(라인 L16 상의 영상)을 선택하기 위한 절환신호를 발생하여 라인 L17을 통해 프레임 선택 블록(114)으로 제공한다. 예를 들어, 산출된 계수 k값이 기 설정된 기준값보다 적어도 클 때 인트라/인터 결정 블록(112)에서는 인트라 영상을 선택하도록 하는 절환신호를 라인 L17 상에 발생하고, 산출된 계수 k값이 기 설정된 기준값보다 작을 때 인트라/인터 결정 블록(112)에서는 인터 영상을 선택하도록 하는 절환신호를 라인 L17 상에 발생한다. 여기에서, 계수 k값이 크다는 것은 상대적으로 움직임이 많다는 것을 의미하고, 반대로 작다는 것은 상대적으로 움직임이 많지 않다는 것을 의미하기 때문에 계수 k값이 기준값보다 클 때 인트라 영상을 선택하도록 하고 기준값보다 작을 때 인터 영상을 선택하도록 한다.Meanwhile, the intra / inter decision block 112 uses the motion information (ie, the motion vector, the size of the motion estimation block, and the size of the motion search region) provided from the third inter frame generation block 108 through L15. A coefficient k for intra or inter mode determination is calculated as shown in the following equation, the calculated coefficient k is compared with a predetermined reference value, and the deinterlaced intra image (image on line L11) or deinterlacing based on the comparison result is obtained. A switching signal for selecting the inter video (image on line L16) is generated and provided to the frame selection block 114 through line L17. For example, when the calculated coefficient k value is at least greater than the preset reference value, the intra / inter decision block 112 generates a switching signal for selecting an intra image on the line L17, and the calculated coefficient k value is preset. When smaller than the reference value, the intra / inter decision block 112 generates a switching signal on the line L17 to select the inter image. In this case, a large coefficient k means that there is a relatively large amount of motion, whereas a small coefficient means that a relatively small amount of motion does not exist. Therefore, when the coefficient k value is larger than the reference value, an intra image is selected, Select the inter image.

상기한 수학식 1에서, Vx는 x축상의 움직임 좌표 값을, Vy는 y축상의 움직임 좌표 값을, SR은 (움직임 탐색 영역(또는 움직임 보상용 확장 블록)의 크기 - 움직임 추정 블록의 크기)/2를 각각 의미한다.In Equation 1, Vx denotes a motion coordinate value on the x-axis, Vy denotes a motion coordinate value on the y-axis, and SR (size of a motion search area (or motion compensation expansion block)-size of a motion estimation block) / 2 means each.

한편, 본 발명의 디인터레이스 장치는 인트라 또는 인터 영상으로 디인터레이스를 할 때, 인트라 또는 인터 모드의 선택을 움직임 탐색 영역 크기(단위)로 하거나, 움직임 탐색 영역의 라인 수와 대응하는 다수의 라인 단위로 하거나 혹은 한 프레임 단위로 할 수 있다. 여기에서, 움직임 탐색 영역의 라인 수에 대응하는 다수의 라인 단위로 인트라 모드 또는 인터 모드를 선택한다는 것은, 예를 들어 움직임 탐색 영역이 20×20 크기라고 가정할 때 20 라인 단위로 모드를 선택한다는 것을 의미하며, 이 경우 20 라인에 존재하는 모든 움직임 벡터에 대해 계수 k를 산출하고, 산출된 모든 계수 k를 가산한 후 움직임 벡터의 개수로 나눔으로서 최종 계수 k를 계산할 수 있을 것이다.In the deinterlacing apparatus of the present invention, when deinterlacing an intra or inter image, the intra or inter mode is selected as a motion search region size (unit) or a plurality of line units corresponding to the number of lines of the motion search region. Or it can be in units of one frame. Here, selecting the intra mode or the inter mode in units of a plurality of lines corresponding to the number of lines of the motion search region means that the mode is selected in units of 20 lines, for example, assuming that the motion search region is 20 × 20 size. In this case, the coefficient k may be calculated for all the motion vectors existing in the 20 lines, and the final coefficient k may be calculated by adding all calculated coefficients k and dividing by the number of motion vectors.

따라서, 프레임 선택 블록(114)에서는, 라인 L17을 통해 인트라/인터 결정 블록(112)으로부터 제공되는 절환신호에 응답하여, 라인 L11 상의 디인터레이싱된 인트라 영상을 출력으로 선택하거나 혹은 라인 L16 상의 디인터레이싱된 인터 영상을 출력으로 선택한다. 여기에서, 디인터레이싱된 영상의 출력 선택은 움직임 탐색 영역(또는 움직임 보상용 확장 블록) 단위, 움직임 탐색 영역의 라인 수와 대응하는 다수의 라인 단위로 이루어질 수 있다.Accordingly, in frame selection block 114, in response to the switching signal provided from intra / inter decision block 112 on line L17, the output of the deinterlaced intra image on line L11 is selected as output or the deinterlaced inter on line L16. Select video as output. In this case, the output selection of the deinterlaced image may be performed in units of a motion search region (or an extended block for motion compensation) and a plurality of lines corresponding to the number of lines of the motion search region.

즉, 상술한 바와 같이, 본 발명의 영상 디인터레이스 장치에서는 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기 정보에 의거하여 인트라 영상 또는 인터 영상으로의 디인터레이스를 결정한다.That is, as described above, in the image deinterlacing apparatus of the present invention, an intra image or an inter image is based on a motion vector generated when generating an inter frame through motion estimation / compensation, a size of a motion estimation block, and a size of a motion search region. Determine the deinterlace to the image.

이상 설명한 바와 같이 본 발명에 따르면, 인트라 또는 인터 영상으로의 디인터레이스를 위해 정방향 및 역방향의 인터 프레임간 차분값 및 차분 총합값과 인트라 및 인터 프레임간 차분값 및 차분 총합값을 산출하는 전술한 종래 방식과는 달리, 라인 평균값을 이용한 디인터레이스 영상의 픽셀값, 메디안 필터를 이용한 디인터레이스 영상의 픽셀값 및 움직임 보상을 이용한 디인터레이스 영상의 픽셀값들 중 중간값을 최종 픽셀 값으로 취하는 메디안 필터링을 통해 인터 프레임의 디인터레이스 영상을 생성하고, 움직임 추정/보상을 통해 인터 프레임을 생성할 때 발생하는 움직임 정보(움직임 벡터, 움직임 추정 블록의 크기 및 움직임 탐색 영역의 크기)에 의거하여 라인 교차 삽입에 의한 인트라 영상 또는 인터 영상으로의 디인터레이스를 실행하도록 함으로써, 복잡한 계산량을 필요로 하지 않으면서도 영상의 움직임에 적응적인 영상 디인터레이싱을 실현할 수 있으며, 또한 재생 영상에서의 화질 열화를 야기시키는 블록 아티팩트의 발생을 억제할 수 있다.As described above, according to the present invention, the above-described conventional method of calculating the difference between the forward and reverse interframe difference and the total difference value and the intra and inter frame difference and the difference total value for deinterlacing into an intra or inter image. In contrast, the median of the interframe is determined by taking the median value of the pixel value of the deinterlaced image using the line average value, the pixel value of the deinterlaced image using the median filter, and the pixel value of the deinterlaced image using the motion compensation as the final pixel value. Intra image or inter image by line interpolation based on motion information (motion vector, size of motion estimation block and size of motion search region) generated when generating deinterlaced image and generating inter frame through motion estimation / compensation Deinterlacing to an image Lock manner, and to realize the adaptive video deinterlacing the even movement of the image without the need for complex computation, can also suppress the occurrence of block artifacts that may cause the image quality deterioration in the reproduction image.

도 1은 본 발명의 바람직한 실시 예에 따른 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치의 블록구성도,1 is a block diagram of an adaptive image deinterlacing apparatus using a median filter according to an embodiment of the present invention;

도 2는 도 1에 도시된 제3인터 프레임 발생 블록의 세부 블록구성도,FIG. 2 is a detailed block diagram of a third inter frame generation block shown in FIG. 1;

도 3은 라인 평균, 메디안 필터, 움직임 추정/보상을 통해 얻어지는 세 값 중의 하나를 메디안 필터링으로 선택하는 과정을 설명하기 위해 도시한 도면,3 is a view illustrating a process of selecting one of three values obtained through line average, median filter, and motion estimation / compensation by median filtering;

도 4는 종래의 움직임 보상 기법을 이용한 영상 디인터레이스 장치의 블록구성도.4 is a block diagram of an image deinterlacing apparatus using a conventional motion compensation technique.

<도면의 주요부분에 대한 부호의 설명><Description of the code | symbol about the principal part of drawing>

102 : 인트라 프레임 발생 블록 104 : 제1인터 프레임 발생 블록102: intra frame generation block 104: first inter frame generation block

106 : 제2인터 프레임 발생 블록 108 : 제3인터 프레임 발생 블록106: second inter frame generation block 108: third inter frame generation block

110 : 메디안 필터링 블록 112 : 인트라/인터 결정 블록110: median filtering block 112: intra / inter decision block

114 : 프레임 생성 블록 1081 : 필드 메모리 블록114: frame generation block 1081: field memory block

1083 : 움직임 추정 블록1083 motion estimation block

1085 : 정방향 인터 프레임 생성 블록1085: forward interframe generation block

1087 : 역방향 인터 프레임 생성 블록1087 reverse frame generation block

1089 : MC 인터 프레임 발생 블록1089 MC inter frame generation block

Claims (18)

디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 장치로서,An apparatus for converting an interlaced video into a deinterlaced video in an imaging system supporting a deinterlaced video mode. 오드 필드와 이븐 필드의 라인을 교차 삽입하여 디인터레이스된 인트라 영상을 발생하는 수단과,Means for interleaving lines of the odd field and the even field to generate a deinterlaced intra image, 상기 오드 필드와 이븐 필드의 라인 평균값을 이용하여 디인터레이스된 제 1 인터 영상을 발생하는 제 1 수단과,First means for generating a deinterlaced first inter-image using line average values of the odd field and the even field; 인접하는 주변 N개의 픽셀값들을 이용하는 메디안 필터링을 통해 디인터레이스된 제 2 인터 영상을 발생하는 제 2 수단과,Second means for generating a deinterlaced second inter-image through median filtering using adjacent neighboring N pixel values; 시간적으로 연속하는 필드간의 움직임 추정/보상을 통해 예측 필드를 생성하고, 이 생성된 예측 필드와 해당 필드를 이용하여 디인터레이스된 움직임 보상 인터 영상을 발생하는 제 3 수단과,Third means for generating a prediction field through motion estimation / compensation between successive fields in time, and generating a deinterlaced motion compensation inter-image using the generated prediction field and the corresponding field; 제 1 수단 내지 제 3 수단으로부터의 각 출력을 이용하는 메디안 필터링을 수행하여 최종 인터 영상을 결정하는 수단과,Means for performing median filtering using each output from the first to third means to determine a final inter image; 상기 움직임 추정/보상시에 발생하는 기 설정된 각 블록의 움직임 정보에 의거하여 상기 인트라 영상 또는 최종 인터 영상의 출력을 디인터레이스 영상으로 선택하는 수단Means for selecting an output of the intra image or the final inter image as a deinterlaced image based on motion information of each block generated in the motion estimation / compensation; 을 포함하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.Adaptive image deinterlacing apparatus using a median filter comprising a. 제 1 항에 있어서,The method of claim 1, 상기 주변 N개 픽셀은, 대상 픽셀의 상하 픽셀 및 대각 4방향의 픽셀인 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.The peripheral N pixels are adaptive image deinterlacing apparatus using a median filter, characterized in that the upper and lower pixels of the target pixel and the pixels in four diagonal directions. 제 1 항 또는 제 2 항에 있어서,The method according to claim 1 or 2, 상기 제 2 수단은, 상기 오드 필드의 라인과 이븐 필드의 라인 각각에 대해 상기 메디안 필터링을 수행하여 상기 제 2 인터 영상을 발생하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.And the second means is configured to generate the second inter-image by performing the median filtering on the lines of the odd field and the lines of the even field, respectively. 제 1 항에 있어서,The method of claim 1, 상기 움직임 보상 인터 프레임 발생 수단은,The motion compensation inter frame generating means, 시간적으로 연속하는 이전 필드와 현재 필드를 이용하여 N×N의 움직임 추정 블록 단위로 (N+M)×(N+M)의 움직임 탐색 영역에서의 움직임 추정을 통해 움직임 벡터들을 발생하는 수단과,Means for generating motion vectors through motion estimation in a motion search region of (N + M) × (N + M) in units of N × N motion estimation blocks using temporally continuous previous and current fields; 상기 움직임 벡터들과 상기 현재 필드를 이용한 움직임 보상을 수행하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 상기 현재 필드를 이용하여 정방향의 인터 프레임을 생성하는 수단과,Means for generating a forward prediction field by performing motion compensation using the motion vectors and the current field, and generating a forward interframe using the generated forward prediction field and the current field; 상기 움직임 벡터들과 상기 이전 필드를 이용한 움직임 보상을 수행하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 상기 이전 필드를 이용하여 역방향의 인터 프레임을 생성하는 수단과,Means for generating a backward prediction field by performing motion compensation using the motion vectors and the previous field, and generating a backward inter frame using the generated backward prediction field and the previous field; 상기 생성된 정방향 및 역방향의 인터 프레임을 이용하여 상기 움직임 보상 인터 영상을 발생하는 수단Means for generating the motion compensation inter-image using the generated forward and reverse inter frames 을 포함하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.Adaptive image deinterlacing apparatus using a median filter comprising a. 제 4 항에 있어서,The method of claim 4, wherein 상기 움직임 보상 인터 영상 발생 수단은, 상기 생성된 정방향의 인터 프레임과 역방향의 인터 프레임을 대응하는 각 픽셀별로 가산한 후 각 픽셀의 평균값을 취하여 상기 움직임 보상 인터 영상을 발생하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.The median filter comprising: the motion compensation inter-image generating means generating the motion compensation inter-image by adding the generated forward inter frame and the reverse inter frame for each pixel and then taking an average value of each pixel. Adaptive video deinterlacing device. 제 1 항에 있어서,The method of claim 1, 상기 움직임 정보는, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기 정보를 포함하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.The motion information is adaptive image deinterlacing apparatus using a median filter, characterized in that the motion vector, the size of the motion estimation block, the size of the motion search region. 제 1 항 또는 제 6 항에 있어서,The method according to claim 1 or 6, 상기 디인터레이스 영상 선택 수단은, (N+M)×(N+M)의 움직임 탐색 영역 단위로 상기 인트라 영상 또는 최종 인터 영상을 선택하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.And the deinterlaced image selecting means selects the intra image or the final inter image in units of (N + M) × (N + M) motion search regions. 제 1 항 또는 제 6 항에 있어서,The method according to claim 1 or 6, 상기 디인터레이스 영상 선택 수단은, (N+M)×(N+M)의 움직임 탐색 영역의 라인수에 대응하는 다수의 라인 단위로 상기 인트라 영상 또는 최종 인터 영상을 선택하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 장치.The deinterlaced image selecting means selects the intra image or the final inter image in units of a plurality of lines corresponding to the number of lines in the (N + M) × (N + M) motion search regions. Adaptive video deinterlacing device. 디인터레이스 영상 모드를 지원하는 영상 시스템에서 인터레이스 영상을 디인터레이스 영상으로 변환하는 방법으로서,A method of converting an interlaced video into a deinterlaced video in an imaging system supporting a deinterlaced video mode, 오드 필드와 이븐 필드의 라인을 교차 삽입하여 디인터레이스된 인트라 영상을 발생하는 제 1 과정과,A first process of generating a deinterlaced intra image by cross-inserting an odd field and an even field; 라인 평균값을 이용하여 생성한 제 1 인터 영상, 인접하는 다수 픽셀값을 이용하는 메디안 필터링을 통해 생성한 제 2 인터 영상 및 필드간의 움직임 추정/보상을 통해 생성한 제 3 인터 영상에 대해 메디안 필터링을 수행하여 최종 인터 영상을 결정하는 제 2 과정과,Median filtering is performed on the first inter image generated by using the line average value, the second inter image generated by median filtering using adjacent multiple pixel values, and the third inter image generated by motion estimation / compensation between fields. A second process of determining a final inter image; 상기 움직임 추정/보상시에 발생하는 움직임 정보에 의거하여 상기 인트라 영상 또는 최종 인터 영상의 출력을 디인터레이스 영상으로 선택하는 제 3 과정A third process of selecting an output of the intra image or the final inter image as a deinterlaced image based on the motion information generated at the time of motion estimation / compensation 을 포함하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.Adaptive image deinterlacing method using a median filter comprising a. 제 9 항에 있어서,The method of claim 9, 상기 제 2 과정은, 상기 오드 필드의 라인과 이븐 필드의 라인 각각에 대해 상기 메디안 필터링을 수행하여 상기 제 2 인터 영상을 발생하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.In the second process, the median filtering is performed on each of the lines of the odd field and the lines of the even field to generate the second inter-image. 제 9 항에 있어서,The method of claim 9, 상기 제 2 과정은,The second process, 시간적으로 연속하는 이전 필드와 현재 필드를 이용하여 N×N의 움직임 추정 블록 단위로 (N+M)×(N+M)의 움직임 탐색 영역에서의 움직임 추정을 통해 움직임 벡터들을 발생하는 제 21 과정과,Twenty-first process of generating motion vectors through motion estimation in a motion search region of (N + M) × (N + M) in units of N × N motion estimation units using a temporally continuous previous field and current field and, 상기 움직임 벡터들과 상기 현재 필드를 이용한 움직임 보상을 수행하여 정방향의 예측 필드를 생성하고, 이 생성된 정방향의 예측 필드와 상기 현재 필드를 이용하여 정방향의 인터 프레임을 생성하는 제 22 과정과,A twenty-second step of generating a forward prediction field by performing motion compensation using the motion vectors and the current field, and generating a forward interframe using the generated forward prediction field and the current field; 상기 움직임 벡터들과 상기 이전 필드를 이용한 움직임 보상을 수행하여 역방향의 예측 필드를 생성하고, 이 생성된 역방향의 예측 필드와 상기 이전 필드를 이용하여 역방향의 인터 프레임을 생성하는 제 23 과정과,A twenty-third step of generating a backward prediction field by performing motion compensation using the motion vectors and the previous field, and generating a backward inter frame using the generated backward prediction field and the previous field; 상기 생성된 정방향의 인터 프레임과 역방향의 인터 프레임을 이용하여 상기 제 3 인터 영상을 발생하는 제 5 과정A fifth process of generating the third inter image by using the generated forward interframe and backward interframe 을 포함하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.Adaptive image deinterlacing method using a median filter comprising a. 제 11 항에 있어서,The method of claim 11, 상기 제 3 인터 영상은, 상기 생성된 정방향의 인터 프레임과 역방향의 인터 프레임을 대응하는 각 픽셀별로 가산한 후 각 픽셀의 평균값을 취한 영상인 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.And the third inter image is an image obtained by adding the generated inter frame in the forward direction and the reverse inter frame for each pixel and then taking the average value of each pixel. 제 9 항에 있어서,The method of claim 9, 상기 움직임 정보는, 움직임 벡터, 움직임 추정 블록의 크기, 움직임 탐색 영역의 크기 정보를 포함하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.The motion information includes a motion vector, a size of a motion estimation block, and size information of a motion search region. 제 9 항 또는 제 13 항에 있어서,The method according to claim 9 or 13, 상기 제 3 과정은, (N+M)×(N+M)의 움직임 탐색 영역 단위로 상기 인트라 영상 또는 최종 인터 영상을 선택하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.In the third process, the intra image or the final inter image is selected in units of (N + M) × (N + M) motion search regions. 제 9 항 또는 제 13 항에 있어서,The method according to claim 9 or 13, 상기 제 3 과정은, (N+M)×(N+M)의 움직임 탐색 영역의 라인수에 대응하는 다수의 라인 단위로 상기 인트라 영상 또는 최종 인터 영상을 선택하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.The third process may include selecting the intra image or the final inter image in units of a plurality of lines corresponding to the number of lines in the movement search region of (N + M) × (N + M). Adaptive Video Deinterlacing Method. 제 9 항 또는 제 13 항에 있어서,The method according to claim 9 or 13, 상기 제 3 과정은,The third process, 상기 움직임 정보에 의거하여 상기 인트라 영상 또는 최종 인터 영상의 출력 선택을 위한 계수 k를 산출하는 제 31 과정과,Calculating a coefficient k for output selection of the intra video or the last inter video based on the motion information; 상기 산출된 계수 k와 기 설정된 기준값을 비교하는 제 32 과정과,A thirty-second process of comparing the calculated coefficient k with a preset reference value; 상기 비교 결과에 의거하여, 상기 발생된 인트라 영상 또는 최종 인터 영상을 상기 디인터레이스 영상으로 선택하는 제 33 과정A thirty-third step of selecting the generated intra image or the final inter image as the deinterlaced image based on the comparison result; 을 포함하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.Adaptive image deinterlacing method using a median filter comprising a. 제 16 항에 있어서,The method of claim 16, 상기 계수 k는, 다음의 수학식과 같이 결정되는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.The coefficient k is determined according to the following equation, the adaptive image deinterlace method using a median filter. (상기 수학식에서, Vx는 x축상의 움직임 좌표 값을, Vy는 y축상의 움직임 좌표 값을, SR은 상기 움직임 탐색 영역의 크기에서 상기 움직임 추정 블록의 크기를 뺀 값을 2로 나눈 값을 각각 의미함)In the above equation, Vx is the motion coordinate value on the x-axis, Vy is the motion coordinate value on the y-axis, and SR is the value obtained by subtracting the size of the motion estimation block minus the size of the motion estimation block by 2, respectively. Means) 제 17 항에 있어서,The method of claim 17, 상기 방법은, 상기 계수 k가 기 설정된 기준값보다 적어도 클 때 상기 발생된 인트라 영상을 디인터레이스 영상으로 선택하는 것을 특징으로 하는 메디안 필터를 이용한 적응적인 영상 디인터레이스 방법.The method may further include selecting the generated intra image as a deinterlaced image when the coefficient k is at least greater than a predetermined reference value.
KR1020040033455A 2004-05-12 2004-05-12 Apparatus and method for de-interlacing adaptively field image by using median filter KR100616164B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020040033455A KR100616164B1 (en) 2004-05-12 2004-05-12 Apparatus and method for de-interlacing adaptively field image by using median filter

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020040033455A KR100616164B1 (en) 2004-05-12 2004-05-12 Apparatus and method for de-interlacing adaptively field image by using median filter

Publications (2)

Publication Number Publication Date
KR20050108235A true KR20050108235A (en) 2005-11-16
KR100616164B1 KR100616164B1 (en) 2006-08-25

Family

ID=37284440

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020040033455A KR100616164B1 (en) 2004-05-12 2004-05-12 Apparatus and method for de-interlacing adaptively field image by using median filter

Country Status (1)

Country Link
KR (1) KR100616164B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130101070A (en) * 2010-09-30 2013-09-12 미쓰비시덴키 가부시키가이샤 Motion-video encoding apparatus, motion-video decoding apparatus, motion-video encoding method, and motion-video decoding method

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130101070A (en) * 2010-09-30 2013-09-12 미쓰비시덴키 가부시키가이샤 Motion-video encoding apparatus, motion-video decoding apparatus, motion-video encoding method, and motion-video decoding method
KR20140106742A (en) * 2010-09-30 2014-09-03 미쓰비시덴키 가부시키가이샤 Image decoding device, image decoding method, image encoding device, and image encoding method
US10237550B2 (en) 2010-09-30 2019-03-19 Mitsubishi Electric Corporation Moving image encoding device, moving image decoding device, moving image coding method, and moving image decoding method
US10237551B2 (en) 2010-09-30 2019-03-19 Mitsubishi Electric Corporation Moving image encoding device, moving image decoding device, moving image coding method, and moving image decoding method
US10244233B2 (en) 2010-09-30 2019-03-26 Mitsubishi Electric Corporation Moving image encoding device, moving image decoding device, moving image coding method, and moving image decoding method
US10291939B2 (en) 2010-09-30 2019-05-14 Mitsubishi Electric Corporation Moving image encoding device, moving image decoding device, moving image coding method, and moving image decoding method

Also Published As

Publication number Publication date
KR100616164B1 (en) 2006-08-25

Similar Documents

Publication Publication Date Title
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
US6269484B1 (en) Method and apparatus for de-interlacing interlaced content using motion vectors in compressed video streams
KR101536794B1 (en) Image interpolation with halo reduction
EP0677958B1 (en) Motion adaptive scan conversion using directional edge interpolation
EP1515543A2 (en) Method and de-interlacing apparatus that employs recursively generated motion history maps
US20100309372A1 (en) Method And System For Motion Compensated Video De-Interlacing
JP2000134585A (en) Motion vector deciding method and method and circuit for number of frames of image signal conversion
JP2001285810A (en) Method and device for calculating motion vector
JPH08214317A (en) Method and apparatus for adaptive-and general-motion- controlled deinterlacement of sequential video field in post-processing
NL1027270C2 (en) The interlining device with a noise reduction / removal device.
KR20070094796A (en) Spatio-temporal adaptive video de-interlacing
EP1511311B1 (en) Method and system for de-interlacing digital images, and computer program product therefor
JPH02290383A (en) Television signal system converter with moving correction
KR20070030223A (en) Pixel interpolation
US20090219439A1 (en) System and Method of Deinterlacing Interlaced Video Signals to Produce Progressive Video Signals
KR100968642B1 (en) Method and interpolation device for calculating a motion vector, display device comprising the interpolation device, and computer program
KR100917933B1 (en) Image processor and image display apparatus provided with such image processor
US8165211B2 (en) Method and apparatus of de-interlacing video
CN111294545B (en) Image data interpolation method and device, storage medium and terminal
US20060176394A1 (en) De-interlacing of video data
Lin et al. Motion adaptive de-interlacing by horizontal motion detection and enhanced ela processing
KR100616164B1 (en) Apparatus and method for de-interlacing adaptively field image by using median filter
KR100726552B1 (en) Apparatus and method for de-interlacing adaptively field image by using motion
KR100624304B1 (en) Apparatus and method for de-interlacing adaptively field image by using motion
US7804542B2 (en) Spatio-temporal adaptive video de-interlacing for parallel processing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110801

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20120801

Year of fee payment: 7

LAPS Lapse due to unpaid annual fee