KR20190057911A - Display apparatus and controlling method thereof - Google Patents

Display apparatus and controlling method thereof Download PDF

Info

Publication number
KR20190057911A
KR20190057911A KR1020170155386A KR20170155386A KR20190057911A KR 20190057911 A KR20190057911 A KR 20190057911A KR 1020170155386 A KR1020170155386 A KR 1020170155386A KR 20170155386 A KR20170155386 A KR 20170155386A KR 20190057911 A KR20190057911 A KR 20190057911A
Authority
KR
South Korea
Prior art keywords
frame
fgmv
correction constant
motion
fallback
Prior art date
Application number
KR1020170155386A
Other languages
Korean (ko)
Other versions
KR102326163B1 (en
Inventor
홍종주
박상재
이웅원
이성규
Original Assignee
엘지디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지디스플레이 주식회사 filed Critical 엘지디스플레이 주식회사
Priority to KR1020170155386A priority Critical patent/KR102326163B1/en
Publication of KR20190057911A publication Critical patent/KR20190057911A/en
Application granted granted Critical
Publication of KR102326163B1 publication Critical patent/KR102326163B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/21Circuitry for suppressing or minimising disturbance, e.g. moiré or halo
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/144Movement detection
    • H04N5/145Movement estimation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

The present invention relates to a display device and a control method thereof. The control method of a display device comprises the following steps: determining a motion vector (MV) based on a motion change amount between frames of an image signal; determining a background region and a foreground region in the frames; calculating a correction constant which is an application ratio of a motion compensation (MC) and a fallback (FB) based on a difference between foreground region motion vectors (FGMV); and generating an insert frame by setting a ratio of the MC and the FB according to the correction constant.

Description

디스플레이장치 및 그 제어 방법{DISPLAY APPARATUS AND CONTROLLING METHOD THEREOF}[0001] DISPLAY APPARATUS AND CONTROLLING METHOD THEREOF [0002]

본 발명은 디스플레이장치 및 그 제어 방법에 관한 것이다.The present invention relates to a display device and a control method thereof.

액정표시장치의 액정셀들은 화소전극에 공급되는 데이터전압과 공통전극에 공급되는 공통전압의 전위차에 따라 투과율을 변화시킴으로써 화상을 표시한다. 액정표시장치는 하나의 이미지가 전체 프레임 주기 동안에 같은 RGB 휘도를 유지하며 디스플레이 되는 샘플 및 홀드 특성을 갖는다. 이러한 특성으로 인해, 액정표시장치를 통한 동영상 표시 시, 잔상(Image Sticking), 의사윤곽(False Contour) 또는 영상 흐려짐 현상(모션 블러, Motion Blur)(이하, 간단히 '잔상'이라 함)이 발생할 수 있다.Liquid crystal cells of a liquid crystal display display an image by changing the transmittance according to the potential difference between the data voltage supplied to the pixel electrode and the common voltage supplied to the common electrode. The liquid crystal display device has a sample and hold characteristic in which one image is displayed while maintaining the same RGB luminance for the entire frame period. Due to such characteristics, it is possible to cause image sticking, false contour, or motion blur (hereinafter simply referred to as 'after-image') at the time of displaying a moving image through the liquid crystal display device have.

디스플레이장치의 잔상을 감소시키기 위한 방법으로는 모션 추정/보상법(Motion Estimation and Motion Compensation, MEMC)이 널리 이용되고 있다. MEMC는 2개의 원 프레임 사이에 모션 추정(Motion Estimation) 및 모션 보상(Motion Compensation)에 따라 삽입될 인서트(insert) 프레임을 생성하여 삽입한다. 삽입된 인서트 프레임만큼 시간당 표시되는 프레임 수가 증가하여 프레임 레이트(frame rate)가 증가되므로 잔상을 감소시킬 수 있다. Motion estimation and motion compensation (MEMC) is widely used as a method for reducing a residual image of a display device. MEMC creates and inserts an insert frame to be inserted according to motion estimation and motion compensation between two original frames. The number of frames to be displayed per hour is increased by the inserted insert frame, and the frame rate is increased, so that the afterimage can be reduced.

모션 추정 및 보상 시에는 프레임 내 객체들의 모션 벡터를 추정하여 추정된 움직임 벡터에 따라 영상을 생성한다. 그런데, 영상의 특성에 따라 MEMC의 정확도는 낮아질 수 있으며 MEMC 정확도가 낮은 경우 화질이 열화되는 문제점이 있다. 이에, 영상의 특성에 따라 MEMC를 보완할 수 있는 기술 개발이 요구되고 있다.At the time of motion estimation and compensation, an image is generated according to the estimated motion vector by estimating a motion vector of objects in a frame. However, the accuracy of the MEMC can be lowered depending on the characteristics of the image, and the image quality is deteriorated when the MEMC accuracy is low. Therefore, it is required to develop a technology that can complement MEMC according to the characteristic of the image.

본 발명은 영상의 특성에 따라 MEMC를 보완하여 인서트 프레임을 생성함으로써 영상 특성에 따른 화질 열화를 방지할 수 있는 디스플레이장치 및 그 제어 방법을 제공한다.The present invention provides a display device and a control method thereof that can prevent deterioration of image quality according to image characteristics by complementing MEMC according to characteristics of an image to generate an insert frame.

본 발명의 디스플레이장치의 제어 방법은, 영상신호의 프레임들 간의 모션 변화량에 기초하여 모션 벡터(Motion Vector, MV)를 결정하는 단계; 상기 프레임에서 백그라운드(Background) 영역과 포어그라운드(Foreground) 영역을 판단하는 단계; 상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하는 단계; 및 상기 보정상수에 따라 상기 모션 보상(MC) 및 폴백(FB) 비율을 설정하여 인서트 프레임을 생성하는 단계;를 포함한다.A control method of a display apparatus of the present invention includes: determining a motion vector (MV) based on a motion variation amount between frames of a video signal; Determining a background region and a foreground region in the frame; Calculating a correction constant that is a ratio of application of motion compensation (MC) and fallback (FB) based on a difference between motion vectors (FGMV) of the foreground region; And generating an insert frame by setting the motion compensation (MC) and the fallback (FB) ratio according to the correction constant.

상기 프레임에서 백그라운드(Background) 영역과 포어그라운드(Foreground) 영역을 판단하는 단계는, 상기 프레임의 MV 블록들 중 빈도수가 기준 이상인 MV 블록들을 백그라운드 영역으로 판단하는 단계; 및 상기 백그라운드 영역의 MV와 기준 이상 차이가 발생하는 MV를 포함하는 영역을 포어그라운드 영역으로 판단하는 단계;를 포함할 수 있다.The step of determining a background region and a foreground region in the frame may include determining MV blocks having a frequency equal to or greater than a reference number of MV blocks of the frame as a background region; And determining, as a foreground region, a region including an MV in which a reference difference is generated between the MV of the background region and the reference region.

상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하는 단계는, 상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 클수록 상기 폴백의 적용 비율이 증가되도록 상기 보정상수를 산출하는 단계를 포함할 수 있다.The step of calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region, And calculating the correction constant such that the application ratio of the fallback increases as the difference between the FGMVs increases.

상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하는 단계는, 상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 작을수록 상기 모션 보상의 적용 비율이 증가되도록 상기 보정상수를 산출하는 단계를 포함할 수 있다.The step of calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region, And calculating the correction constant so that the application ratio of the motion compensation increases as the difference between the FGMVs decreases.

상기 보정상수는 0과 1 사이의 값을 가지며, 상기 보정상수가 0 또는 1이면 상기 모션 보상(MC) 또는 폴백(FB) 중 어느 하나만 적용하여 상기 인서트 프레임을 생성할 수 있다.The correction constant has a value between 0 and 1. If the correction constant is 0 or 1, the insert frame can be generated by applying either the motion compensation (MC) or the fallback (FB).

상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하는 단계는, 상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균값과 상기 평균값 및 상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균편차를 다음의 수식에 따라 산출하는 단계를 포함할 수 있다.The step of calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region, Calculating an average value of the FGMVs and the average value and an average deviation of the FGMVs of the foreground region according to the following equation.

평균값:

Figure pat00001
medium:
Figure pat00001

평균편차:

Figure pat00002
Average deviation:
Figure pat00002

상기 보정상수는 0과 1 사이의 값을 가지며 다음의 수식을 통해 산출될 수 있다.The correction constant has a value between 0 and 1 and can be calculated through the following equation.

보정상수:

Figure pat00003
Calibration constant:
Figure pat00003

dm1, dm2는 상수로서, dm1<dm2를 만족함dm1, dm2 are constants, satisfying dm1 <dm2

본 발명의 디스플레이장치는, 디스플레이 패널; 상기 디스플레이 패널에 표시될 영상신호를 수신하는 신호 입력부; 상기 신호 입력부로 수신된 신호에 대해서 영상신호를 분리하는 신호처리부; 및 상기 영상신호의 프레임들 간의 모션 변화량을 나타내는 모션 벡터(Motion Vector)에 기초하여 현재 프레임과 이전 프레임 사이에 삽입될 인서트 프레임을 생성하는 프레임 보상부를 포함한다. 상기 프레임 보상부는, 상기 프레임에서 백그라운드(Background) 영역과 포어그라운드(Foreground) 영역을 판단한 후, 상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하여 상기 보정상수에 따라 상기 인서트 프레임을 생성한다.A display device of the present invention includes: a display panel; A signal input unit receiving a video signal to be displayed on the display panel; A signal processor for separating a video signal from a signal received by the signal input unit; And a frame compensator for generating an insert frame to be inserted between a current frame and a previous frame based on a motion vector indicating a motion variation amount between frames of the video signal. The frame compensator determines a background region and a foreground region in the frame and then performs motion compensation based on a difference between motion vectors FGMV of the foreground region, Which is an application rate of the fallback (FB), and generates the insert frame according to the correction constant.

본 발명의 디스플레이장치 및 그 제어 방법은 포어그라운드(foreground) 영역의 모션 벡터(Motion Vector)의 분포를 분석하여 영상의 특성을 판단하고, 판단 결과에 따라 MEMC 및 폴백(Fallback)의 비중을 조절하여 인서트 프레임을 생성한다. 이에, 영상의 특성에 따라 화질 열화가 발생하는 현상을 방지할 수 있다.The display apparatus and the control method thereof according to the present invention analyze the distribution of a motion vector of a foreground region to determine characteristics of the image and adjust the weight of the MEMC and the fallback according to the determination result Create an insert frame. Thus, it is possible to prevent the image quality from deteriorating due to the characteristics of the image.

도 1은 본 발명의 실시예에 따른 디스플레이장치의 구성을 개략적으로 도시한 블록도이다.
도 2 내지 도 4는 MEMC의 개념을 설명하기 위한 도면이다.
도 5는 도 1에 도시된 프레임 보상부를 상세히 보여 주는 블록도이다.
도 6은 본 발명의 실시예에 따른 MEMC가 적용된 영상 처리방법의 흐름도이다.
도 7은 본 발명의 MEMC 적용을 위한 보정상수 산출방법의 흐름도이다.
도 8은 도 7의 보정상수의 특성을 나타낸 함수이다.
도 9 내지 도 13은 비교 예에 따른 MEMC 방법 적용 시 영상 표시 상태와 본 발명의 실시예에 따른 MEMC 방법 적용 시의 영상 표시 상태를 비교하여 도시한 도면이다.
1 is a block diagram schematically showing a configuration of a display device according to an embodiment of the present invention.
Figs. 2 to 4 are views for explaining the concept of the MEMC.
5 is a detailed block diagram of the frame compensator shown in FIG.
6 is a flowchart of an image processing method using MEMC according to an embodiment of the present invention.
7 is a flowchart of a correction constant calculation method for MEMC application of the present invention.
FIG. 8 is a function showing the characteristic of the correction constant in FIG.
FIGS. 9 to 13 are views showing the image display state when the MEMC method according to the comparative example is compared with the image display state according to the MEMC method according to the embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. BRIEF DESCRIPTION OF THE DRAWINGS The advantages and features of the present invention and the manner of achieving them will become apparent with reference to the embodiments described in detail below with reference to the accompanying drawings. It should be understood, however, that the invention is not limited to the disclosed embodiments, but is capable of many different forms and should not be construed as limited to the embodiments set forth herein. Rather, these embodiments are provided so that this disclosure will be thorough and complete, To fully disclose the scope of the invention to those skilled in the art, and the invention is only defined by the scope of the claims.

본 발명의 실시예를 설명하기 위한 도면에 개시된 형상, 크기, 비율, 각도, 개수 등은 예시적인 것이므로 본 발명이 도시된 사항에 한정되는 것은 아니다. 명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다. 또한, 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 본 명세서 상에서 언급된 '포함한다', '갖는다', '이루어진다' 등이 사용되는 경우 ' ~ 만'이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성 요소를 단수로 표현한 경우에 특별히 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함한다. The shapes, sizes, ratios, angles, numbers, and the like disclosed in the drawings for describing the embodiments of the present invention are illustrative, and thus the present invention is not limited thereto. Like reference numerals refer to like elements throughout the specification. In the following description, well-known functions or constructions are not described in detail since they would obscure the invention in unnecessary detail. Where the terms "comprises", "having", "done", and the like are used in this specification, other portions may be added unless "only" is used. Unless the context clearly dictates otherwise, including the plural unless the context clearly dictates otherwise.

구성 요소를 해석함에 있어서, 별도의 명시적 기재가 없더라도 오차 범위를 포함하는 것으로 해석한다.In interpreting the constituent elements, it is construed to include the error range even if there is no separate description.

위치 관계에 대한 설명일 경우, 예를 들어, ' ~ 상에', ' ~ 상부에', ' ~ 하부에', ' ~ 옆에' 등으로 두 부분의 위치 관계가 설명되는 경우, '바로' 또는 '직접'이 사용되지 않는 이상 두 부분 사이에 하나 이상의 다른 부분이 위치할 수도 있다. In the case of a description of the positional relationship, for example, if the positional relationship between two parts is described as 'on', 'on top', 'under', and 'next to' Or &quot; direct &quot; is not used, one or more other portions may be located between the two portions.

제1, 제2 등이 다양한 구성요소들을 서술하기 위해서 사용될 수 있으나, 이 구성요소들은 이들 용어에 의해 제한되지 않는다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있다.The first, second, etc. may be used to describe various components, but these components are not limited by these terms. These terms are used only to distinguish one component from another. Therefore, the first component mentioned below may be the second component within the technical spirit of the present invention.

본 발명의 여러 실시예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.It is to be understood that each of the features of the various embodiments of the present invention may be combined or combined with each other partially or wholly and technically various interlocking and driving are possible and that the embodiments may be practiced independently of each other, It is possible.

이하 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예들을 상세히 설명한다. 명세서 전체에 걸쳐서 동일한 참조번호들은 실질적으로 동일한 구성요소들을 의미한다. 이하의 설명에서, 본 발명과 관련된 공지 기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우, 그 상세한 설명을 생략한다. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Reference will now be made in detail to the preferred embodiments of the present invention, examples of which are illustrated in the accompanying drawings. Like reference numerals throughout the specification denote substantially identical components. In the following description, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.

도 1은 본 발명의 실시예에 따른 디스플레이장치의 구성을 개략적으로 도시한 블록도이다.1 is a block diagram schematically showing a configuration of a display device according to an embodiment of the present invention.

도 1을 참조하면, 본 발명의 실시예에 따른 디스플레이 장치는, 신호입력부(100), 신호처리부(110), 프레임 보상부(120) 및 디스플레이 패널(140)을 포함할 수 있다.Referring to FIG. 1, a display apparatus according to an exemplary embodiment of the present invention may include a signal input unit 100, a signal processing unit 110, a frame compensation unit 120, and a display panel 140.

신호입력부(100)는 외부로부터 입력되는 신호를 수신하여 출력한다. 이를 위해, 안테나 또는 케이블 등을 통해 수신되는 방송 신호 중 사용자가 선택한 채널의 신호를 튜닝하기 위한 튜너(tuner) 또는 다양한 외부 소스(source)로부터 신호를 수신하기 위한 AV 단자, S-Video 단자, 컴포넌트(component) 단자 또는 PC 입력을 위한 PC-Signal 단자 등을 포함할 수 있다.The signal input unit 100 receives a signal input from the outside and outputs the signal. To this end, a tuner for tuning a signal of a channel selected by a user among broadcast signals received through an antenna or a cable, an AV terminal for receiving a signal from various external sources, an S-Video terminal, a component terminal for a PC input or a PC-signal terminal for a PC input.

신호처리부(110)는 신호수신부(110)로부터 출력되는 신호를 디멀티플렉싱(demultiplexing)하여 영상 신호와 음성 신호로 분리하고, 상기 분리된 영상 신호를 상기 디스플레이 패널(140)에서 표시 가능한 신호로 디코딩(decoding)하는 등, 상기 수신된 신호에 대래 소정의 처리를 수행할 수 있다.The signal processing unit 110 demultiplexes a signal output from the signal receiving unit 110 into a video signal and a voice signal and decodes the separated video signal into a signal that can be displayed on the display panel 140 decoding the received signal, and perform predetermined processing for the received signal.

디스플레이 패널(140)은 신호처리부(110)로부터 출력되는 영상 신호에 따라 영상을 디스플레이하며, 예를 들어 디스플레이 패널(140)은 LCD(Liquid Crystal Display Device) 패널일 수 있다. LCD 패널은 백라이트 유닛으로부터 제공되는 광을 사용하여 화상을 표시할 수 있으며, 이를 위해, LCD 패널은 액정층 및 상기 액정층을 사이에 두고 서로 대향하는 TFT 기판 및 컬러 필터 기판을 포함할 수 있다. 그러나, 본 발명은 상기한 바와 같은 액정 디스플레이 장치에 한정되지 않으며, 그 밖에 PDP(Plasma Display Panel), ELD(Electro Luminescent Display), VFD(Vacuum Fluorescent Display)등 여러 디스플레이 장치에 적용될 수 있다.The display panel 140 displays an image according to a video signal output from the signal processing unit 110. For example, the display panel 140 may be a liquid crystal display device (LCD) panel. The LCD panel can display an image using light provided from a backlight unit. To this end, the LCD panel may include a liquid crystal layer and a TFT substrate and a color filter substrate facing each other with the liquid crystal layer interposed therebetween. However, the present invention is not limited to the above-described liquid crystal display device, and can be applied to various display devices such as a plasma display panel (PDP), an electro luminescent display (ELD), and a vacuum fluorescent display (VFD).

프레임 보상부(120)는 연속하는 현재 프레임(frame)과 이전 프레임 사이에 새로운 인서트(insert) 프레임을 삽입하여 프레임 레이트를 증가시킴으로써 화질을 개선시킬 수 있다. 예컨대, 60Hz의 영상 신호, 즉 초당 60개의 프레임들을 포함하는 영상 신호가 입력되는 경우, 각 프레임 사이에 1개씩 인서트 프레임을 삽입함으로써 디스플레이 패널(140)에서 표시되는 영상의 프레임 레이트를 120Hz로 증가시킬 수 있고, 각 프레임 사이에 2개씩 인서트 프레임들을 삽입하는 경우 디스플레이 패널(140)에서 표시되는 영상의 프레임 레이트는 240Hz로 증가시킬 수 있다.The frame compensator 120 may enhance the picture quality by increasing the frame rate by inserting a new insert frame between the consecutive current frame and the previous frame. For example, when a video signal of 60 Hz, that is, a video signal including 60 frames per second is input, the frame rate of an image displayed on the display panel 140 is increased to 120 Hz by inserting an insert frame into each frame The frame rate of the image displayed on the display panel 140 can be increased to 240 Hz when two insert frames are inserted between each frame.

프레임 보상부(120)는 인서트 프레임 생성을 위해 MEMC와 폴백(fallback, FB)을 적용할 수 있다. MEMC는 블록 단위의 모션 추정(Motion Estimation, 이하 ME라 함)을 통해 모션 벡터(motion vector, 이하 MV라 함)를 결정하고, MV에 기초하여 모션 보상(Motion Compensation, 이하 MC라 함)을 수행함으로써 인서트 프레임을 생성하는 방법이다. 폴백(FB)은 이전 프레임을 그대로 복사하여 인서트 프레임을 생성하는 방법이다. The frame compensator 120 may apply fallback (FB) and MEMC to generate an insert frame. The MEMC determines a motion vector (hereinafter referred to as MV) through a block-based motion estimation (ME) and performs motion compensation (hereinafter referred to as MC) based on the MV Thereby generating an insert frame. The fallback (FB) is a method of generating an insert frame by copying the previous frame as it is.

본 발명의 프레임 보상부(120)는 ME를 통해 결정된 MV에 기초하여 백그라운드(background, BG) 및 포어그라운드(foreground, FG) 영역을 추출하고, 포어그라운드(FG) 영역에서의 MV 특성에 따라 인서트 프레임 생성시 적용할 MC와 FB의 적용 비율을 결정한다. 포어그라운드(FG)의 움직임이 적거나 일정한 영상에서는 MV가 대체적으로 일정한 값으로 균일하게 분포한다. 따라서, ME의 정확도가 높으므로 인서트 프레임 생성 시 MC의 비율을 높이는 것이 화질 개선에 도움이 된다. 반면, 포어그라운드(FG)의 움직임이 복잡한 영상에서는 ME의 정확도가 떨어지므로 인서트 프레임 생성 시 FB의 비율을 높이는 것이 화질 개선에 도움이 된다. The frame compensator 120 of the present invention extracts a background area BG and a foreground area FG based on the MV determined through the ME, Determine the application ratio of MC and FB to be applied when generating the frame. MV is uniformly distributed at a constant value in a case where the motion of the foreground (FG) is small or constant. Therefore, since the accuracy of ME is high, it is helpful to improve the image quality by increasing the MC ratio at the time of insert frame generation. On the other hand, since the accuracy of the ME is lowered in the case where the motion of the foreground (FG) is complicated, raising the FB ratio at the time of insert frame generation helps improve the image quality.

백그라운드(BG) 영역은 MV 블록의 분포 등을 이용하여 다양한 방법을 적용하여 판별할 수 있다. 또한, 영상의 특성에 따라 백그라운드(BG) 영역의 MV는 다양한 값을 가질 수 있다. 예컨대, 백그라운드(BG)의 영상이 정지에 가까운 경우, 백그라운드(BG)의MV는 고르게 0에 가깝게 판별되고, 포어그라운드(FG) 영역은 영상 특성에 따라 MV가 판별된다. The background (BG) region can be discriminated by applying various methods using the distribution of MV blocks and the like. Also, depending on the characteristics of the image, the MV of the background (BG) region may have various values. For example, when the image of the background BG is close to the stop, the MV of the background BG is uniformly discriminated to be close to 0, and the foreground (FG) region is discriminated by the image characteristic.

포어그라운드(FG)의 움직임이 적거나 일정한 영상에서는 MV가 대체적으로 일정한 값으로 균일하게 분포하고 포어그라운드(FG)의 움직임이 복잡할 수록 MV의 크기 및 분포가 불규칙하게 분포한다. 따라서, 포어그라운드(FG)의 MV의 분포가 상대적으로 균일할 경우 MC의 비율을 높이고 불균일할 경우 FB의 비율을 높여 인서트 프레임을 생성함으로써, 영상의 특성에 따라 화질 열화가 발생하는 현상을 방지할 수 있다.In the case where the motion of the foreground (FG) is small or constant, the MV is uniformly distributed at a constant value and the motion of the foreground (FG) becomes complicated, so that the size and distribution of the MV are irregularly distributed. Therefore, if the distribution of the MVs of the foreground (FG) is relatively uniform, the ratio of the MC is increased. If the distribution of the MVs is non-uniform, the ratio of the FB is increased to generate the insert frame. .

도 2 내지 도 4는 MEMC의 기본 개념을 설명하기 위한 도면이다.FIGS. 2 to 4 are views for explaining the basic concept of the MEMC.

도 2를 참조하면, MEMC는 복수의 Input 원본 영상을 이용하여 인서트 프레임(MEMC intermediate frame) 영상을 획득하는 기술이다. 입력 영상은 (a), (b), (c) 프레임을 포함할 수 있다. 각 프레임들 사이에 (a-b) 프레임과 (b-c) 프레임을 삽입함으로써 프레임 레이트를 증가시킬 수 있으며, 이로 인해 블러를 감소시킬 수 있다.Referring to FIG. 2, the MEMC is a technique for acquiring an insert frame (MEMC intermediate frame) image using a plurality of input original images. The input image may include frames (a), (b), and (c). The frame rate can be increased by inserting the frame (a-b) and the frame (b-c) between each frames, thereby reducing the blur.

인서트 프레임인 (a-b) 프레임과 (b-c) 프레임을 영상을 획득하는 과정에서 Input 원본 영상들 간의 움직임을 나타내는 MV를 구하는 과정을 ME라고 하고, MV와 원본 영상을 이용해 인서트 프레임을 출력하는 과정을 모션 보상(motion compensation, MC) 이라고 한다. 예컨대, (a) 프레임에 표시된 오브젝트(Object)는 (b) 프레임에서는 다른 위치에 표시될 수 있다. 이에, (a) 프레임과 (b) 프레임 간의 MV를 산출하여 인서트 프레임인 (a-b)에서 오브젝트(Object)의 위치가 연속성을 가질 수 있도록 영상을 생성하는 과정을 MC라 한다.The process of obtaining the MV representing the motion between the input original images in the process of acquiring the images of the insert frame (ab) frame and the (bc) frame is referred to as ME, and the process of outputting the insert frame using MV and the original image is referred to as motion It is called motion compensation (MC). For example, (a) an object (Object) displayed in a frame may be displayed at another position in the (b) frame. The process of calculating the MV between the frame (a) and the frame (b) and generating an image so that the position of the object in the insert frame (a-b) has continuity is referred to as an MC.

도 3은 모션 추정(Motion Estimation, ME)방법을 설명하기 위한 도면이다.3 is a diagram for explaining a motion estimation (ME) method.

모션 추정(Motion Estimation)방법으로는, 블록 매칭(block matching) 방법, 3-D recursive search 방법, hierarchical search 방법, MAP 적용 방법 등 다양한 방법이 있다. 이하 실시예에서는 블록 매칭 방법을 이용하여 MV를 결정하는 경우를 예시하기로 한다. 그러나, 본 발명의 MV 추정부(200)는 블록 매칭 방법 이외에도 다양한 방법으로 MV를 결정할 수 있다. As a motion estimation method, there are various methods such as a block matching method, a 3-D recursive search method, a hierarchical search method, and a MAP application method. Hereinafter, a case will be exemplified in which MV is determined using a block matching method. However, the MV estimation unit 200 of the present invention can determine MVs by various methods other than the block matching method.

도 3을 참조하면, 본 발명의 실시예에 따른 블록 매칭 방법은, 8x8 pixel을 하나의 MV block 단위로 하며, 각각의 block에서는 [t]-frame에서 [t+1]-frame으로의 영상의 움직임을 수평, 수직 방향의 값의 형태로 MV를 저장한다. 즉, MV=(mv_x, mv_y)로 표시될 수 있다. 블록 매칭은 [t]-frame에서의 영상 정보(휘도, RGB 등)와 코스트(cost)가 가장 낮은 값을 가지는 위치에서의 [t+1]-frame에서의 영상 정보를 구하는 과정이며, 코스트(Cost)는 일반적으로 sum of absolute difference (SAD) 등을 가장 널리 사용한다. SAD는 블록 내에 포함하는 모든 pixel의 영상 정보 차이의 절대값으로 정의될 수 있다. 즉, 현재 프레임 데이터의 블록을 기준으로 하여 이전 프레임 데이터의 블록을 한 픽셀씩 이동해 가며 유사도를 절대차 합(Sum of Absolute Difference, SAD)으로 구하고, 그 절대차 합(SAD)에 기초하여 MV를 산출한다. MV는 블록 단위로 현재 프레임 데이터와 이전 프레임 데이터 사이에서 객체의 움직임 방향 및 속도를 지시할 수 있다.Referring to FIG. 3, a block matching method according to an embodiment of the present invention includes 8x8 pixels as one MV block unit. In each block, a block of [t] -frame to [t + 1] Motion is stored in the form of values in horizontal and vertical directions. That is, MV = (mv_x, mv_y). Block matching is a process of obtaining image information in [t + 1] -frame at a position having the lowest value of image information (luminance, RGB, and the like) and cost in [t] Cost) generally uses the sum of absolute difference (SAD). The SAD can be defined as the absolute value of the difference of the image information of all the pixels included in the block. That is, the block of the previous frame data is shifted by one pixel on the basis of the block of the current frame data, and the similarity is obtained by a sum of absolute difference (SAD), and MV is calculated based on the absolute difference . The MV may indicate the direction and speed of movement of the object between the current frame data and the previous frame data on a block-by-block basis.

블록 매칭을 [t]-frame을 기준으로 구한 값을 MV0, [t+1]-frame을 기준으로 구한 값을 MV1, MV2 등으로 표현할 수 있으며, ME는 일반적으로 [t], [t+1]-frame을 포함하여 복수의 프레임을 기준으로 구한 MV를 모두 포함할 수 있다.MV can be expressed by MV1, MV2, etc. based on MV0 and [t + 1] -frame, where [t] and [t + 1] ] -frame and MVs obtained based on a plurality of frames.

이에, 도 4에 도시된 바와 같이, MV0는 [t]-frame 원본 영상을 기준으로 [t-1]-frame으로의 MV로 정의될 수 있다. MV1는 [t]-frame 원본 영상을 기준으로 [t+1]-frame으로의 MV로 정의될 수 있다. MV2는 [t+1]-frame 원본 영상을 기준으로 [t]-frame으로의 MV로 정의될 수 있다.Thus, as shown in FIG. 4, MV0 can be defined as MV to [t-1] -frame based on the [t] -frame original image. MV1 can be defined as MV to [t + 1] -frame based on the [t] -frame original image. MV2 can be defined as MV to [t] -frame based on the [t + 1] -frame original image.

본 발명의 프레임 보상부(120)는 [t-1]-frame, [t]-frame, [t+1]-frame 사이에는 각각 인서트 프레임(MCI)을 삽입하여 프레임 레이트를 증가시킬 수 있다. 프레임 보상부(120)는 MV0, MV1, MV2에 기초하여 MC를 수행하거나, 이전의 원본 프레임을 그대로 인용하는 FB를 수행함으로써 인서트 프레임(MCI)을 생성할 수 있다.The frame compensator 120 of the present invention may increase the frame rate by inserting an insert frame MCI between [t-1] -frame, [t] -frame, and [t + 1] -frame, respectively. The frame compensator 120 may generate an insert frame (MCI) by performing an MC based on MV0, MV1, and MV2, or by performing an FB that cites a previous original frame as it is.

도 5는 도 1에 도시된 프레임 보상부(120)를 상세히 보여 주는 블록도이다.FIG. 5 is a detailed block diagram of the frame compensator 120 shown in FIG.

프레임 보상부(120)는 연속하는 현재 프레임과 이전 프레임 사이에 새로운 인서트 프레임을 삽입할 수 있다. 이러한 기능을 수행하기 위해, 프레임 보상부(120)는, MV 추정부(200), 보정상수 산출부(210), 움직임 보상부(214) 및 폴백부(220)를 포함한다.The frame compensator 120 may insert a new insert frame between the consecutive current frame and the previous frame. In order to perform such a function, the frame compensator 120 includes an MV estimator 200, a correction constant calculator 210, a motion compensator 214 and a pollbacker 220.

MV 추정부(200)는 ME를 통해 MV를 결정한다. ME는 일반적으로 블록 매칭(block matching) 방법, 3-D recursive search 방법, hierarchical search 방법, MAP 적용 방법 등 다양한 방법이 있다. The MV estimator 200 determines MV through ME. There are various methods such as block matching method, 3-D recursive search method, hierarchical search method, and MAP application method.

움직임 보상부(214)는 MC 모드 선택 시 활성화된다. 움직임 보상부(214)는 MV 추정부(200)에서 결정된 MV와 원본 영상에 기초하여 인서트 프레임을 생성한다.The motion compensation unit 214 is activated when the MC mode is selected. The motion compensation unit 214 generates an insert frame based on the MV determined by the MV estimator 200 and the original image.

폴백부(220)는 폴백 모드 수행 시 활성화된다. 원본 이미지를 이용하여 인서트 프레임을 생성한다. The pole back unit 220 is activated in the fallback mode. Create an insert frame using the original image.

보정상수 산출부(210)는 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(MC)과 폴백(FB)의 적용 비율인 보정상수를 산출한다. 보정상수는 포어그라운드(FG)의 MV의 분포가 상대적으로 균일할 경우 MC의 비율을 높이고, 불균일할 경우 FB의 비율을 높이도록 설정된다. The correction coefficient calculator 210 calculates a correction constant, which is an application ratio of the motion compensation MC and the fallback FB, based on the difference between the motion vectors FGMV of the foreground regions. The correction constant is set to increase the ratio of MC when the distribution of the MV of the foreground (FG) is relatively uniform, and to increase the ratio of FB when the distribution is non-uniform.

이미지 생성부(240)는 보정상수 산출부(210)에서 산출된 보정상수에 따라 움직임 보상부(220) 및 폴백부(230)를 통해 생성된 인서트 프레임은 원본 프레임 사이에 삽입되어 원본 이미지보다 프레임 레이트가 증가된 이미지가 디스플레이 패널(140)에 표시될 수 있다.The image generating unit 240 inserts insert frames generated through the motion compensating unit 220 and the poll unit 230 according to the correction constants calculated by the correction constant calculating unit 210, The rate-increased image can be displayed on the display panel 140. [

이러한 구성을 갖는 본 발명의 실시예에 따른 프레임 보상부(120)는 포어그라운드(FG)의 MV의 분포가 상대적으로 균일할 경우 MC의 비율을 높이고, 불균일할 경우 FB의 비율을 높여 인서트 프레임을 생성할 수 있다. 이에, MEMC의 정확도가 높은 영상에 대해서는 MC의 비율을 높여 화질 저하를 완화시키고 MEMC의 정확도가 낮은 영상에 대해서는 FB의 비율을 높여 화질 저하를 완화시킬 수 있다.The frame compensator 120 according to an embodiment of the present invention having such a configuration increases the ratio of the MC when the distribution of the MVs of the foreground FG is relatively uniform and increases the ratio of the FBs when the distribution is non- Can be generated. Therefore, for images with high MEMC accuracy, the image quality degradation can be improved by increasing the ratio of MC, and the image quality degradation can be alleviated by increasing the FB ratio for images with low MEMC accuracy.

도 6은 본 발명의 실시예에 따른 MEMC가 적용된 영상 처리방법의 흐름도이다.6 is a flowchart of an image processing method using MEMC according to an embodiment of the present invention.

도 6을 참조하면, 복수의 프레임을 포함하는 영상이 입력되면(IMG IN)(S110), 프레임들 간의 모션 변화량에 기초하여 MV를 결정하는 ME를 수행한다(S112).Referring to FIG. 6, when an image including a plurality of frames is input (IMG IN) (S110), an ME for determining an MV based on a motion variation amount between frames is performed (S112).

ME를 통해 MV가 출력되면, MV와 입력 영상을 이용하여 MC 과정을 수행함으로써 출력 영상(mci)을 획득한다(S114).When the MV is outputted through the ME, an output image mci is obtained by performing the MC process using the MV and the input image (S114).

하지만 MEMC의 정확도가 낮을 경우를 대비하여 FB 과정이 추가된다(S116). FB에서는 MV의 정확도를 판단하여 입력 영상(IMG_IN)과 mci의 비중인 w0를 결정한다. w0는 화면의 영역별로, 프레임 별로 다른 값을 가질 경우 로컬 비중(local weight)라고 하고, 화면 영역별로는 동일한 값을 가지고 프레임 별로만 다른 값을 가질 경우 글로벌 비중(global weight)라고 한다. 본 발명에서는 이를 모두 포함할 수 있다. However, the FB process is added in case the accuracy of the MEMC is low (S116). FB determines the accuracy of the MV and determines the weight w0 of the input image (IMG_IN) and mci. w0 is referred to as a local weight when the frame has different values for each frame, and is referred to as a global weight if the frame has the same value and has different values only for each frame. But the present invention can include all of them.

w0가 0에 가까울 수록 MV의 정확도가 높아 mci의 비중이 올라가고, w0가 1에 가까울 수록 MV의 정확도가 낮아 입력 영상(IMG_IN)의 비중이 올라간다. 이때, w0는 일반적으로(기존 기술) MV의 정확도에만 기반하여 결정되는데, 영상의 종류에 따라 w0 값이 동일할 경우 FB의 성능이 저하되는 문제가 발생 할 수 있다. 따라서 영상 종류에 따라 w0값을 보정하기 위한 보정상수 α를 구하는 영상판단 방법(S118)이 추가된다.The closer the w0 is to 0, the higher the accuracy of the MV, and the closer the w0 is to 1, the lower the accuracy of the MV and the higher the weight of the input image (IMG_IN). In this case, w0 is generally determined only based on the accuracy of the MV (existing technology). If the w0 value is the same depending on the type of the image, the performance of the FB may deteriorate. Accordingly, an image determination method (S118) for obtaining a correction constant? For correcting the w0 value according to the image type is added.

인서트 프레임이 생성되는 단계(S120)에서는, MV의 정확도에 따라 FB가 결정한 로컬 게인(w0)과 영상 판단에 따라 결정된 보정상수 α를 곱한다. 이 후, 최종 게인인 w는 입력 영상(IMG_IN)에 곱해지고, MC 결과에는 1-w(S122)가 곱해져 최종 출력(IMG OUT)이 결정된다.In step S120 of generating the insert frame, the local gain w0 determined by the FB is multiplied by the correction constant? Determined according to the image determination according to the accuracy of the MV. Thereafter, the final gain w is multiplied by the input image IMG_IN, and the MC result is multiplied by 1-w (S122) to determine the final output IMG OUT.

본 발명은 ME를 통해 결정된 MV에 기초하여 백그라운드(BG) 및 포어그라운드(FG) 영역을 추출하고, 포어그라운드(FG) 영역에서의 MV 특성에 따라 인서트 프레임 생성시 적용할 MC와 폴백(FB)의 적용 비율을 결정한다. 백그라운드(BG) 영역은 정지된 상태이므로 MV가 고르게 0으로 판별되고, 포어그라운드(FG) 영역은 영상 특성에 따라 MV가 판별된다. The present invention extracts a background (BG) and a foreground (FG) region based on MV determined through ME, and calculates MC and fallback (FB) to be applied when generating an insert frame according to MV characteristics in a foreground (FG) Is determined. Since the background region (BG) is in the stopped state, the MV is uniformly determined as 0, and the foreground (FG) region is determined according to the image characteristic.

포어그라운드(FG)의 움직임이 적거나 일정한 영상에서는 MV가 대체적으로 일정한 값으로 균일하게 분포한다. 이러한 영상의 경우 MV의 정확도가 높게 나타날 뿐만 아니라 MEMC의 저더 감소효과(de-judder)도 높게 나타난다. 따라서, MC의 비율을 높이고 FB의 비중은 낮게 설정되어야 한다.MV is uniformly distributed at a constant value in a case where the motion of the foreground (FG) is small or constant. In these images, MV accuracy is high and de-judder of MEMC is also high. Therefore, the ratio of MC should be increased and the specific gravity of FB should be set low.

반면, 포어그라운드(FG)의 움직임이 복잡한 영상에서는 백그라운드(BG) 영역은 MV는 균일하게 분포하지만, 포어그라운드(FG) 영역은 크기 및 방향이 불규칙한 MV가 분포한다. 이러한 영상의 경우 MV의 정확도가 떨어지므로 인서트 프레임 생성 시 FB의 비율을 높이는 것이 화질 개선에 도움이 된다. On the other hand, in the image where the motion of the foreground (FG) is complicated, the MV is uniformly distributed in the background (BG) region, but the MV having the irregular size and direction is distributed in the foreground (FG) region. Since the accuracy of the MV is lowered in such an image, increasing the FB ratio at the time of insert frame generation helps to improve the image quality.

도 7은 본 발명의 MEMC 적용을 위한 보정상수 α의 산출방법의 흐름도로서, 도 6의 S118단계에 적용될 수 있다. 보정상수 α는 MC와 FB의 비율을 결정하는 상수로서, 포어그라운드(FG) 영역에 해당하는 MV의 분포에 따라 결정될 수 있다. 이하 설명에서는 백그라운드(BG)와 포어그라운드(FG)를 판별하고 포어그라운드(FG)의 MV 분포에 따라 영상을 판별하는 과정을 상세히 설명한다.FIG. 7 is a flowchart of a method of calculating a correction constant? For application of the MEMC of the present invention, and may be applied to step S118 of FIG. The correction constant alpha is a constant that determines the ratio of MC to FB and can be determined according to the distribution of MVs corresponding to the foreground (FG) region. In the following description, the process of discriminating the background BG and the foreground FG and determining the image according to the MV distribution of the foreground FG will be described in detail.

도 7을 참조하면, 먼저 MV를 이용해 BGMV를 추출하고(S214), 이를 메모리에 저장한다(S216). BGMV(배경 영역의 MV)는 전체 MV 블록들 중에서 빈도수가 가장 높은 MV를 선택하는 방법, 백그라운드(BG) 영역으로 추정되는 영역의 MV를 추출하는 방법, MV를 클러스터링(clustering)하는 방법 등 다양한 방법들이 있다. 백그라운드(BG) 영역이 정지상태에 가까울 경우 MV는 고르게 0에 가깝게 판별된다. 이하, 본 실시예에서는 백그라운드(BG) 영역이 움직임이 적은 경우를 예시하여 백그라운드(BG) 영역으로 추정되는 영역의 MV를 추출하는 방법을 예시로 적용하였으나, 이를 한정하지는 않는다.Referring to FIG. 7, BGMV is first extracted using MV (S214) and stored in a memory (S216). The BGMV (MV in the background region) can be divided into various methods such as a method of selecting the MV having the highest frequency among the entire MV blocks, a method of extracting the MV of the region estimated in the background (BG) region, a method of clustering MV . When the background (BG) region is close to the stop state, MV is uniformly determined to be close to zero. Hereinafter, a method of extracting the MV of a region estimated as a background region (BG) is exemplified by exemplifying a case where the background (BG) region has less motion, but the present invention is not limited thereto.

MV와 t-3에서의 BGMV를 이용해 포어그라운드(FG)영역을 추출하고(S218), 이를 메모리에 저장한다(S220). 화면 전체의 MV 중에서 BGMV와 일정 크기 이상 차이가 발생하는 MV를 갖는 영역을 포어그라운드(FG) 영역으로 판단할 수 있다. 여기서, BGMV를 구하기 위해서는 화면 전체의 MV를 모두 읽어야 하므로, 이전 프레임에서 구한 BGMV값을 이용하는 것도 가능하다.The foreground (FG) region is extracted using MV and BGMV at t-3 (S218) and stored in the memory (S220). It is possible to determine an area having MV having a difference of BGMV more than a predetermined size among the MVs of the entire screen as a foreground (FG) area. Here, in order to obtain BGMV, it is necessary to read all the MVs on the entire screen, and therefore it is also possible to use the BGMV values obtained in the previous frame.

MV와 t-2에서의 포어그라운드(FG)영역과 FGMV 평균을 추출하고(S222), 이를 메모리에 저장한다(S224). FGMV의 평균은 포어그라운드(FG) 영역에 해당하는 MV들의 평균을 구하는 것이다. 포어그라운드(FG) 영역을 구하기 위해서는 화면 전체의 MV값들을 읽어야 하므로, 이전 프레임에서 구한 포어그라운드(FG) 영역을 이용하여 구하는 것도 가능하다. MV들의 평균을 구하는 수식은 다음과 같이 나타낼 수 있다.The foreground (FG) region and the FGMV average in MV and t-2 are extracted (S222) and stored in the memory (S224). The average of the FGMV is to average the MVs corresponding to the foreground (FG) region. In order to obtain the foreground (FG) area, it is necessary to read the MV values of the entire screen. Therefore, it is also possible to use the foreground (FG) area obtained from the previous frame. The formula for the average of MVs can be written as

평균값:

Figure pat00004
medium:
Figure pat00004

MV와 t-1에서의 포어그라운드(FG) 영역의 MV 평균을 이용하여 FGMV 편차 평균을 추출하고(S226), 이를 메모리에 저장한다(S228). FGMV 평균 편차는 FG영역에서 FGMV의 평균과 각각의 MV의 차이의 절대값을 다시 평균한 값이다. FGMV 평균을 구하기 위해서는 화면 전체의 MV값들을 읽어야 하므로, 이전 프레임에서 구한 FGMV의 평균을 이용하여 구하는 것도 가능하다. FGMV 평균 편차를 구하는 수식은 다음과 같이 나타낼 수 있다.The MV average and the MV average of the foreground (FG) region at t-1 are extracted (S226) and stored in the memory (S228). The FGMV average deviation is the average of the FGMV average and the absolute value of the difference between the MVs in the FG region. In order to obtain the FGMV average, it is necessary to read the MV values of the entire screen. Therefore, it is also possible to obtain the average value of the FGMV obtained from the previous frame. The formula for obtaining the FGMV average deviation can be expressed as follows.

평균편차:

Figure pat00005
Average deviation:
Figure pat00005

최종적으로, FGMV 편차 평균을 이용하여 보정상수 α를 산출할 수 있다(S230). 보정상수 α는 폴백(FB) 비중 w0를 보정하여 최종 폴백(FB) 비중 w를 구하게 된다. 즉, "w = w0*α"로 나타낼 수 있다. 보정상수 α는 폴백 비중 w0만으로 반영되지 않은 포어그라운드(FG) 영역의 MV 분포도를 반영하는데 있으므로, 0보다 크거나 같고 1보다 작거나 같은 상수 값을 가질 수 있다.Finally, the correction constant alpha can be calculated using the FGMV deviation average (S230). The correction constant? Corrects the fall back (FB) specific gravity w0 to obtain the final fallback (FB) specific gravity w. That is, it can be expressed as " w = w0 * alpha ". Since the correction constant? Reflects the MV distribution of the foreground (FG) region that is not reflected only by the fallback specific gravity w0, it may have a constant value that is greater than or equal to 0 and less than or equal to 1.

"w = w0*α"의 관계를 가지므로 α가 1일 경우 w0의 값은 그대로 유지되고, α가 0일 경우 w0값 또한 0으로 산출되므로 폴백은 수행되지 않는다. 이러한 보정상수 α는 아래와 같은 수식을 이용하여 산출될 수 있다.the value of w0 is maintained when? is 1, and the value of w0 is also calculated when? is 0, so that the fallback is not performed. The correction constant? Can be calculated using the following equation.

보정상수

Figure pat00006
Correction constant
Figure pat00006

상기 수식에서, DM은 FGMV의 평균편차이고, dm1 및 dm2는 DM에 따라 설정되는 상수이다. 최종 산출결과인 보정상수 α의 최종값은 0과 1 사이의 값을 갖도록 생략(truncation)된다. 결과적으로 도 8에 도시된 바와 같이, 보정상수 α는 선형 함수의 형태를 갖게 된다. In the above equation, DM is an average deviation of FGMV, and dm1 and dm2 are constants set according to DM. The final value of the correction constant a, which is the final calculation result, is truncated to have a value between 0 and 1. As a result, as shown in FIG. 8, the correction constant? Has a form of a linear function.

포어그라운드(FG)의 MV가 불규칙한 움직임을 갖는 경우 보정상수 α는 1에 가깝게 설정되며, 결과적으로 FB의 비중이 높아진다. 포어그라운드(FG)의 MV가 불규칙한 움직임을 갖는 영상의 경우 폴백(FB)의 비중을 높임으로써 MEMC의 오차로 인해 화질이 저하되는 현상을 완화시킬 수 있다.When the MV of the foreground FG has an irregular motion, the correction constant? Is set close to 1, and consequently the specific gravity of the FB is increased. In the case of an image in which the MV of the foreground (FG) has irregular motion, the phenomenon of degradation of image quality due to the error of the MEMC can be alleviated by increasing the weight of the fallback (FB).

반면, 포어그라운드(FG)의 MV가 규칙적인 움직임을 갖는 경우 보정상수 α는 0에 가깝게 설정되며, 결과적으로 MC의 비중이 높아진다. 포어그라운드(FG)의 MV가 규칙적인 움직임을 갖는 영상의 경우 MC의 비중을 높임으로써 MEMC의 저더 감소 효과(de-judder)를 유지 혹은 향상시킬 수 있다.On the other hand, when the MV of the foreground FG has a regular motion, the correction constant? Is set to be close to 0, and consequently the weight of the MC is increased. In the case of an image in which the motion of the foreground (FG) has regular motion, the de-judder of the MEMC can be maintained or improved by increasing the weight of the MC.

도 9 내지 도 13은 비교 예에 따른 MEMC 방법 적용 시 영상 표시 상태와 본 발명의 실시예에 따른 MEMC 방법 적용 시의 영상 표시 상태를 비교하여 도시한 도면이다.FIGS. 9 to 13 are views showing the image display state when the MEMC method according to the comparative example is compared with the image display state according to the MEMC method according to the embodiment of the present invention.

도 9는 본 발명의 실시예에 따른 폴백(FB) 동작을 나타낸 표이다. 도 9에 도시된 바와 같이, 본 발명은 case1에서는 폴백(FB)을 오프하고 case2에서는 폴백(FB)을 온하여 영상의 변화를 관찰할 수 있다. 9 is a table showing a fallback (FB) operation according to an embodiment of the present invention. As shown in Fig. 9, the present invention can observe a change in an image by turning off fallback (FB) in case 1 and turning on fallback (FB) in case 2.

이에 반해, 종래기술인 비교 예의 경우 case1과 case2가 모두 ON이거나(표에서 A에 해당) 또는 모두 OFF로 동작(표에서 C에 해당)한다. Case1에서 ON, case2에서 OFF인 경우는 (표에서 B에 해당) MEMC의 효과도 얻지 못하고 폴백(FB)의 효과도 얻지 못하는 worst case이다. 각 case에 따라 본 발명이 폴백(FB) 동작 유무에 따라 어떻게 달라지는지 도 10 내지 도 13을 통해 살펴본다.On the other hand, in the comparative example of the prior art, case 1 and case 2 are both ON (corresponding to A in the table) or all OFF (corresponding to C in the table). In case 1, ON and case 2 are OFF (corresponding to B in the table), it is a worst case in which the effect of MEMC is not obtained and the effect of fallback (FB) is not obtained. How the present invention varies depending on the presence or absence of a fallback (FB) operation according to each case will be described with reference to FIGS. 10 to 13. FIG.

도 10a는 BGMV와 FGBMV가 모두 균일한 분포를 나타내는 경우를 예시한 것으로서, 이상적인 인서트 프레임(MCI)은 각 영상을 정확한 위치에 표시할 수 있다.FIG. 10A illustrates a case where both BGMV and FGBMV exhibit a uniform distribution, and an ideal insert frame (MCI) can display each image at an accurate position.

도 10b는 BGMV와 FGBMV가 모두 균일한 분포를 나타내는 경우 실제 MV와 영상을 도시한 것이다. 이상적 MV와 실제 MV가 동일하므로 MEMC가 효과적으로 동작할 수 있다. 따라서, 폴백(FB) 기능은 오프(OFF)되어야 한다.FIG. 10B shows an actual MV and an image when both BGMV and FGBMV exhibit a uniform distribution. Since the ideal MV and the actual MV are the same, the MEMC can operate effectively. Therefore, the fallback (FB) function must be turned off.

도 11a는 BGMV와 FGBMV가 모두 균일한 분포를 나타내는 영상에 본 발명을 적용하기 전 폴백(FB) 기능을 온한 경우 MV와 영상을 도시한 것이다. 즉, FGMV 균일성 분석이 없어서 fallback ON으로 동작 할 경우로서, 도 10a의 이상적인 MCI와는 다르게, 도 11a의 인서트 프레임(MCI)의 영상에는 오차가 발생한다. 이에, MEMC의 효과가 감소한다. FIG. 11A shows an MV and an image when a fallback (FB) function is turned on before applying the present invention to an image in which both BGMV and FGBMV exhibit a uniform distribution. That is, when there is no FGMV uniformity analysis and fallback is ON, an error occurs in the image of the insert frame (MCI) of FIG. 11A unlike the ideal MCI of FIG. 10A. Thus, the effect of the MEMC is reduced.

도 11b는 BGMV와 FGMV가 모두 균일한 분포를 나타내는 영상에, 본 발명을 적용한 경우 MV와 영상을 도시한 것이다. 본 발명을 적용하면 FGMV의 균일성을 분석한 후 폴백(FB)의 온/오프를 결정하므로, 도 11a와 같은 상황이라면 폴백(FB)기능이 오프된다. 결과적으로 폴백(FB) 없이 MEMC만 동작하므로 인서트 프레임(MCI)은 각 영상을 정확한 위치에 표시할 수 있다. 따라서, MEMC가 효과적으로 동작할 수 있다.FIG. 11B shows an MV and an image when the present invention is applied to an image showing a uniform distribution of both BGMV and FGMV. When the present invention is applied, the on / off state of the fallback (FB) is determined after analyzing the uniformity of the FGMV. Therefore, in the situation as shown in FIG. 11A, the fallback function is turned off. As a result, only the MEMC operates without the fallback (FB), so the insert frame (MCI) can display each image at the correct position. Therefore, the MEMC can operate effectively.

도 12a는 FGMV가 불규칙한 분포를 나타내는 영상에서, 이상적인 MV와 그에 따른 인서트 프레임(MCI)의 영상을 도시한 것이다. 이상적인 인서트 프레임(MCI)에는 각 영상이 정확한 위치에 표시된다.12A shows an image of an ideal MV and a resulting insert frame (MCI) in an image showing an irregular distribution of FGMV. In the ideal insert frame (MCI), each image is displayed in the correct position.

도 12b는 실제 MV와 영상을 도시한 것이다. FGMV가 불규칙한 분포를 가지므로, 중앙의 원과 네모는 [t → t+1] 과정에서 크기가 변화하여 정확한 값을 찾지 못하고 인접한 위치로 잘못된 값을 구하게 된다. 이때 BGMV는 균일한 분포를 나타내지만, FGMV는 불균일한 분포를 갖기 때문에 MEMC의 정확도가 떨어지게 된다. 이와 같이, FGMV의 균일성이 떨어질 경우 본 발명은 폴백(FB) 모드로 동작한다.12B shows an actual MV and an image. Since the FGMV has irregular distribution, the center circle and the square change in size during the [t → t + 1] process, and the correct value can not be found and an incorrect value is obtained at the adjacent position. At this time, BGMV shows a uniform distribution, but since the FGMV has a non-uniform distribution, the accuracy of the MEMC is lowered. Thus, when the uniformity of the FGMV falls, the present invention operates in the fallback (FB) mode.

도 13a는 FGMV가 불규칙한 분포를 나타내는 영상에 본 발명을 적용하기 전 폴백(FB) 기능을 오프한 경우 MV와 영상을 도시한 것이다. 즉, MEMC의 정확도가 떨어지는 영상에서 MV 균일성 분석이 없어서 폴백(FB) 오프로 동작할 경우로서, 인서트 프레임(MCI)의 영상에는 오차가 발생한다. 이에, MEMC의 효과가 감소한다. 13A shows an MV and an image when the FGMV turns off the fallback (FB) function before applying the present invention to an image showing an irregular distribution. That is, an error occurs in the image of the insert frame (MCI) when the MPC operates with the fallback (FB) off because there is no analysis of the MV uniformity in the image with low accuracy. Thus, the effect of the MEMC is reduced.

도 13b는 FGMV가 불규칙한 분포를 나타내는 영상에 본 발명을 적용한 경우 MV와 영상을 도시한 것이다. 본 발명을 적용하면 FGMV의 균일성을 분석한 후 폴백(FB)의 온/오프를 결정하므로, 도 12b와 같은 상황이라면 폴백(FB)기능이 온된다. 결과적으로 이상적인 MCI가 생성된 도 12a와는 차이가 있지만 그와 유사한 MCI가 생성되어 도 12b와 비교하였을 때 효과적으로 MEMC의 오차를 보상할 수 있다.FIG. 13B shows an MV and an image when the present invention is applied to an image in which the FGMV shows irregular distribution. When the present invention is applied, the on / off state of the fallback (FB) is determined after analyzing the uniformity of the FGMV. Therefore, in the situation as shown in FIG. 12B, the fallback function is turned on. As a result, although an ideal MCI is generated differently from FIG. 12A, a similar MCI is generated, and the MEMC error can be effectively compensated when compared with FIG. 12B.

이상 설명한 바와 같이, 본 발명은 화면 전체적인 움직임은 크지 않거나 일정한 반면, 영상의 특정 영역에서 정확도가 낮거나 MV의 균일도가 일정하지 않은 영상에서 효과적이다. As described above, the present invention is effective in an image in which the motion of the entire screen is not large or constant, while the accuracy is low in a specific region of the image or the uniformity of the MV is not constant.

본 발명은 FG영역의 MV 분포도 특성을 이용하여 영상을 구분하고, 각 영상 특성에 맞는 MEMC 또는 폴백(FB)의 비중을 결정함으로써 MEMC의 저더감소 효과(de-judder)를 향상시키는 한편, MEMC의 정확도 저하로 인한 화질 저하 현상을 동시에 개선할 수 있다. 이러한 본 발명은 특정 MEMC 알고리즘에 한정되지 않고 MEMC 수행을 위한 다양한 방식의 알고리즘에 대하여 광범위하게 적용될 수 있다.The present invention improves the de-judder of the MEMC by distinguishing the images using the MV distribution characteristic of the FG region and determining the specific gravity of MEMC or fallback (FB) corresponding to each image characteristic, It is possible to simultaneously improve the picture quality deterioration due to the decrease in the accuracy. The present invention is not limited to a specific MEMC algorithm but can be widely applied to various types of algorithms for performing MEMC.

이상 설명한 내용을 통해 당업자라면 본 발명의 기술사상을 일탈하지 아니하는 범위에서 다양한 변경 및 수정이 가능함을 알 수 있을 것이다. 따라서, 본 발명의 기술적 범위는 명세서의 상세한 설명에 기재된 내용으로 한정되는 것이 아니라 특허 청구의 범위에 의해 정하여져야만 할 것이다.It will be apparent to those skilled in the art that various modifications and variations can be made in the present invention without departing from the spirit or scope of the invention. Therefore, the technical scope of the present invention should not be limited to the contents described in the detailed description of the specification, but should be defined by the claims.

100 : 신호 입력부 110 : 신호 처리부
120 : 프레임 보상부 140 : 디스플레이 패널
100: signal input unit 110: signal processing unit
120: frame compensator 140: display panel

Claims (14)

영상신호의 프레임들 간의 모션 변화량에 기초하여 모션 벡터(Motion Vector, MV)를 결정하는 단계;
상기 프레임에서 백그라운드(Background) 영역과 포어그라운드(Foreground) 영역을 판단하는 단계;
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하는 단계; 및
상기 보정상수에 따라 상기 모션 보상(MC) 및 폴백(FB) 비율을 설정하여 인서트 프레임을 생성하는 단계;
를 포함하는 디스플레이 장치의 제어방법.
Determining a motion vector (MV) based on a motion variation amount between frames of the video signal;
Determining a background region and a foreground region in the frame;
Calculating a correction constant that is a ratio of application of motion compensation (MC) and fallback (FB) based on a difference between motion vectors (FGMV) of the foreground region; And
Generating an insert frame by setting the motion compensation (MC) and the fallback (FB) ratio according to the correction constant;
And controlling the display device.
제1항에 있어서,
상기 프레임에서 백그라운드 영역과 포어그라운드 영역을 판단하는 단계는,
상기 프레임의 MV 블록들 중 빈도수가 기준 이상인 MV 블록들을 백그라운드 영역으로 판단하는 단계; 및
상기 백그라운드 영역의 MV와 기준 이상 차이가 발생하는 MV를 포함하는 영역을 포어그라운드 영역으로 판단하는 단계;
를 포함하는 디스플레이 장치의 제어방법.
The method according to claim 1,
Determining a background region and a foreground region in the frame includes:
Determining MV blocks having a frequency equal to or higher than a reference frequency among MV blocks of the frame as a background region; And
Determining an area including a MV in which a reference difference exists between the MV of the background area and the reference area as a foreground area;
And controlling the display device.
제1항에 있어서,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(MC)과 폴백(FB)의 적용 비율인 보정상수를 산출하는 단계는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 클수록 상기 폴백(FB)의 적용 비율이 증가되도록 상기 보정상수를 산출하는 단계를 포함하는 디스플레이 장치의 제어방법.
The method according to claim 1,
Calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region,
And calculating the correction constant such that the application ratio of the fallback (FB) increases as the difference between the motion vectors (FGMV) of the foreground region increases.
제1항에 있어서,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(MC)과 폴백(FB)의 적용 비율인 보정상수를 산출하는 단계는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 작을수록 상기 모션 보상(MC)의 적용 비율이 증가되도록 상기 보정상수를 산출하는 단계를 포함하는 디스플레이 장치의 제어방법.
The method according to claim 1,
Calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region,
And calculating the correction constant so that the application ratio of the motion compensation (MC) increases as the difference between the motion vectors (FGMV) of the foreground region is smaller.
제1항에 있어서,
상기 보정상수는 0과 1 사이의 값을 가지며, 상기 보정상수가 0 또는 1이면 상기 모션 보상(MC) 또는 폴백(FB) 중 어느 하나만 적용하여 상기 인서트 프레임을 생성하는 디스플레이 장치의 제어방법.
The method according to claim 1,
Wherein the correction constant has a value between 0 and 1, and when the correction constant is 0 or 1, the insert frame is generated by applying either the motion compensation (MC) or the fallback (FB).
제1항에 있어서,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(MC)과 폴백(FB)의 적용 비율인 보정상수를 산출하는 단계는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균값과 상기 평균값 및 상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균편차를 다음의 수식에 따라 산출하는 단계를 포함하는 디스플레이 장치의 제어방법.
평균값:
Figure pat00007

평균편차:
Figure pat00008
The method according to claim 1,
Calculating a correction constant, which is an application ratio of motion compensation (MC) and fallback (FB), based on a difference between motion vectors (FGMV) of the foreground region,
Calculating an average value of the motion vector (FGMV) of the foreground region and an average deviation of the average value and the motion vector (FGMV) of the foreground region according to the following equation.
medium:
Figure pat00007

Average deviation:
Figure pat00008
제6항에 있어서,
상기 보정상수는 0과 1 사이의 값을 가지며 다음의 수식을 통해 산출되는 디스플레이 장치의 제어방법.
보정상수:
Figure pat00009

dm1, dm2는 상수로서, dm1<dm2를 만족함
The method according to claim 6,
Wherein the correction constant has a value between 0 and 1 and is calculated through the following equation.
Calibration constant:
Figure pat00009

dm1, dm2 are constants, satisfying dm1 <dm2
디스플레이 패널;
상기 디스플레이 패널에 표시될 영상신호를 수신하는 신호 입력부;
상기 신호 입력부로 수신된 신호에 대해서 영상신호를 분리하는 신호처리부; 및
상기 영상신호의 프레임들 간의 모션 변화량을 나타내는 모션 벡터(Motion Vector)에 기초하여 현재 프레임과 이전 프레임 사이에 삽입될 인서트 프레임을 생성하는 프레임 보상부를 포함하고,
상기 프레임 보상부는,
상기 프레임에서 백그라운드(Background) 영역과 포어그라운드(Foreground) 영역을 판단한 후, 상기 포어그라운드 영역의 모션 벡터(FGMV)들 간 차이에 기초하여 모션 보상(Motion Compensation, MC)과 폴백(Fallback, FB)의 적용 비율인 보정상수를 산출하여 상기 보정상수에 따라 상기 인서트 프레임을 생성하는 디스플레이 장치.
A display panel;
A signal input unit receiving a video signal to be displayed on the display panel;
A signal processor for separating a video signal from a signal received by the signal input unit; And
And a frame compensator for generating an insert frame to be inserted between a current frame and a previous frame based on a motion vector indicating a motion variation amount between frames of the video signal,
Wherein the frame compensator comprises:
(MC) and a fallback (FB) based on a difference between motion vectors (FGMV) of the foreground region after determining a background region and a foreground region in the frame, And the insert frame is generated according to the correction constant.
제8항에 있어서,
상기 프레임 보상부는,
상기 프레임의 MV 블록들 중 빈도수가 기준 이상인 MV 블록들을 백그라운드 영역으로 판단하고, 상기 백그라운드 영역의 MV와 기준 이상 차이가 발생하는 MV를 포함하는 영역을 포어그라운드 영역으로 판단하는 디스플레이 장치.
9. The method of claim 8,
Wherein the frame compensator comprises:
And determines an MV block having a frequency equal to or greater than a reference number as a background area and an MV including a MV with a reference abnormal difference as a foreground area.
제8항에 있어서,
상기 프레임 보상부는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 클수록 상기 폴백(FB)의 적용 비율이 증가되도록 상기 보정상수를 산출하는 디스플레이 장치.
9. The method of claim 8,
Wherein the frame compensator comprises:
And calculates the correction constant so that the application ratio of the fallback (FB) increases as the difference between the motion vectors (FGMV) of the foreground region increases.
제8항에 있어서,
상기 프레임 보상부는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들 간의 차이가 작을수록 상기 모션 보상(MC)의 적용 비율이 증가되도록 상기 보정상수를 산출하는 디스플레이 장치.
9. The method of claim 8,
Wherein the frame compensator comprises:
And calculates the correction constant so that the application ratio of the motion compensation (MC) increases as the difference between the motion vectors (FGMV) of the foreground region is smaller.
제8항에 있어서,
상기 보정상수는 0과 1 사이의 값을 가지며, 상기 보정상수가 0 또는 1이면 상기 모션 보상(MC) 또는 폴백(FB) 중 어느 하나만 적용하여 상기 인서트 프레임을 생성하는 디스플레이 장치.
9. The method of claim 8,
Wherein the correction constant has a value between 0 and 1, and when the correction constant is 0 or 1, only the motion compensation (MC) or fallback (FB) is applied to generate the insert frame.
제8항에 있어서,
상기 프레임 보상부는,
상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균값과 상기 평균값 및 상기 포어그라운드 영역의 모션 벡터(FGMV)들의 평균편차를 다음의 수식에 따라 산출하는 디스플레이 장치.
평균값:
Figure pat00010

평균편차:
Figure pat00011
9. The method of claim 8,
Wherein the frame compensator comprises:
And calculates an average value of the motion vector (FGMV) of the foreground region and an average deviation of the average value and the motion vector (FGMV) of the foreground region according to the following equation.
medium:
Figure pat00010

Average deviation:
Figure pat00011
제13항에 있어서,
상기 보정상수는 0과 1 사이의 값을 가지며 다음의 수식을 통해 산출되는 디스플레이 장치.
보정상수:
Figure pat00012

dm1, dm2는 상수로서, dm1<dm2를 만족함
14. The method of claim 13,
Wherein the correction constant has a value between 0 and 1 and is calculated through the following equation.
Calibration constant:
Figure pat00012

dm1, dm2 are constants, satisfying dm1 <dm2
KR1020170155386A 2017-11-21 2017-11-21 Display apparatus and controlling method thereof KR102326163B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170155386A KR102326163B1 (en) 2017-11-21 2017-11-21 Display apparatus and controlling method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170155386A KR102326163B1 (en) 2017-11-21 2017-11-21 Display apparatus and controlling method thereof

Publications (2)

Publication Number Publication Date
KR20190057911A true KR20190057911A (en) 2019-05-29
KR102326163B1 KR102326163B1 (en) 2021-11-16

Family

ID=66672998

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170155386A KR102326163B1 (en) 2017-11-21 2017-11-21 Display apparatus and controlling method thereof

Country Status (1)

Country Link
KR (1) KR102326163B1 (en)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090007437A (en) * 2006-04-13 2009-01-16 퀄컴 인코포레이티드 Selective video frame rate upconversion
JP2009200760A (en) * 2008-02-21 2009-09-03 Sony Corp Image processing apparatus and method, program, and storage medium
JP2009239726A (en) * 2008-03-27 2009-10-15 Toshiba Corp Interpolated image generating apparatus, method, and program
KR20100044984A (en) * 2008-10-23 2010-05-03 삼성전자주식회사 Apparatus and method for improving frame rate using motion trajectory
JP2011182193A (en) * 2010-03-01 2011-09-15 Toshiba Corp Interpolation frame generating apparatus and method

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090007437A (en) * 2006-04-13 2009-01-16 퀄컴 인코포레이티드 Selective video frame rate upconversion
JP2009200760A (en) * 2008-02-21 2009-09-03 Sony Corp Image processing apparatus and method, program, and storage medium
JP2009239726A (en) * 2008-03-27 2009-10-15 Toshiba Corp Interpolated image generating apparatus, method, and program
KR20100044984A (en) * 2008-10-23 2010-05-03 삼성전자주식회사 Apparatus and method for improving frame rate using motion trajectory
JP2011182193A (en) * 2010-03-01 2011-09-15 Toshiba Corp Interpolation frame generating apparatus and method

Also Published As

Publication number Publication date
KR102326163B1 (en) 2021-11-16

Similar Documents

Publication Publication Date Title
US8441468B2 (en) Image display apparatus
US7936950B2 (en) Apparatus for creating interpolation frame
US8963998B2 (en) Full reference system for predicting subjective quality of three-dimensional video
US9049336B2 (en) Auto-detect method for detecting image format and playback method applying the same
US20080069478A1 (en) Apparatus, method, and computer program product for displaying image
US20080123743A1 (en) Interpolated frame generating method and interpolated frame generating apparatus
US7796191B1 (en) Edge-preserving vertical interpolation
EP1804488A2 (en) Motion estimator and motion method
EP1811454A2 (en) Edge area determining apparatus and edge area determining method
US20190356895A1 (en) Method and apparatus for processing an image property map
US8345070B2 (en) Apparatus and method for frame rate up conversion
TWI407776B (en) Image generating device, static text detecting device and method thereof
US20060285595A1 (en) Intermediate vector interpolation method and three-dimensional (3D) display apparatus performing the method
TW200945904A (en) Image interpolation with halo reduction
US20050190843A1 (en) Image block error concealing apparatus and method in mobile communication system
US20080063308A1 (en) Frame interpolating circuit, frame interpolating method, and display apparatus
US20150208025A1 (en) Video Processing Method and Apparatus
KR102326163B1 (en) Display apparatus and controlling method thereof
KR102404389B1 (en) Display apparatus and controlling method thereof
JP2009182865A (en) Image display device and method, image processor, and image processing method
KR102279495B1 (en) Display apparatus and controlling method thereof
US11741570B2 (en) Image processing device and image processing method of same
US10091455B2 (en) Apparatus and method for frame rate conversion
US20200195881A1 (en) Image processing method and associated image processing circuit
US20080063067A1 (en) Frame interpolating circuit, frame interpolating method, and display apparatus

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant