KR20180031476A - 영상 처리 방법 및 이를 이용한 표시 장치 - Google Patents

영상 처리 방법 및 이를 이용한 표시 장치 Download PDF

Info

Publication number
KR20180031476A
KR20180031476A KR1020160120169A KR20160120169A KR20180031476A KR 20180031476 A KR20180031476 A KR 20180031476A KR 1020160120169 A KR1020160120169 A KR 1020160120169A KR 20160120169 A KR20160120169 A KR 20160120169A KR 20180031476 A KR20180031476 A KR 20180031476A
Authority
KR
South Korea
Prior art keywords
motion vector
foreground
background
area
region
Prior art date
Application number
KR1020160120169A
Other languages
English (en)
Inventor
홍종주
Original Assignee
엘지디스플레이 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지디스플레이 주식회사 filed Critical 엘지디스플레이 주식회사
Priority to KR1020160120169A priority Critical patent/KR20180031476A/ko
Publication of KR20180031476A publication Critical patent/KR20180031476A/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/269Analysis of motion using gradient-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/194Segmentation; Edge detection involving foreground-background segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/254Analysis of motion involving subtraction of images

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

영상 처리 방법 및 이를 이용한 표시 장치가 제공된다. 영상 처리 방법은 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터(motion vector)를 수신하는 단계, 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 단계, 및 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장하는 단계를 포함한다. 본 발명의 일 실시예에 따른 영상 처리 방법은 전경과 배경이 혼재한 블록에 전경 움직임 벡터를 포함하는 전경 영역을 확장함으로써, 전경과 배경의 경계에서 이미지가 깨지는 현상을 저감시킬 수 있다.

Description

영상 처리 방법 및 이를 이용한 표시 장치{IMAGE PROCESSING METHOD AND DISPLAY DEVICE USING THE SAME}
본 발명은 영상 처리 방법 및 이를 이용한 표시 장치에 관한 것으로서, 보다 상세하게는 표시 장치의 화질을 향상시킬 수 있는 영상 처리 방법 및 이를 이용한 표시 장치에 관한 것이다.
모바일폰, 타블렛, 노트북 컴퓨터, 텔레비전 및 모니터와 같은 다양한 전자 디바이스에 평면 패널 표시 장치(flat panel display; FPD)가 채용되고 있다. 최근에는 FPD로서 액정 표시 장치(Liquid Crystal Display Device; LCD), 유기 발광 다이오드 표시 장치(Organic Light Emitting Diode Display; OLED) 등이 사용되고 있다. 이와 같은 표시 장치는 영상이 표시되고 복수의 화소로 이루어진 화소 어레이와 복수의 화소 각각에서 광이 투과되거나 발광되도록 제어하는 구동회로를 포함한다. 표시 장치의 구동회로는 화소 어레이의 데이터 라인들에 데이터 신호를 공급하는 데이터 구동회로, 데이터 신호에 동기되는 게이트 신호(또는 스캔 신호)를 화소 어레이의 게이트 라인들(또는 스캔 라인)에 순차적으로 공급하는 게이트 구동회로(또는 스캔 구동회로) 및 데이터 구동회로와 게이트 구동회로를 제어하는 타이밍 콘트롤러 등을 포함한다.
최근 표시 장치에서는 영상 매체 간의 호환성을 향상시키고 영상을 보다 자연스럽게 출력할 수 있도록 프레임율 변환(Frame Rate Up Conversion) (이하, FRUC라 함)이 사용되고 있다. 여기서, FRUC는 입력 영상의 프레임(frame) 사이에 보간 영상(interpolation image)을 삽입하여 입력 영상의 프레임율(frame rate)를 상승시키는 기술이다.
기존의 FRUC에서는 입력 영상의 프레임을 단순 반복하거나 인접한 두 프레임의 평균값을 두 프레임 사이에 삽입하는 방법이 사용되었다. 이와 같이 기존의 FRUC를 통해서는 출력 영상이 끊어지거나 희미해지는 문제점이 발생하여 화질이 저하되었다.
최근 FRUC는 입력 영상에서 프레임 사이의 움직임을 추정하고, 프레임 사이에 추정된 움직임에 기초하여 보간 영상을 삽입한다. 구체적으로, 최근 FRUC에서는 인접하는 프레임으로부터 움직임을 추정하여 움직임 벡터(Motion Vector)가 추출되고, 움직임 벡터를 이용하여 프레임 사이에 보간 영상이 삽입된다.
보간 영상을 생성하기 위해서 움직임 벡터를 이용하는 FRUC는 블록을 기초로 움직임을 추정하는 방식이 사용될 수 있다. 구체적으로, 영상의 프레임 각각을 일정한 크기의 블록으로 분할하고, 분할된 블록을 기초로 인접한 프레임 사이에서 가장 유사한 블록을 찾아 벡터로 연결함으로써, 프레임 사이에서 움직임이 추정되고 움직임 벡터가 결정될 수 있다.
다만, 하나의 블록은 전경(foreground) 및 배경(background)을 모두 포함할 수 있으며, 전경과 배경이 서로 다른 방향으로 움직이는 경우 움직임 벡터가 부정확하게 추출될 수 있다. 이에, 부정확한 움직임 벡터로 인해 전경 영역의 화질이 저하되는 문제점이 발생한다.
[관련기술문헌]
1. 동영상 신호의 프레임율을 증가 변환하기 위한 장치 및 그 방법(한국공개특허번호 제 10-2013-0031132 호)
이에, 본 발명이 해결하고자 하는 과제는 전경과 배경이 혼재된 블록에서 전경 움직임 벡터를 포함하는 전경 영역을 확장할 수 있는 영상 처리 방법 및 이를 이용한 표시 장치를 제공하는 것이다.
또한, 본 발명이 해결하고자 하는 다른 과제는 전경 영역을 확장함으로써, 전경 영역에서의 화질을 향상시킬 수 있는 영상 처리 방법 및 이를 이용한 표시 장치를 제공하는 것이다.
본 발명의 과제들은 이상에서 언급한 과제들로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 일 실시예에 따른 영상 처리 방법은 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터(motion vector)를 수신하는 단계, 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 단계, 및 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장하는 단계를 포함한다. 본 발명의 일 실시예에 따른 영상 처리 방법은 전경과 배경이 혼재한 블록에 전경 움직임 벡터를 포함하는 전경 영역을 확장함으로써, 전경과 배경의 경계에서 이미지가 깨지는 현상을 저감시킬 수 있다.
전술한 바와 같은 과제를 해결하기 위하여 본 발명의 다른 실시예에 따른 표시 장치는 표시 패널, 및 표시 패널에 입력되는 영상을 처리하는 영상 처리부를 포함한다. 영상 처리부는, 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터를 수신하는 움직임 벡터 수신부, 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 전경 영역 결정부, 및 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장하는 전경 영역 확장부를 포함한다. 본 발명의 다른 실시예에 따른 표시 장치는 전경 영역을 확장함으로써, 배경 영역에서의 플리커 현상 및 전경의 번짐 현상을 저감시킬 수 있다.
기타 실시예의 구체적인 사항들은 상세한 설명 및 도면들에 포함되어 있다.
본 발명은 전경과 배경이 혼재한 블록에 전경 움직임 벡터를 포함하는 전경 영역을 확장함으로써, 전경과 배경의 경계에서 이미지가 깨지는 현상을 저감시킬 수 있는 영상 처리 방법 및 이를 이용한 표시 장치를 제작할 수 있다.
또한, 본 발명은 전경 영역을 확장함으로써, 배경 영역에서의 플리커 현상 및 전경의 번짐 현상을 저감시킬 수 있는 영상 처리 방법 및 이를 이용한 표시 장치를 제작할 수 있다.
또한, 본 발명은 전경 영역을 확장함으로써, 화질 향상을 위한 비용을 저감시킬 수 있는 영상 처리 방법 및 이를 이용한 표시 장치를 제작할 수 있다.
본 발명에 따른 효과는 이상에서 예시된 내용에 의해 제한되지 않으며, 더욱 다양한 효과들이 본 명세서 내에 포함되어 있다.
도 1은 본 발명의 일 실시예에 따른 표시 장치를 개략적으로 나타내는 블록도이다.
도 2는 본 발명의 일 실시예에 따른 영상 처리부를 개략적으로 나타내는 블록도이다.
도 3은 본 발명의 일 실시예에 따른 영상 처리 방법에 따라 영상을 처리하는 절차를 도시한 것이다.
도 4는 본 발명의 일 실시예에 따른 영상에서 배경 영역을 개략적으로 나타낸 것이다.
도 5는 본 발명의 일 실시예에 따른 전경 영역을 결정하는 과정을 예시적으로 도시한 것이다.
도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 전경 영역을 확장하는 과정을 예시적으로 도시한 것이다.
도 7은 본 발명의 일 실시예에 따라 전경 영역을 확장한 결과를 예시적으로 도시한 것이다.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.
본 발명의 실시예를 설명하기 위한 도면에 개시된 형상, 크기, 비율, 각도, 개수 등은 예시적인 것이므로 본 발명이 도시된 사항에 한정되는 것은 아니다. 또한, 본 발명을 설명함에 있어서, 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명은 생략한다. 본 명세서 상에서 언급된 '포함한다', '갖는다', '이루어진다' 등이 사용되는 경우 '~만'이 사용되지 않는 이상 다른 부분이 추가될 수 있다. 구성요소를 단수로 표현한 경우에 특별히 명시적인 기재 사항이 없는 한 복수를 포함하는 경우를 포함한다.
구성요소를 해석함에 있어서, 별도의 명시적 기재가 없더라도 오차 범위를 포함하는 것으로 해석한다.
위치 관계에 대한 설명일 경우, 예를 들어, '~상에', '~상부에', '~하부에', '~옆에' 등으로 두 부분의 위치 관계가 설명되는 경우, '바로' 또는 ‘직접’이 사용되지 않는 이상 두 부분 사이에 하나 이상의 다른 부분이 위치할 수도 있다.
소자 또는 층이 다른 소자 또는 층 위 (on)로 지칭되는 것은 다른 소자 바로 위에 또는 중간에 다른 층 또는 다른 소자를 개재한 경우를 모두 포함한다.
비록 제1, 제2 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않는다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있다.
명세서 전체에 걸쳐 동일 참조 부호는 동일 구성 요소를 지칭한다.
도면에서 나타난 각 구성의 크기 및 두께는 설명의 편의를 위해 도시된 것이며, 본 발명이 도시된 구성의 크기 및 두께에 반드시 한정되는 것은 아니다.
본 발명의 여러 실시예들의 각각 특징들이 부분적으로 또는 전체적으로 서로 결합 또는 조합 가능하며, 당업자가 충분히 이해할 수 있듯이 기술적으로 다양한 연동 및 구동이 가능하며, 각 실시예들이 서로에 대하여 독립적으로 실시 가능할 수도 있고 연관 관계로 함께 실시 가능할 수도 있다.
이하, 첨부된 도면을 참조하여 본 발명의 다양한 실시예들을 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 표시 장치를 개략적으로 나타내는 블록도이다. 도 1을 참조하면, 표시 장치(100)는 표시 패널(110), 게이트 구동회로(120), 데이터 구동회로(130), 타이밍 제어부(140) 및 영상 처리부(150)를 포함한다.
도 1을 참조하면, 표시 장치(100)는 복수의 화소(P)를 포함하는 표시 패널(110), 복수의 화소(P) 각각에 게이트 신호를 공급하는 게이트 구동회로(120), 복수의 화소(P) 각각에 데이터 신호를 공급하는 데이터 구동회로(130) 및 게이트 구동회로(120)와 데이터 구동회로(130)를 제어하는 타이밍 제어부(140)를 포함한다. 또한, 표시 장치(100)는 표시 패널(110)에 입력되는 영상에 대한 데이터를 수신하여 디지털 신호로 변환하고, 타이밍 제어부(140)에 디지털 신호 및 제어 신호를 공급하는 영상 처리부(150)를 포함한다.
표시 패널(110)에서 복수의 게이트 라인(GL) 및 복수의 데이터 라인(DL)이 서로 교차되고, 복수의 화소(P) 각각은 게이트 라인(GL) 및 데이터 라인(DL)에 연결된다. 구체적으로, 하나의 화소(P)는 게이트 라인(GL)을 통해 게이트 구동회로(120)로부터 게이트 신호를 공급받고, 데이터 라인(DL)을 통해 데이터 구동회로(130)로부터 데이터 신호를 공급받으며, 전원 공급 라인을 통해 다양한 전원을 공급받는다.
게이트 구동회로(120)는 타이밍 제어부(140)로부터 공급된 게이트 제어 신호(GCS)에 따라 게이트 라인(GL)에 게이트 신호를 공급한다. 여기서, 게이트 신호는 적어도 하나의 스캔 신호 및 발광 제어 신호를 포함한다. 도 1에서는 게이트 구동회로(120)가 표시 패널(110)의 일 측에 이격되어 배치된 것으로 도시되었으나, 게이트 구동회로(120)의 수와 배치 위치는 이에 제한되지 않는다. 즉, 게이트 구동회로(120)는 GIP(Gate In Panel) 방식으로 표시 패널(110)의 일측 또는 양측에 배치될 수도 있다.
데이터 구동회로(130)는 타이밍 제어부(140)로부터 공급된 데이터 제어 신호(DCS)에 따라 영상 데이터(RGB)를 데이터 전압으로 변환하고, 변환된 데이터 전압을 데이터 라인(DL)을 통해 화소(P)에 공급한다.
타이밍 제어부(140)는 표시 패널(110)에 입력되는 구동 신호들의 타이밍을 제어한다. 구체적으로, 타이밍 제어부(140)는 영상 처리부(150)로부터 입력되는 영상 데이터(RGB)를 표시 패널(110)의 크기 및 해상도에 적합하게 처리하여 데이터 구동회로(130)에 공급한다. 또한, 타이밍 제어부(140)는 영상 처리부(150)로부터 입력되는 타이밍 제어 신호인 동기 신호(SYNC)들, 예를 들어, 도트 클럭신호(DCLK), 데이터 인에이블 신호(DE), 수평 동기신호(Hsync), 수직 동기신호(Vsync)를 이용해 다수의 게이트 및 데이터 제어신호(GCS, DCS)를 생성한다. 생성된 다수의 게이트 및 데이터 제어신호(GCS, DCS)를 게이트 구동회로(120) 및 데이터 구동회로(130)에 각각 공급함으로써, 게이트 구동회로(120) 및 데이터 구동회로(130)를 제어한다.
영상 처리부(150)는 표시 패널(110)에 입력되는 구동 신호들의 타이밍을 제어하는 타이밍 제어부(140)와 연결된다. 영상 처리부(150)는 타이밍 제어부(140)에 영상 데이터(RGB) 및 타이밍 제어 신호를 공급한다.
또한, 영상 처리부(150)는 입력되는 영상에 대한 정보를 기초로 화질 향상을 위해 FRUC 가능한 모듈을 포함한다. 구체적으로, 영상 처리부(150)는 입력되는 영상의 화질을 향상시키기 위해 FRUC를 이용하여 보간 영상을 생성할 수 있으며, 보간 영상을 생성하기 위한 움직임 벡터를 추출할 수 있다.
여기서, 영상 처리부(150)는 표시 패널(110)에 입력되는 영상을 프레임 단위로 처리할 수 있다. 즉, 영상 처리부(150)는 입력 영상을 프레임 단위의 이미지로 구분하고, 프레임별 이미지를 기초로 FRUC를 통해 보간 영상을 생성할 수 있다. 특히, 영상 처리부(150)는 인접하는 프레임의 이미지를 비교하여 FRUC할 수 있다.
이하에서는 영상 처리부(150)가 처리하는 인접하는 프레임의 이미지 중 하나를 기준 이미지로 정의하고, 인접하는 프레임의 이미지 중 나머지 하나를 비교 이미지로 정의한다. 영상 처리부(150)의 구체적인 구성 및 기능에 대해서는 도 2를 참조하여 후술한다.
본 발명의 일 실시예에 따른 표시 장치(100)는 보간 영상을 생성하고 배경 움직임 벡터를 전경 움직임 벡터로 변경하여 전경 영역을 확장할 수 있는 영상 처리부(150)를 포함함으로써, 예측된 보간 영상에 기초하여 표시 패널(110)을 통해 출력되는 영상의 화질이 향상될 수 있다.
도 2는 본 발명의 일 실시예에 따른 영상 처리부를 개략적으로 나타내는 블록도이다. 도 3은 본 발명의 일 실시예에 따른 영상 처리 방법에 따라 영상을 처리하는 절차를 도시한 것이다. 도 4는 본 발명의 일 실시예에 따른 영상에서 배경 영역을 개략적으로 나타낸 것이다. 도 5는 본 발명의 일 실시예에 따른 전경 영역을 결정하는 과정을 예시적으로 도시한 것이다. 도 6a 내지 도 6c는 본 발명의 일 실시예에 따른 전경 영역을 확장하는 과정을 예시적으로 도시한 것이다. 설명의 편의를 위해 도 1을 참조하여 후술한다.
도 2를 참조하면, 영상 처리부(150)는 움직임 벡터 수신부(151), 전경 영역 결정부(152), 배경 움직임 벡터 분류부(153), 전경 움직임 벡터 결정부(154) 및 전경 영역 확장부(155)를 포함한다. 영상 처리부(150)는 기준 이미지 및 비교 이미지로부터 움직임 벡터를 수신하고, 배경 움직임 벡터를 분류한 클래스와 움직임 벡터를 비교하여 전경 움직임 벡터를 포함하는 전경 영역을 결정하고, 전경 영역의 주변 배경 영역에서 배경 움직임 벡터를 전경 움직임 벡터로 변경함으로써, 전경 영역을 확장한다.
도 2 및 도 3을 참조하면, 움직임 벡터 수신부(151)는 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터(motion vector)를 수신한다(S310).
움직임 추정 움직임 보상 방법(MEMC; Motion Estimation Motion Compensation)은 기준 이미지에서 복수의 픽셀을 포함하는 블록 단위로 인접 프레임의 비교 이미지와 블록 매칭하여 움직임 벡터를 생성한다. 즉, MEMC를 통해 기준 이미지의 각 블록에 대응하는 움직임 벡터들이 생성된다. 이에, 움직임 벡터 수신부(151)는 전경 영역을 확장하고자 하는 기준 이미지에서 움직임 벡터를 수신한다. 움직임 벡터 수신부(151)는 기준 이미지에서 움직임 벡터를 수신하여 전경 영역 결정부(152)로 전송할 수 있다.
도 2 및 도 3을 참조하면, 전경 영역 결정부(152)는 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정한다(S320). 여기서, 전경 영역 결정부(152)는 배경 움직임 벡터 분류부(153) 및 전경 움직임 벡터 결정부(154)를 포함한다.
구체적으로, 전경 영역 결정부(152)는 기준 이미지에서의 배경 영역으로부터 배경 움직임 벡터를 수신하여, 배경 움직임 벡터와 수신된 움직임 벡터를 비교하여 전경 움직임 벡터인지 여부를 결정한다. 여기서, 배경 영역은 기준 이미지에서 배경이 존재할 확률이 높은 영역으로서, 배경 움직임 벡터가 도출될 확률이 높은 영역으로 미리 결정된 영역을 의미한다. 배경 영역에 대해서는 도 4를 참조하여 후술한다.
도 4를 참조하면, 기준 이미지(410)는 배경 영역(420) 및 중앙 영역(430)을 포함한다. 배경 영역(420)은 상부 배경 영역(421) 및 측부 배경 영역(422)를 포함한다. 중앙 영역(430)은 기준 이미지(410)에서 배경 영역(420)으로 둘러싸이는 영역을 의미한다. 배경 영역(420)에서 상부 배경 영역(421)은 기준 이미지(410)의 하단 가장자리보다 상단 가장자리에 인접한다. 배경 영역(420)에서 측부 배경 영역(422)은 기준 이미지(410)의 양 측단 가장자리에 각각 인접한다. 구체적으로, 측부 배경 영역(422)은 좌측단 가장자리에 인접하는 좌측부 배경 영역(422a) 및 우측단 가장자리에 인접하는 우측부 배경 영역(422b)을 포함한다. 상부 배경 영역(421)과 측부 배경 영역(422)은 서로 중첩될 수도 있다. 또한, 상부 배경 영역(421) 및 측부 배경 영역(422) 각각은 2 내지 8개의 블록의 너비만큼 설정될 수 있다. 예를 들어, 하나의 블록이 8 X 8 픽셀을 포함하는 경우, 상부 배경 영역(421) 및 측부 배경 영역(422) 각각의 너비는 16 픽셀 내지 64 픽셀의 너비일 수 있다.
도 4을 참조하면, 배경 영역(420)에서 상단 가장자리로부터 배경 영역까지의 수직이격거리(d2)는 양 측단 가장자리로부터 배경 영역(420)까지의 수평이격거리(d1)보다 짧다. 배경 영역(420)에서 움직임 벡터는 수직방향 성분보다 수평방향 성분이 더 클 확률이 높으므로, 측부 배경 영역(422)은 양 측부 가장자리에서 수직이격거리(d2)보다 더 멀리 이격된 영역으로 결정될 수 있다. 즉, 수직방향 성분보다 수평방향 성분이 더 클 확률이 높은 배경 움직임 벡터가 높은 신뢰도를 가질 수 있도록 배경 영역(420)의 수평이격거리(d1)는 수직이격거리(d2)보다 길게 설정된다.
이에, 전경 영역 결정부(152)는 예시적으로 도 4에 도시된 바와 같이, 배경 영역에 포함된 배경 움직임 벡터를 수신하고 기준 이미지에서의 움직임 벡터들 각각과 배경 움직임 벡터를 비교한다. 이에 따라, 전경 영역 결정부(152)는 배경 움직임 벡터를 이용하여 전경 움직임 벡터를 포함하는 전경 영역을 보다 용이하게 결정할 수 있다. 도 4에서 배경 영역(420)은 예시적으로 도시된 영역으로 이에 제한되지 않으며, 배경 영역(420)은 다양하게 설정될 수 있으며, 기준 이미지(410) 전체가 배경 영역으로 설정될 수도 있다.
이와 같이 미리 결정된 배경 영역에서의 배경 움직임 벡터를 이용하여, 전경 움직임 벡터를 포함하는 전경 영역을 결정하는 구체적인 단계는 도 4 및 도 5를 참조하여 후술한다.
도 4 및 도 5를 참조하면, 전경 영역 결정부(152) 중 배경 움직임 벡터 분류부(153)는 배경 움직임 벡터를 복수의 클래스(510 내지 540)로 분류한다.
구체적으로, 복수의 클래스는 k개의 클래스를 포함할 수 있으며, 배경 움직임 벡터 분류부(153)는 배경 영역(420)에 존재하는 배경 움직임 벡터를 수신하여, 동일한 배경 움직임 벡터를 동일한 클래스에 저장한다. 이에, 배경 움직임 벡터 분류부(153)는 다수의 배경 움직임 벡터를 동일한 움직임 벡터로 묶어 복수의 클래스 각각으로 분류할 수 있다. 여기서, 복수의 클래스 각각은 복수의 항목을 포함하며, 복수의 항목은 움직임 벡터의 수평방향 성분(MV_x), 움직임 벡터의 수직방향 성분(MV_y), 움직임 벡터의 비용(cost), 움직임 벡터의 크기(weight) 및 움직임 벡터를 저장한 빈도(frequency)일 수 있다. 다만, 복수의 클래스(510 내지 540) 각각은 위와 같은 항목에 제한되지 않으며, 더 많은 항목 또는 더 적은 항목을 포함할 수도 있다. 여기서, 움직임 벡터를 저장한 빈도(frequency)는 복수의 클래스(510 내지 540) 각각에 움직임 벡터가 저장될 때마다 증가하는 수치이다.
이어서, 전경 영역 결정부(152) 중 전경 움직임 벡터 결정부(154)는 복수의 클래스(510 내지 540)에 저장된 배경 움직임 벡터와 움직임 벡터(590)를 비교하여, 복수의 클래스(510 내지 540) 중 움직임 벡터(590)와 가장 유사한 배경 움직임 벡터를 저장하는 유사 클래스(530)를 선택한다.
구체적으로, 전경 움직임 벡터 결정부(154)는 수신한 움직임 벡터(590)의 항목을 제1 클래스(510) 내지 제k 클래스(540) 각각의 항목과 비교한다. 예를 들어, 전경 움직임 벡터 결정부(154)는 움직임 벡터(590)의 수평방향 성분(MV_x), 수직방향 성분(MV_y), 비용(cost) 및 크기(weight)와 제1 클래스(510) 내지 제k 클래스(540) 각각에 저장된 배경 움직임 벡터의 수평방향 성분(MV_x), 수직방향 성분(MV_y), 비용(cost) 및 크기(weight) 사이의 차이를 계산할 수 있다. 이에, 전경 움직임 벡터 결정부(154)는 복수의 클래스 각각과 계산한 차이가 가장 작은 클래스를 움직임 벡터(590)와 가장 유사한 클래스로 결정한다. 도 5를 참조하면, 전경 움직임 벡터 결정부(154)는 수신한 움직임 벡터(590)와 가장 유사한 배경 움직임 벡터를 저장하는 클래스로 제n 클래스(530)를 결정한다.
이어서, 전경 움직임 벡터 결정부(154)는 유사 클래스에 저장된 배경 움직임 벡터의 빈도값(Frequency)이 미리 결정된 빈도값(FrequencyTH)보다 작은 경우, 유사 클래스에 저장된 배경 움직임 벡터를 전경 움직임 벡터로 결정한다.
여기서, 미리 결정된 빈도값(FrequencyTH)은 배경 영역(420)에서 도출될 확률이 낮은 배경 움직임 벡터의 빈도값으로 미리 결정될 수 있다. 즉, 미리 결정된 빈도값(FrequencyTH)은 배경 움직임 벡터보다는 전경 움직임 벡터와 유사할 확률이 높도록 설정된 빈도값이다. 예를 들어, 미리 결정된 빈도값(FrequencyTH)은 복수의 클래스의 빈도값(Frequency1 내지 FrequencyK)의 총합의 1/10보다 작을 수 있다.
유사 클래스에 저장된 움직임 벡터의 빈도값(FrequencyN)이 미리 결정된 빈도값(FrequencyTH)보다 큰 경우, 유사 클래스에 저장된 배경 움직임 벡터는 배경 영역에서 도출될 확률이 높으며, 전경 움직임 벡터가 될 확률은 극히 낮다. 이에, 유사 클래스에 저장된 움직임 벡터의 빈도값(FrequencyN)이 미리 결정된 빈도값(FrequencyTH)보다 작은 경우, 유사 클래스에 저장된 배경 움직임 벡터는 배경 영역에서는 희박하게 존재하고 전경 영역에서 도출될 확률이 높다.
이에 따라, 유사 클래스에 저장된 움직임 벡터의 빈도값(FrequencyN)이 미리 결정된 빈도값(FrequencyTH)보다 작은 경우, 수신한 움직임 벡터(590)가 전경 영역에서 도출될 확률이 높으므로, 전경 움직임 벡터 결정부(154)는 수신한 움직임 벡터(590)를 전경 움직임 벡터로 결정할 수 있다. 즉, 전경 움직임 벡터 결정부(154)는 배경 움직임 벡터의 클래스와 수신한 움직임 벡터(590)를 비교하여, 수신한 움직임 벡터(590)가 전경 움직임 벡터인지 여부를 판단한다. 나아가, 전경 움직임 벡터 결정부(154)는 수신한 움직임 벡터(590)가 전경 움직임 벡터로 결정되는 경우, 전경 움직임 벡터에 대응하는 블록을 전경 영역으로 결정할 수 있다.
도 2 및 도 3을 참조하면, 전경 영역 확장부(155)는 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장한다(S330).
도 6a를 참조하면, 전경 영역(610)에서의 대표값은 ‘A’ 또는 ‘C’를 포함한다. 배경 영역(620)에서의 대표값은 ‘B’를 포함한다. 여기서, 대표값은 이미지에서 픽셀의 특성을 대표하는 값으로서, 예를 들어, 픽셀의 휘도, 영상 데이터 또는 R, G, B 데이터 중 하나의 데이터 등이 될 수 있다. 이하에서는 대표값이 픽셀의 휘도로 표현되는 것을 기준으로 설명한다.
도 6a를 참조하면, 배경 영역(620)은 인접 배경 블록(621)을 포함한다. 인접 배경 블록(621)은 배경 영역(620)의 블록 중에서 전경 영역(610)의 블록들과 접하는 블록들을 의미한다.
도 6a를 참조하면, 전경 확장 윈도우(630)는 p*q 블록으로 이루어진 윈도우로, 전경 영역(610)과 중첩되는 블록에만 가중치를 포함하는 윈도우이다. 여기서, p 및 q는 임의의 홀수의 자연수이다. 도 6a에서 전경 확장 윈도우(630)는 예시적으로 3*3 블록으로 도시되었으나, 전경 확장 윈도우(630)가 포함하는 블록의 개수는 이에 제한되지 않는다.
전경 영역 확장부(155)는 미리 결정된 주변 영역에 전경 확장 윈도우(630)를 적용하고, 미리 결정된 주변 영역의 배경 움직임 벡터를 확장 전경 움직임 벡터로 변경한다. 여기서, 미리 결정된 주변 영역은 배경 영역에 인접한 최외곽 전경 움직임 벡터를 포함하는 블록과 접하는 인접 배경 블록을 포함하는 영역이다. 도 6a에서 미리 결정된 주변 영역은 예시적으로 인접 배경 블록(621)으로 표시되었으나, 이에 제한되지 않는다.
도 6a를 참조하면, 전경 영역 확장부(155)는 전경 확장 윈도우(630)의 중심 블록(631)을 인접 배경 블록(621) 중 어느 하나의 블록에 일치시킨다.
구체적으로, 전경 확장 윈도우(630)는 중심 블록(631)이 인접 배경 블록(621) 중 어느 하나의 블록에 일치되도록 배치된다. 이에, 전경 확장 윈도우(630)는 전경 영역(610)과 중첩되는 블록을 포함할 수 있다.
도 6b를 참조하면, 전경 영역 확장부(155)는 기준 이미지에서 전경 확장 윈도우(630)에 대응하는 블록들 각각의 대표값과 전경 확장 윈도우의 블록들 각각의 가중치를 곱한다.
구체적으로, 확장 윈도우(640)은 전경 확장 윈도우(630)에 대응하는 블록들인 대응 블록(601)에 전경 확장 윈도우(630) 내의 가중치를 적용함으로써 생성된다. 여기서, 가중치는 전경 확장 윈도우와 전경 영역이 중첩하는 블록에서는 1이고, 전경 확장 윈도우와 배경 영역이 중첩하는 블록에서는 0일 수 있다. 즉, 전경 영역 확장부(155)는 대응 블록(601)에서 블록 각각의 대표값과 전경 확장 윈도우(630)에서 대응하는 블록 각각의 가중치를 곱하여 확장 윈도우(640)을 생성할 수 있다. 예를 들어, 대응 블록(601)에서 배경 영역(620)에 중첩하는 블록은 대표값 ‘B’를 갖고, 대응 블록(601)에서 전경 영역(610)에 중첩하는 블록은 대표값 ‘A’를 갖는다. 전경 확장 윈도우(630)는 전경 영역(610)과 중첩하는 블록에는 가중치 ‘1’을 포함하고, 배경 영역(620)과 중첩하는 블록에는 가중치 ‘0’을 포함한다. 이에, 확장 윈도우(640)에서 블록 각각은 대응 블록(601)에서 블록 각각의 대표값과 전경 확장 윈도우(630)에서 블록 각각의 가중치를 곱한 값들을 갖는다. 즉, 확장 윈도우(640)에서 전경 영역(610)과 중첩하는 블록만 ‘A’를 갖고 배경 영역(620)과 중첩하는 블록들은 ‘0’을 갖는다.
전경 영역 확장부(155)는 대표값과 가중치의 곱을 전경 확장 윈도우(630)와 전경 영역(610)이 중첩하는 블록의 개수로 나누어, 확장 대표값을 산출한다.
도 6b 및 도 6c를 참조하면, 확장 블록(661)은 확장 윈도우(640)에서 대표값과 가중치의 곱인 ‘A’를 전경 확장 윈도우(630)와 전경 영역(610)이 중첩하는 블록의 개수로 나눈 값을 갖는다. 예를 들어, 전경 확장 윈도우(630)와 전경 영역(610)이 중첩하는 블록의 개수가 1개이므로, 확장 블록(661)은 ‘A’를 1로 나눈 확장 대표값 ‘A’를 갖는다.
도 6a 내지 도 6c를 참조하면, 전경 영역 확장부(155)는 인접 배경 블록(621) 각각에 전경 확장 윈도우(630)의 중심 블록(631)을 일치시키고 가중치를 곱하여, 확장 윈도우(640)의 확장 대표값을 산출한다. 이와 같은 확장 윈도우(640)의 확장 대표값은 전경 확장 윈도우(630)와 전경 영역(610)이 중첩하는 블록의 개수로 나뉘어져, 인접 배경 블록(621) 각각에 적용된다. 즉, 확장 윈도우(640)의 확장 대표값은 기존에 배경 영역(620)에 속해있던 인접 배경 블록(621)에 적용됨으로써, 인접 배경 블록(621)이 전경 영역(610)에 포함되는 확장된 전경 블록(651)으로 변경된다.
전경 영역 확장부(155)는 확장 대표값을 갖는 움직임 벡터를 전경 확장 윈도우(630)의 중심 블록(631)에 대응하는 확장 전경 움직임 벡터로 결정한다.
도 6b 및 도 6c를 참조하면, 전경 영역 확장부(155)는 인접 배경 블록(621) 각각에 확장 대표값을 적용함으로써, 인접 배경 블록(621)을 전경 영역(610)에 포함되는 확장된 전경 블록(651)으로 변경한다. 이에, 확장된 전경 블록(651)은 확장 대표값에 대응하는 확장 전경 움직임 벡터를 갖게 된다. 즉, 전경 영역 확장부(155)는 확장 대표값을 갖는 확장된 전경 블록(651) 각각이 확장 전경 움직임 벡터를 갖도록 함으로써, 전경 움직임 벡터를 주변 배경 영역으로 확장할 수 있다.
이에 따라, 전경 영역 확장부(155)는 전경 영역(610)에 인접하는 인접 배경 블록(621)에 전경 영역(610)의 블록의 대표값에 가중치를 곱한 평균값을 확장 대표값으로 반영함으로써, 인접 배경 블록(621)으로 전경 영역(610)을 확장시킬 수 있다. 즉, 전경 영역 확장부(155)는 인접 배경 블록(621)으로 전경 움직임 벡터를 포함하는 전경 영역(610)을 확장시킬 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법은 전경 영역과 배경 영역의 경계 영역에서 전경 영역을 결정하고, 인접하는 배경 영역으로 전경 영역을 확장함으로써, 전경 영역에 대한 전경 움직임 벡터를 보다 정확하게 결정할 수 있다. 구체적으로, 전경 영역 결정부는 배경 영역으로부터 배경 움직임 벡터를 클래스로 분류하여, 수신한 움직임 벡터와 비교한다. 이에, 배경 움직임 벡터의 클래스 중 빈도수가 현저하게 적은 배경 움직임 벡터에 수신한 움직임 벡터가 유사한 경우, 수신한 움직임 벡터는 배경 움직임 벡터에 해당할 확률이 현저하게 떨어지므로, 전경 움직임 벡터 결정부는 수신한 움직임 벡터를 전경 움직임 벡터로 결정할 수 있다. 나아가, 전경 영역 확장부는 수신한 움직임 벡터에 대응하는 블록에서 움직임 벡터를 전경 움직임 벡터로 변경함으로써 전경 영역을 확장시킬 수 있다. 이에 따라, 전경 움직임 벡터가 증가되고, 전경 영역에 대한 움직임의 추정이 보다 정확하게 이루어질 수 있다.
도 7은 본 발명의 일 실시예에 따라 전경 영역을 확장한 결과를 예시적으로 도시한 것이다.
도 7을 참조하면, 전경 영역(710)의 블록 각각은 전경 움직임 벡터(711)를 포함하고, 배경 영역(720)의 블록 각각은 배경 움직임 벡터(721)를 포함한다. 전경 영역을 확장하기 전에는 전경 영역(710)의 블록에 인접하는 배경 영역(720)의 블록에 우측 방향을 가리키는 배경 움직임 벡터(721)가 포함되어 있다.
이에, 전경 영역 확장부(155)에 의해 전경 움직임 벡터가 확장되면, 배경 영역(720)의 블록에 포함된 배경 움직임 벡터(721)가 확장 전경 움직임 벡터(731)로 변경된다. 즉, 전경 움직임 벡터(711)가 배경 영역(720)의 블록으로 확장되어, 전경 영역(710)과 배경 영역(720) 사이의 경계 영역이 전경 영역(710)으로 변경된다. 이에 따라, 전경 영역(710)과 배경 영역(720) 사이의 경계 영역의 깨짐 현상이 저감되고, 전경 영역(710)의 화질이 향상될 수 있다.
본 발명의 실시예들에 따른 유기 발광 표시 장치는 다음과 같이 설명될 수 있다.
본 발명의 일 실시예에 따른 영상 처리 방법은 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터(motion vector)를 수신하는 단계, 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 단계, 및 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장하는 단계를 포함한다. 본 발명의 일 실시예에 따른 영상 처리 방법은 전경과 배경이 혼재한 블록에 전경 움직임 벡터를 포함하는 전경 영역을 확장함으로써, 전경과 배경의 경계에서 이미지가 깨지는 현상을 저감시킬 수 있다.
본 발명의 다른 특징에 따르면, 전경 영역을 결정하는 단계는, 배경 움직임 벡터를 복수의 클래스로 분류하는 단계, 복수의 클래스에 저장된 배경 움직임 벡터와 움직임 벡터를 비교하여, 복수의 클래스 중 움직임 벡터와 가장 유사한 배경 움직임 벡터를 저장하는 유사 클래스를 선택하는 단계, 및 유사 클래스에 저장된 배경 움직임 벡터의 빈도값(frequency)이 미리 결정된 빈도값보다 작은 경우, 유사 클래스에 저장된 배경 움직임 벡터를 전경 움직임 벡터로 결정하는 단계를 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 미리 결정된 빈도값은 복수의 클래스의 빈도값의 총합의 1/10보다 작을 수 있다.
본 발명의 또 다른 특징에 따르면, 미리 결정된 주변 영역은 배경 영역에 인접한 최외곽 전경 움직임 벡터를 포함하는 블록에 접하고, 배경 영역에 포함되는 인접 배경 블록을 포함하는 영역이고, 전경 영역을 확장하는 단계는, 미리 결정된 주변 영역에 전경 확장 윈도우를 적용하는 단계, 및 미리 결정된 주변 영역의 배경 움직임 벡터를 확장 전경 움직임 벡터로 변경하는 단계를 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 전경 확장 윈도우를 적용하는 단계는, 인접 배경 블록에 전경 확장 윈도우의 중심 블록을 일치시키는 단계, 기준 이미지에서 전경 확장 윈도우에 대응하는 블록들 각각의 대표값과 전경 확장 윈도우의 블록들 각각의 가중치를 곱하는 단계, 및 대표값과 가중치의 곱을 전경 확장 윈도우와 전경 영역이 중첩하는 블록의 개수로 나누어, 확장 대표값을 산출하는 단계를 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 확장 전경 움직임 벡터로 변경하는 단계는, 확장 대표값을 갖는 움직임 벡터를 전경 확장 윈도우의 중심 블록에 대응하는 확장 전경 움직임 벡터로 결정하는 단계를 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 가중치는 전경 확장 윈도우와 전경 영역이 중첩하는 블록에서는 1이고, 전경 확장 윈도우와 배경 영역이 중첩하는 블록에서는 0일 수 있다.
본 발명의 다른 실시예에 따른 표시 장치는 표시 패널, 및 표시 패널에 입력되는 영상을 처리하는 영상 처리부를 포함한다. 영상 처리부는, 기준 이미지 및 비교 이미지를 기초로 결정된, 기준 이미지에서의 움직임 벡터를 수신하는 움직임 벡터 수신부, 움직임 벡터와 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 전경 영역 결정부, 및 전경 영역에 포함된 전경 움직임 벡터를 기초로 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 미리 결정된 주변 영역으로 전경 영역을 확장하는 전경 영역 확장부를 포함한다. 본 발명의 다른 실시예에 따른 표시 장치는 전경 영역을 확장함으로써, 배경 영역에서의 플리커 현상 및 전경의 번짐 현상을 저감시킬 수 있다.
본 발명의 다른 특징에 따르면, 배경 영역은, 기준 이미지의 하단 가장자리보다 상단 가장자리에 인접하는 제1 배경 영역, 및 기준 이미지의 양 측단 가장자리에 각각 인접하는 제2 배경 영역을 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 상단 가장자리로부터 배경 영역까지의 수직이격거리는 양 측단 가장자리로부터 배경 영역까지의 수평이격거리보다 짧을 수 있다.
본 발명의 또 다른 특징에 따르면, 전경 영역 결정부는, 배경 움직임 벡터를 복수의 클래스로 분류하는 배경 움직임 벡터 분류부, 및 복수의 클래스에 저장된 배경 움직임 벡터와 움직임 벡터를 비교하여, 복수의 클래스 중 움직임 벡터와 가장 유사한 유사 클래스를 선택하고, 유사 클래스에 저장된 움직임 벡터의 빈도값이 미리 결정된 빈도값보다 작은 경우, 유사 클래스에 저장된 움직임 벡터를 전경 움직임 벡터로 결정하는 전경 움직임 벡터 결정부를 포함할 수 있다.
본 발명의 또 다른 특징에 따르면, 전경 영역 확장부는, 미리 결정된 주변 영역에 전경 확장 윈도우를 적용하고, 미리 결정된 주변 영역에 배경 움직임 벡터를 확장 전경 움직임 벡터로 변경할 수 있다.
이상 첨부된 도면을 참조하여 본 발명의 실시예들을 더욱 상세하게 설명하였으나, 본 발명은 반드시 이러한 실시예로 국한되는 것은 아니고, 본 발명의 기술사상을 벗어나지 않는 범위 내에서 다양하게 변형 실시될 수 있다. 따라서, 본 발명에 개시된 실시예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
100: 표시 장치
110: 표시 패널
120: 게이트 구동회로
130: 데이터 구동회로
140: 타이밍 제어부
150: 영상 처리부
151: 움직임 벡터 수신부
152: 전경 영역 결정부
153: 배경 움직임 벡터 분류부
154: 전경 움직임 벡터 결정부
155: 전경 영역 확장부
410: 기준 이미지
420: 배경 영역
421: 상부 배경 영역
422: 측부 배경 영역
422a: 좌측부 배경 영역
422b: 우측부 배경 영역
430: 중앙 영역
510: 제1 클래스
520: 제2 클래스
530: 제n 클래스
540: 제k 클래스
590: 수신한 움직임 벡터
601: 대응 블록
610, 710: 전경 영역
620, 720: 배경 영역
621: 인접 배경 블록
630: 전경 확장 윈도우
631: 전경 확장 윈도우의 중심 블록
640: 확장 윈도우
651: 확장된 전경 블록
661: 확장 블록
711: 전경 움직임 벡터
721: 배경 움직임 벡터
731: 확장 전경 움직임 벡터

Claims (12)

  1. 기준 이미지 및 비교 이미지를 기초로 결정된, 상기 기준 이미지에서의 움직임 벡터(motion vector)를 수신하는 단계;
    상기 움직임 벡터와 상기 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 단계; 및
    상기 전경 영역에 포함된 전경 움직임 벡터를 기초로 상기 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 상기 미리 결정된 주변 영역으로 상기 전경 영역을 확장하는 단계를 포함하는, 영상 처리 방법.
  2. 제1항에 있어서,
    상기 전경 영역을 결정하는 단계는,
    상기 배경 움직임 벡터를 복수의 클래스로 분류하는 단계;
    상기 복수의 클래스에 저장된 배경 움직임 벡터와 상기 움직임 벡터를 비교하여, 상기 복수의 클래스 중 상기 움직임 벡터와 가장 유사한 배경 움직임 벡터를 저장하는 유사 클래스를 선택하는 단계; 및
    상기 유사 클래스에 저장된 배경 움직임 벡터의 빈도값(frequency)이 미리 결정된 빈도값보다 작은 경우, 상기 유사 클래스에 저장된 배경 움직임 벡터를 상기 전경 움직임 벡터로 결정하는 단계를 포함하는, 영상 처리 방법.
  3. 제2항에 있어서,
    상기 미리 결정된 빈도값은 상기 복수의 클래스의 빈도값의 총합의 1/10보다 작은, 영상 처리 방법.
  4. 제1항에 있어서,
    상기 미리 결정된 주변 영역은 상기 배경 영역에 인접한 최외곽 전경 움직임 벡터를 포함하는 블록에 접하고, 상기 배경 영역에 포함되는 인접 배경 블록을 포함하는 영역이고,
    상기 전경 영역을 확장하는 단계는,
    상기 미리 결정된 주변 영역에 전경 확장 윈도우를 적용하는 단계; 및
    상기 미리 결정된 주변 영역의 상기 배경 움직임 벡터를 확장 전경 움직임 벡터로 변경하는 단계를 포함하는, 영상 처리 방법.
  5. 제4항에 있어서,
    상기 전경 확장 윈도우를 적용하는 단계는,
    상기 인접 배경 블록에 상기 전경 확장 윈도우의 중심 블록을 일치시키는 단계;
    상기 기준 이미지에서 상기 전경 확장 윈도우에 대응하는 블록들 각각의 대표값과 상기 전경 확장 윈도우의 블록들 각각의 가중치를 곱하는 단계; 및
    상기 대표값과 상기 가중치의 곱을 상기 전경 확장 윈도우와 상기 전경 영역이 중첩하는 블록의 개수로 나누어, 확장 대표값을 산출하는 단계를 포함하는, 영상 처리 방법.
  6. 제5항에 있어서,
    상기 확장 전경 움직임 벡터로 변경하는 단계는,
    상기 확장 대표값을 갖는 움직임 벡터를 상기 전경 확장 윈도우의 중심 블록에 대응하는 상기 확장 전경 움직임 벡터로 결정하는 단계를 포함하는, 영상 처리 방법.
  7. 제5항에 있어서,
    상기 가중치는 상기 전경 확장 윈도우와 상기 전경 영역이 중첩하는 블록에서는 1이고, 상기 전경 확장 윈도우와 상기 배경 영역이 중첩하는 블록에서는 0인, 영상 처리 방법.
  8. 표시 패널; 및
    상기 표시 패널에서 출력되는 영상을 처리하는 영상 처리부를 포함하고,
    상기 영상 처리부는,
    기준 이미지 및 비교 이미지를 기초로 결정된, 상기 기준 이미지에서의 움직임 벡터를 수신하는 움직임 벡터 수신부;
    상기 움직임 벡터와 상기 기준 이미지에서의 배경 영역에 포함된 배경 움직임 벡터 사이의 유사성을 이용하여, 전경 영역을 결정하는 전경 영역 결정부; 및
    상기 전경 영역에 포함된 전경 움직임 벡터를 기초로 상기 전경 영역의 미리 결정된 주변 영역에서의 움직임 벡터를 변경하여, 상기 미리 결정된 주변 영역으로 상기 전경 영역을 확장하는 전경 영역 확장부를 포함하는, 표시 장치.
  9. 제8항에 있어서,
    상기 배경 영역은,
    상기 기준 이미지의 하단 가장자리보다 상단 가장자리에 인접하는 제1 배경 영역, 및 상기 기준 이미지의 양 측단 가장자리에 각각 인접하는 제2 배경 영역을 포함하는, 표시 장치.
  10. 제9항에 있어서,
    상기 상단 가장자리로부터 상기 배경 영역까지의 수직이격거리는 상기 양 측단 가장자리로부터 상기 배경 영역까지의 수평이격거리보다 짧은, 표시 장치.
  11. 제8항에 있어서,
    상기 전경 영역 결정부는,
    상기 배경 움직임 벡터를 복수의 클래스로 분류하는 상기 배경 움직임 벡터 분류부; 및
    상기 복수의 클래스에 저장된 배경 움직임 벡터와 상기 움직임 벡터를 비교하여, 상기 복수의 클래스 중 상기 움직임 벡터와 가장 유사한 유사 클래스를 선택하고, 상기 유사 클래스에 저장된 움직임 벡터의 빈도값이 미리 결정된 빈도값보다 작은 경우, 상기 유사 클래스에 저장된 움직임 벡터를 상기 전경 움직임 벡터로 결정하는 전경 움직임 벡터 결정부를 포함하는, 표시 장치.
  12. 제8항에 있어서,
    상기 전경 영역 확장부는,
    상기 미리 결정된 주변 영역에 전경 확장 윈도우를 적용하고, 상기 미리 결정된 주변 영역에 상기 배경 움직임 벡터를 확장 전경 움직임 벡터로 변경하는, 표시 장치.
KR1020160120169A 2016-09-20 2016-09-20 영상 처리 방법 및 이를 이용한 표시 장치 KR20180031476A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020160120169A KR20180031476A (ko) 2016-09-20 2016-09-20 영상 처리 방법 및 이를 이용한 표시 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160120169A KR20180031476A (ko) 2016-09-20 2016-09-20 영상 처리 방법 및 이를 이용한 표시 장치

Publications (1)

Publication Number Publication Date
KR20180031476A true KR20180031476A (ko) 2018-03-28

Family

ID=61901462

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160120169A KR20180031476A (ko) 2016-09-20 2016-09-20 영상 처리 방법 및 이를 이용한 표시 장치

Country Status (1)

Country Link
KR (1) KR20180031476A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115695889A (zh) * 2022-09-30 2023-02-03 聚好看科技股份有限公司 显示设备及悬浮窗显示方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115695889A (zh) * 2022-09-30 2023-02-03 聚好看科技股份有限公司 显示设备及悬浮窗显示方法

Similar Documents

Publication Publication Date Title
KR102288334B1 (ko) 표시 장치 및 이의 로고 영역 휘도 조절 방법
KR102269893B1 (ko) 표시 장치 및 표시 장치의 구동 방법
US9837011B2 (en) Optical compensation system for performing smear compensation of a display device and optical compensation method thereof
KR102624885B1 (ko) 유기 발광 표시 장치 및 그의 구동 방법
US10546368B2 (en) Method and device for compensating the perceptual bias of edge boost in a display panel
KR20170033963A (ko) 표시 장치 및 이를 포함하는 전자 기기
US20160260395A1 (en) Display device, electronic apparatus, and method for driving display device
KR20240037215A (ko) 잔상 보상부 및 이를 포함하는 표시 장치
KR20170003213A (ko) 타이밍제어부, 이를 포함하는 유기발광표시장치 및 이의 열화보상방법
US9728161B2 (en) Display device
US10002409B2 (en) Image signal providing apparatus and image signal providing method
KR20130131162A (ko) 액정표시장치 및 이의 구동방법
US10109254B2 (en) Video processing circuit, video processing method, electro-optical device, and electronic apparatus
KR20180031476A (ko) 영상 처리 방법 및 이를 이용한 표시 장치
US9898973B2 (en) Display device, electronic apparatus and method of driving display device
US10630935B2 (en) Method for adjusting an aspect ratio of a displayed image and display system thereof
US20170075432A1 (en) Cursor handling in a variable refresh rate environment
US8269805B2 (en) Image processing module with less line buffers
JP2015230411A (ja) 表示装置
KR20160046983A (ko) 소비 전력 제어 방법 및 장치와 이를 이용한 표시장치
KR102465557B1 (ko) 영상 처리 방법 및 이를 이용한 표시 장치
KR102315969B1 (ko) 영상 처리 방법 및 이를 이용한 표시장치
KR20180052301A (ko) 영상 처리 방법 및 이를 이용한 표시 장치
KR20180031351A (ko) 영상 처리 방법 및 이를 이용한 표시 장치
KR20180060434A (ko) 영상 처리 방법 및 이를 이용한 표시 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal