KR100360893B1 - 영상 움직임 보상 장치 및 방법 - Google Patents

영상 움직임 보상 장치 및 방법 Download PDF

Info

Publication number
KR100360893B1
KR100360893B1 KR1020010004883A KR20010004883A KR100360893B1 KR 100360893 B1 KR100360893 B1 KR 100360893B1 KR 1020010004883 A KR1020010004883 A KR 1020010004883A KR 20010004883 A KR20010004883 A KR 20010004883A KR 100360893 B1 KR100360893 B1 KR 100360893B1
Authority
KR
South Korea
Prior art keywords
motion
pixel
value
field
interpolated
Prior art date
Application number
KR1020010004883A
Other languages
English (en)
Other versions
KR20020064440A (ko
Inventor
신창용
한동일
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020010004883A priority Critical patent/KR100360893B1/ko
Priority to US10/059,173 priority patent/US6985187B2/en
Publication of KR20020064440A publication Critical patent/KR20020064440A/ko
Application granted granted Critical
Publication of KR100360893B1 publication Critical patent/KR100360893B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012—Conversion between an interlaced and a progressive signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/0137—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes dependent on presence/absence of motion, e.g. of motion zones

Abstract

본 발명은 디인터레이싱을 결점없이 정확하게 수행하기 위하여, 단순한 구성의 하드웨어를 이용하여 현재 보간하고자 하는 필드를 기준으로 과거 필드들과 미래 필드의 정보로부터 현재 보간하고자 하는 필드의 수평방향 움직임 정보를 정확하게 추정하여 보간하는 기술에 관한 것이다. 이러한 본 발명은 수평방향으로의 움직임을 추정하고 그 방향에 따라 움직임이 있는 경우에 대한 시간적 보상을 위해 움직임 추정을 위한 단위 영역에 대하여 서로 다른 수평방향으로 일정 간격씩 이동하면서 블록매칭에러를 구하여 선형보간된 화소값을 검출하는 수평방향 움직임 추정부(14)와; 블록매칭에러 값 및 시간 움직임 보상에 사용된 화소값의 영향을 고려하여 최종 보간값을 구하는 라인 보간부(16)로 구현된다.

Description

영상 움직임 보상 장치 및 방법{APPARATUS AND METHOD FOR COMPENSATING VIDEO MOTIONS}
본 발명은 비월주사(Interlaced) 방식의 영상 시퀀스를 순차주사(Non-Interlace) 방식의 영상 시퀀스로 변환하는 디인터레이싱(De-interlacing)을 결점 없이 수행하는 기술에 관한 것으로, 특히 단순한 구성의 하드웨어를 이용하여 현재 보간하고자 하는 필드를 기준으로 과거 필드들과 미래 필드의 정보로부터 현재 보간하고자 하는 필드의 수평방향 움직임 정보를 정확하게 추정하여 보간하는데 적당하도록 한 영상 움직임 보상 장치 및 방법에 관한 것이다.
종래의 디인터레이싱 기술로서 미국 특허 4876596, 5550592, 5563651, 5596371, 5689301을 들 수 있는데, 이들 각각의 보간 방법은 다음의 다섯 가지로 요약된다.
첫째, 현재 필드 자체의 라인 정보를 반복 사용하여 보간하는 방법. 둘째, 움직임 보상을 실시하지 않고, 바로 이전 필드 데이터를 현재 필드 라인 데이터 사이에 그대로 끼워 넣는 필드간 보간 방법. 셋째, 현재 필드 자체의 선형 라인 보간을 이용하여 보간하는 필드내 보간 방법. 넷째, 움직임 벡터를 찾아 보간하는 움직임 보상 보간 방법. 다섯째, 움직임 정도를 추정하여 움직임에 따라 보간하는 움직임 적응 보간 방법이 있었다.
상기 첫 번째에서 세 번째까지의 보간 방법은 단순한 하드웨어로 구현할 수 있으나, 보간 후 화질이 저하되는 문제점이 있고, 네 번째의 보간 방법은 보간 후화질은 향상되지만, 상당히 복잡한 구성의 하드웨어로 구현되는 결함이 있다. 반면에 다섯 번째의 보간 방법은 비교적 단순한 하드웨어로 구현되고 보간 후 화질 또한 향상된다.
그러나, 상기 다섯 번째 보간 방법을 채택하였을 지라도 단지 프레임간 움직임만을 검출하는 시스템에서는 순간적으로 움직이는 물체나 특정의 속도로 움직이는 물체의 움직임은 검출할 수 없고, 단순한 필드간 움직임을 검출하는 경우 과도한 움직임 검출을 초래하여 보간 후 영상의 해상도가 저하되어 전체 화질을 열화시키게 되는 문제점이 있었다. 따라서, 이러한 물체의 움직임을 보다 정확하게 검출하기 위해 다수의 메모리 혹은 복잡한 프로세싱 과정을 필요로 하므로, 전체 하드웨어의 구조가 복잡하게 구성되고, 이에 의해 회로의 제조 비용이 상승되는 결함이 있었다.
따라서, 본 발명의 목적은 현재 보간하고자 하는 필드를 기준으로 과거 필드들과 미래 필드의 정보로부터 현재 보간하고자 하는 필드의 수평방향 움직임 정보를 정확하게 추정하여 디인터레이싱 장치로 하여금 그 추정된 움직임 정보에 따라 적절한 보상을 수행하도록 하는 영상 움직임 보상 장치 및 방법을 제공함에 있다.
도 1은 본 발명에 의한 영상 움직임 보상 장치의 일실시 예시 블록도.
도 2는 수평방향 움직임 추정 및 보상을 위한 영상필드 및 블록의 설명도.
도 3은 도 1에서 라인보간부의 입력데이터 설명도.
도 4는 본 발명에서 최종의 보간값을 출력하기 위해 적용된 룰 및 필터링 알고리즘의 예시도.
***도면의 주요 부분에 대한 부호의 설명***
11 : 필드데이터 제공부 12 : 움직임 검출부
13 : 후처리부 14 : 수평방향 움직임 검출부
15 : 에지방향 검출부 16 : 라인 보간부
도 1은 본 발명에 의한 영상 움직임 보상 장치의 일실시 예시 블록도로서 이에 도시한 바와 같이, 필드 메모리(11A-11C) 및 라인메모리(11D,11E)를 이용하여 연속되는 4장의 필드 데이터 및 수평라인 데이터를 제공하는 필드 데이터제공부(11)와; 상기 필드 데이터 제공부(11)로부터 연속되는 필드 데이터 및 두 수평라인의 데이터를 입력받아 필드간 및 프레임간 움직임 정도를 검출하는 움직임 검출부(12)와; 상기 검출된 움직임의 신뢰도를 향상시키기 위한 잡음 제거 및 움직임 정도 판별을 위한 맵핑 등의 기능을 수행하는 후처리부(13)와; 수평방향으로의 움직임을 추정하고 그 방향에 따라 움직임이 있는 경우에 대한 시간적 보상을 위해 움직임 추정을 위한 단위 영역에 대하여 서로 다른 수평방향으로 일정 간격씩 이동하면서 블록매칭에러를 구하여 선형보간된 화소값을 검출하는 수평방향 움직임 추정부(14)와; 상기 필드데이터 제공부(11)로부터 필드 데이터 및 수평라인 데이터를 제공받아 에지 방향을 검출하는 에지방향 검출부(15)와; 상기 후처리부(13), 수평방향 움직임 추정부(14) 및 에지방향 검출부(15)의 출력정보를 입력받아, 블록매칭에러 값 및 시간 움직임 보상에 사용된 화소값의 영향을 고려하여 최종 보간값을 구하는 방식으로 보간 라인을 생성하는 라인 보간부(16)로 구성한 것으로, 이와 같이 구성한 본 발명의 작용을 첨부한 도 2 내지 도 4를 참조하여 상세히 설명하면 다음과 같다.
필드 데이터 제공부(11)에서는 직렬 접속된 3개의 필드메모리(11A-11C)를 이용하여, 입력 영상신호(Vin)를 순차적으로 저장하고, 움직임 검출 및 보간을 위한 4장의 필드 데이터를 제공한다.
움직임 검출부(12)에서는 상기 필드 데이터 제공부(11)로부터 연속되는 4장의 필드 즉, 한 장의 기준(현재) 필드(n), 두 장의 이전 필드(n-1),(n-2) 및 한 장의 이후 필드(n+1)의 데이터를 입력받아, 한 프레임 혹은 다수 프레임의 시간 간격을 두고 동일한 위상에 존재하는 필드간의 움직임 정도를 검출하는 프레임간 움직임 검출부와, 한 필드간의 시간 간격을 두고 서로 다른 위상에 존재하는 필드간의 움직임을 검출하는 필드간 움직임 검출부를 구비한다. 여기서, 상기 각 검출부에서 이용되는 움직임 검출방식은 통상의 방식을 적용할 수 있다.
후처리부(13)는 정밀한 움직임 정도 검출을 위한 다양한 기능을 수행한다. 즉, 상기 후처리부(13)는 신뢰할 수 있는 움직임 검출을 위해 상기 움직임 검출부(12)에서 출력된 밝기 차이 신호를 저역필터링한 후 움직임 정도 판별을 위한 정해진 레벨로 맵핑한다. 그리고, 움직임이 있는 부분을 군집화하기 위해 그 맵핑된 밝기 차이 신호를 메디안 필터링하며, 또한 움직임 확장을 위해 이 필터링된 신호는 확장부를 통과시킨다.
한편, 수평방향 움직임 검출부(14)는 상기 필드 데이터 제공부(11)로부터 연속하는 필드 데이터를 제공받아 필드간의 수평방향 움직임을 정확하게 추정하고, 그 방향에 따라 움직임이 있는 경우에도 시간적 보상이 가능하게 하는데, 이의 작용을 좀더 상세히 설명하면 다음과 같다.
도 2에서와 같이 상기 수평방향 움직임 검출부(14)에서 움직임 검출에 이용되는 (n-2)번째 필드의 두 라인과 (n-1)번째 필드의 한 라인을 결합하여 하나의 프레임 영상블록(A 프레임 블록)을 형성하고, n번째 필드의 두 라인과 (n+1)번째 필드의 한 라인을 결합하여 또 다른 하나의 프레임 영상블록(B 프레임 블록)을 형성하여 현재 보간하고자 하는 화소를 중심으로 A프레임 블록 및 B프레임 블록에 대해 일정 영상 영역을 설정한다.
이때, 설정된 영상 영역의 수직방향의 화소수는 3이 되고, 수평방향의 화소수는 응용 방법에 따라 다양하게 설정할 수 있다. 즉, 움직임 추정을 위한 기본 단위의 영상 영역은 3×N(수직방향 화소수×수평방향 화소수)이 된다. 그리고 나서, 이렇게 설정된 영상 영역을 서로 반대 방향의 수평방향으로 일정 간격씩 이동시키면서 블록매칭에러(BME: Block Matching Error)를 구한다.
이때, 기본 단위 영상 영역의 이동 간격은 응용에 따라 다양하게 설정할 수 있으나, 일반적으로, 1/4화소에서 1화소 정도의 이동 간격을 주로 사용한다. 이러한 블록 매칭의 과정이 현재 보간하고자 하는 화소 단위로 연속적으로 수행되는데, 이는 다음의 (수학식1)로 표현할 수 있다.
여기서, 보간하고자 하는 화소는 도 1에서 보는 바와 같이 n번째 필드의 수직 방향으로 i번째, 수평 방향으로 j번째에 위치한 화소이고, k는 현재 보간하고자 하는 화소를 중심으로 이동 기본 단위 영상 영역간 수평방향 간격이다. 또한, BME(i,j,k)는 현재 보간하고자 하는 화소의 수평방향 간격 k에 따른 블록매칭에러이다.
보간하고자 하는 각 화소에 대해 상기와 같이 구해진 BME 중 최소값을 갖는 BME를 선택하고, 이때의 최소값의 BME와 현재 보간하고자 하는 화소의 위치에 해당하는 방향에 따라 시간적으로 선형보간한 값 및 이러한 선형 보간에 사용된 이전 및 이후 필드의 화소값을 라인 보간부(16)로 출력한다. k 이동간격에서 BME가 최소값을 갖는다면 이 방향에 따라 시간적으로 선형보간된 화소값은 다음의 (수학식2)로 표현할 수 있다.
p_temporal (i,j,n) = (p(i,j-k/2,n-1) + p(i,j+k/2,n+1))/2
상기의 설명에서와 같이 본 발명에 의한 움직임 추정방법은 통상의 움직임 검출을 위해 사용되는 영상 영역에 대해서만 적용하게 되므로 별도의 메모리와 같은 하드웨어의 추가 없이 수평방향 움직임이 있는 영상에 대해 움직임을 추정하여 보상함으로써 통상의 움직임 적응형 인터레이싱 방법에 비하여 많은 하드웨어 추가 없이 화질을 향상시킬 수 있게 된다.
또한, 에지방향 검출부(15)는 보간하고자 하는 필드 영상의 에지들의 방향을 추정하여 그 방향에 따른 보간을 가능하게 한다. 이러한 기능은 통상의 방법을 이용하여 구현 가능하다.
라인 보간부(16)의 입력신호는 도 3에서와 같이, 상기 후처리부(13)의 출력인 움직임 정도값(M),필드데이터 제공부(11)의 출력인 공간적으로 현재 보간하고자 하는 화소의 바로 위쪽 (p(i-1,,j,n)) 및 아래쪽(p(i+1,j,n))에 위치한 화소와 현재 보간하는 화소와 공간적으로 동일한 위치에 존재하는 이전(p(i,j,n-1)) 및 이후(p(i,j,n+1)) 필드의 화소, 에지방향 검출부(15)의 출력인 다음의 (수학식3)과 같은 에지 방향에 따른 공간적 선형 보간값(p_spatial (i,j,n)), 그때의 공간적 블록매칭에러(BME_spatial) 그리고, 공간적 선형 보간에 사용되는 화소들(p(i+1,j-α/2,n), (p(i-1,j+α/2,n)), 수평방향 움직임 추정부(14)의 출력인 시간적으로 움직임 보상된 보간값(p_temporal (i,j,n)), 그때의 시간적 블록매칭에러(BME_temporal), 그리고 시간적 움직임 보상에 사용된 화소값(p(i,j-k/2,n-1)p(i,j+k/2,n+1))이다.
p_spatial (i,j,n) = (p(i+1, j- alpha/2,n) + p(i-1,j+ alpha/2,n))/2
상기 라인 보간부(16)는 상기와 같은 입력들에 대해 도 4와 같은 룰(rule) 및 필터링을 적용하여 최종의 보간값(p(_moving(i,j,n))을 출력하게 된다. 상기 도 4에 도시한 룰 및 필터링은 하나의 실시예를 보인 것으로, 상기 라인 보간부(16)에서의 최종 보간값 산출 방법이 이것으로 한정되는 것은 아니다.
상기 룰 및 필터링의 개념은 정확한 움직임 추정이 이루어졌다고 판단되는 경우에 시간적 움직임 보상을 수행하고, 모호한 경우에 대해서는 시간적 움직임 추정과 공간적 에지 방향 추정의 예상된 정확도에 따라 절충된 화소값을 사용하며, 부정확하다고 판단되는 경우에 대해서는 공간적 에지 방향 추정에 따라 보간된 화소값을 사용하여 추정된 에지 방향의 기울기에 따라 적절한 필터링을 수행하게 된다. 최종적으로 구하고자 하는 보간화소값()은 다음의 (수학식4) 및 (수학식5)와 같이 표현할 수 있다.
p_"stationary" (i,j,n) = (p(i,j,n-1) + p(i,j,n+1))/2
이상에서 상세히 설명한 바와 같이 본 발명은 연속되는 필드 데이터로부터 프레임간 움직임을 검출하여 수평방방향 움직임을 추정하고, 그 방향에 따라 움직임이 있는 경우에도 시간적 보상을 위해 움직임 추정을 위한 단위 영역에 대해 서로 다른 수평방향으로 일정 간격씩 이동하면서 블록매칭에러를 구한 다음 그 블록매칭에러 및 시간 움직임 보상에 사용된 화소값의 영상을 고려하여 최종 보간값을 산출하는 방식으로 라인보간을 수행함으로써, 디인터레이싱 장치의 보간 후 화질을 향상시킬 수 있는 효과가 있다. 또한, 회로가 간단하게 구현되므로 원가를 절감할 수 있는 효과가 있다.

Claims (7)

  1. 필드 데이터 제공부(11)로부터 연속되는 필드 데이터를 입력받아 필드간 및 프레임간 움직임 정도를 검출하는 움직임 검출부(12) 및, 검출된 움직임의 신뢰도를 향상시키기 위한 후처리부(13)와; 수평방향으로의 움직임을 추정하고 그 방향에 따라 움직임이 있는 경우에 대한 시간적 보상을 위해 움직임 추정을 위한 단위 영역에 대하여 서로 다른 수평방향으로 일정 간격씩 이동하면서 블록매칭에러를 구하여 선형보간된 화소값을 검출하는 수평방향 움직임 추정부(14)와; 상기 필드데이터 제공부(11)로부터 필드 데이터 및 수평라인 데이터를 제공받아 에지 방향을 검출하는 에지방향 검출부(15)와; 상기 후처리부(13), 수평방향 움직임 추정부(14) 및 에지방향 검출부(15)의 출력정보를 입력받아, 블록매칭에러 값 및 시간 움직임 보상에 사용된 화소값의 영향을 고려하여 최종 보간값을 구하는 라인 보간부(16)로 구성한 것을 특징으로 하는 영상 움직임 보상 장치.
  2. 인접된 각 두 라인을 결합하여 두개의 프레임 영상블록을 형성한 후 현재 보간하고자 하는 화소를 중심으로 각각의 일정 영상 영역을 설정한 후 그 영상 영역을 서로 반대 방향의 수평방향으로 일정 간격씩 이동시키면서 블록매칭에러를 구하는 제1과정과; 보간하고자 하는 각 화소에 대해 최소값을 갖는 블록매칭에러, 현재 보간하고자 하는 화소의 위치에 해당하는 방향에 따라 시간적으로 선형보간한 값 및 선형 보간에 사용된 인접 필드의 화소값을 출력하는 제2과정과; 상기 블록매칭에러 값 및 시간 움직임 보상에 사용된 화소값의 영향을 고려하여 최종의 보간값을 산출하고, 이를 이용하여 라인 보간을 실시하는 제3과정으로 이루어지는 것을 특징으로 하는 영상 움직임 보상 방법.
  3. 제2항에 있어서, 제1과정의 일정 영상 영역은 움직임 검출에 이용되는 (n-2)번째 필드의 두 라인과 (n-1)번째 필드의 한 라인을 결합하여 제1프레임 영상블록을 형성하고, n번째 필드의 두 라인과 (n+1)번째 필드의 한 라인을 결합하여 또 제2프레임 영상블록을 형성한 후, 현재 보간하고자 하는 화소를 중심으로 그 제1프레임 영상블록과 제2프레임 영상블록 상에서 설정되는 영역임을 특징으로 하는 영상 움직임 보상 방법.
  4. 제2항에 있어서, 제1과정의 일정 영상 영역은 "수직방향 화소수×수평방향 화소수" 임을 특징으로 하는 영상 움직임 보상 방법.
  5. 제2항에 있어서, 제1과정의 영상 영역 이동간격은 1/4화소에서 1화소 정도인 것을 특징으로 하는 영상 움직임 보상 방법.
  6. 제2항에 있어서, 제3과정의 입력데이터는 움직임 정도값, 공간적으로 현재 보간하고자 하는 화소에 이웃하는 화소 및 공간적으로 동일한 위치에 존재하는 이전,이후 필드의 화소, 에지 방향에 따른 공간적 선형 보간값 및 그때의 공간적 블록매칭에러, 공간적 선형 보간에 사용되는 화소들, 시간적으로 움직임 보상된 보간값 및 그때의 시간적 블록매칭에러, 시간적 움직임 보상에 사용된 화소값을 포함하는 것을 특징으로 하는 영상 움직임 보상 방법.
  7. 제2항에 있어서, 제3과정은 정확한 움직임 추정이 이루어졌다고 판단되는 경우에 시간적 움직임 보상을 수행하는 제1단계와; 모호한 경우에 대해서는 시간적 움직임 추정과 공간적 에지 방향 추정의 예상된 정확도에 따라 절충된 화소값을 사용하는 제2단계와; 부정확하다고 판단되는 경우에 대해서는 공간적 에지 방향 추정에 따라 보간된 화소값을 사용하여 추정된 에지 방향의 기울기에 따라 적절한 필터링을 수행하는 제3단계로 이루어지는 것을 특징으로 하는 영상 움직임 보상 방법.
KR1020010004883A 2001-02-01 2001-02-01 영상 움직임 보상 장치 및 방법 KR100360893B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020010004883A KR100360893B1 (ko) 2001-02-01 2001-02-01 영상 움직임 보상 장치 및 방법
US10/059,173 US6985187B2 (en) 2001-02-01 2002-01-31 Motion-adaptive interpolation apparatus and method thereof

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020010004883A KR100360893B1 (ko) 2001-02-01 2001-02-01 영상 움직임 보상 장치 및 방법

Publications (2)

Publication Number Publication Date
KR20020064440A KR20020064440A (ko) 2002-08-09
KR100360893B1 true KR100360893B1 (ko) 2002-11-13

Family

ID=19705207

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020010004883A KR100360893B1 (ko) 2001-02-01 2001-02-01 영상 움직임 보상 장치 및 방법

Country Status (2)

Country Link
US (1) US6985187B2 (ko)
KR (1) KR100360893B1 (ko)

Families Citing this family (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7907793B1 (en) 2001-05-04 2011-03-15 Legend Films Inc. Image sequence depth enhancement system and method
US8396328B2 (en) 2001-05-04 2013-03-12 Legend3D, Inc. Minimal artifact image sequence depth enhancement system and method
US8401336B2 (en) * 2001-05-04 2013-03-19 Legend3D, Inc. System and method for rapid image sequence depth enhancement with augmented computer-generated elements
US9286941B2 (en) 2001-05-04 2016-03-15 Legend3D, Inc. Image sequence enhancement and motion picture project management system
US7423686B2 (en) * 2002-03-14 2008-09-09 Canon Kabushiki Kaisha Image pickup apparatus having auto-focus control and image pickup method
JP3767513B2 (ja) * 2002-04-26 2006-04-19 三菱電機株式会社 画素補間回路、走査線補間回路、画素補間方法、走査線補間方法、および応用装置
US7099509B2 (en) * 2002-10-11 2006-08-29 Samsung Electronics Co., Ltd. Method of edge direction detection based on the correlations between pixels of a vector and an edge direction detection system
KR100455397B1 (ko) * 2002-11-20 2004-11-06 삼성전자주식회사 글로벌 모션 보상으로 수직 해상도를 향상시키는 모션보상 디인터레이싱 장치 및 그 방법
BR0307197A (pt) 2002-11-25 2005-08-23 Matsushita Electric Ind Co Ltd Método de compensação de movimento, método de codificação de imagem e método de decodificação de imagem
KR100484182B1 (ko) * 2002-12-03 2005-04-20 삼성전자주식회사 디인터레이싱 장치 및 방법
KR100499144B1 (ko) * 2003-03-06 2005-07-04 삼성전자주식회사 적응적 양방향 움직임 추정 방법을 이용한 내삽 영상의움직임 벡터 생성 방법 및 장치
JP4322031B2 (ja) * 2003-03-27 2009-08-26 株式会社日立製作所 記憶装置
GB2401502B (en) * 2003-05-07 2007-02-14 British Broadcasting Corp Data processing
KR100563866B1 (ko) * 2003-05-19 2006-03-23 매크로영상기술(주) 영상 신호의 디인터레이스 방법 및 장치
US7129989B2 (en) * 2003-08-11 2006-10-31 Avermedia Technologies, Inc. Four-field motion adaptive de-interlacing
TWI252039B (en) * 2003-09-25 2006-03-21 Himax Tech Inc De-interlacing device and the method thereof
US7345708B2 (en) * 2003-12-23 2008-03-18 Lsi Logic Corporation Method and apparatus for video deinterlacing and format conversion
US7349026B2 (en) * 2004-01-30 2008-03-25 Broadcom Corporation Method and system for pixel constellations in motion adaptive deinterlacer
JP2005333254A (ja) * 2004-05-18 2005-12-02 Sony Corp 画像処理装置および画像処理方法
KR100555869B1 (ko) * 2004-06-15 2006-03-03 삼성전자주식회사 저더 검출을 이용한 디인터레이싱 장치 및 방법
DE102005016827A1 (de) * 2005-04-12 2006-10-19 Siemens Ag Adaptive Interpolation bei der Bild- oder Videokodierung
JP2008021126A (ja) * 2006-07-13 2008-01-31 Neuro Solution Corp 画像拡大縮小装置
TWI347130B (en) * 2006-08-29 2011-08-11 Realtek Semiconductor Corp Method and apparatus for de-interlacing video data through utilizing horizontal motion estimation and horizontal motion compensation
US20080174694A1 (en) * 2007-01-22 2008-07-24 Horizon Semiconductors Ltd. Method and apparatus for video pixel interpolation
US8134642B2 (en) * 2007-01-24 2012-03-13 Focaltech Systems, Ltd. Method and system for converting interleaved video fields to progressive video frames in spatial domain
US20090046202A1 (en) * 2007-08-17 2009-02-19 Himax Technologies Limited De-interlace method and apparatus
JP4513035B2 (ja) * 2008-03-10 2010-07-28 ソニー株式会社 情報処理装置および方法、並びにプログラム
US20090268088A1 (en) * 2008-04-25 2009-10-29 Hui Zhou Motion adaptive de-interlacer and method for use therewith
US20100103313A1 (en) * 2008-10-23 2010-04-29 Kabushiki Kaisha Toshiba Signal processor and signal processing method
US8189873B2 (en) * 2009-01-13 2012-05-29 Himax Technologies Limited Method of motion detection using motion information of neighboring pixels
US8189874B2 (en) * 2009-01-13 2012-05-29 Himax Technologies Limited Method for motion detection of horizontal line
US8665367B2 (en) * 2010-01-29 2014-03-04 Sharp Laboratories Of America, Inc. Video resolution enhancement technique
US8730232B2 (en) 2011-02-01 2014-05-20 Legend3D, Inc. Director-style based 2D to 3D movie conversion system and method
US9288476B2 (en) 2011-02-17 2016-03-15 Legend3D, Inc. System and method for real-time depth modification of stereo images of a virtual reality environment
US9241147B2 (en) 2013-05-01 2016-01-19 Legend3D, Inc. External depth map transformation method for conversion of two-dimensional images to stereoscopic images
US9113130B2 (en) 2012-02-06 2015-08-18 Legend3D, Inc. Multi-stage production pipeline system
US9282321B2 (en) 2011-02-17 2016-03-08 Legend3D, Inc. 3D model multi-reviewer system
US9407904B2 (en) 2013-05-01 2016-08-02 Legend3D, Inc. Method for creating 3D virtual reality from 2D images
CN102867310B (zh) * 2011-07-05 2015-02-04 扬智科技股份有限公司 影像处理方法与影像处理装置
US9007404B2 (en) 2013-03-15 2015-04-14 Legend3D, Inc. Tilt-based look around effect image enhancement method
US9438878B2 (en) 2013-05-01 2016-09-06 Legend3D, Inc. Method of converting 2D video to 3D video using 3D object models
US9609307B1 (en) 2015-09-17 2017-03-28 Legend3D, Inc. Method of converting 2D video to 3D video using machine learning

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4876596A (en) 1988-10-25 1989-10-24 Faroudja Y C Film-to-video converter with scan line doubling
KR940011881B1 (ko) * 1991-12-23 1994-12-27 주식회사 금성사 움직임 검출 및 추정장치
US6104439A (en) * 1992-02-08 2000-08-15 Samsung Electronics Co., Ltd. Method and apparatus for motion estimation
US5583575A (en) * 1993-07-08 1996-12-10 Mitsubishi Denki Kabushiki Kaisha Image reproduction apparatus performing interfield or interframe interpolation
DE69423166T2 (de) * 1993-09-08 2000-07-06 Thomson Consumer Electronics Verfahren und Vorrichtung zur Bewegungsauswertung mit Blockübereinstimmung
US5546130A (en) * 1993-10-11 1996-08-13 Thomson Consumer Electronics S.A. Method and apparatus for forming a video signal using motion estimation and signal paths with different interpolation processing
US5475438A (en) * 1994-03-31 1995-12-12 Zenith Electronics Corporation Five field motion detector for a TV scan line doubler
US5555592A (en) * 1994-12-07 1996-09-17 Crego; Charles R. Paint-can channel cleaner and recycler
KR960028124A (ko) 1994-12-30 1996-07-22 이몬 제이. 월 필름 소스에 의해 생성된 비디오 필드 식별 방법 및 장치
US5563651A (en) 1994-12-30 1996-10-08 Thomson Consumer Electronics, Inc. Method and apparatus for identifying video fields produced by film sources employing 2-2 and 3-2 pull down sequences
US5596371A (en) 1995-02-02 1997-01-21 Dwin Electronics Inc. Film-mode video line-doubler motion detectors
US5550592A (en) 1995-04-25 1996-08-27 Texas Instruments Incorporated Film mode progressive scan conversion
KR0176568B1 (ko) * 1996-01-27 1999-05-01 김광호 모션과 공간적인 상관도를 이용한 비월순차 변환장치 및 그 방법
US5793435A (en) * 1996-06-25 1998-08-11 Tektronix, Inc. Deinterlacing of video using a variable coefficient spatio-temporal filter
KR100251548B1 (ko) * 1997-11-01 2000-04-15 구자홍 디지털영상을위한움직임추정장치및방법
EP0953253B1 (en) * 1997-11-17 2006-06-14 Koninklijke Philips Electronics N.V. Motion-compensated predictive image encoding and decoding
KR100287850B1 (ko) * 1997-12-31 2001-05-02 구자홍 디티브이의 디인터레이싱 장치 및 그 방법
US6285711B1 (en) * 1998-05-20 2001-09-04 Sharp Laboratories Of America, Inc. Block matching-based method for estimating motion fields and global affine motion parameters in digital video sequences
US6594313B1 (en) * 1998-12-23 2003-07-15 Intel Corporation Increased video playback framerate in low bit-rate video applications
KR100303728B1 (ko) * 1999-07-29 2001-09-29 구자홍 격행주사 영상의 디인터레이싱 방법
GB9920256D0 (en) * 1999-08-26 1999-10-27 Wave Limited M Motion estimation and compensation in video compression
US6731342B2 (en) * 2000-01-06 2004-05-04 Lg Electronics Inc. Deinterlacing apparatus and method using edge direction detection and pixel interplation
US6414719B1 (en) * 2000-05-26 2002-07-02 Sarnoff Corporation Motion adaptive median filter for interlace to progressive scan conversion

Also Published As

Publication number Publication date
KR20020064440A (ko) 2002-08-09
US20020130969A1 (en) 2002-09-19
US6985187B2 (en) 2006-01-10

Similar Documents

Publication Publication Date Title
KR100360893B1 (ko) 영상 움직임 보상 장치 및 방법
KR100282397B1 (ko) 디지탈 영상 데이터의 디인터레이싱 장치
JP5877469B2 (ja) 動き推定システムにおいてモーメント及び加速度ベクトルを使用するオブジェクト追跡
KR100482898B1 (ko) 모션벡터를추정하는방법,장치및그장치를포함하는비디오디스플레이장치
KR100787675B1 (ko) 두 개의 기준 프레임 사이에 보간 프레임을 생성하기 위한방법, 컴퓨터 프로그램 제품 및 장치
US6999128B2 (en) Stillness judging device and scanning line interpolating device having it
KR20040061244A (ko) 디-인터레이싱 방법 및 그 장치
US8189105B2 (en) Systems and methods of motion and edge adaptive processing including motion compensation features
KR20070055212A (ko) 프레임 보간장치, 프레임 보간방법 및 움직임 신뢰성평가장치
KR20040009967A (ko) 디인터레이싱장치 및 방법
JPH07505749A (ja) ディジタルビデオ信号の画像シーケンスにおける不所望の全体的画像不安定性の推定方法
JP2001507552A (ja) 隠れた／露出した像部分の動きベクトル予測及び検知
JPS63313984A (ja) テレビジョン画像の動きベクトル処理装置
KR20050061556A (ko) 고장시 조치를 갖는 이미지 처리 유닛
KR100857731B1 (ko) 움직임 추정을 용이하게 하는 방법 및 장치
KR100968642B1 (ko) 비월된 비디오 신호로부터 움직임 벡터를 계산하기 위한 방법 및 보간 디바이스와, 보간 디바이스를 포함하는 디스플레이 디바이스와, 컴퓨터 판독가능 매체
KR100955415B1 (ko) 움직임 파라미터 세트 및 화상 반복 패턴을 제공하기 위한 방법, 컴퓨터 판독가능 저장 매체 및 집적 회로와, 움직임 파라미터를 제공하기 위한 컴퓨터
EP0561561B1 (en) Digital video signal processing
JPH08163573A (ja) 動きベクトル検出装置、およびこの装置を用いた順次走査変換装置
CN111294545B (zh) 图像数据插值方法及装置、存储介质、终端
FI97663B (fi) Menetelmä liikkeen tunnistamiseksi videosignaalista
KR20010002659A (ko) 디인터레이싱 장치 및 방법
KR100351160B1 (ko) 영상 움직임 보상 장치 및 방법
KR100931110B1 (ko) 퍼지 룰 기반 에지 복원 알고리즘을 이용하는 디인터레이싱장치 및 방법
JP4463171B2 (ja) 自己相関値算出方法及び補間画素生成方法、それらの装置並びにそれらのプログラム

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20120926

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20130924

Year of fee payment: 12

FPAY Annual fee payment

Payment date: 20140924

Year of fee payment: 13

FPAY Annual fee payment

Payment date: 20150924

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20160923

Year of fee payment: 15

LAPS Lapse due to unpaid annual fee