KR20060084780A - 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출방법 및 시스템 - Google Patents

인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출방법 및 시스템 Download PDF

Info

Publication number
KR20060084780A
KR20060084780A KR1020050099328A KR20050099328A KR20060084780A KR 20060084780 A KR20060084780 A KR 20060084780A KR 1020050099328 A KR1020050099328 A KR 1020050099328A KR 20050099328 A KR20050099328 A KR 20050099328A KR 20060084780 A KR20060084780 A KR 20060084780A
Authority
KR
South Korea
Prior art keywords
motion
signal
motion detection
detection signal
units
Prior art date
Application number
KR1020050099328A
Other languages
English (en)
Other versions
KR100739744B1 (ko
Inventor
김영택
지 쥬
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Publication of KR20060084780A publication Critical patent/KR20060084780A/ko
Application granted granted Critical
Publication of KR100739744B1 publication Critical patent/KR100739744B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0117—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving conversion of the spatial resolution of the incoming video signal
    • H04N7/012—Conversion between an interlaced and a progressive signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0135—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes
    • H04N7/0137—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level involving interpolation processes dependent on presence/absence of motion, e.g. of motion zones

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Graphics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Television Systems (AREA)

Abstract

움직임 결정 값은 인터레이스트(interlaced) 비디오 시퀀스에 있는 비디오 이미지의 주어진 영역에서 움직임이 생기는지에 대한 믿을 수 있는 추정치를 제공한다. 움직임 검출은 특히 인터레이스트 비디오를 프로그레시브(progressive) 비디오로 변환하는데 적용이 가능하다. 우선 입력은 한 프레임에서의 첫 번째 영상명과 두 번째 영상면 사이의 차로부터 프레임 차 신호를 계산하는 절대값 형성기로 공급된다. 점 단위의 움직임 검출 신호는 프레임 차 신호와 비디오 시퀀스에서의 잡음에 기초하여 계산되며, 점 단위의 움직임 검출 신호는 잡음-적응적이다. 점 단위의 움직임 결정 신호는 그 다음에 점 단위의 움직임 결정 신호를 하나의 영상면 만큼 지연된 인접한 점 단위의 움직임 검출 신호와 결합시키는 영역 단위의 움직임 검출이 뒤따른다. 움직임 결정 값은 그 다음에 영역 단위의 움직임 검출 신호로부터 계산되고 공간적으로 보간된 비디오 신호 값 또는 시간적으로 보간된 비디오 신호 값이 출력으로 이용되어야 하는지 여부를 선택하는 것과 같이 비디오 신호 처리 시스템에서 더 처리하기 위해 출력된다.

Description

인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출 방법 및 시스템{Method and System of Noise-adaptive Motion Detection in an Interlaced Video Sequence}
도 1은 인터레이스트 비디오 시퀀스의 두 개의 병렬로 놓인 영상면에 대한 도식적인 개관 예이다.
도 2는 본 발명의 일 실시예에 따른 순차주사화 문제를 설명하기에 알맞은 세 개의 영상면들의 도식적인 일례이다.
도 3은 본 발명의 일 실시예에 따른 순차주사화 처리를 설명하는 더욱 상세한 개관이다.
도 4는 본 발명에 따른 필터된 프레임 차의 예시 분포를 보여준다.
도 5는 본 발명에 따른 움직임 결정 신호를 계산하는 예들을 보여준다.
도 6은 본 발명에 따른 움직임 결정 요인(parameter)을 계산하는 잡음-적응 움직임 검출의 일 실시예의 기능적 블록도를 보여준다.
도 7은 본 발명의 일 실시예에 따른 순차주사화 시스템의 기능적 블록도를 보여준다.
본 발명은 일반적으로 비디오 시퀀스들에서 움직임 검출에 관한 것이며, 특히 인터레이스트(interlaced) 비디오 시퀀스들에서 잡음-적응 움직임 검출에 관한 것이다.
현재의 디지털 TV(DTV) 시스템들의 개발에 있어서, 많은 다른 DTV의 세계적인 표준들에서 채택된 다양한 비디오 포맷(format)들 때문에 비디오 포맷 변환부들을 사용하는 것은 필수적이다. 예를 들면, 북미(North America)의 ATSC DTV 표준 시스템은 1080x1920 인터레이스트(interlaced) 비디오, 720x1280 프로그레시브(progressive) 비디오, 720x480 인터레이스트 및 프로그레시브 비디오 등을 디지털 TV 방송을 위한 표준 비디오 포맷으로 채택하였다.
비디오 포맷 변환 작업은 비디오 신호를 고정된 해상도를 가진 화면 표시 장치(예들 들면, 모니터, FLCD, 플라즈마 디스플레이(Plasma display))상에 적절히 나타내기 위하여 들어오는 비디오 포맷을 지정된 출력 비디오 포맷으로 변환시키는 것이다. 적당한 비디오 포맷 변환 시스템은 DTV 수신기의 시각적 비디오 품질에 직접 영향을 줄 수 있기 때문에 중요하다. 기본적으로, 비디오 포맷 변환 작업은 멀티레이트(multi-rate) 시스템 설계, 다상(poly-phase) 필터 설계 및 인터레이스트를 프로그레시브 주사율(scanning rate)로 또는 단순히 인터레이트스 비디오 신호의 주사율을 2배로 하는 작업을 나타내는 순차주사화방식(deinterlacing)으로의 변환에 대한 고급 알고리즘들을 요구한다.
역사적으로, 순차주사화방식 알고리즘들은 영상면(field)들 사이에 움직임, 선의 깜박임(line flickering), 래스터 라인 가시도(raster line visibility) 및 영상면 깜박임(field flickering)이 있을 때 관찰되는 톱니 모양의 라인(line)과 같은 인터레이스트 비디오 신호의 본질적인 성가신 아티팩트(artifact)들을 제거함으로써 NTSC TV 수신기들의 비디오 품질을 개선하도록 개발되었다. 이는 또한 DTV 수신기에도 적용된다.
움직임 검출이나 움직임 보상을 이용하는 정교한 순차주사화 알고리즘들은 특히 비디오 신호에서 정적인(움직임이 없는) 물체들에 대해 인터레이스트 비디오 신호의 수직 주사율을 2배로 하는 것을 허용한다. 순차주사화 작업에 기초하는 움직임 검출은 아날로그 및 디지털 TV 수신기들에 대해 이용될 수 있다.
다수의 순차주사화 알고리즘들이 존재한다. 이러한 순차주사화 알고리즘들은 2차원(공간적인) 순차주사화 알고리즘들 및 연속적인 인터레이스트 비디오 시퀀스에 내장된 움직임 정보의 이용에 의존하는 2차원(공간과 시간상의) 순차주사화 알고리즘들로 분류될 수 있다. 움직임 검출에 기초하는 3차원 순차주사화 알고리즘은 2차원 순차주사화 알고리즘보다 더 만족스러운 성능을 제공한다는 사실은 잘 알려져 있다. 3차원 순차주사화 알고리즘의 요점은 인터레이스트 비디오 신호들에서 움직임을 정밀하게 검출하는 것이다.
기존의 방법들은 프레임의 차 신호(difference signal) 및 수직 방향에서 샘플 상관관계에 기초하는 움직임 결정 요소를 추정하는 것을 나타낸다. 이들 방법들은 값이 보간(interpolation)되어질 샘플링 포인트(sampling point)의 수직 방향에서의 샘플 상관관계을 이용함으로써 부정확한 움직임 검출에 의해 발생할 수 있 는 시각적 아티팩트들을 제거하는 방법을 제공한다. 그러나, 이러한 방법들은 수직 방향으로 고주파 성분들이 있는 때에는 진정한 움직임 검출을 제공하지 않을 수도 있다. 결과적으로, 이러한 방법들은 영상면들 사이에 실제 움직임이 없는 때에 조차 수직 해상도를 증가시키지 않는다. 다른 방법들에서는, 움직임 검출 신호를 결정하기 위하여 프레임 차를 필터링한 결과가 상수값과 비교된다. 그러나, 이러한 방법들에서는, 비디오 시퀀스에 있는 잡음이 증가할 때에 성능이 저하된다.
본 발명이 이루고자 하는 기술적 과제는 인터레이스트 비디오 시퀀스를 프로그레시브 비디오 시퀀스로 변환할 때에 생기는 아티팩트들을 제거하고 잡음에 강건하게 하여 비디오 품질을 개선하도록 하는 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출 방법 및 시스템을 제공하는 것이다.
본 발명은 위 단점들을 역점을 두어 다룬다. 일 실시예에서 본 발명은 영상면들로 구성된 인터레이스트 비디오 시퀀스를 가진 비디오 신호를 입력하는 단계; 비디오 시퀀스에서 이전의 영상면과 다음의 영상면 사이에서의 차로부터 프레임 차 신호를 계산하는 단계; 프레임 차 신호 및 비디오 시퀀스에 있는 잡음에 기초하여 잡음-적응적인 점 단위의 움직임 검출 신호를 계산하는 단계; 및 점 단위의 움직임 검출 신호의 함수로서 움직임 결정 값을 계산하는 단계를 포함하는 비디오 처리 시스템에 대해 움직임 결정 값을 계산하는 방법을 제공한다.
다른 면에서는, 본 발명은 주어진 비디오 영상면에서 최소한 하나의 인접한 위치의 비디오 신호로부터 주어진 위치에서의 비디오 신호의 값을 공간적으로 보간하는 단계; 시간적으로 인접한 비디오 영상면들에서 동일한 위치에 있는 비디오 신호로부터 주어진 위치에서의 비디오 신호 값을 시간적으로 보간하는 단계; 위에서 논의한 것과 같이 동일한 위치에 대해 움직임 결정 값을 형성하는 단계; 및 공간적으로 보간된 신호 및 시간적으로 보간된 신호로부터 주어진 위치에서의 비디오 신호에 대해 출력 신호를 혼합시키며 움직임 결정 값에 따라 출력 신호에 가중치를 더하는 단계를 포함하는 인터레이스트 비디오 신호들을 처리하는 방법을 제공한다.
본 발명은 위 방법들을 구현하기 위한 시스템들을 더 제공한다. 본 발명의 다른 실시예들, 특징들 및 이점들은 첨부된 도면들과 함께 아래의 상세한 설명으로부터 곧 알 수 있을 것이다.
일 실시예에서 본 발명은 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 결정 요인을 추정하는 강건한 방법을 제공한다. 더욱이, 본 발명은 움직임 결정 요인 추정 방법을 이용하는 순차주사화 시스템을 제공한다.
순차 주사화 문제 및 본 발명의 방법들을 체계적으로 설명하기 위하여, 아래의 상세한 설명에서
Figure 112005059527456-PAT00001
은 시간 순간 t=n에서 들어오는 인터레이스트 비디오 영상면을 나타내고,
Figure 112005059527456-PAT00002
는 v가 수직 위치를 나타내며 h는 수평 위치를 나타내는 기하학상의 위치 (v,h)에서 비디오 신호의 연관된 값을 나타낸다고 한다.
도 1에 있는 예를 참조하면, t=m에서의 이미지는 인터레이스트 비디오 시퀀스의 상위 영상면(top field)(10)을 나타내고 t=m+1에서의 이미지는 인터레이스트 비디오 시퀀스의 하위 영상면(bottom field)(20)를 나타낸다. 인터레이스트 비디오 신호의 정의에 의해, 만약
Figure 112005059527456-PAT00003
가 상위 영상면(10)이라면
Figure 112005059527456-PAT00004
의 신호 값들은 짝수(즉 v=0,2,4,...) 라인(line)들에 대해서만 이용 가능하다. 마찬가지로, 만약
Figure 112005059527456-PAT00005
가 하위 영상면(20)이라면
Figure 112005059527456-PAT00006
의 신호 값들은 홀수(즉 v=1,3,5,...) 라인들에 대해서만 이용 가능하다. 역으로, 만약
Figure 112005059527456-PAT00007
이 상위 영상면(10)이라면
Figure 112005059527456-PAT00008
의 신호 값들은 홀수 라인들에 대해서 이용 가능하지 않고 만약
Figure 112005059527456-PAT00009
이 하위 영상면(20)이라면
Figure 112005059527456-PAT00010
의 신호 값들은 짝수 라인들에 대해서 이용 가능하지 않다.
상위 및 하위 영상면들(10 및 20)은 일반적으로 시간상에서 번갈아 이용 가능하다. 입력 인터레이스트 비디오는 독립적이고 동일하게 분포된 추가적 및 정적인 평균이 0이고 분산
Figure 112005059527456-PAT00011
을 가진 가우시안 잡음(Gaussian noise)에 의해 훼손된다고 가정한다. 즉, 각 이용 가능한 신호 값
Figure 112005059527456-PAT00012
는
Figure 112005059527456-PAT00013
로 나타낼 수 있으며,
Figure 112005059527456-PAT00014
는 잡음 훼손이 없는 진정한 픽셀 값이고
Figure 112005059527456-PAT00015
은 가우시안 분포 잡음 성분이다. 잡음 분산
Figure 112005059527456-PAT00016
은 이미 알려져 있거나, 수동적으로 설정 또는 잡음 추정부에 의해 미리 검출된다고 더 가정한다.
Figure 112005059527456-PAT00017
는 잡음 표준편차를 나타낸다.
인터레이스트 비디오 신호에 대한 위 설명에 기초하면, 순차주사화 문제는 각 영상면에서의 이용할 수 없는 신호 값들을 재구성하거나 보간하기 위한 처리라고 말할 수 있다. 즉, 순차주사화 문제는 상위 영상면
Figure 112005059527456-PAT00018
에 대해 홀수 라인들 (v=1,3,5,...)에서의
Figure 112005059527456-PAT00019
의 신호 값들을 재구성하고 하위 영상면
Figure 112005059527456-PAT00020
에 대해 짝수 라인들(v=0,2,4,...)에서의
Figure 112005059527456-PAT00021
의 신호 값들을 재구성하는 것이다.
여기서 설명을 명확히 하기 위해, 순차주사화 문제는
Figure 112005059527456-PAT00022
에서의 라인들의 신호 값들이 이용 가능할 때 이용 가능하지 않은 i번째 라인에서의
Figure 112005059527456-PAT00023
의 신호 값을 재구성하거나 보간하는 처리로 단순화된다. 더욱 단순화하면, 순차주사화는 원래 이용 가능하지 않은
Figure 112005059527456-PAT00024
의 값을 보간하는 것이다.
Figure 112005059527456-PAT00025
과
Figure 112005059527456-PAT00026
은
Figure 112005059527456-PAT00027
과 다른 샘플링 위상(phase)을 가지기 때문에,
Figure 112005059527456-PAT00028
과
Figure 112005059527456-PAT00029
의 신호 값들은 이용 가능하며, 움직임 검출이 순차주사화 문제에 통합될 수 있다. 이 관계는 도 2에서 예로서 묘사되며, 점선들(또는 흰 원)은 "데이터가 이용 가능하지 않음"을 나타내고 실선들(또는 검은 원)은 "이용 가능한 데이터"를 나타낸다.
도 3을 참조하면, 본 발명에 따른 움직임 결정 요인
Figure 112005059527456-PAT00030
을 추정하는 방법이 이제 설명된다. 기본적으로,
Figure 112005059527456-PAT00031
는 들어오는 인터레이스트 비디오 시퀀스로부터 추정되며 인터레이스트 비디오 시퀀스에서 점 단위의 움직임 정도와 연관된다.
Figure 112005059527456-PAT00032
추정의 중요성은 도 2와 도 3으로부터 쉽게 이해될 수 있다.
Figure 112005059527456-PAT00033
를 보간할 때에 정밀한 움직임 검출 정보가 이용 가능하고, 공간적 위치 (i,h)에서 아무런 움직임도 검출되지 않는다고 가정하면, 그때
Figure 112005059527456-PAT00034
에 대한 최선의 보간은
Figure 112005059527456-PAT00035
의 값을 이용하는 것이다. 이는 공간적 위치 (i,h)에서 t=n-1과 t=n+1 사이에서 아무런 움직임도 개입되지 않았기 때문이며,
Figure 112005059527456-PAT00036
의 값 은
Figure 112005059527456-PAT00037
의 값에 근접할 것이라는 것을 의미한다. 움직임 결정 요인은 순차주사화에 대한 움직임 정보의 이용 및 아래에 기술된 시간적 정보의 적절한 혼합을 허용한다.
우선, 프레임 차 신호
Figure 112005059527456-PAT00038
는 영상면들
Figure 112005059527456-PAT00039
과
Figure 112005059527456-PAT00040
사이에서 생기는 장면의 변화와 연관된
Figure 112005059527456-PAT00041
와 같이 하나의 프레임 간격에 있는 영상면들 사이에서의 차로서 계산된다. 프레임 차 신호는 그 다음에
Figure 112005059527456-PAT00042
로서 저역 통과 필터되며,
Figure 112005059527456-PAT00043
는 입력 비디오 신호에 대한 저역 통과 필터링 처리를 나타낸다.
저역 통과 필터의
Figure 112005059527456-PAT00044
커널 (
Figure 112005059527456-PAT00045
),
Figure 112005059527456-PAT00046
은
Figure 112005059527456-PAT00047
로 표현될 수 있으며,
Figure 112005059527456-PAT00048
는 미리 결정된 정규화된(normalized) 계수들의 집합을 나타낸다(즉,
Figure 112005059527456-PAT00049
).
2004년 11월 17일에 출원되고, "Methods to estimate noise variance from a video sequence"라고 제목을 단 공통으로 양도된 특허 출원에 기초하면, 비-움직임(non-motion) 영역에서의 모든 값
Figure 112005059527456-PAT00050
는 확률 밀도 함수(probability density function : p.d.f)가
Figure 112005059527456-PAT00051
인 랜덤 변수(random variable)임을 알 수 있다.
비-움직임 영역에서 필터된 결과
Figure 112005059527456-PAT00052
은 또한
Figure 112005059527456-PAT00053
및
Figure 112005059527456-PAT00054
을 만족하는, p.d.f.
Figure 112005059527456-PAT00055
인 랜덤 변수이다.
일례에서, 만약 잡음 표준편차가
Figure 112005059527456-PAT00056
=3.0이면, 커널은
Figure 112005059527456-PAT00057
이며, p.d.f
Figure 112005059527456-PAT00058
는 도 4에서 보인 것과 같다.
Figure 112005059527456-PAT00059
는 커널
Figure 112005059527456-PAT00060
에 선택에 의존하는 전역-통과 필터(all-pass filter)일 수 있다는 것이 언급되어야 한다. 이와 같이, 커널이 M=N=1이고
Figure 112005059527456-PAT00061
=1인 집합이라면,
Figure 112005059527456-PAT00062
는 전역-통과 필터가 되며, 따라서
Figure 112005059527456-PAT00063
이다.
다음에, 점 단위의 움직임 검출 신호는 아래 관계식 (1)로서 계산된다.
Figure 112005059527456-PAT00064
여기서
Figure 112005059527456-PAT00065
은 쓰레숄드(threshold) 함수를 나타낸다.
Figure 112005059527456-PAT00066
의 구현 예는 아래 관계식 (2)와 같이 표현될 수 있다.
Figure 112005059527456-PAT00067
여기서 K는 상수 값이다. 위 함수
Figure 112005059527456-PAT00068
는 도 5A에서 곡선 예로서 설명된, 하드-스위칭(hard-switching) 움직임 검출 신호들을 출력한다.
쓰레숄드
Figure 112005059527456-PAT00069
는 비디오 시퀀스의 잡음 표준편차에 따라 자동적으로 조정된다. 그래서 잡음에 대해 강건한 성능을 얻을 수 있다. 값 K는 비-움직임 픽셀을 움직임 픽셀로 검출할 오차 확률에 의해 결정될 수 있다.
Figure 112005059527456-PAT00070
다른 잡음-적응 방법들 또한 소프트-스위칭(soft-switching) 움직임 검출 신호들을 계산하는데 이용될 수 있다.
Figure 112005059527456-PAT00071
의 확률론적인 특징으로부터, 단조 감소하는 곡선을 도 5B에서부터 5F까지에서 예들로써 설명된 것과 같이 함수
Figure 112005059527456-PAT00072
를 구현하기 위해 이용할 수 있다.
그 다음에, 점 단위의 움직임 검출 신호는 움직임 결정 요인
Figure 112005059527456-PAT00073
를 얻기 위하여 공간 및 시간적 영역에서 필터된다.
Figure 112005059527456-PAT00074
필터
Figure 112005059527456-PAT00075
의 구현 예는 도 6에서 보여지며 아래에서 더 설명된다. 이 예에서, 하드-스위칭 점 단위의 움직임 검출 신호가 이용된다. 우선, 영역 단위의 움 직임 검출 신호가
Figure 112005059527456-PAT00076
로서 비선형 방법에 의해 계산된다. 여기서,
Figure 112005059527456-PAT00077
는 관계식 (1)에서의 하나의 영상면이 지연된 움직임 검출 신호이며,
Figure 112005059527456-PAT00078
표기법은 논리 합(logical OR)를 나타낸다. 만약
Figure 112005059527456-PAT00079
과 같은 소프트-스위칭 점 단위의 움직임 검출 신호가 이용된다면, 다른 방법들을 이용할 수 있다.
영역 단위의 움직임 검출 신호는 그 다음에 움직임 결정 요인
Figure 112005059527456-PAT00080
을 형성하기 위하여 저역 통과 필터된다. 저역 통과 필터의
Figure 112005059527456-PAT00081
커널,
Figure 112005059527456-PAT00082
는
Figure 112005059527456-PAT00083
과 같이 표현될 수 있다.
여기서,
Figure 112005059527456-PAT00084
은 미리 결정된 정규화된 계수들을 나타낸다(즉,
Figure 112005059527456-PAT00085
). 예들 들면, 커널
Figure 112005059527456-PAT00086
는
Figure 112005059527456-PAT00087
일 수 있다.
도 6은 위에서 설명한 것과 같이 함수
Figure 112005059527456-PAT00088
를 이용하여 움직임 결정 요인
Figure 112005059527456-PAT00089
를 계산하는 움직임 결정 계산기(100)의 기능 블록도를 보여준다. 움직임 결정 계산기는 인터레이스트 값들
Figure 112005059527456-PAT00090
,
Figure 112005059527456-PAT00091
및
Figure 112005059527456-PAT00092
의 순서화를 제공하는 영상면 메모리들(102)을 포함한다. 덧셈 정션(summing junction)(104)는 영상면들
Figure 112005059527456-PAT00093
과
Figure 112005059527456-PAT00094
사이에서 생기는 장면의 변화와 연관된
Figure 112005059527456-PAT00095
로서 한 프레임 간격에 있는 영상면들 사이에서의 차인
Figure 112005059527456-PAT00096
을 계산하기 위하여 절대값 계산기(106)과 함께 이용된다. 그 다음에 공간적 LPF 필터(108)는
Figure 112005059527456-PAT00097
을 얻기 위하여
Figure 112005059527456-PAT00098
을 저역 통과 필터하는데 이용된다. 쓰레숄드 값
Figure 112005059527456-PAT00099
은 위의
Figure 112005059527456-PAT00100
를 구현하는 잡음-적응 쓰레숄드 함수(110)에서
Figure 112005059527456-PAT00101
에 적용된다. 함수
Figure 112005059527456-PAT00102
는 필터(112)에 삽입되어 있으며, 메모리들(114)는 값들
Figure 112005059527456-PAT00103
의 순차화를 허용하고, OR 정션(116)은 영역 단위의 움직임 검출 신호
Figure 112005059527456-PAT00104
를 제공한다. 영역 단위의 움직임 검출 신호는 움직임 결정 요인
Figure 112005059527456-PAT00105
를 생성하기 위하여 LPF 필터(118)에서 저역 통과 필터된다.
계산된 움직임 결정 요인
Figure 112005059527456-PAT00106
은 그 다음에 공간적으로 보간된 신호와 시간적으로 보간된 신호를 혼합하기위해 이용될 수 있다. 도 7은 인터레이스트 비디오 시퀀스에 대한
Figure 112005059527456-PAT00107
의 값을 보간하기 위한 보간기(200)의 일 실시예의 블록도를 보여준다. 보간기(200)은 영상면 메모리들(202), 공간적 보간기(204), 시간적 보간기(206), 움직임 결정 처리기(208) 및 혼합기(210)을 포함한다. 영상면 메모리들(202)는 인터레이스트 값들
Figure 112005059527456-PAT00108
,
Figure 112005059527456-PAT00109
및
Figure 112005059527456-PAT00110
을 순차화한다.
공간적 보간기(204)는 미리 결정된 알고리즘을 이용함으로써
Figure 112005059527456-PAT00111
의 값을 공간적으로 보간한다. 시간적 보간기(206)은 미리 결정된 알고리즘을 이용함으로써
Figure 112005059527456-PAT00112
의 값을 시간적으로 보간한다. 움직임 결정 처리기(208)은 위(예를 들면 도 6)에서 설명한 것과 같이 움직임 결정 값
Figure 112005059527456-PAT00113
을 계산하며,
Figure 112005059527456-PAT00114
는 보간 위치 (i,h)에서의 움직임의 정도를 나타낸다.
개념적으로, 움직임 결정 요인의 값은
Figure 112005059527456-PAT00115
로서 경계가 정해진다.
Figure 112005059527456-PAT00116
=0은 "움직임이 없음"을 의미하고
Figure 112005059527456-PAT00117
=1은 "움직임"을 의미한다. 혼합기(mixer)(210)은 공간적 보간기(204)의 출력 신호와 시간적 보간기(206)의 출력 신호를 움직임 결정 값
Figure 112005059527456-PAT00118
에 따라 혼합한다.
Figure 112005059527456-PAT00119
및
Figure 112005059527456-PAT00120
가 각각 공간적 보간기(204)와 시간적 보간기(206)의 출력 신호들을 나타낸다고 하면, 그때 혼합기(210)의 출력 신호(즉, 보간된 신호)는 아래 관계식 (3)과 같이 표현될 수 있다.
Figure 112005059527456-PAT00121
Figure 112005059527456-PAT00122
=0(움직임이 없음)일 때
Figure 112005059527456-PAT00123
이고
Figure 112005059527456-PAT00124
=1(움직임이 있음)일 때
Figure 112005059527456-PAT00125
이라는 것을 주목해야 한다.
도 7의 예에서는, 본 발명이 잡음 표준편차에 기초하여 움직임 결정 값
Figure 112005059527456-PAT00126
을 추정하고 추정된 움직임 결정 값에 따라 공간적으로 보간된 신호와 시간적으로 보간된 신호를 혼합하는 것으로 향하고 있기 때문에 공간적 및 시간적 보 간 알고리즘들은 자유롭게 선택될 수 있다.
공간적으로 보간된 신호
Figure 112005059527456-PAT00127
의 예들은 라인 평균에 대응하는
Figure 112005059527456-PAT00128
과 라인 2배화로 알려진 방법에 대응하는
Figure 112005059527456-PAT00129
이다.
시간적으로 보간된 신호
Figure 112005059527456-PAT00130
의 예들은
Figure 112005059527456-PAT00131
와
Figure 112005059527456-PAT00132
이다.
본 발명은 다른 버전들도 가능하지만 특정 바람직한 버전들에 관하여 상당히 상세히 기술되었다. 그래서, 첨부된 청구항들의 사상 및 범위는 여기에 포함된 바람직한 버전들의 상세한 설명에 한정되어서는 안 된다.
본 발명에 따른 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출 방법 및 시스템에 의하면 영상면들의 비디오 시퀀스들로부터 움직임을 검출하고 공간 및 시간적으로 필터링하며, 움직임 검출로부터 계산되는 움직임 결정 값에 의해 공간 및 시간적으로 필터된 결과를 적절히 가중치를 두고 혼합함으로써 인터레이스트 비디오 시퀀스를 프로그레시브 비디오 시퀀스로 포맷을 변환할 때에 생기는 아티팩트들을 제거하고 잡음에 강하게 하여 비디오 품질을 개선할 수 있다.

Claims (32)

  1. 비디오 처리 시스템에서 움직임 결정 값을 계산하는 방법에 있어서,
    영상면들의 인터레이스트 비디오 시퀀스로 이루어진 비디오 신호를 입력하는 단계;
    비디오 시퀀스에서 이전의 영상면과 다음의 영상면 사이의 차로부터 프레임 차 신호를 계산하는 단계;
    상기 프레임 차 신호와 비디오 시퀀스에서의 잡음에 기초하여 잡음-적응적인 점 단위의 움직임 검출 신호를 계산하는 단계; 및
    상기 점 단위의 움직임 검출 신호의 함수로서 움직임 결정 값을 계산하는 단계를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  2. 제 1항에 있어서, 상기 점 단위의 움직임 검출 신호를 계산하는 단계는,
    상기 프레임 차 신호와, 비디오 시퀀스에서의 잡음의 함수인 쓰레숄드(threshold) 값에 기초하여 상기 점 단위의 움직임 검출 신호를 형성하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  3. 제 2항에 있어서, 상기 점 단위의 움직임 검출 신호를 계산하는 단계는,
    상기 프레임 차 신호를 상기 쓰레숄드 값과 비교하는 단계; 및
    상기 비교 결과들에 기초하여 상기 점 단위의 움직임 검출 신호를 형성하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  4. 제 1항에 있어서, 상기 움직임 결정 값을 계산하는 단계는,
    시간 및 공간 영역들에서 상기 점 단위의 움직임 검출 신호를 필터링(filtering)하는 단계; 및
    상기 필터된 점 단위의 움직임 검출 신호의 함수로서 상기 움직임 결정 값을 형성하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  5. 제 4항에 있어서, 상기 공간 및 시간 영역들에서 점 단위의 움직임 검출 신호를 필터링하는 단계는,
    상기 점 단위의 움직임 검출 신호와 하나의 영상면 만큼 지연된 인접한 점 단위의 움직임 검출 신호로부터 영역 단위의 움직임 검출 신호를 계산하는 단계를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  6. 제 5항에 있어서, 상기 움직임 결정 값을 형성하는 단계는,
    상기 영역 단위의 움직임 검출 신호의 함수로서 상기 움직임 결정 값을 형성하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  7. 제 6항에 있어서, 상기 움직임 결정 값을 형성하는 단계는,
    상기 움직임 결정 값을 형성하기 위하여 상기 영역 단위의 움직임 검출 신호 를 저역-통과 필터링(low-pass filtering)하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  8. 제 1항에 있어서,
    상기 점 단위의 움직임 검출 신호를 계산하는 단계 전에 상기 차 신호를 저역-통과 필터링하는 단계를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  9. 제 1항에 있어서, 상기 점 단위의 움직임 검출 신호를 계산하는 단계는,
    Figure 112005059527456-PAT00133
    을 계산하는 단계를 더 포함하며,
    Figure 112005059527456-PAT00134
    는 점 단위의 움직임 검출 신호이며, i와 h는 데카르트 행렬(cartesian matrix)에서 각각의 비디오 신호 값의 공간적 위치를 정의하며,
    Figure 112005059527456-PAT00135
    는 잡음-적응 쓰레숄드 함수를 나타내는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  10. 제 9항에 있어서,
    Figure 112005059527456-PAT00136
    이며, K는 상수 값이며,
    Figure 112005059527456-PAT00137
    는 잡음 표준편차를 나타내는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  11. 제 9항에 있어서,
    Figure 112005059527456-PAT00138
    는 단조 증가 함수를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  12. 제 9항에 있어서, 상기 점 단위의 움직임 검출 신호의 함수로서 움직임 결정 값을 계산하는 단계는,
    Figure 112005059527456-PAT00139
    를 계산하는 것을 포함하며,
    Figure 112005059527456-PAT00140
    는 상기 움직임 결정 값이며
    Figure 112005059527456-PAT00141
    는 필터링 함수를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  13. 제 12항에 있어서, 상기 필터링 처리
    Figure 112005059527456-PAT00142
    는,
    Figure 112005059527456-PAT00143
    로서 영역 단위의 움직임 검출 신호를 계산하는 단계로서,
    Figure 112005059527456-PAT00144
    는 하나의 영상면이 지연된 움직임 검출 신호이며,
    Figure 112005059527456-PAT00145
    표기법은 논리 합(logical OR) 연산인, 영역 단위의 움직임 검출 신호를 계산하는 단계; 및
    상기 움직임 결정 값
    Figure 112005059527456-PAT00146
    을 형성하기 위하여 상기 영역 단위의 움직임 검출 신호를 저역-통과 필터링하는 단계를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 방법.
  14. 주어진 비디오 영상면에서 최소 하나의 인접한 위치의 비디오 신호로부터 주어진 위치에서의 비디오 신호 값을 공간적으로 보간하는 단계;
    시간적으로 인접한 비디오 영상면들에서 동일한 위치에 있는 비디오 신호로부터 주어진 위치에서의 비디오 신호 값을 시간적으로 보간하는 단계;
    제 1항의 방법에 따라 동일한 위치에 대해 움직임 결정 값을 형성하는 단계; 및
    상기 공간적으로 보간된 신호 및 시간적으로 보간된 신호로부터 상기 주어진 위치에서의 비디오 신호에 대해 출력 신호를 혼합하고 상기 움직임 결정 값에 따라 상기 출력 신호에 가중치를 주는 단계를 포함하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 방법.
  15. 제 14항에 있어서,
    상기 주어진 위치에서의 움직임의 정도에 대한 추정치의 함수로서 움직임 결정 값을 0과 1사이에서 변화시키는 단계와, 높은 움직임의 정도가 추정될 때에는 출력 신호가 공간적으로 보간된 신호로 큰 가중치를 주는 단계와, 낮은 움직임의 정도가 추정될 때에는 출력 신호가 시간적으로 보간된 신호로 큰 가중치를 주는 단계를 더 포함하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 방법.
  16. 제 15항에 있어서,
    높은 움직임의 정도가 추정될 때에 출력 신호로서 공간적으로 보간된 신호를 출력하고 낮은 움직임의 정도가 추정될 때에 출력 신호로서 시간적으로 보간된 신호를 출력하는 단계를 더 포함하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 방법.
  17. 비디오 신호 처리 시스템에서 움직임 결정 값을 계산하는 장치에 있어서,
    인터레이스트 비디오 시퀀스로 이루어진 비디오 신호를 수신하는 입력부;
    상기 비디오 시퀀스에서의 이전의 영상면과 다음의 영상면 사이의 차로부터 프레임 차 신호를 계산하는 차 형성부;
    상기 프레임 차 신호 및 상기 비디오 시퀀스에 있는 잡음에 기초하여 잡음-적응적인 점 단위의 움직임 검출 신호를 형성하는 움직임 검출부; 및
    상기 점 단위의 움직임 검출 신호의 함수로서 움직임 결정 값을 형성하는 움직임 결정부를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  18. 제 17항에 있어서, 상기 점 단위의 움직임 검출 신호를 형성하는 움직임 검출부는,
    상기 프레임 차 신호 및 상기 비디오 시퀀스에 있는 잡음의 함수인 쓰레숄드 값에 기초하여 점 단위의 움직임 검출 신호를 더 형성하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  19. 제 18항에 있어서, 상기 점 단위의 움직임 검출 신호를 형성하는 움직임 검출부는,
    상기 프레임 차 신호를 상기 쓰레숄드 값과 더 비교하고 상기 비교 결과들에 기초하여 상기 점 단위의 움직임 검출 신호를 더 생성함으로써 상기 점 단위의 움직임 검출 신호를 형성하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  20. 제 17항에 있어서, 상기 움직임 결정 값을 형성하는 움직임 결정부는,
    공간 및 시간 영역들에서 상기 점 단위의 움직임 검출 신호를 필터링 하는 필터부; 및
    상기 필터된 점 단위의 움직임 검출의 함수로서 움직임 결정 값을 형성하는 수단을 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  21. 제 20항에 있어서,
    공간 및 시간 영역들에서 상기 점 단위의 움직임 검출 신호를 필터링 하는 필터부는 상기 점 단위의 움직임 검출 신호와 하나의 영상면 만큼 지연된 인접한 점 단위의 움직임 검출 신호로부터 영역 단위의 움직임 검출 신호를 더 계산하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  22. 제 21항에 있어서, 상기 움직임 결정 값을 형성하는 수단은,
    상기 영역 단위의 움직임 검출 신호의 함수로서 상기 움직임 결정 값을 더 형성하는 특징으로 하는 움직임 결정 값 계산 장치.
  23. 제 22항에 있어서, 상기 움직임 결정 값을 형성하는 수단은,
    상기 움직임 결정 값을 형성하기 위하여 상기 영역 단위의 움직임 검출 신호를 필터링 하는 저역-통과 필터를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  24. 제 17항에 있어서,
    상기 점 단위의 움직임 검출 신호를 형성하기 전에 상기 차 신호를 저역-통과 필터링 하는 저역-통과 필터를 더 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  25. 제 17항에 있어서, 상기 점 단위의 움직임 검출 신호를 형성하는 움직임 검출부는,
    Figure 112005059527456-PAT00147
    를 계산하도록 프로그램되어 있으며,
    Figure 112005059527456-PAT00148
    는 점 단위의 움직임 검출 신호이며, i와 h는 데카르트 행렬(cartesian matrix)에서 각각의 비디오 신호 값의 공간적 위치를 정의하며,
    Figure 112005059527456-PAT00149
    는 잡음-적응 쓰레숄드 함수를 나타내는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  26. 제 25항에 있어서,
    Figure 112005059527456-PAT00150
    이며, K는 상수 값이며,
    Figure 112005059527456-PAT00151
    는 잡음 표준편차를 나타내는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  27. 제 25항에 있어서,
    Figure 112005059527456-PAT00152
    는 단조 증가 함수를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  28. 제 25항에 있어서, 상기 점 단위의 움직임 검출 신호의 함수로서 움직임 결정 값을 형성하는 움직임 결정부는,
    Figure 112005059527456-PAT00153
    를 계산하도록 프로그램되어 있으며,
    Figure 112005059527456-PAT00154
    는 상기 움직임 결정 값이며
    Figure 112005059527456-PAT00155
    는 필터를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  29. 제 28항에 있어서, 상기
    Figure 112005059527456-PAT00156
    필터는,
    Figure 112005059527456-PAT00157
    로서 영역 단위의 움직임 검출 신호를 형성하는 움직임 검출부로서,
    Figure 112005059527456-PAT00158
    는 하나의 영상면이 지연된 움직 임 검출 신호이며
    Figure 112005059527456-PAT00159
    표기법은 논리 합(logical OR) 연산을 나타내는, 움직임 검출부; 및
    움직임 결정 값
    Figure 112005059527456-PAT00160
    을 형성하기 위하여 상기 영역 단위의 움직임 검출 신호를 저역-통과 필터링하는 저역-통과 필터를 포함하는 것을 특징으로 하는 움직임 결정 값 계산 장치.
  30. 영상면들의 인터레이스트 비디오 시퀀스로 이루어진 비디오 신호를 수신하는 입력부;
    상기 입력부에 연결되며 주어진 비디오 영상면에서 최소 하나의 인접한 위치의 비디오 신호로부터 주어진 위치에서의 비디오 신호의 값을 공간적으로 보간하도록 구성된 공간 보간기(interpolator);
    상기 공간 보간기와 병렬적으로 입력부에 연결되며 시간적으로 인접한 비디오 영상면들에서 동일한 위치에 있는 비디오 신호로부터 주어진 위치에서의 비디오 신호 값을 시간적으로 보간하는 시간 보간기;
    상기 입력부와 연결되며 상기 동일한 위치에 대해 움직임 결정 값을 형성하는 상기 공간 보간기와 상기 시간 보간기와 병렬적으로 연결된 제 17항에 따른 계산 장치; 및
    각 상기 공간 보간기, 상기 시간 보간기 및 상기 계산 장치로부터의 출력 신호를 수신하도록 연결되며, 상기 계산 장치에 의한 상기 움직임 결정 값 출력에 기 초하여 상기 공간적으로 보간된 신호와 상기 시간적으로 보간된 신호로부터 상기 주어진 위치에서의 비디오 신호에 대한 출력 신호를 혼합하기 위해 구성된 혼합기를 포함하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 장치.
  31. 제 30항에 있어서,
    상기 혼합기는 상기 주어진 위치에서의 움직임의 정도에 대한 추정치의 함수로서 0과 1사이에서 움직임 결정 값을 변화시키는 수단을 더 포함하며, 높은 움직임의 정도가 추정될 때에는 상기 출력 신호가 상기 공간적으로 보간된 신호에 큰 가중치를 두게 하고, 낮은 움직임의 정도가 추정될 때에는 상기 출력 신호가 상기 시간적으로 보간된 신호에 큰 가중치를 두게 하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 장치.
  32. 제 31항에 있어서,
    높은 움직임의 정도가 추정될 때에는 출력 신호로서 공간적으로 보간된 신호를 출력하고 낮은 움직임의 정도가 추정될 때에는 출력 신호로서 시간적으로 보간된 신호를 출력하는 단계를 더 포함하는 것을 특징으로 하는 인터레이스트 비디오 신호들을 처리하는 장치.
KR1020050099328A 2005-01-20 2005-10-20 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출방법 및 시스템 KR100739744B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US11/040,578 US7542095B2 (en) 2005-01-20 2005-01-20 Method and system of noise-adaptive motion detection in an interlaced video sequence
US11/040,578 2005-01-20

Publications (2)

Publication Number Publication Date
KR20060084780A true KR20060084780A (ko) 2006-07-25
KR100739744B1 KR100739744B1 (ko) 2007-07-13

Family

ID=36683455

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050099328A KR100739744B1 (ko) 2005-01-20 2005-10-20 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출방법 및 시스템

Country Status (2)

Country Link
US (1) US7542095B2 (ko)
KR (1) KR100739744B1 (ko)

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050078747A1 (en) * 2003-10-14 2005-04-14 Honeywell International Inc. Multi-stage moving object segmentation
JP2008543158A (ja) * 2005-05-23 2008-11-27 エヌエックスピー ビー ヴィ エラー評価基準を有する空間および時間順次走査変換
US8325273B2 (en) * 2005-06-06 2012-12-04 Broadcom Corporation System and method for vertical gradient detection in video processing
US7701509B2 (en) * 2006-04-25 2010-04-20 Nokia Corporation Motion compensated video spatial up-conversion
JP4973031B2 (ja) * 2006-07-03 2012-07-11 ソニー株式会社 ノイズ抑圧方法、ノイズ抑圧方法のプログラム、ノイズ抑圧方法のプログラムを記録した記録媒体及びノイズ抑圧装置
US8582032B2 (en) * 2006-09-07 2013-11-12 Texas Instruments Incorporated Motion detection for interlaced video
GB2444534A (en) * 2006-12-06 2008-06-11 Sony Uk Ltd Assessing the reliability of motion information in motion adaptive image processing
GB2444532A (en) * 2006-12-06 2008-06-11 Sony Uk Ltd Motion adaptive image processing detecting motion at different levels of sensitivity
US7952646B2 (en) * 2006-12-27 2011-05-31 Intel Corporation Method and apparatus for content adaptive spatial-temporal motion adaptive noise reduction
US20080186406A1 (en) * 2007-02-07 2008-08-07 Po-Wei Chao Apparatus for detecting film mode and method thereof
CN100568983C (zh) * 2007-10-29 2009-12-09 威盛电子股份有限公司 影像信号像素点色彩值调整方法
US20090153739A1 (en) * 2007-12-14 2009-06-18 Texas Instruments Incorporated Method and Apparatus for a Noise Filter for Reducing Noise in a Image or Video
US8355443B2 (en) 2008-03-27 2013-01-15 CSR Technology, Inc. Recursive motion for motion detection deinterlacer
EP2114068A1 (en) * 2008-04-30 2009-11-04 Sony Corporation Method for converting an image and image conversion unit
US8553783B2 (en) * 2008-12-29 2013-10-08 Stmicroelectronics Asia Pacific Pte Ltd. Apparatus and method of motion detection for temporal mosquito noise reduction in video sequences
US8289444B2 (en) * 2009-05-06 2012-10-16 Samsung Electronics Co., Ltd. System and method for reducing visible halo in digital video with covering and uncovering detection
US8379147B2 (en) * 2009-06-24 2013-02-19 Telegent Systems, Inc. Adaptive video processing circuitry and techniques
SG10201406803YA (en) 2009-10-30 2014-11-27 Agency Science Tech & Res Methods, Devices, And Computer Readable Mediums For Processing A Digital Picture
US20130266080A1 (en) * 2011-10-01 2013-10-10 Ning Lu Systems, methods and computer program products for integrated post-processing and pre-processing in video transcoding
US8692933B1 (en) * 2011-10-20 2014-04-08 Marvell International Ltd. Method and apparatus for buffering anchor frames in motion compensation systems
CN103826082B (zh) * 2014-01-21 2017-07-14 华为技术有限公司 一种视频处理方法及装置
US10956484B1 (en) 2016-03-11 2021-03-23 Gracenote, Inc. Method to differentiate and classify fingerprints using fingerprint neighborhood analysis
US10911698B2 (en) * 2016-09-30 2021-02-02 Huddly As ISP bias-compensating noise reduction systems and methods

Family Cites Families (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4661853A (en) * 1985-11-01 1987-04-28 Rca Corporation Interfield image motion detector for video signals
NL8801347A (nl) * 1988-05-26 1989-12-18 Philips Nv Werkwijze en inrichting voor bewegingsdetektie in een geinterlinieerd televisiebeeld verkregen na een filmtelevisie-omzetting.
JP2732650B2 (ja) * 1989-02-28 1998-03-30 株式会社東芝 垂直エッジ検出回路
US5027201A (en) * 1989-12-21 1991-06-25 Rca Licensing Corporation Motion detection apparatus as for an interlace to non-interlace scan converter
US5081532A (en) * 1990-08-30 1992-01-14 Zenith Electronics Corporation Adaptive progressive scan converter
GB9101536D0 (en) * 1991-01-24 1991-03-06 British Broadcasting Corp Improvements in video signals
US5446501A (en) * 1992-10-22 1995-08-29 Accom, Incorporated Three-dimensional median and recursive filtering apparatus and method for video image enhancement
GB2301726B (en) * 1992-11-10 1997-05-14 Sony Uk Ltd Motion compensated video signal processing
JPH07131761A (ja) * 1993-10-29 1995-05-19 Toshiba Corp テレビジョン信号処理回路
US5519451A (en) * 1994-04-14 1996-05-21 Texas Instruments Incorporated Motion adaptive scan-rate conversion using directional edge interpolation
US5886745A (en) * 1994-12-09 1999-03-23 Matsushita Electric Industrial Co., Ltd. Progressive scanning conversion apparatus
US5661525A (en) * 1995-03-27 1997-08-26 Lucent Technologies Inc. Method and apparatus for converting an interlaced video frame sequence into a progressively-scanned sequence
KR0183149B1 (ko) * 1995-12-30 1999-05-01 김광호 동화상 검출방법
KR0176568B1 (ko) * 1996-01-27 1999-05-01 김광호 모션과 공간적인 상관도를 이용한 비월순차 변환장치 및 그 방법
US6957350B1 (en) * 1996-01-30 2005-10-18 Dolby Laboratories Licensing Corporation Encrypted and watermarked temporal and resolution layering in advanced television
US6037986A (en) * 1996-07-16 2000-03-14 Divicom Inc. Video preprocessing method and apparatus with selective filtering based on motion detection
US6124900A (en) * 1997-02-14 2000-09-26 Texas Instruments Incorporated Recursive noise reduction for progressive scan displays
US6452972B1 (en) * 1997-09-12 2002-09-17 Texas Instruments Incorporated Motion detection using field-difference measurements
US6061100A (en) * 1997-09-30 2000-05-09 The University Of British Columbia Noise reduction for video signals
US6014182A (en) * 1997-10-10 2000-01-11 Faroudja Laboratories, Inc. Film source video detection
US6108041A (en) * 1997-10-10 2000-08-22 Faroudja Laboratories, Inc. High-definition television signal processing for transmitting and receiving a television signal in a manner compatible with the present system
US6295091B1 (en) * 1997-11-07 2001-09-25 Intel Corporation Method and apparatus for de-interlacing video fields for superior edge preservation
JP3360586B2 (ja) * 1997-11-21 2002-12-24 日本電気株式会社 スキャン変換装置及び方法
JPH11243551A (ja) * 1997-12-25 1999-09-07 Mitsubishi Electric Corp 動き補償装置と動画像符号化装置及び方法
US6122017A (en) * 1998-01-22 2000-09-19 Hewlett-Packard Company Method for providing motion-compensated multi-field enhancement of still images from video
US6690835B1 (en) * 1998-03-03 2004-02-10 Interuniversitair Micro-Elektronica Centrum (Imec Vzw) System and method of encoding video frames
DE69835802T2 (de) * 1998-03-09 2007-04-12 Sony Deutschland Gmbh Verfahren und System zur Interpolation von digitalen Signalen
US6266092B1 (en) * 1998-05-12 2001-07-24 Genesis Microchip Inc. Method and apparatus for video line multiplication with enhanced sharpness
US6034733A (en) * 1998-07-29 2000-03-07 S3 Incorporated Timing and control for deinterlacing and enhancement of non-deterministically arriving interlaced video data
JP4147632B2 (ja) * 1998-08-24 2008-09-10 ソニー株式会社 画像情報変換装置、画像情報変換方法、およびテレビジョン受像機
US6515706B1 (en) * 1998-09-15 2003-02-04 Dvdo, Inc. Method and apparatus for detecting and smoothing diagonal features video images
EP1125428B1 (de) * 1998-09-30 2002-07-17 Micronas Munich GmbH Schaltung zur wandlung einer bildrate
US6239842B1 (en) * 1998-12-18 2001-05-29 Oplus Technologies Ltd. Method of de-interlacing video signals using a mixed mode spatial and temporal approximation technique
US6348949B1 (en) * 1998-12-22 2002-02-19 Intel Corporation Deinterlacing a video signal using a motion detector
US6307560B1 (en) * 1999-02-12 2001-10-23 Sony Corporation Classified adaptive spatio-temporal format conversion method and apparatus
US6621936B1 (en) * 1999-02-12 2003-09-16 Sony Corporation Method and apparatus for spatial class reduction
JP3248619B2 (ja) * 1999-03-05 2002-01-21 ティーディーケイ株式会社 高電圧貫通型コンデンサ及びマグネトロン
JP3893227B2 (ja) * 1999-03-24 2007-03-14 パイオニア株式会社 走査線補間装置、及び走査線補間方法
US6331874B1 (en) * 1999-06-29 2001-12-18 Lsi Logic Corporation Motion compensated de-interlacing
US6630961B1 (en) * 1999-06-30 2003-10-07 Lg Electronics Inc. Deinterlacing device and method
US6459455B1 (en) * 1999-08-31 2002-10-01 Intel Corporation Motion adaptive deinterlacing
US6330032B1 (en) * 1999-09-30 2001-12-11 Focus Enhancements, Inc. Motion adaptive de-interlace filter
US6754371B1 (en) * 1999-12-07 2004-06-22 Sony Corporation Method and apparatus for past and future motion classification
US20020027610A1 (en) * 2000-03-27 2002-03-07 Hong Jiang Method and apparatus for de-interlacing video images
US6414719B1 (en) * 2000-05-26 2002-07-02 Sarnoff Corporation Motion adaptive median filter for interlace to progressive scan conversion
US6449312B1 (en) * 2000-06-08 2002-09-10 Motorola, Inc. Method of estimating motion in interlaced video
US6633612B2 (en) * 2000-12-13 2003-10-14 Genesis Microchip Inc. Method and apparatus for detecting motion between odd and even video fields
US6822691B1 (en) * 2000-12-20 2004-11-23 Samsung Electronics Co., Ltd. Method of detecting motion in an interlaced video sequence utilizing region by region motion information and apparatus for motion detection
US7098957B2 (en) * 2000-12-20 2006-08-29 Samsung Electronics Co., Ltd. Method and apparatus for detecting repetitive motion in an interlaced video sequence apparatus for processing interlaced video signals
GB2372394B (en) * 2000-12-22 2004-09-22 Matsushita Electric Ind Co Ltd Interpolation apparatus and video signal processing apparatus including the same
US6847405B2 (en) * 2001-09-14 2005-01-25 Sony Corporation Motion-adaptive de-interlacing method and system for digital televisions
US7375760B2 (en) * 2001-12-31 2008-05-20 Texas Instruments Incorporated Content-dependent scan rate converter with adaptive noise reduction
KR20040061244A (ko) * 2002-12-30 2004-07-07 삼성전자주식회사 디-인터레이싱 방법 및 그 장치

Also Published As

Publication number Publication date
KR100739744B1 (ko) 2007-07-13
US7542095B2 (en) 2009-06-02
US20060158550A1 (en) 2006-07-20

Similar Documents

Publication Publication Date Title
KR100739744B1 (ko) 인터레이스트 비디오 시퀀스에서 잡음-적응 움직임 검출방법 및 시스템
US7098957B2 (en) Method and apparatus for detecting repetitive motion in an interlaced video sequence apparatus for processing interlaced video signals
US7265791B2 (en) Method and apparatus for de-interlacing video signal
US5784115A (en) System and method for motion compensated de-interlacing of video frames
KR0183149B1 (ko) 동화상 검출방법
JP4997281B2 (ja) イメージ中の推定動きベクトルの決定方法、コンピュータプログラムおよびディスプレイ装置
US6985187B2 (en) Motion-adaptive interpolation apparatus and method thereof
EP1164792A2 (en) Format converter using bidirectional motion vector and method thereof
US8189105B2 (en) Systems and methods of motion and edge adaptive processing including motion compensation features
KR20040009967A (ko) 디인터레이싱장치 및 방법
KR20050076220A (ko) 수직 및 수평 방향의 패턴을 고려한 전역 움직임 보상순차주사화 방법
JP5133038B2 (ja) 画像復元方法および画像復元装置
KR100484182B1 (ko) 디인터레이싱 장치 및 방법
KR20060135742A (ko) 영화 모드 적응을 갖춘 움직임 보상된 디-인터레이싱
EP1444824B1 (en) Edge oriented interpolation of video data
Biswas et al. A novel motion estimation algorithm using phase plane correlation for frame rate conversion
KR20070033382A (ko) 비디오 모드 검출을 통한 움직임 추정
KR100931110B1 (ko) 퍼지 룰 기반 에지 복원 알고리즘을 이용하는 디인터레이싱장치 및 방법
Biswas et al. A novel de-interlacing technique based on phase plane correlation motion estimation
JP4463171B2 (ja) 自己相関値算出方法及び補間画素生成方法、それらの装置並びにそれらのプログラム
KR960012490B1 (ko) 고선명티브이의 영상포맷 변환 장치 및 방법
JP3745425B2 (ja) 動きベクトル検出方法および動きベクトル検出用適応切り替え型前置フィルタ
KR100382650B1 (ko) 비디오신호 처리 시스템에서의 스케일 움직임 정보를이용한 움직임 검출 방법 및 장치와 이를 이용한 데이터보간 방법 및 장치
KR100750108B1 (ko) 비월 비디오 시퀀스에서 반복적 움직임을 검출하기 위한방법 및 장치와 비월 비디오 신호 처리를 위한 장치
JPH08186802A (ja) 飛び越し走査画像の補間画素作成方法

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee