KR20060047638A - 필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기 - Google Patents

필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기 Download PDF

Info

Publication number
KR20060047638A
KR20060047638A KR1020050036081A KR20050036081A KR20060047638A KR 20060047638 A KR20060047638 A KR 20060047638A KR 1020050036081 A KR1020050036081 A KR 1020050036081A KR 20050036081 A KR20050036081 A KR 20050036081A KR 20060047638 A KR20060047638 A KR 20060047638A
Authority
KR
South Korea
Prior art keywords
motion
film mode
picture
film
mode
Prior art date
Application number
KR1020050036081A
Other languages
English (en)
Inventor
틸로 랜드시에델
스벤 살제르
Original Assignee
마츠시타 덴끼 산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 마츠시타 덴끼 산교 가부시키가이샤 filed Critical 마츠시타 덴끼 산교 가부시키가이샤
Publication of KR20060047638A publication Critical patent/KR20060047638A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
    • H04N7/0112—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard
    • H04N7/0115—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level one of the standards corresponding to a cinematograph film standard with details on the detection of a particular field or frame pattern in the incoming video signal, e.g. 3:2 pull-down pattern

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Television Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명은 필름 모드 검출이 실패하는 필름 모드의 화상 영역을 정확하게 유지할 수 있도록 한다. 구체적으로는, 필름 모드 화상 내의 조직화되지 않은 화상 영역은 신뢰할 수 있는 필름 모드 검출을 가능하게 하지 않는다. 따라서, 이들 정지 화상 영역의 경계 영역이 잘못된 모드 판정에 따른 부적절한 처리 방안의 적용으로 인해 화상 개선 처리 동안 화질의 저하를 겪는다. 본 발명은 글로벌 필름 모드 표시를 더 검출하고 로컬 필름 모드 판정이 실패하고 정지 모드가 검출된 이들 화상 영역의 로컬 필름 모드 판정에 대해 상기 검출한 글로벌 움직임을 이용한다.

Description

필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름 모드 검출기 및 움직임 보상기{FILM MODE CORRECTION IN STILL AREAS}
도 1은 균일한 크기의 복수의 블록으로 분할한 비디오 화상을 도시한 도면.
도 2는 동화상의 인터레이스 비디오 변환을 도시한 도면.
도 3은 복수의 소스로부터의 혼합된 모드 화상 조합으로부터 생성된 화상의 예를 도시한 도면.
도 4는 정지 및 필름 모드 검출기에 기초한 블록에 대한 구성의 예를 도시한 도면.
도 5는 인터레이스 비디오 시퀀스의 후속 필드 내의 화소의 수직 위치를 도시한 도면.
도 6은 정지 모드 검출을 위한 구성의 예를 도시한 도면.
도 7은 NTSC 및 PAL 비디오 시퀀스에 대한 움직임 상태 값 및 대응하는 움직임 비트 예측의 표를 도시한 도면.
도 8은 정지 영역에 대한 필름 움직임 비트 계속(film motion bit continuation)의 일실시예를 도시한 도면.
도 9는 별개의 필름 모드 및 정지 모드 검출의 텔레신 검출 결과의 일례를 도시한 도면.
도 10은 도 9에 도시한 예에 대한 본 발명에 따른 처리 결과를 도시한 도면.
도면의 주요 부분에 대한 부호의 설명
110 : RAM 저장 장치 120 : 움직임 보상 회로
130 : 프리필터 회로 141 : 메모리
143, 145 : 필드 지연 수단 150 : 분할 및 SAPD 유닛
170 : 움직임 평가 회로 180 : 디세그멘테이션 유닛
190 : 디스플레이
본 발명은 화질 개선 처리에 관한 것이다. 구체적으로는, 본 발명은 비디오 시퀀스의 화상을 위한 필름 모드 표시를 판정하는 방법 및 대응하는 필름 모드 검출기에 관한 것이다.
화상 개선 처리는 점점 더 많은 애플리케이션에 이용되는데, 특히 현대의 텔레비전 수상기의 디지털 신호 처리에 많이 이용된다. 구체적으로는, 현대의 텔레비전 수상기는 재생된 화상의 화질을 증진시키기 위해 프레임 레이트 변환을, 특히 업 컨버전(up-conversion) 또는 움직임 보상 업 컨버전 형태로 수행한다. 움직임 보상된 업 컨버전은, 예를 들어 50 Hz의 필드 또는 프레임 주파수를 갖는 비디오 시퀀스에 대해 수행되어 60 Hz, 66.67 Hz, 75 Hz, 100 Hz 등과 같은 보다 높은 주파수로 되게 한다. 50 Hz의 입력 신호 주파수는 PAL 또는 SECAM 텔레비전 표준에 기초하여 텔레비전 신호 방송에 주로 적용되고, 비디오 신호에 기초한 NTSC는 60 Hz의 입력 주파수를 갖는다. 60 Hz 입력 비디오 신호는 72 Hz, 80 Hz, 90 Hz, 120 Hz 등과 같은 보다 높은 주파수로 업 컨버트될 수도 있다.
업 컨버전 동안에, 적절한 때에 50 Hz 또는 60 Hz 비디오 시퀀스로 표현되지 않는 위치에서 비디오 컨텐츠를 반영하는 중간 화상들이 생성된다. 이 목적을 위해, 객체들의 움직임에 의해 발생된 후속 화상들 간의 변화를 적절히 반영하기 위해 객체들의 움직임이 고려되어야 한다. 객체들의 움직임은 블록 단위로 계산되며, 움직임 보상은 적절한 때에 이전의 화상과 후속 화상 사이의 새롭게 생성된 화상의 상대적인 위치에 기초하여 수행된다.
움직임 벡터 판정을 위해, 각 화상은 예를 들어 도 1에 도시된 바와 같이 복수의 블록으로 분할된다. 각 블록은 이전의 화상으로부터의 객체의 이동을 검출하기 위해 움직임 평가를 받는다.
하이엔드(high-end) 텔레비전 세트 및 관련 디바이스는 수신한 화상 데이터와 관련된 부가적인 정보를 이용하여 프레임 레이트 변환 및 화상의 크기 스케일링을 수행한다. 움직임 정보 외에, 필름 모드 표시 및 추가의 보충 정보가 화상 처리를 지원한다. 필름 모드 표시는 화상 데이터가 비디오 카메라로부터 생성된 것("비디오 모드" 또는 "카메라 모드"로 지칭됨)인 지 또는 동화상 필름으로부터 생성된 것("필름 모드"라고 지칭됨)인 지를 식별한다. "비디오 모드"에서는, 움직이 는 객체는 비디오 시퀀스 내의 각 화상에서 상이한 움직임 상태(motion phase)로 표현된다. 따라서, 비디오 모드는 각 필드 간의 움직임에 의해 검출될 수 있다. "필름 모드"에서는, 화상이 동화상으로부터 인터레이스 비디오 데이터로의 변환(interlaced video data conversion)에 의해 생성된다. 이러한 변환은 동일한 필름 프레임으로부터 둘 또는 세 개의 필드를 생성하여 특정 움직임 패턴/움직임이 없는 패턴이 검출될 수 있다.
특히 움직임 보상에 기초하여 화상 개선 처리를 수행할 때, 적절한 처리 방안을 이용하기 위해 각 개별 화상으로 표현된 특정 움직임 상태의 정보가 요구된다.
필름 모드 표시의 검출, 즉 현재의 화상이 비디오 모드인 지 또는 필름 모드인 지의 여부는 예를 들어 EP-A-1 198 137로부터 이미 공지되어 있다.
PAL 또는 NTSC 신호와 같은 인터레이스 비디오 신호와 대조적으로, 동화상 데이터는 완전한 프레임들로 구성된다. 동화상 데이터의 가장 일반적인 프레임 레이트는 24 Hz(24p)이다. 텔레비전 수상기의 디스플레이용으로 동화상 데이터를 변환할 때(이 변환은 텔레신(telecine)이라고 지칭됨), 24 Hz 프레임 레이트는 "풀다운(pull down)" 기법을 이용하여 인터레이스 비디오 시퀀스로 변환된다.
동화상 필름을 50 Hz의 필드 레이트(50i)를 갖는 PAL 표준에 부합하는 인터레이스 신호로 변환하기 위해, 2-2 풀다운 기법이 이용된다. 2-2 풀다운 기법은 각 필름 프레임으로부터 두 개의 필드를 생성하는 반면에, 동화상 필름은 초당 25 프레임(25p)으로 플레이된다. 따라서, 두 개의 연속하는 필드는 동일 프레임으로 부터 생성되며 특히 움직이는 객체의 비디오 컨텐츠의 동일한 시간 위치를 나타내는 정보를 포함한다.
동화상 필름이 60 Hz의 필드 레이트(60i)를 갖는 NTSC 표준에 부합하는 인터레이스 신호로 변환되는 경우, 24 Hz의 프레임 레이트가 3-2 풀다운 기법을 이용하여 60 Hz의 필드 레이트로 변환된다. 이 3-2 풀다운 기법은 주어진 동화상 프레임으로부터 두 개의 비디오 필드를 생성하고, 그 다음 동화상 프레임으로부터 세 개의 비디오 필드를 생성한다.
다른 텔레비전 표준에 따른 인터레이스 비디오 시퀀스를 생성하기 위한 텔레신 변환 프로세스가 도 2에 도시된다. 여기서 이용된 풀다운 기법에 의해 인접 필드의 쌍 또는 트리플렛(triplet)을 포함하는 비디오 시퀀스는 동일한 움직임 상태를 반영한다. 예를 들어 인터레이스 화상 시퀀스로부터 텔레신 신호를 구별하기 위해, 필드 차(field difference)는 다른 필름 프레임으로부터 생성되는 필드들 사이에서만 계산될 수 있다.
화상 개선 처리를 위해, 화상 컨텐츠가 움직이는 객체를 포함하지 않는 경우에는 인터레이스 비디오 화상의 시퀀스 내의 각 필드에 의해 반영된 일시적인 위치가 고려될 필요가 없다. 그러나, 움직이는 객체가 처리될 필드 내에 존재하면, 각 필드의 개별 움직임 상태는 고려될 필요가 있다. 따라서, 화상 개선 처리는 개별 필드의 움직임 특성, 즉 각 필드가 개별 움직임 상태를 반영하는 지 또는 풀다운 기법이 이용되었는 지를 나타내는 정보를 요구하며, 따라서 후속 필드는 동일한 움직임 상태를 반영한다.
움직임이 후속 화상들 사이에서 검출될 수 없는 경우 화상 개선 처리를 가능하게 하기 위해, 바람직하게는 정지 모드 판정이 부가적으로 수행된다. 이 목적을 위해, 정지 표시기(still indicator)가 계산된다. 상기 화상 개선 처리는 상기 정지 표시기의 수신 시에 홀수 및 짝수 필드의 리인터리빙(re-interleaving)을 수행할 수 있다.
본 발명은 보다 적절한 화질 개선 처리를 가능하게 하기 위해 화상 데이터와 관련된 필름 모드 표시의 품질을 개선하는 것을 목적으로 한다. 따라서, 본 발명의 목적은 필름 모드 표시 및 대응하는 필름 모드 검출기를 판정하는 개선된 방법을 제공하는 것이다.
이것은 독립 청구항의 특징에 의해 달성된다.
본 발명의 제 1 측면에 따르면, 비디오 시퀀스의 화상에 대한 필름 모드 표시를 판정하는 방법이 제공된다. 각 비디오 화상은 복수의 화상 영역을 포함한다. 글로벌 필름 모드 표시는 후속 화상들 사이의 움직임 검출에 따라서 비디오 시퀀스의 각 화상에 대해 판정되고, 여기서 글로벌 필름 모드 표시는 각 화상이 필름 모드에 있는 지 또는 비디오 모드에 있는 지의 여부를 나타낸다. 로컬 필름 모드 표시는 후속 화상들의 대응하는 화상 영역들 사이의 움직임 검출에 따라서 각 화상 영역에 대해 판정되고, 여기서 로컬 필름 모드 표시는 화상 영역이 필름 모드에 있는 지 또는 비디오 모드에 있는 지를 나타낸다. 또한, 로컬 정지 모드 표시는 후속 화상들의 대응하는 화상 영역들 사이의 움직임 검출에 따라서 각 화상 영역에 대해 판정되고, 여기서 로컬 정지 모드 표시는 움직임이 그 화상 영역에 대해 검출되었는 지를 나타낸다. 현재의 화상 영역에 대해 정지 모드가 검출되면, 현재의 화상 영역의 로컬 필름 모드 표시는 글로벌 필름 모드 표시에 의해 검출된 움직임에 따라서 판정된다.
본 발명의 다른 측면에 따르면, 비디오 시퀀스의 화상들에 대한 필름 모드 표시를 판정하는 필름 모드 검출기가 제공된다. 각각의 비디오 화상은 복수의 화상 영역을 포함한다. 이 필름 모드 검출기는 글로벌 필름 모드 검출기, 로컬 필름 모드 검출기 및 로컬 정지 모드 검출기를 포함한다. 글로벌 필름 모드 검출기는 후속 화상들 사이의 움직임의 검출에 따라서 비디오 시퀀스의 각 화상에 대한 글로벌 필름 모드 표시를 판정한다. 글로벌 필름 모드 표시는 각 화상이 필름 모드에 있는 지 또는 비디오 모드에 있는 지의 여부를 나타낸다. 로컬 모드 검출기는 후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 따라서 각 화상 영역에 대한 로컬 필름 모드 표시를 판정한다. 필름 모드 표시는 화상 영역이 필름 모드에 있는 지 또는 비디오 모드에 있는 지를 나타낸다. 로컬 정지 모드 검출기는 후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 따라서 각 화상 영역에 대한 로컬 정지 모드 표시를 판정한다. 정지 모드 표시는 움직임이 상기 화상 영역에 대해 검출되었는 지를 나타낸다. 현재의 화상 영역에 대해 정지 모드가 검출되면, 로컬 필름 모드 검출기는 상기 글로벌 필름 모드 표시에 대해 검출된 움직임에 따라서 현재의 필름 영역의 로컬 필름 모드 표시를 판정한다.
본 발명의 특정한 방법은 향상된 화질로 화상 개선 처리를 가능하게 하는 것이다. 이것은 비디오 화상의 화상 영역에 대해 판정된 로컬 기준에 대한 필름 및 정지 모드 표시를 이용함으로써 달성된다. 로컬 필름 모드 표시의 신뢰도를 향상시키기 위해, 현재의 화상에 대한 로컬 정지 모드 표시가 부가적으로 판정된다. 로컬 필름 모드 판정이 실패하고 정지 모드가 그 화상 영역에 대해 검출되었다면, 그 화상 영역의 로컬 필름 움직임 표시는 글로벌 필름 모드가 표시되는 경우 글로벌 필름 모드 검출에 의해 검출된 화상들 사이의 움직임에 따라서 판정된다. 이런 방법으로, 필름 모드 판정의 로컬 실패가 브리지될 수 있다. 또한, 혼합된 모드 비디오 화상들 내의 필름 모드 표시의 변화들, 즉 여러 필름 모드 표시의 화상 영역을 포함하는 비디오 화상들은 갭, 즉 필름/비디오 모드 변화들이 회피되도록 쉽게 제어될 수 있다. 이런 방법으로, 부적절한 화상 개선 처리 알고리즘의 적용 및 이에 따른 감지 화질의 저하가 방지된다.
바람직하게는, 로컬 정지 모드 표시는 정지 표시기의 후속 발생을 계수하는 카운터에 의해 지연된다. 정지 모드에서의 화상 영역은 정확하게 처리될 수 있으며 아무런 화상 정보도 손상되지 않는다.
바람직하게는, 로컬 필름 모드 표시의 판정은 지연을 갖는 비디오 모드와 필름 모드 사이에서만 전환된다. 이러한 지연은 새로운 필름 모드 표시가 검출되는 경우 시간 및 공간 오프셋의 대가로 필름 모드 표시의 신뢰도를 증가시킨다. 필름 모드 표시를 정정하는 것에 의해, 제 1 필름 모드 표시의 끝과 신뢰할 수 있게 검출된 새로운 필름 모드 표시의 지연된 시작 사이의 변화(transition)가 정확하게 브리지될 수 있으며 비디오 모드로의 불필요한 전환이 방지된다.
바람직한 실시예에 따르면, 새로운 필름 모드 표시가 검출되기 전에 후속 화상 내의 대응하는 위치에 대해 사전에 정해진 수의 새로운 필름 모드 표시를 검출함으로써 지연이 이루어진다. 이런 방식으로, 검출된 필름 모드 표시의 신뢰도는 크게 증가한다.
로컬 필름 모드 판정은 후속 화상 내의 대응하는 위치에서의 화상 영역 사이에 움직임이 존재하는 지의 여부를 나타내는 움직임 비트의 검출에 따라서 이루어진다. 검출된 움직임 비트는 FIFO 레지스터에 저장되고, 저장된 움직임 비트는 사전에 저장된 움직임 패턴과 비교된다. 사전에 저장된 패턴이 저장된 움직임 비트의 시퀀스 내에서 검출되면, 필름 모드는 검출된다. 이런 방법으로, 필름 모드 검출이 신뢰할 수 있는 방식으로 행해진다.
바람직하게는, 글로벌 필름 모드 표시는 움직임이 화상들 사이에서 존재하는 지를 나타내는 후속 화상들 사이의 움직임 비트를 검출하는 것에 의해 판정된다. 검출된 움직임 비트는 FIFO 레지스터에 저장되어 사전에 저장된 움직임 패턴과 비교된다. 만약 사전에 저장된 움직임 패턴이 검출되면, 필름 모드는 현재의 화상에 대해 판정된다. 이런 방식으로 신뢰할 수 있는 글로벌 필름 모드 판정이 이루어진다.
바람직하게는, 사전에 저장된 움직임 패턴은 개별 동화상 필름을 인터레이스 변환 패턴에 반영한다. 가장 바람직하게는, 이들 변환 패턴은 2-2 및 3-2 풀다운 패턴을 포함한다. 이런 방법으로, PAL 및 NTSC 텔레신 부분이 신뢰할 수 있게 검출될 수 있다.
움직임 비트는 바람직하게는, 후속 화상들의 대응 화소들 간의 절대 화소 차를 계산하고, 절대 화소 차를 누산하고, 누산 결과를 사전에 정해진 임계치와 비교함으로써 검출된다. 누산 결과가 임계치를 초과하면, 움직임이 검출된다. 따라서, 움직임은 간단하고 신뢰할 수 있는 방법으로 검출될 수 있다.
바람직하게는, 정지 모드 표시는 이진 값이다. 가장 바람직하게는, 정지 모드 표시가 정지 모드 또는 움직임 모드를 나타낸다.
또한, 필름 모드 표시는 이진 값이다. 가장 바람직하게는, 필름 모드 표시는 필름 모드 또는 비디오 모드를 나타낸다.
본 발명을 적용하는데 있어서 화상의 형상 및 크기는 제한되지 않지만, 블록 래스터 구성 내에 블록 형태의 화상 영역을 사용하는 것이 바람직하다. 따라서, 간단하고 신뢰할 수 있는 처리가 가능해진다.
본 발명의 바람직한 실시예는 독립 청구항의 요지이다.
본 발명의 다른 실시예 및 이점은 다음의 바람직한 실시예의 설명으로부터 명확해질 것이다.
본 발명은 디지털 신호 처리에 관한 것으로, 특히 현대의 텔레비전 수상기에서의 신호 처리에 관한 것이다. 현대의 텔레비전 수상기는 재생 화질을 증진시키고 디스플레이 주파수를 증가시키기 위해 업 컨버전 알고리즘을 이용한다. 이 목 적을 위해, 두 개의 후속하는 화상으로부터 중간 화상들이 생성된다. 중간 화상을 생성하기 위해, 객체의 움직임을 고려하여 객체의 위치를 보상된 화상에 의해 반영된 시점으로 적절히 적응시킨다.
본 발명은 바람직하게는 디스플레이 유닛 또는 화상 향상 디바이스에서 이용된다. 비디오 신호 처리는 본래 인터레이스 라인 플리커(interlaced line flicker)를 회피하고 보다 높은 프레임 레이트를 이용하여 큰 영역의 플리커를 감소시키기 위해 프로그레시브 디스플레이를 구동시킬 필요가 있다. 또한, HDTV 디스플레이 디바이스 상의 디스플레이를 위해 SD(Standard Definition) 신호에 대해 해상도가 높아진다.
텔레신 프로세스를 거친 동화상 필름(필름 모드라고도 함)의 검출은 화상 개선 처리에 매우 중요하다. 예를 들면, 화상 개선은 인터레이스/프로그레시브 변환(I/P)에 의해 달성될 수도 있다. 이 목적을 위해, 짝수 및 홀수 필드를 삽입(interleaving)함으로써 역 텔레신 처리가 수행된다. 3-2 풀다운 변환(도 2의 아래에 도시된 바와 같은)의 경우에, 신호 리던던트 필드가 제거될 수 있다. 3-2 풀다운 변환 동안의 비디오 필드의 리던던트 반복은 도 2에서 음영 필드로 표시되어 있다.
보다 진보된 업 컨버전 알고리즘은 움직임 추정 및 벡터 보간을 이용한다. 출력 프레임 레이트는 입력 프레임 레이트의 균일하지 않은(uneven) 부분일 수도 있다. 예를 들면, 60 Hz 내지 72 Hz의 업 컨버전은 5 대 6의 비에 대응한다. 이러한 변환 동안에는, 움직이는 객체의 움직임의 연속적인 흔적(impression)을 생성 할 때, 6번째 출력 프레임만이 단일 입력 필드로부터 생성될 수 있다.
종래 기술의 필름 모드 검출기는 필름 모드 검출 동안에 전체 화상만을 평가하지만, 필름 모드 특성은 화상 내의 여러 부분에 대해 상이할 수도 있다. 구체적으로는, 혼합된 모드 화상들은 상이한 유형의 화상 데이터를 제공하는 비디오 소스로 이루어진다. 이들 혼합된 모드 시퀀스는 주로 세 유형의 화상 컨텐츠, 즉 정지 또는 일정한 영역(예를 들면, 로고, 배경, OSD), 비디오 카메라 영역(예를 들면, 뉴스 티커, 비디오 삽입물/오버레이) 및 필름 모드 영역(예를 들면, 메인 무비, PIP)으로 이루어진다. 특히, MPEG-4와 같은 새로운 인코딩 방안은, 간단한 방법으로 예를 들어 도 3에 도시된 바와 같이, 단일의 리어셈블링된 화상 내에 여러 소스로부터의 화상 데이터를 조합할 수 있다. 따라서, 단일 필드가 동화상 필름, 비디오 카메라 소스 및/또는 컴퓨터 생성 신(scene)으로부터의 데이터를 포함할 수도 있다.
종래의 필름 모드 검출기는 일반적으로 대부분의 화상 부분에 대해 존재하는 모드만 커버하는 "주된 모드(predominant mode)"를 검출한다. 움직임 보상기는 보다 작은 화상 부분의 특성은 고려하지 않기 때문에 이러한 종래의 검출기는 재생 화상 내에 에러를 발생시킨다. 따라서, 전체 화상에 적용된 역 텔레신 처리는 이들 화상 영역에서 아티팩트(artifact)를 발생시키는데, 이것은 동화상 필름에 기원하는 것이 아니다.
또한, 단일 화상은 30 Hz 컴퓨터 애니메이션의 2-2 풀다운으로부터의 화상 부분과, 3-2 풀다운 세그먼트를 포함할 수도 있다. 만약, 두 개의 상이한 유형의 필름 모드가 단일 화상에서 발견되면, 각 화상 부분은 화상 개선 처리 동안에 다르게 처리되어야 한다.
정규(regular) 2-2 풀다운으로부터 생성되는 화상 부분 및 역(inverse) 2-2 풀다운으로부터 생성되는 다른 화상 부분이 동일한 화상 내에 존재하는 경우에, 상이한 처리가 또한 요구되는데, 여기서 역 2-2 풀다운 화상은 홀수 및 짝수 필드의 역 순서를 갖는다.
본 발명에 따르면, 각 화상은 복수의 블록으로 분할되어 블록 단위로 정지 모드 및 필름 모드 검출을 수행한다. 따라서, 비디오 시퀀스의 특성은 블록 단위로 결정되고, 이것에 기초한 화상 개선 처리는 개선된 화질을 달성할 수 있다.
필름 모드 및 정지 모드 검출에 있어서, 세 개의 후속 래스터 뉴트럴 휘도(raster neutral luminance)(Y) 입력 필드가 요구된다. 래스터 뉴트랠리티(raster neutrality)는 반대 패리티의 인접한 필드들의 비교를 가능하게 한다.
움직임 값은 각 블록의 화소 차에 기초하여 계산된다. 하나의 움직임 비트는 움직임이 검출되었는 지의 여부를 나타낸다. 움직임 비트의 시퀀스에 기초하여, 풀다운 패턴의 존재 및 위치를 판정하기 위해 패턴 분석이 수행된다. 풀다운 패턴을 검출하면, 필름 모드가 검출되어 표시된다.
마찬가지로, 정지 값이 각 블록에 대해 계산되고, 현재의 화상 블록의 움직임이 없음을 나타내는 정지 비트가 유도된다. 일련의 정지 비트는 움직임이 없는 계속적인 상태에 대해 분석되고 이에 따라 정지 모드가 표시될 수 있다.
블록 기반의 필름 모드 검출기에 대한 구성의 일례가 도 4에 도시되어 있다. 입력 비디오 신호의 휘도 정보(Y)는 래스터 뉴트럴 저역 통과 필터링된 화상 신호(N0)를 생성하는 프리필터(prefilter) 회로(130)를 통과한다. 프리필터링은 후속 필드의 여러 래스터 위치에 의해 비롯된 수직 차가 움직임으로 잘못 해석되는 것을 방지한다. 프리필터링된 휘도 성분(N0)은 필드 지연 수단(143, 145)에 의해 2회 지연되어 메모리(141)에 저장되고, 1 필드 주기 지연된 화상 신호(N1)로서 메모리(144)에 저장되며, 2 필드 주기 지연된 화상 신호(N2)로서 메모리(146)에 저장된다.
입력 화상은 예를 들어 도 1에 도시된 바와 같이, 사전에 정의된 블록 래스터에 따라서 복수의 블록으로 분할된다. 바람직하게는, 각 화상은 수평 방향으로 90 블록을 포함하고, 수직 방향으로는, NTSC 비디오 시퀀스에 있어서는 60 블록을 PAL 비디오 시퀀스에 있어서는 72 블록을 포함한다.
후속 화상 내의 대응 위치의 블록들 사이에서, 절대 화소 차(SAPD)의 합이 계산된다. 누산 결과에 따라서, 움직임은 두 연속하는 블록들 사이에 존재하는 것으로 검출된다.
화상 블록 래스터 및 절대 화소 차의 계산은 유닛(150)에서 수행된다. 필드N0와 N1, N1과 N2 및 필드 N0와 N2의 화상 데이터 사이의 동일한 블록 위치에 대해 세 개의 SAPD 값이 계산된다.
동일한 블록 위치에 대해 계산된 SAPD 값은 필름 모드 검출 유닛(160)과 정지 모드 검출 유닛에 인가된다. 정지 모드 검출 유닛은 SAPD 값을 적응적 임계치(adaptive threshold)와 비교하고, SAPD 값이 그 아래로 떨어지면 정지 비트가 설 정된다. 필름 모드 검출 유닛(160)은 각각 누산된 차를 적응적 임계치와 비교한다. 비교 결과에 따라서, 임계치가 초과되어 움직임이 검출되면 움직임 비트는 1로 설정되고, 그 외에는 0으로 설정된다.
움직임 검출을 위해 SAPD 움직임 값과 비교되는 임계치는 화상 컨텐츠에 기초한 값으로 설정된다. 이런 방식으로, 작은 SAPD 움직임 값이 고려되며 상대적인 움직임 차에 기초하여 평가된다.
비트가 설정되면 대응 위치에서 후속 필드의 블록으로부터 판정된 정지 비트가 카운터를 증분시키기고, 비트가 리셋되면 카운터가 감소된다(410 참조). 카운터 값은 조정가능한 지연 값과 비교되고, 그 비교 결과는 현재의 블록의 정지 모드를 결정한다.
상기 블록들로부터 판정된 움직임 비트는 움직임 레지스터의 대기열(queue)로 들어간다. 만약 현재의 블록이 정지로서 판정되면 움직임은 발견되지 않을 것이다. 또한 마지막 화상에 대해 글로벌 필름 모드가 검출되었다면, 그 다음 글로벌 움직임 비트가 글로벌 움직임 레지스터로부터 룩업 테이블(도 7)에 의해 유도되어 로컬 움직임 레지스터의 대기열로 들어간다. 만약 움직임 비트가 현재의 블록에 대해 정지로 판정되면, 카운터가 즉시 리셋되며(410 참조) 따라서 정지 모드를 리셋한다. 이것은 움직임과 같은 필름이 검출되면 어떠한 블록도 정지 모드로 남아 있을 수 없게 하며 잘못된 화상 처리로부터 움직임 아티팩트를 방지한다.
또한, 로컬 움직임 레지스터는 101, 10010과 같은 사전에 저장된 통상의 텔레신 패턴과 비교된다. 만약 텔레신 패턴이 검출되면, 필름 모드는 각각의 화상 블록에 대해 판정된다. 검출되지 않으면, 각 화상 블록은 비디오 모드에 있는 것으로 판정된다.
판정된 필름 모드 표시(F) 및 정지 모드 표시(S)는 정지 카운터 값 및 움직임 레지스터와 함께 각 블록에 대해 저장되고 메모리로 제공되어 후속 화상의 판정 동안에 사용되며 첨부한 업 컨버전 유닛에 의해 사용된다.
본 발명의 필름 모드 검출기에 인가된 비디오 신호는 바람직하게는 CCIR-601 표준 포맷 YUV-4:2:2에 따른다. 필름 및 정지 모드 검출을 위해, 세 개의 후속 래스터 뉴트럴 휘도(Y) 입력 필드가 요구된다. 래스트 뉴트랠리티는 반대 패리티의 인접한 필드의 비교를 가능하게 한다.
도 5에 도시된 바와 같이, 이웃 필드의 짝수 및 홀수 라인은 상이한 수직 위치(P2 및 P3과 대향하는 P1 및 P4)에 화상 정보를 포함하는데, 이 결과 움직임을 잘못 검출할 수도 있다. 이러한 움직임 오검출을 회피하기 위해, 짝수 필드를 중간 라인 아래로 시프트된 수직 위치에 삽입하고 홀수 필드를 중간 라인 아래로 시프트된 위치에 삽입함으로써 래스터 뉴트럴 위치가 미리 계산된다.
m*n 개의 화소의 블록 크기가 화상 포맷으로 적응된다. 바람직하게는, 블록은, 수평 방향으로의 화소의 수가 수직 방향으로의 화소의 수의 두 배인 직사각형이다. 예를 들면, 블록은 8*4 화소의 블록 크기를 가질 수도 있다. 인터레이스/프로그레시브 변환 후에, 직사각형 블록 크기는 정방형 포맷으로 조절된다.
후속 화상들 사이에서 움직임이 검출될 수 없는 경우에 화상 개선 처리를 가능하게 하기 위해, 바람직하게는 정지 모드 판정이 부가적으로 수행된다. 이 목적 을 위해, 정지 표시기가 계산된다. 정지 모드 표시기의 구성의 일례가 도 6에 도시되어 있다.
입력 비디오 신호의 휘도 정보(Y)는 프리필터링 회로를 통과하여 래스트 뉴트럴 저역 통과 화상(N0)을 생성한다. 화상 신호(N0)는 필드 N1에 한 필드 주기만큼 지연되어 들어가고, 화상 신호(N2)에 대해서는 다른 한 필드 주기만큼 더 지연된다. 이런 방식으로, 수직 변화가 움직임으로 잘못 해석되지 않고, 순차 필드가 서로 비교될 수도 있다.
절대 화소 차의 합(SAPD)은 각 화상 블록에 대해, 즉 필드 N0/N2, N1/N2 및 N0/N2의 화상 블록들 사이에서 계산된다. 이용된 블록의 크기는 필름 모드 검출에 이용된 블록 크기와 동일하다. 블록의 SAPD는 동일 공간 위치(XY)에 대해 두 개의 인접한 필드의 화소 값(P)을 공제하고, 부의 차 값을 역으로 하고(invering), 전체 블록에 대해 이 차들을 누산함으로써 계산된다.
비디오 노이즈의 영향을 제거하기 위해, 사전에 정해진 화소 임계치(PT)를 초과하는 차들만이 누산된 절대 화소 차에 기여하도록 허용된다. 다음 수학식은 후속 필드(N0, N1) 내의 화상 영역에 대해 수행된 누산을 나타낸다.
Figure 112005022728572-PAT00001
각각의 SAPD 값은 또한 필드 N1/N2 사이 및 필드 N0/N2 사이에서 계산된다.
화상의 세부가 인접한 블록의 일부가 되어 상이하게 처리되는 것을 회피하기 위해, 필름 모드 판정에 있어서 이웃하는 블록의 화상의 세부를 고려하기 위해 블 록의 크기는 확대되는 것이 바람직하다. 바람직하게는, 블록의 치수는 2m*2n의 블록 크기가 계산에 이용되고 m*n의 물리적 블록에 할당되도록 수직 및 수평 방향 모두 두 배로 된다.
움직임 값 SAPD02는 필드 N0와 N2 사이의 프레임 움직임을 나타낸다. 이러한 프레임 움직임 값은 (바로 인접한 필드와 달리)동일한 수직 화소 위치에서의 화소들에 기초하여 계산된다. 이러한 차의 값은 인터레이스 필드 구조로 인한 수직 오프셋으로부터의 아무런 영향도 포함하지 않는다. 움직임이 없다는 판정에 있어서, 이러한 차는 이전의 프레임 움직임 차(SAPD13)와 비교되는 것이 바람직하다. 그러나, 메모리 제한으로 인해, 일반적으로 단지 두 개의 중간 필드 움직임 값, 즉 움직임 값 SAPD01 및 SAPD12만이 이용가능하다. 필드 구조로부터 움직임 값 SAPD에 대한 기여를 제거하기 위해, 움직임 값 SAPD01 및 SAPD12가 공제되어 중간 프레임 움직임과 등가로 된다.
신뢰할 수 있고 강한(robust) 표시를 얻기 위해, 움직임 값 SAPD01 및 SAPD12 사이에서 계산된 필드 차에 사전에 정해진 양자화 연산자 QS가 곱해진다. 따라서 정지 비트 판정이 다음 수학식에 따라서 수행된다.
Figure 112005022728572-PAT00002
사전에 정해진 양자화 연산자 QS는 바람직하게는 0과 2 사이의 값을 갖는다. 만약, 프레임 움직임 값이 임계치보다 더 작으면, 정지 화상 상태가 판정되고 정지 비트가 설정된다.
정지 모드 검출은 위에서 판정된 정지 비트 시퀀스에 기초하며, 이것은 정지 모드 검출기에 의해 평가되는데, 그 구성은 도 6에 도시되어 있다. 정지 비트가 설정되면 정지 비트는 카운터(410)를 증분시킨다. 정지 비트가 설정되지 않으면, 카운터(410)는 감소한다. 카운트 값이 사전에 정해진 임계치(420)를 초과하는 경우, 정지 모드가 검출되어 각 화상 영역에 대해 저장된다.
정지 모드 검출 결과에 따라서, 움직임 보상 및 보간 장치는 프로그레시브 화상 포맷에 기초하여 개선된 화질을 얻기 위해 후속 필드(F0, F1)의 재 삽입을 할 수 있다.
비디오 화상의 로컬 특성, 즉, 필름 모드 및 정지 모드 외에, 본 발명은 글로벌 필름 모드 표시를 추가로 계산하도록 제안한다. 만약 현재의 화상에 대한 글로벌 모드 표시가 필름 모드이면, 전체 화상이 필름 모드일 확률이 높다. 그 화상의 일부 화상 영역이 정지 모드로 검출되면, 이들 화상 영역의 움직임 레지스터는 어떠한 검출된 움직임 비트도 갖지 않는다. 본 발명에 따르면, 글로벌 필름 모드가 이전의 화상에 대해 검출된 경우에만, 이들 화상 영역에 대한 움직임 비트는 LUT에 의해 글로벌 움직임 레지스터로부터 유도된다.
특히, 본 발명은 도 8과 관련하여 논의한 다음의 문제를 극복할 수 있게 한다. 화상 영역이 정지 모드로부터 필름 모드로 변할 때 문제가 발생한다. 검출 신뢰도를 높이기 위해 필름 모드의 검출은 지연된다. 이 때문에 비디오 모드에서 바람직하지 않은 갭이 발생하며, 이 때 이 갭 근방의 모드들은 정지 모드 및 필름 모드가 된다. 필름 모드는 필름 모드 화상에 대해 검출되므로, 이들 정지 영역 내의 움직임 레지스터는 글로벌 움직임 레지스터 룩업 테이블(LUT)로부터의 움직임 비트를 가지고 존속된다.
본 발명에 따르면, 필름 모드 부분에 대한 움직임 패턴은 중단되지 않고 유지된다. 비디오 모드 갭의 생성은 정지 모드로부터 필름 모드로 변하는 동안에 효과적으로 방지된다. 따라서, 특히 개선된 화질을 가지면서 필름 모드 비디오 화상 내의 정지 모드 화상 영역의 경계가 정확하게 재생될 수 있다. 또한, 필름 모드 표시의 비트 매트릭스는 보다 균질하게 된다.
일반적으로, 글로벌 움직임은 현재의 화상에 대해 존재하지 않고 이전의 화상에 대해서만 존재한다. 바람직한 실시예에 따르면, 여기에 한정되는 것은 아니지만, 본 발명은 글로벌 움직임 레지스터로부터 현재의 화상에 대한 글로벌 움직임을 예측한다(도 7 참조). 움직임 상태는 이전의 검출된 풀다운 패턴에 따라서 지속된다.
신뢰할 수 있는 풀다운 검출을 위해, PAL 2-2 풀다운 변환에 대해 두 개의 움직임 상태가 필요하며, NTSC 3-2 풀다운 패턴을 검출하기 위해서는 5 개의 움직임 상태가 필요하다. 따라서 두 유형을 동시에 검출하기 위해서는 후속하는 7 개의 움직임 상태에 대한 평가가 요구된다.
필름 모드 움직임 상태의 예측은 검출된 풀다운 패턴에 따라서 현재의 움직임 상태 값을 증분시킴으로써 달성된다. 이 예측은 바람직하게는 도 7에 도시된 바와 같은 룩업 테이블(LUT)에 따라서 이루어진다. 도 7은 검출된 움직임 패턴에 따라서 모든 PAL 및 NTSC 움직임 상태를 리스트한다. 여기에 기초하여, 움직임 상태 값은 풀다운 패턴 내부에 랩어라운드된다.
정지 영역에 대해 지속된 움직임 비트는 도 8에 도시된 구성에 따라서 계산된다. 예측된 움직임 비트는 현재의 블록의 움직임 레지스터의 대기열로 들어간다. 이런 방식으로, 상이한 방식으로 검출된 움직임 비트를 지속함으로써 로컬 필름 모드 검출이 가능해진다.
로컬 필름 모드 레지스터에 대한 움직임 비트는 두 대안(alternative)으로부터 스위치를 통해 선택된다. 하나는 로컬로 판정된 블록 움직임 비트이고, 다른 하나는 글로벌 움직임 레지스터에 응답하는 엔트리가 선택되는 도 7에 따른 LUT로부터 판독된 움직임 비트이다. 후자의 대안은 블록이 정지 모드에 있고 글로벌 필름 모드가 표시되면 선택된다.
이런 방식으로, 본 발명은 다음과 같이 동작한다. 정지 모드가 (필름 모드 화상에 포함된)현재의 블록에 대해 검출되는 경우, 움직임은 이 블록에 대해 검출되지 않는다. 따라서, 움직임 레지스터는 0만 포함한다. 그러나, 필름 모드를 나타내는 글로벌 필름 모드 표시가 현재의 화상에 대해 검출되는 경우, 각 움직임 비트는 현재의 블록의 움직임 레지스터에 삽입된다. 결과적으로, 현재의 블록이 어떠한 움직임 검출도 가능하지 않을지라도, 필름 모드는 현재의 블록에 대해 검출될 수 있다.
이런 방식으로, 필름 모드 화상 또는 화상 부분 내의 조직화되지 않은(unstructured) 화상 영역이 비디오 모드 갭을 생성하지 않는다. 블록은 필름 모 드로 남아 있을 것이다. 따라서, 화면을 가로질러 움직이는 (비구성(non-structured))기둥과 같은 외형이 선명한 객체에 대해 화질 개선 처리가 성공적으로 수행될 수 있다.
화상 블록이 본 발명에 따른 필름 모드로 설정되는 경우에도, 모드는 정확하게 판정되어 동시에 표시된다. 필름 모드의 부가적인 표시는 화질 개선 처리에 악영향을 미치지 않는다. 이 처리는 우선순위 회로(priority circuit)를 이용하여 필름 모드에 대해 정지를 선택할 수 있다.
본 발명을 적용하는 일례가 도 9 및 도 10에 도시되어 있다. 도 9는 정지 영역의 검출을 도시하는데, 이 정지 영역은 필름 모드 화상 내의 비디오 모드로 설정되며, 이들 화상 영역은 또한 도 10에 도시된 바와 같은 필름 모드로 설정된다.
요약하면, 본 발명은 필름 모드 검출이 실패한 필름 모드로 화상 영역을 정확하게 유지할 수 있다. 특히, 필름 모드 화상 내의 조직화되지 않은 화상 영역은 신뢰할 수 있는 필름 모드 검출을 가능하게 하지 않는다. 따라서, 이들 정지 화상 영역의 경계 영역은 잘못된 모드 판정에 기초하여, 화상 개선 처리 동안에 부적절한 처리 방안의 적용으로 인해 화질 저하를 겪게 된다. 본 발명은 글로벌 필름 모드 표시를 검출하고, 로컬 필름 모드 판정이 실패하고 정지 모드가 검출되는 이들 화상 영역의 로컬 필름 모드 판정을 위해 검출된 글로벌 움직임을 이용한다.

Claims (26)

  1. 비디오 시퀀스의 화상 -각 비디오 화상은 복수의 화상 영역을 포함함- 에 대한 필름 모드 표시를 판정하는 방법에 있어서,
    후속 화상들 사이의 움직임 검출에 기초하여 상기 비디오 시퀀스의 각 화상에 대한 글로벌 필름 모드 표시 -상기 글로벌 필름 모드 표시는 각 화상이 필름 모드에 있는 지 또는 비디오 모드에 있는 지의 여부를 나타냄- 를 판정하는 단계와,
    후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 기초하여 각 화상 영역에 대한 로컬 필름 모드 표시 -상기 로컬 필름 모드 표시는 화상 영역이 필름 모드에 있는 지 또는 비디오 모드에 있는 지를 나타냄- 를 판정하는 단계와,
    후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 기초하여 각 화상 영역에 대한 로컬 정지 모드 표시 -상기 로컬 정지 모드 표시는 움직임이 상기 화상 영역에 대해 검출되었는 지를 나타냄- 를 판정하는 단계를 포함하고,
    상기 현재의 화상 영역에 대해 정지 모드가 검출되면, 상기 현재의 화상 영역의 상기 로컬 필름 모드 표시는 상기 글로벌 필름 모드 표시에 대해 검출된 상기 움직임에 기초하여 판정되는
    필름 모드 판정 방법.
  2. 제 1 항에 있어서,
    상기 로컬 필름 모드 판정은
    후속 화상들 내의 대응하는 위치에 있는 화상 영역들 사이에 움직임이 존재하는 지의 여부를 나타내는 움직임 비트를 검출하는 단계와,
    상기 검출된 움직임 비트를 FIFO 레지스터에 저장하는 단계와,
    상기 저장된 움직임 비트를 사전에 저장된 움직임 패턴과 비교하는 단계와,
    사전에 저장된 패턴이 검출되면 필름 모드로 판정하는 단계를 포함하는
    필름 모드 판정 방법.
  3. 제 1 항 또는 2 항에 있어서,
    상기 글로벌 필름 모드 판정은
    후속 화상들 사이에 움직임이 존재하는 지의 여부를 나타내는 움직임 비트를 검출하는 단계와,
    상기 검출된 움직임 비트를 FIFO 레지스터에 저장하는 단계와,
    상기 저장된 움직임 비트를 사전에 저장된 움직임 패턴과 비교하는 단계와,
    사전에 저장된 패턴이 검출되면 필름 모드로 판정하는 단계를 포함하는
    필름 모드 판정 방법.
  4. 제 3 항에 있어서,
    상기 로컬 필름 모드 판정은, 현재의 블록에 대해 정지 모드가 검출된 경우에 상기 글로벌 움직임 판정 동안에 상기 판정된 움직임 비트에 기초하는
    필름 모드 판정 방법.
  5. 제 4 항에 있어서,
    상기 로컬 필름 모드에 대한 현재의 움직임 비트는 상기 글로벌 움직임 판정에 대해 판정된 상기 움직임 비트로부터 사전에 정해진 규칙에 따라서 획득되는
    필름 모드 판정 방법.
  6. 제 5 항에 있어서,
    상기 로컬 필름 모드 판정에 제공된 상기 움직임 비트는 룩업 테이블로부터 획득되는
    필름 모드 판정 방법.
  7. 제 2 항 내지 6 항 중 어느 한 항에 있어서,
    상기 사전에 저장된 움직임 패턴은 각각의 동화상 필름으로부터 인터레이스로의 변환 패턴(individual motion picture film-to-interlaced conversion pattern)을 반영하는
    필름 모드 판정 방법.
  8. 제 7 항에 있어서,
    상기 동화상 필름으로부터 인터레이스로의 변환 패턴은 2-2 및/또는 3-2 풀다운 패턴을 포함하는
    필름 모드 판정 방법.
  9. 제 2 항 내지 8 항 중 어느 한 항에 있어서,
    상기 움직임 비트를 검출하는 단계는
    상기 후속 화상들의 대응하는 화소들 사이의 절대 화소 차(absolute pixel difference)를 계산하는 단계와,
    상기 절대 화소 차를 누산하는 단계와,
    상기 누산 결과를 사전에 정해진 임계치와 비교하는 단계와,
    상기 누산 결과가 상기 임계 값을 초과하면 상기 움직임이 존재한다고 판정하는 단계를 포함하는
    필름 모드 판정 방법.
  10. 제 1 항 내지 9 항 중 어느 한 항에 있어서,
    상기 필름 모드 표시는 이진 값인
    필름 모드 판정 방법.
  11. 제 1 항 내지 10 항 중 어느 한 항에 있어서,
    사전에 정해진 수의 후속 화상에 대해 아무런 움직임도 검출되지 않으면, 상기 정지 모드로 판정되는
    필름 모드 판정 방법.
  12. 제 1 항 내지 11 항 중 어느 한 항에 있어서,
    상기 비디오 화상은 블록 래스터 구성 내에 블록 형태의 복수의 화상 영역을 포함하는
    필름 모드 판정 방법.
  13. 비디오 시퀀스의 움직임 보상 화상 처리를 수행하는 방법에 있어서,
    청구항 1 내지 12 중 어느 한 항에 따른 비디오 시퀀스에 대한 필름 모드 표시를 판정하는 단계와,
    상기 판정된 필름 모드 표시에 기초하여 움직임 보상 화상 처리를 수행하는 단계를 포함하는
    움직임 보상 화상 처리 방법.
  14. 비디오 시퀀스의 화상들 -각각의 비디오 화상은 복수의 화상 영역을 포함함- 에 대한 필름 모드 표시를 판정하는 필름 모드 검출기에 있어서,
    후속 화상들 사이의 움직임 검출에 기초하여 상기 비디오 시퀀스의 각 화상에 대한 글로벌 필름 모드 표시 -상기 글로벌 필름 모드 표시는 각 화상이 필름 모드에 있는 지 또는 비디오 모드에 있는 지의 여부를 나타냄- 를 판정하는 글로벌 필름 모드 검출기와,
    후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 기초하여 각 화상 영역에 대한 로컬 필름 모드 표시 -상기 로컬 필름 모드 표시는 화상 영역이 필름 모드에 있는 지 또는 비디오 모드에 있는 지를 나타냄- 를 판정하는 로컬 모드 검출기와,
    후속 화상들의 대응하는 화상 영역들 사이의 상기 움직임 검출에 기초하여 각 화상 영역에 대한 로컬 정지 모드 표시 -상기 정지 모드 표시는 움직임이 상기 화상 영역에 대해 검출되었는 지를 나타냄- 를 판정하는 로컬 정지 모드 검출기를 포함하고,
    상기 현재의 화상 영역에 대해 정지 모드가 검출되면, 상기 로컬 필름 모드 검출기는 상기 글로벌 필름 모드 표시에 대해 검출된 상기 움직임에 기초하여 상기 현재의 화상 영역의 상기 로컬 필름 모드 표시를 판정하는
    필름 모드 검출기.
  15. 제 14 항에 있어서,
    상기 로컬 필름 모드 검출기는
    후속 화상들 내의 대응하는 위치에 있는 화상 영역들 사이에 움직임이 존재하는 지의 여부를 나타내는 움직임 비트를 검출하는 움직임 비트 검출기와,
    상기 검출된 움직임 비트를 저장하는 FIFO 레지스터와,
    상기 저장된 움직임 비트를 사전에 저장된 움직임 패턴과 비교하고, 사전에 저장된 패턴이 검출되면 필름 모드로 판정하는 비교기를 포함하는
    필름 모드 검출기.
  16. 제 14 항 또는 15 항에 있어서,
    상기 글로벌 필름 모드 검출기는
    후속 화상들 사이에 움직임이 존재하는 지의 여부를 나타내는 움직임 비트를 검출하는 움직임 비트 검출기와,
    상기 검출된 움직임 비트를 저장하는 FIFO 레지스터와,
    상기 저장된 움직임 비트를 사전에 저장된 움직임 패턴과 비교하고, 사전에 저장된 패턴이 검출되면 필름 모드로 판정하는 비교기를 포함하는
    필름 모드 검출기.
  17. 제 16 항에 있어서,
    상기 로컬 필름 모드 검출기는 상기 글로벌 움직임 검출기에 의해 판정된 움직임 비트를 이용하는
    필름 모드 검출기.
  18. 제 17 항에 있어서,
    현재 판정된 로컬 움직임 비트 또는 상기 검출된 글로벌 움직임에 기초한 움직임 비트를 선택하는 스위치 수단을 더 포함하는
    필름 모드 검출기.
  19. 제 17 항 또는 18 항에 있어서,
    상기 수신된 글로벌 움직임 비트 시퀀스에 기초하여 움직임 비트를 출력하는 룩업 테이블을 더 포함하는
    필름 모드 검출기.
  20. 제 15 항 내지 19 항 중 어느 한 항에 있어서,
    상기 사전에 저장된 움직임 패턴은 각각의 동화상 필름으로부터 인터레이스로의 변환 패턴(individual motion picture film-to-interlaced conversion pattern)을 반영하는
    필름 모드 검출기.
  21. 제 20 항에 있어서,
    상기 동화상 필름으로부터 인터레이스로의 변환 패턴은 2-2 및/또는 3-2 풀다운 패턴을 포함하는
    필름 모드 검출기.
  22. 제 15 항 내지 21 항 중 어느 한 항에 있어서,
    상기 움직임 비트를 검출하는 단계는
    상기 후속 화상들의 대응하는 화소들 사이의 절대 화소 차(absolute pixel difference)를 계산하는 계산기와,
    상기 절대 화소 차를 누산하는 누산기와,
    상기 누산 결과를 사전에 정해진 임계치와 비교하여, 상기 누산 결과가 상기 임계치를 초과하면 상기 움직임이 존재한다고 판정하는 비교기를 포함하는
    필름 모드 검출기.
  23. 제 14 항 내지 22 항 중 어느 한 항에 있어서,
    상기 필름 모드 표시는 이진 값인
    필름 모드 검출기.
  24. 제 14 항 내지 23 항 중 어느 한 항에 있어서,
    상기 정지 모드 검출기는 사전에 정해진 수의 후속 화상에 대해 아무런 움직임도 검출되지 않으면, 상기 정지 모드로 판정하는
    필름 모드 검출기.
  25. 제 14 항 내지 24 항 중 어느 한 항에 있어서,
    상기 비디오 화상은 블록 래스터 구성 내에 블록 형태의 복수의 화상 영역을 포함하는
    필름 모드 검출기.
  26. 비디오 시퀀스의 움직임 보상 화상 처리를 수행하는 움직임 보상기에 있어서,
    청구항 14 내지 25 중 어느 한 항에 따른 필름 모드 검출기와,
    상기 판정된 필름 모드 표시에 기초하여 움직임 보상 화상 처리를 수행하는 화상 처리기를 포함하는
    움직임 보상기.
KR1020050036081A 2004-04-30 2005-04-29 필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기 KR20060047638A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP04010294A EP1592246A1 (en) 2004-04-30 2004-04-30 Film mode determination in video image still areas
EP04010294.9 2004-04-30

Publications (1)

Publication Number Publication Date
KR20060047638A true KR20060047638A (ko) 2006-05-18

Family

ID=34924799

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020050036081A KR20060047638A (ko) 2004-04-30 2005-04-29 필름 모드 판정 방법, 움직임 보상 화상 처리 방법, 필름모드 검출기 및 움직임 보상기

Country Status (5)

Country Link
US (1) US20050259950A1 (ko)
EP (1) EP1592246A1 (ko)
JP (1) JP4421508B2 (ko)
KR (1) KR20060047638A (ko)
CN (1) CN100433791C (ko)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1850589A1 (en) * 2006-03-29 2007-10-31 Sony Deutschland Gmbh Method for video mode detection
ATE431675T1 (de) † 2006-04-18 2009-05-15 Vestel Elekt Sanayi Ve Ticaret Verfahren und system für die bildseitenverhältnisumwandlung eines videobildes
CN101076104B (zh) * 2006-05-19 2011-06-29 深圳艾科创新微电子有限公司 电影模式的检测方法
TWI327863B (en) * 2006-06-19 2010-07-21 Realtek Semiconductor Corp Method and apparatus for processing video data
JP2008028507A (ja) * 2006-07-19 2008-02-07 Sony Corp 画像補正回路、画像補正方法および画像表示装置
JP4157579B2 (ja) * 2006-09-28 2008-10-01 シャープ株式会社 画像表示装置及び方法、画像処理装置及び方法
US20100039517A1 (en) * 2007-01-03 2010-02-18 Koninklijke Philips Electronics N.V. Film cadence detection
KR101419892B1 (ko) * 2007-12-07 2014-07-16 삼성전자주식회사 수신기 및 이를 포함하는 통신 시스템
JP4510874B2 (ja) * 2007-12-28 2010-07-28 富士通株式会社 合成映像検出装置
JP5206313B2 (ja) 2008-10-27 2013-06-12 富士通株式会社 コーミングノイズ検出装置、コーミングノイズ検出方法
TWI412268B (zh) * 2010-04-15 2013-10-11 Himax Media Solutions Inc 水平移動字幕的去交錯方法
TWI500316B (zh) * 2010-04-15 2015-09-11 Himax Media Solutions Inc 水平移動字幕的去交錯方法
US9148620B2 (en) * 2011-04-11 2015-09-29 Intel Corporation Detecting video formats
US8520140B2 (en) * 2011-10-12 2013-08-27 Intel Corporation Mode based film mode detection

Family Cites Families (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5010401A (en) * 1988-08-11 1991-04-23 Mitsubishi Denki Kabushiki Kaisha Picture coding and decoding apparatus using vector quantization
US4982280A (en) * 1989-07-18 1991-01-01 Yves C. Faroudja Motion sequence pattern detector for video
US5247353A (en) * 1989-11-08 1993-09-21 Samsung Co., Ltd. Motion detection system for high definition television receiver
US5317398A (en) * 1992-08-17 1994-05-31 Rca Thomson Licensing Corporation Video/film-mode (3:2 pulldown) detector using patterns of two-field differences
EP0622959B1 (en) * 1992-11-17 1999-08-11 Fujitsu Limited Digital video communication apparatus
US5521644A (en) * 1994-06-30 1996-05-28 Eastman Kodak Company Mechanism for controllably deinterlacing sequential lines of video data field based upon pixel signals associated with four successive interlaced video fields
EP0697788A3 (en) * 1994-08-19 1997-03-26 Eastman Kodak Co Adaptive and global motion compensated cancellation of the interlacing of successive video images with post-processing
US5563651A (en) * 1994-12-30 1996-10-08 Thomson Consumer Electronics, Inc. Method and apparatus for identifying video fields produced by film sources employing 2-2 and 3-2 pull down sequences
US5602654A (en) * 1995-01-06 1997-02-11 National Science Council Contour-sensitive, single-field deinterlacing method
US5784115A (en) * 1996-12-31 1998-07-21 Xerox Corporation System and method for motion compensated de-interlacing of video frames
EP0940041B1 (en) * 1997-09-23 2006-11-22 Koninklijke Philips Electronics N.V. Motion estimation and motion-compensated interpolation
AU1068899A (en) * 1997-10-06 1999-04-27 Dvdo, Inc. Digital video system and methods for providing same
US6358245B1 (en) * 1998-02-19 2002-03-19 Curon Medical, Inc. Graphical user interface for association with an electrode structure deployed in contact with a tissue region
EP0951181A1 (en) * 1998-04-14 1999-10-20 THOMSON multimedia Method for detecting static areas in a sequence of video pictures
US6700622B2 (en) * 1998-10-02 2004-03-02 Dvdo, Inc. Method and apparatus for detecting the source format of video images
US6553150B1 (en) * 2000-04-25 2003-04-22 Hewlett-Packard Development Co., Lp Image sequence compression featuring independently coded regions
EP1352528A1 (en) * 2001-01-11 2003-10-15 Koninklijke Philips Electronics N.V. Recognizing film and video objects occuring in parrallel in single television signal fields
WO2002099753A1 (fr) * 2001-06-05 2002-12-12 Sony Corporation Processeur d'images
KR100393066B1 (ko) * 2001-06-11 2003-07-31 삼성전자주식회사 적응 움직임 보상형 디-인터레이싱 장치 및 그 방법
US7375760B2 (en) * 2001-12-31 2008-05-20 Texas Instruments Incorporated Content-dependent scan rate converter with adaptive noise reduction
KR100902315B1 (ko) * 2002-07-25 2009-06-12 삼성전자주식회사 디인터레이싱장치 및 방법

Also Published As

Publication number Publication date
CN1694498A (zh) 2005-11-09
US20050259950A1 (en) 2005-11-24
JP4421508B2 (ja) 2010-02-24
JP2005318624A (ja) 2005-11-10
CN100433791C (zh) 2008-11-12
EP1592246A1 (en) 2005-11-02

Similar Documents

Publication Publication Date Title
JP4421508B2 (ja) 静止領域におけるフィルムモード補正方法および装置
US20050249282A1 (en) Film-mode detection in video sequences
US8526502B2 (en) Method and apparatus for line based vertical motion estimation and compensation
JP4847040B2 (ja) ビデオシーケンスでのティッカー処理
US6118488A (en) Method and apparatus for adaptive edge-based scan line interpolation using 1-D pixel array motion detection
US7440032B2 (en) Block mode adaptive motion compensation
US7548655B2 (en) Image still area determination device
US7499102B2 (en) Image processing apparatus using judder-map and method thereof
WO2008152951A1 (en) Method of and apparatus for frame rate conversion
US8134643B2 (en) Synthesized image detection unit
US8345148B2 (en) Method and system for inverse telecine and scene change detection of progressive video
KR20060047635A (ko) 필름 모드 표시 결정 방법, 움직임 보상의 화상 처리 수행방법, 필름 모드 검출기 및 움직임 보상기
JP4791074B2 (ja) 状態情報訂正方法、動き補償画像処理方法及び画像状態情報訂正器
US7319491B2 (en) Method and apparatus for processing motion information
US8704945B1 (en) Motion adaptive deinterlacer
JP2005318623A (ja) フィルムモード外挿方法及びフィルムモード検出器並びに動き補償器
Mohammadi et al. Enhanced motion compensated deinterlacing algorithm
Lin et al. Motion adaptive de-interlacing by horizontal motion detection and enhanced ela processing
JP4356468B2 (ja) 映像信号処理装置
Chung et al. Correction to novel artifact detection for motion compensated deinterlacing

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application