KR100361721B1 - 영상표현신호처리시스템 - Google Patents

영상표현신호처리시스템 Download PDF

Info

Publication number
KR100361721B1
KR100361721B1 KR1019950037255A KR19950037255A KR100361721B1 KR 100361721 B1 KR100361721 B1 KR 100361721B1 KR 1019950037255 A KR1019950037255 A KR 1019950037255A KR 19950037255 A KR19950037255 A KR 19950037255A KR 100361721 B1 KR100361721 B1 KR 100361721B1
Authority
KR
South Korea
Prior art keywords
signal
image
motion
input
output
Prior art date
Application number
KR1019950037255A
Other languages
English (en)
Other versions
KR960016580A (ko
Inventor
피터폴폴리트
Original Assignee
톰슨 콘슈머 일렉트로닉스, 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 콘슈머 일렉트로닉스, 인코포레이티드 filed Critical 톰슨 콘슈머 일렉트로닉스, 인코포레이티드
Publication of KR960016580A publication Critical patent/KR960016580A/ko
Application granted granted Critical
Publication of KR100361721B1 publication Critical patent/KR100361721B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/144—Movement detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/107—Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

움직임 보상된 예측 코딩 데이타 압축 시스템을 포함하고 있는 비디오 신호 처리기에서는, 일반적으로 영상 페이딩과 관련된 휘도 경도를 검출하기 위해 3 개의 인접 영상 프레임(1,2,3)이 분석된다. 이들 프레임은 여러 개의 세그먼트(A...L)로 유사하게 분할된다. 인접 프레임으로부터의 대응 세그먼트들 간의 절대 화소값 차들의 합은 2 쌍의 인접한 프레임 세그먼트(DIFF1-2, DIFF2-3) 각각에 대해 얻어진다. 각 세그먼트에 대해 두 프레임 차분의 비(S)가 얻어진다. 모든 또는 소정 개수의 영역에 대해 상기 비가 실질적으로 일정하게 유지되면 페이딩이 표시된다. 페이딩이 검출되면, 움직임 코더에 의해 발생된 움직임 벡터에 제로값이 할당되고 코딩되지 않는다.

Description

영상 표현 신호 처리 시스템
본 발명은 디지탈 영상 신호 처리 분야에 관한 것으로, 특히, 예컨대, 정상 영상으로부터 블랙 레벨로 또는 블랙 레벨로부터 정상 영상으로의 영상 페이딩에관련된 휘도 기울기와 같은 영상 세기 경도(image intensity gradient)의 존재 하에서 텔레비젼 신호를 코딩하는 시스템에 관한 것이다.
예컨대, 텔레비젼 신호에 의해 표현되는 비디오 시퀀스는 시청자에게 연속적인 움직임의 인상을 주기 위해 고속으로 연속 표시되는 일련의 움직임 없는 영상이다. 각 프레임은 별개의 영상 정보를 전달하며, 움직임의 표현을 달성하는데 필요한 높은 프레임 레이트는 종종 인접 프레임간에 상당한 양의 중복 시간 정보(redundant temporal information)를 발생시킨다. 데이타 압축 형태인 움직임 보상 코딩은 그와 같은 시간적 중복성을 제거하고자 하는 경우에 종종 사용되는 시간 차원에서의 예측 코딩 형태이다.
한 프레임에서 다음 프레임으로 장면 변화가 없는 경우에, 한 프레임에서 다음 프레임으로의 영상의 움직임은 한 프레임에서 다음 프레임으로의 세기의 많은 변화를 의미한다. 움직임 보상된 예측 영상 코딩에서, 현재 프레임은 두 프레임간의 움직임을 추정하고 그 움직임을 보상함으로써 이전에 코딩된 프레임으로부터 예측된다. 현재 프레임과 이 현재 프레임의 예측과의 차이는 통상적으로 (움직임 보상된) 잔여 영상(residual image)으로 불리며, 이 잔여 영상이 코딩된다. 상기 잔여 영상의 에너지는 통상적으로 중복 시간 정보의 제거로 인해 원래 영상의 에너지보다 훨씬 적다. 원래 영상 정보 대신에 잔여 정보를 인코딩하면, 코딩에 사용될 수 있는 데이타 비트를 보다 효율적으로 사용할 수 있다.
움직임 보상된 예측 코딩은 여러 형태를 생각할 수 있다. 한가지 일반적인 방법은 블럭 매칭(block matching)에 기초하고 있다. 이 방법에서는 현재 영상 프레임이 소정 수의 직사각형 영역 또는 블럭으로 분할되고, 인접 프레임 내의 가능한 블럭들 간에 최량의 매칭을 제공하도록 인접 프레임 내의 변위에 대한 탐색이 수행된다. 관련된 x, y 좌표를 가진 움직인 벡터는 현재 프레임내의 블럭과 인접 프레임에서의 그 블럭의 최량의 매칭간의 관계를 설정한다. 움직임 보상된 (잔여 영상) 코딩은 인터 프레임(프레임간) 코딩의 일예이다. 움직임 보상된 잔여 코딩이 수용 가능한 결과를 낳지 않은 경우에(예컨대, 장면이 한 프레임에서 다음 프레임으로 변화함에 따라 예측이 양호하지 않은 경우에), 인트라 프레임 코딩에 의해 더 양호한 결과가 얻어질 수 있으며, 여기서 프레임의 비디오 정보는 움직임 보상없이 자체 코딩된다.
위에서 설명한 바와 같이 인터 프레임 예측 움직임 보상된 코딩을 포함하는 다양한 종류의 영상 코딩/압축은 예컨대, Ang 등의 "비디오 압축을 하면 큰 이득이 얻어짐(Video Compression Makes Big Gains)"(IEEE Spectrum, 1991년 10월)에 기재되어 있다. 특히, 이 자료에는, 인터 프레임 코딩 및 제안된 MPEG(Moving Pictures Expert Group)의 영상 코딩 표준(ISO/IEC 13818-2, 1993 년 11 월) 및 호환 가능한 인터프레임 예측 움직임 보상된 잔여 코딩을 위한 장치를 포함하고 있는 CCITT H.261 비디오 움직임 코더에 대해 기재되어 있다. 제안된 MPEG 표준은 인터 프레임 모드와 인트라 프레임 모드를 이용한다.
본원의 발명자는, 특정 상황하에서는 일부 움직임 추정기가 영상의 "비균일농담(blockiness)" 아티팩트(artifact)(영상을 구성하는 화소 블럭간의 세부적으로 인식 가능한 차이)를 제공하기에 충분할 정도로 비효율적이라는 사실을 인식했다.이와 같은 아티팩트는 잘못된 매칭에 기인한 평균 제곱 에러 또는 평균 절대값 에러 처리를 사용하는 움직임 추정기에 의해 발생될 수도 있다. 특히, 정상 영상으로부터 블랙 레벨로의 영상 페이드(fade) 또는 블랙 레벨로부터 정상 영상으로의 페이드 동안에, 영상 텍스처와 프레임간 변화(세부 사항)는 아주 정교한 움직임 추정기가 아니면 정확히 추적될 수 없다. 프레임간 영상의 세부 사항을 추적할 수 없는 경우에는 휘도 추적(luminance tracking)이 야기된다. 영상에 움직임이 없는 경우에 페이딩을 가진 휘도 변화는 움직임을 잘못 시사할 것이므로 휘도 추적은 움직임 추정기로부터 잘못된 정보를 산출한다. 즉, 영상 페이딩에 관련된 프레임간 휘도 경도(luminance gradient)로 인해 움직임 추정기는 영상 세부 사항이 변경되지 않았음을 인식하지 못할 경우 움직임이 존재하는 것으로 판단한다. 이와 같은 휘도 경도의 추적은 실질적으로 쓸모 없으며 코딩 효율에 불리한 무작위의 예측하지 못한 결과(예컨대, "움직임 벡터")를 초래한다.
본 발명의 원리에 따라, 본원에서, 특정 상황하에서 움직임 벡터에 제로의 값을 할당하는 것이 움직임 보상을 포함하는 비디오 신호 처리 시스템에 유리한 것으로 인식된다. 이와 같은 상황 중 하나가 주로 영상 페이딩에 관련된 영상 세기 경도에 관련되어 위에서 설명되었으며, 여기서 제로의 움직임 벡터는 전술된 "비균일 농담" 아티팩트를 상당히 감소 또는 제거하는 것으로 밝혀졌다. 제로의 움직임 벡터는 또한 움직임 추정기가 움직임을 부적절하게 검출할 경우에도 유리하다. 이것은 움직임 추정기가 정지 영상에 대해, 또는 영상 프레임의 정지 영역에 대해 (0,0) 벡터에 대한 특정 확인을 수행하지 않은 경우에 발생할 수 있다.
공개된 시스템은 장면 세기 변화, 예컨대 정상 영상으로부터 블랙 레벨로, 또는 블랙 레일로부터 정상 영상으로의 영상 페이딩, 및 하나의 정상 장면에서 다른 장면으로의 페이딩이 검출될 경우에 움직임 벡터를 제로화한다. 이를 위해, 3개의 인접 영상 프레임의 시퀀스가 평가된다. 각 프레임은 유사한 배치의 세그먼트로 분할된다. 두 쌍의 인접 프레임 세그먼트 각각에 대해, 인접 프레임으로부터 세그먼트내의 유사 위치 화소들간의 차의 절대값의 합이 구해진다. 절대 화소 차의 합의 비가 얻어진다. 소정수의 세그먼트에 대해 그 비가 거의 일정하게 유지되는 경우에 페이딩이 표시된다.
제 1 도에는 이 예에서 인터레이스되지 않은 라인을 포함하고 있는 3 개의 인접 영상 프레임의 시퀀스가 도시되어 있다. 이하의 설명은 후술될 각각 홀수 및 짝수 필드를 포함하고 있는 라인 인터레이스된 프레임의 시퀀스에도 적용된다. 프레임 3은 처리시에 예컨대 후술될 제 2 도의 장치에 의해 코딩되는 현재의 프레임이다. 프레임 2는 시간적으로 프레임 1보다 앞서고, 프레임 3은 시간적으로 프레임 2보다 앞선다. 각각의 프레임은 상기 예에서 "A" 내지 "L"로 표기된 12개의 수평 세그먼트의 동일한 배열로 분할된다. 수직 세그먼트, 블럭 또는 다른 기하학적 배열도 사용될 수 있다. 각각의 프레임은 공지의 복수의 영상 화소(P)를 포함하고 있다. 영상의 세그먼트 또는 영역이 주어진 시스템의 요구에 따라 영상 페이딩의 발생을 확실히 표시할 수 있도록 충분히 길게 제공되는 한 세그먼트의 수는 중요하지 않다. 이 예에서, 3 개의 프레임 시퀀스의 프레임 3은 최고 페이딩(예컨대, 정상 영상으로부터 블랙으로)을 나타내고, 프레임 1은 최저 프레임을 나타낸다.
3 개의 연속 프레임의 분석은 영상 페이딩의 존재를 나타내기에 충분한 것으로 결정되었다. 이와 관련하여 요구될 수도 있는 3 개의 프레임 기억 소자는 제 2도와 관련해 기술되는 종류의 비디오 인코더와 연관될 수도 있고, 프레임 기억 소자가 독립적으로 제공될 수도 있다. 다중 프레임 기억 소자는 디텔레신(detelecine) 또는 프리필터링(prefiltering) 동작 등의 동작을 선처리하는 비디오 인코더에서 종종 발견된다. 이하의 설명은 3 개의 인접 프레인 각각에서 대응 세그먼트 "A"의 분석에 관한 것이다. 상기 분석에서 얻어진 프레임 차분 정보는 비SA를 만드는데 이용된다. 상기 비의 값은 다른 모든 세그먼트에 대해 동일하게 계산된 비와 비교했을 때, 영상 페이딩이 존재하는지를 표시한다. 이하에 기술된 순서는 제 3 도의 흐름도로 도시된다. 제 3 도의 흐름도는 이하에서 논의될 라인 인터레이스(line interlaced)된 프레임의 처리를 포함한다.
첫 번째 예로서, 다음과 같이 페이드 투 블랙(fade-to-black) 상황을 고려하자.
프레임 번호 1 2 3
페이딩 시퀀스 1 a a2
페이딩 인자 "a"는 인의의 값이지만, 영상이 정상으로부터 블랙으로 페이드함에 따라 하나의 프레임으로부터 다음의 프레임으로의 화소 또는 세그먼트 크기의 감소를 가리키므로 1보다 작다. 실제로, 휘도 레벨의 변화는 페이딩 중의 화소 세기의 변화량의 좋은 지시기이다. 상기 페이딩 시퀀스(1...a...a2)는 정해진 것은 아니지만, 프레임 1(단일 페이딩 인자, 페이딩 없음)로부터 프레임 2를 거쳐 프레임 3(최대 페이딩)까지 어떻게 페이딩이 발생하는지에 대한 일예로서 도시된다. 따라서, 페이딩의 양은, 프레임 1에서 프레임 2를 거쳐 (현재의) 프레임 3으로의 순서로 증가한다.
제 1 도를 참조하면, 프레임 1 및 프레임 2의 대응 세그먼트 A에 대해 인접 프레임의 대응하는 세그먼트의 동일 위치의 화소의 세기값(intensity value)간의 차분이 정해진다. 다음에, 각 화소 차분의 절대치가 얻어진다. 상기 절대치를 더하여 프레임 차분의 값 DIFF1-2을 구한다. 프레임 2 및 프레임 3에 대해 유사한 과정을 적용하여 프레임 차분값 DIFF2-3을 구한단. 최종적으로, 프레임 차분값 DIFF1-2에 대한 프레임 차분값 DIFF2-3의 비를 구한다. 상기 예에서의 프레임 차분의 비는 이상에서 도시된 페이딩 시퀀스에서의 값 "a" 에 대응하는 값과 동일함을 알 수 있다. 프레임(1, 2, 3)간의 세그먼트 "A" 의 차분의 비는 SA로 표시된다. 차분의 비(SB-SL)를 얻기 위해 나머지 세그먼트(B-L)에 대해 유사한 과정이 사용된다.
계산된 프레임 차분 비의 값 "a"이 영상 세그먼트(A-L) 사이에 실질적으로 일정하게 유지될 때 영상 페이딩이 표시된다. 하지만, 상기 비의 값이 모든 세그먼트에 대해 실질적으로 동일하게 유지될 필요는 없다. 주어진 시스템의 요건에 따라, 예컨대 80%∼90%의 소정의 수의 세그먼트 또는 대다수가 동일 비의 값을 나타내는 것으로 충분할 수도 있다. 상기 수는, 계산된 비가 값 "a"와 동일한지의 여부를 결정하기 위한 임계치와 함께 알고리즘의 매개 변수가 될 수 있다. 상기 소정의수는 또한 영상의 움직임이 페이딩 시퀀스 동안에 존재할 가능성을 나타낸다.
예컨대, 페이드 동안 많은 움직임이 있고 세그먼트의 40% 내지 50% 만이 같은 비의 값을 가질때, 상기 페이딩 검출 시스템은 페이딩이 일어나지 않았다고 선언하게 된다. 상기 경우에서, 페이딩이 발생해도, 코딩되는 블럭의 많은 비율이 움직임을 갖고 있기 때문에 인코더가 움직임 벡터를 제로화하는 것은 바람직하지 않다. 상기 예에서는, 제로화되지 않은 벡터를 이용하는 것이 유리하므로 제로화된 움직임 벡터는 사용되지 않을 것이다. 예컨대, 0 또는 대략 0인 프레임 차분비의 값은 페이딩이 일어나지 않았음을 가리킨다. 보다 자세하게, 어느 단일 세그먼트(또는 소정의 수의 세그먼트)의 프레임 차분값(DIFF)이 0 또는 0에 가깝다면, 알고리즘은 페이딩이 없는 상황이라고 단정한다. 상기 기준은 정지 또는 거의 정지영상이 페이딩 영상으로 선언되는 것을 막는다.
블랙으로부터 정상 장면으로의 페이드는 페이드 투 블랙(fade-to-black) 프로세스의 역이고, 유사하게 처리되게 된다. 예컨대, 다음과 같이, 페이딩 인자가 프레임 스퀀스 중에서 "a"에서 "b"로 변화될 경우의 블랙으로부터 정상 영상으로의 페이드를 고려하자.
프레임 번호 1 2 3 4
페이딩 시퀀스 1 a2a2b a2b2
이 예에서, 인자 "a"는 1 미만이고, 인자 "b"는 1 보다 작지만 인자 "a" 보다 크다. 다른 예에서와 같이, 상기 페이딩 시퀀스는 정해져 있지 않는 것이 아니고, 프레임 1(페이딩 시작)로부터 프레임 2 및 3을 거쳐 프레임 4로(정상 영상으로의 페이딩 완료됨) 어떻게 페이딩이 일어나는 지의 다른 예를 예시한다. 위에서 설명한 바와 같이 차분값(DIFF1-2, DIFF2-3)이 각각 세그먼트에 의해 정해지고, 프레임 차분의 비(SA- SL)가 계산된다. 이 예의 차분비는 "a(1-b)/(1-3)"의 값과 동일함을 알 수 있다. 위에서 설명한 바와 같이, 상기 값이 영상 세그먼트(A-L)의 모든 또는 소정의 수에서 거의 일정하게 유지되면, 영상 페이딩이 표시된다. 페이딩 인자가 변화하는 정상으로부터 블랙으로의 페이드의 경우에 유사한 결과가 얻어질 수 있다.
도면을 간단히 하기 위해, 제 1 도에는 3 개의 영상 프레임을 이용하는 페이드 검출 처리가 예시되어 있다. 그러나, 라인 인터레이스 시스템에서, 각 프레임은, 알려진 바와 같이 홀수 개의 영상 필드와 짝수개의 영상 필드로 구성된다. 이와 같은 경우에, 상기 차분의 비는 홀수 및 짝수 필드의 시퀀스에 대해 각각 계산되게 된다. 예컨대, 홀수 필드 차분 비 SA(odd)는 다음과 같이 계산된다:
여기서, DIFF2-3(odd)는 프레임 2의 홀수 필드와 프레임 3의 홀수 필드간의 절대 화소 차분의 합이다. DIFF1-2(odd)는 프레임 1의 홀수 필드와 프레임 2의 홀수 필드간의 절대 화소 차분의 합이다. 소정의 세그먼트의 수에 대해 상기 비가 거의 일정하게 유지되는 지를 결정하기 위해 SA(odd)와 SB(odd) ...SL(odd)까지 비교가 행해진다. 마찬가지로, 짝수 필드 차분의 비가 계산되고, SA(짝수)는 SB(짝수)...SL(짝수)까지와 비교된다. 상기 각각의 필드 비교는 상기 시스템이 필드 경계에서 페이딩을 검출할 수 있도록 한다.
제 4 도에는 각각 홀수 필드 및 짝수 꾈드로 구성된 라인 인터레이스된 프레임 1, 2, 3의 시퀀스가 도시되어 있다. 이 예에서, 홀수 필드의 시퀀스에 대한 페이딩 인자는 a1에서 a2등으로 변하지만, 짝수 필드 시퀀스의 폐이딩 인자는 다른 인자에 의해 b1부터 b2등으로 변한다. 이 종류의 필드 페이딩에서, 홀수 및 짝수 차분비(SA...)들은 별도 계산 및 비교된다.
설명된 알고리즘의 결과로서, 영상 페이딩이 일어났는지의 여부를 지시하기 위하여 제어 신호가 발생된다. 이 제어 신호는 비디오 신호 인코더에 의해 사용되어 제 2 도에 도시된 데이타 압축 시스템 및 MPEG 호환 비디오(텔레비젼) 신호 처리와 관련되어 후술될 신호 처리를 변경시킨다.
제 1 도의 예에서, 대응하는 프레임/필드 세그먼트는 인접 필드의 동일 위치의 화소간의 화소 차분의 절대값의 합이 산출되도록 처리된다. 주어진 시스템의 요구에 따라 다른 종류의 처리가 사용될 수도 있다. 예컨대, 인접 필드의 대응 세그먼트에서. 각각 세그먼트의 화소의 절대치를 구한 다음 각 세그먼트에 대해 합할 수도 있다. 다음에, 상기 합의 필드 차분이 결정될 것이다. 인접한 유사 패리티 홀수 또는 짝수 필드에서 대응하는 동일 위치 화소간의 차분(절대 차분과 대조해서)도 역시 페이딩 검출 동작에 이용될 수 있다.
제 2 도의 시스템에서, 입력 MPEG-호환 디지탈 데이타 스트림(data stream)은 처리될 현재 영상 프레임의 영상 화소 데이타를 나타낸다. 입력 데이타는 입력 프레임 버퍼(20)에 의해 기억된다. 버퍼(20)로부터 판독된 데이타는 차분 네트워크(22) 및 멀티플렉서(24)를 거쳐 이산 코사인 변환(DCT) 유닛(26)으로 전달된다. 유닛(22, 24)의 동작은 제 2 도의 시스템의 움직임 처리 관점과 관련해서 계속 설명한다. 유닛(26)에 의해 실행되는 이산 코사인 변환은 입력 시간 영역 신호를 이산 주파수 스펙트럼을 나타내는 인자로 변환함으로써 비디오 신호의 공간 중복성(redundancy)을 효과적으로 충분히 감소시키기 위한 잘 알려진 기술이다. 각 변환 계수는 예컨대 8 ×8 화소의 블럭을 나타낸다.
유닛(26)으로부터의 DCT 변환 계수는 유닛(28)에 의해 양자화되고, 유닛(30)에 의해 가변장 부호화되고, 유닛(36)에 의한 순방향 에러 정정(FEC) 처리 전에 출력 레이트 버퍼(output rate buffer)(32)에 기억된다. 버퍼(32)의 내용(전체)은 레이트 제어기(34)에 의해 모니터되고, 레이트 제어기는 양자화기(28)의 양자화 변수(예컨대, 양자화 단계 크기)를 적당히 변경하는데 이용되는 출력 제어 신호를 제공한다. 상기 메카니즘에 의해, 데이타 스트림 비트 레이트는 버퍼(32)에 대한 평균 입력 레이트가 대체로 일정하도록 제어된다. 버퍼의 언더플로우 및 오버플로우는 대부분 방지되고, 대체적으로 일정한 버퍼 출력 전송 레이트가 달성된다. 처리기(36)의 출력 신호는 출력 채널로 전달되기 전에 필터링 및 변조 등에 의해 적당히 처리된다.
제 2 도의 블럭(40-54)은 블럭(22-28)과 함께 DPCM 움직임 추정/보상 인코더의 공지된 배열을 형성한다. 이 종류의 시스템은 앞에서 언급한 Ang 등의 논문 "Video Compression Makes Big Gains"에 기재되어 있다. 본 발명의 원리에 따라, 페이드 지시기 신호(Fade Indicator signal)를 생성하는 영상 페이딩 검출기(70)가 포함된다. 상기 신호는 제 1 도와 관련해서 논의된 인접 프레임의 시퀀스 분석 후에 발생되고 모드 제어기(54) 및 움직임 추정기(48)의 제어 입력에 인가된다. 게다가, 움직임 추정기(48)에 의해 전달된 움직임 벡터 MV는 모드 처리기(54)의 제어 입력에 인가된다.
상기 움직임 처리기는 인트라 프레임 코딩 모드 또는 예측 인터 프레임 코딩모드에서 동작한다. 인트라 프레임 코딩에서 비디오 신호 자체가 코딩된다. 인터 프레임 코딩에서 코딩되는 것은 현재 프레임과 현재 프레임의 예측간의 차분을 나타내는 잔여 영상 신호이다. 예측이 양호할 경우 인터 프레임 코딩이 이용되고, 인터 프레임 코딩은 코딩에 비교적 적은 정보가 필요하기 때문에 일반적으로 선호된다. 예측 코딩에서, 화소의 값은 그 이력에 기초해서 예측된다. 화소의 현재 값에서 예측 값을 감산하여 에러 또는 잔여를 생성하고, 이것이 코딩되고 전송된다. 수신자는 예측에 수신된 잔여를 부가하여 정확한 현재 화소값을 얻는다. 다음 설명은 예측 인더프레임 코딩이 이용되는 것으로 가정한다.
움직임 처리 동작에서, 유닛(28)으로부터의 양자화된 잔여 영상 데이타는 유닛(40)에 의해 역 양자화되고, 다른 조합기(44)에 인가되기 전에 유닛(42)에 의해 역 DCT 변환된다. 조합기(44)의 또 다른 입력은 이하 설명에 따라 전달되는 예측 영상을 수신한다. 복원된 프레임 영상은 잔여 영상과 예측 영상을 조합기(44)에 연결시켜 얻어진다. 인터 프레임 처리는 예측 코딩을 사용하므로 복원이 필요하며, 이 복원에는 디코더의 복원된 영상이 원 입력 영상으로부터 벗어나지 않도록 디코더의 동작을 추적하는 인코더가 요구된다. 복원된 영상은 프레임 메모리(46)에 의해 기억된다. 움직임 추정기(48)는 입력 버퍼(20)의 출력으로부터 입력된 현재 프레임 및 프레임 메모리(46)로부터 입력된 복원된 프레임을 수신한다. 탐색 윈도우를 이용하여, 움직임 추정기(48)는 현재 프레임의 각 화소 블럭(예컨대, 8 ×8)과 메모리(46)로부터의 이전에 복원된 영상과 화소 블럭을 비교한다. 각 화소 블럭에 대해 움직임 벡터(MV)는 현재 복원된 영상의 블럭간의 최적 매칭(오프셋)의 관련 위치를 지시하도록 생성된다. 움직임 벡터는 유닛(30)에 의해 코딩되는 수신기로 보내진다.
유닛(48)으로부터의 움직임 벡터는 또한 움직임 보상 유닛(50)에 제공되고, 움직임 보상 유닛(50)은 추정기(48)로부터의 각각 연관된 움직임 벡터에 따라 메모리(46)로부터 예측된(위치 조율된) 블럭을 전달한다. 상기 동작은 복원된 프레임으로부터 움직임 보상 블럭(예컨대, 8 ×8)을 포함하는 예측 영상을 생성한다. 예측 영상과 현재 입력 블럭간의 차분, 즉 잔여 영상은 감산식 조합기(subtractive combiner: 22)에 의해 전달된다. 상기 잔여 영상은 전술된 바와 같이 변환되어, 양자화되며, 코딩된 후 수신기/디코더로 보내진다. 디코더는 코더의 역 기능을 수행한다. 인터 프레임 동작 모드에서, 디코더는 예측 화소 블럭의 위치를 제공하기 위해 가변장 디코더로부터 추출된 동작 벡터를 이용한다.
또한. 제 2 도의 인코더는 한 쌍의 멀티플렉서(MUX: 24, 52) 및 관련 인터/인트라 프레임 모드 처리기(54)를 포함하고 있다. 각 MUX는 "0" 및 "1"로 표기된, 스위치되는 입력 신호를 수신하기 위한 한 쌍의 입력을 가지고 있다. MUX(24)의 0 입력은 현재 입력 신호를 수신하고, MUX(52)의 0 입력은, 예컨대, "0" 논리 레벨의, 고정 바이어스 레벨을 수신한다. MUX(24, 52)의 "1" 입력은 각각 잔여 영상 신호 및 예측 영상 신호를 수신한다. 모드 처리기(54)는 움직임 벡터(MV)에 응답하여 인터 프레임 또는 인트라 프레임 처리 중 어느 것이 이용될 것인가를 결정한다. 움직임 보상 예측이 양호하면, 모드 처리기(54)는 MUX(24, 52)의 제어 입력에 인터 프레임 처리를 활성화시키는 신호를 보낸다. 이 경우에, 장치(50)로부터 MUX(52)를 통해 가산기(44)로 예측 영상 신호가 전달되고, MUX(24)를 통해 잔여 영상 신호가 DCT 장치(26) 및 이하의 장치로 전달된다. 역으로, 예측이 양호하지 않으면, 모드 처리기(54)로부터의 신호가 인트라 프레임 처리를 활성화시킨다. 이 경우, 잔여 영상 신호 대신에 현재 프레임 정보 자체가 DCT 유닛(24) 및 일련의 코딩 유닛에 전달되고, 예측된 영상 신호가 가산기(44)로부터의 분리된다. 예측이 양호한지 여부의 결정은, 화질 및 요구되는 비트의 수와 같은 특정 시스템의 요구에 따라 변화하는 다양한 계수에 기초한다.
모드 처리기(54)로부터 DCT 유닛(26)으로 보내진 신호는 유닛(26)으로 하여금 움직임 예측 에러 신호를 인코딩(inter-coding)하거나 움직임 추정 예측이 없는 원래 영상의 매크로 블럭을 인코딩(intra-coding) 하도록 명령한다. 모드 처리기(54)는 DCT 유닛(26)에 처리할 블럭을 제공한다. 인터/인트라 코딩 결정은 코딩의 효율에 기초하고, 상기 효율은 여러 방식으로 판단될 수 있다. 근본적으로,상기 판단은 주어진 품질의 레벨에서 매크로블럭을 코딩하기 위해 요구되는 비트의 수와, 주어진 코딩 비트의 수에서의 품질의 레벨에 따른다. 움직임 벡터는 그 차분신호가 어느 영상 영역으로부터 유도되는지를 가리킨다. 인트라 코딩과 인터 코딩간에 동일한 코딩 효율이 나타나면, 인트라 코딩은 디폴트 코딩 결정에 이용될 수 있다. 소정의 임계치가 인트차 코딩에 대한 디폴트 결정에 이용될 수도 있다.
모드 처리기(54)는 또한 제 1 도를 참조하여 설명된 바와 같이 동작하는 페이드 검출기(70)로부터 페이드 지시기(Fade Indicator) 제어 신호를 수신한다. 페이드 검출기(70)는, 인접 프레임 내에서 유사한 위치의 세그먼트 화소를 차분하는 디지탈 신호 처리 회로와, 화소 차분의 절대값을 구하는 회로와, 그 절대값을 합산하는 회로와 인접 프레임들로부터 합산된 차분의 비를 구하는 분할 회로 뿐만 아니라, 전술된 3 프레임 시퀀스를 기억하는 3 개의 프레임 기억 소자를 포함할 수도 있다. 이들 기능을 수행하는 것이 필요할 때 적당한 용량의 메모리가 제공될 수 있다. 이들 요소는 도면의 간단화를 위해 도시하지 않았다.
요컨대, 유닛(70)은 3 개의 프레임 시퀀스에 대한 절대 화소 차분의 합의 비를 제공하도록 3 개의 인접 영상 프레임의 시퀀스를 분석함으로써 영상 페이딩의 표시를 제공한다. 영상 페이딩에 관련된 회로 경도가 검출되면 페이드 지시기는 움직임 측정기(48)에 페이딩이 검출되는 모든 프레임에 대해 출력 움직임 벡터 값을 제로(즉, 좌표 0, 0)로 설정하도록 지시한다. 움직임 벡터의 제로화는 움직임 추정기가 공간적 변위가 없음을 나타내는 가변장 코드를 발생하는 것과 같은 공지된 기술에 의해 달성될 수 있다. 이 결과의 변형은 움직임 벡터를 조악(coarse)한 화소나, 조밀한 화소, 또는 1/2 화소와 같이 특정 레벨로 설정하는 계층 움직임 추정기 시스템에 사용될 수 있다. 움직임 추정치(48)의 변형된 출력은, 공지된 바와 같이, 모드 처리기(54)의 매크로블럭 결정 네트워크에 의해 처리되고 평가될 수 있다. 양호한 결정 회로는 인트라 프레임 코딩 결정 쪽으로 약간 편향되어야 한다. 인터 프레임 코딩은 인트라 프레임 코딩과 거의 같은 수 또는 약간 적은 수의 코딩 비트를 사용하지만, 인터 코딩은 더욱 가시적인 코딩 아티팩트를 야기하게 된다.
제로화된 (0, 0) 움직임 벡터가 양호하게 매칭된 것으로 인식되지 않을 경우, 모드 처리기(54)는 인트라 프레임 코딩 모드에서 시스템이 동작하도록 하게 된다. 그러나, 제로화된 움직임 벡터가, 거의 또는 전혀 움직임을 갖지 않는 영상 페이딩에서 통상적인 것 처럼 양호하게 매칭되면 추정기(48)는 양호한 결과를 산출할 것이고 유닛(54)은 시스템에 인터프레임 코딩을 수행할 것을 지시하게 된다.
영상 페이딩 중에 프레임간 진폭(휘도) 변화는 통상 움직임에 관련된 변화보다 더 현저한 것으로 판정되었다. 움직임 벡터에 제로(0, 0) 값을 할당하면 페이딩의 존재시에 매우 양호한 결과를 초래하는 것이 인지되었다. 페이딩의 존재시에 움직임 벡터의 제로화는 또한 코딩에 필요한 비트수를 감소시키는 장점이 있고, 주어진 시스템의 코딩 과정, 예컨대 인터 프레임 코딩과 인트라 프레임 코딩간을 변경하는 데에 사용될 수도 있다. 움직임 장면의 움직임 벡터는 페이딩이 검출될 때 코딩되지 않으며, 그 영상의 소부분, 예컨대 10% 이하만이 움직임을 포함하며 프레임간 휘도 변화는 움직임 벡터를 발생시키지 않는 것으로 판정된다.
소비자 제품에서 주로 발견되는 움직임 처리 시스템은, 실재 움직임과, 여러가지 프레임에 대한 휘도 경도와 같은 영상 세기 경도간을 구별할 정도로 충분히 정교하지 않을 수도 있다. 이 시스템은 그와 같은 경도를 "움직임"으로 인지하여 잘못된 움직임 벡터를 발생할 수 있다. 상기 움직임 처리 시스템이 그와 같은 인지된 "움직임 벡터"가 위에서 설명한 바와 같이 실제로 (0, 0) 값을 가진다는 것을 알게 될 때, 코딩 효율이 개선되게 되며, 이에 따라 코딩 비트가 잘못된 움직임 벡터에 대해 낭비되지 않는다.
제 1 도는 영상 페이딩의 존재를 지시하는 알고리즘을 나타낸 영상 프레임 시퀀스의 도면.
제 2 도는 본 발명에 따른 움직임 처리를 포함한 비디오 인코더 및 시스템의 블럭도.
제 3 도는 페이딩 영상을 검출하기 위한 알고리즘의 흐름도.
제 4 도는 제 1 도와 관련되어 설명되는 페이딩 검출 시스템에 의해 처리될 수 있는 홀수 및 짝수 영상 필드를 각각 포함하는 라인 인터레이스된 프레임의 시퀀스의 도면.
* 도면의 주요 부분에 대한 부호의 설명
20 : 입력 버퍼 48 : 움직임 추정기
50 : 움직임 보상 유닛 70 : 페이드 검출기

Claims (6)

  1. 영상 표현 신호에 응답하여 움직임 벡터를 발생하는 영상 움직임 처리 네트워크를 구비한 영상 표현 신호 처리 시스템에 있어서,
    상기 영상 표현 신호에 응답하여, 하나 이상의 영상 필드에 대해 영상 세기 경도(image intensity gradient)를 나타내는 지시기 신호를 발생하는 검출기와;
    상기 움직임 처리 네트워크에 상기 지시기 신호를 인가하여 상기 움직임 벡터를 제로화하는 수단을 구비한 것을 특징으로 하는 영상 표현 신호 처리 시스템.
  2. 제 1 항에 있어서,
    상기 입력 영상 표현 신호 및 상기 움직임 벡터에 응답하는 영상 신호 코더를 더 구비한 것을 특징으로 하는 영상 표현 신호 처리 시스템.
  3. 제 1 항에 있어서,
    상기 영상 표현 신호는 텔레비젼 신호의 성분이고,
    상기 지시기 신호는 복수의 영상 필드에 대해 영상 페이딩에 관련된 휘도 경도를 나타내는 것을 특징으로 하는 영상 표현 신호 처리 시스템.
  4. 제 1 항에 있어서,
    상기 영상 움직임 처리 네트워크는 입력 처리 네트워크, 차분 네트워크, 중간 처리기 및 출력 처리기를 순서대로 포함하는 신호 경로에 연결되어 있고,
    상기 움직임 처리 네트워크는,
    상기 신호 경로에 연결된 입력, 및 출력을 가진 역 중간 처리기와;
    상기 역 중간 처리기의 상기 출력에 연결된 입력, 및 출력을 가진 조합 네트워크와;
    상기 연결된 네트워크의 상기 출력에 연결된 입력, 및 출력 네트워크를 가진 메모리와;
    상기 신호 경로에 연결된 신호 입력, 상기 검출기로부터 상기 지시기 신호를 수신하는 제어 입력, 상기 메모리의 상기 출력 네트워크에 연결된 입력, 및 움직임 벡터 출력을 가진 움직임 추정기와;
    상기 메모리의 상기 출력 네트워크에 연결된 입력, 상기 움직임 추정기의 상기 움직임 벡터 출력에 연결된 입력, 및 상기 차분 네트워크의 입력과 상기 조합 네트워크의 입력에 연결된 출력을 가진 움직임 보상 네트워크를 구비한 것을 특징으로 하는 영상 표현 신호 처리 시스템.
  5. 제 4 항에 있어서,
    상기 움직임 추정기의 상기 움직임 추정기 출력에 연결된 입력, 상기 검출기로부터 상기 지시기 신호를 수신하기 위한 입력, 및 상기 신호 경로에 연결된 출력을 가진 인터/인트라 모드 처리기를 더 구비한 것을 특징으로 하는 영상 표현 신호 처리 시스템.
  6. 영상 표현 신호를 수신하기 위한 입력, 및 신호 출력을 가지고 있는 영상 움직임 처리기를 구비한 영상 표현 신호 처리 시스템에 있어서,
    상기 영상 움직임 처리기에 포함되어 있고, 신호 입력, 신호 출력, 및 움직임 벡터를 제로화하기 위한 신호를 수신하는 제어 입력을 가지고 있는 움직임 벡터 발생기와;
    상기 영상 표현 신호를 수신하기 위한 입력, 및 상기 움직임 벡터 발생기의 상기 제어 입력에 연결된 출력을 가지고 있는 영상 세기 경도 지시기를 구비한 것을 특징으로 하는 영상 표현 신호 처리 시스템.
KR1019950037255A 1994-10-26 1995-10-26 영상표현신호처리시스템 KR100361721B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US08/329,553 US5561477A (en) 1994-10-26 1994-10-26 System for coding a video signal in the presence of an image intensity gradient
US329,553 1994-10-26

Publications (2)

Publication Number Publication Date
KR960016580A KR960016580A (ko) 1996-05-22
KR100361721B1 true KR100361721B1 (ko) 2003-02-05

Family

ID=23285946

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019950037255A KR100361721B1 (ko) 1994-10-26 1995-10-26 영상표현신호처리시스템

Country Status (7)

Country Link
US (1) US5561477A (ko)
EP (1) EP0710031B1 (ko)
JP (1) JP3933718B2 (ko)
KR (1) KR100361721B1 (ko)
CN (1) CN1098599C (ko)
DE (1) DE69521966T2 (ko)
ES (1) ES2159593T3 (ko)

Families Citing this family (60)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07154795A (ja) * 1993-12-01 1995-06-16 Canon Inc 動画像符号化装置
JP3050736B2 (ja) * 1993-12-13 2000-06-12 シャープ株式会社 動画像符号化装置
US6148035A (en) * 1994-12-29 2000-11-14 Sony Corporation Processing of redundant fields in a moving picture to achieve synchronized system operation
US5691771A (en) * 1994-12-29 1997-11-25 Sony Corporation Processing of redundant fields in a moving picture to achieve synchronized system operation
US5758091A (en) * 1995-08-10 1998-05-26 Intel Corporation Method and apparatus for adjusting video data to limit the effects of automatic gain control on motion estimation video coders
GB2308262B (en) * 1995-12-16 1999-08-04 Paul Gordon Wilkins Method for analysing the content of a video signal
US5771316A (en) * 1995-12-26 1998-06-23 C-Cube Microsystems Fade detection
US5719642A (en) * 1996-05-07 1998-02-17 National Science Council Of R.O.C. Full-search block matching motion estimation processor
US5959697A (en) * 1996-06-07 1999-09-28 Electronic Data Systems Corporation Method and system for detecting dissolve transitions in a video signal
US5920360A (en) * 1996-06-07 1999-07-06 Electronic Data Systems Corporation Method and system for detecting fade transitions in a video signal
US6061471A (en) * 1996-06-07 2000-05-09 Electronic Data Systems Corporation Method and system for detecting uniform images in video signal
US5767923A (en) * 1996-06-07 1998-06-16 Electronic Data Systems Corporation Method and system for detecting cuts in a video signal
US5778108A (en) * 1996-06-07 1998-07-07 Electronic Data Systems Corporation Method and system for detecting transitional markers such as uniform fields in a video signal
US6037986A (en) * 1996-07-16 2000-03-14 Divicom Inc. Video preprocessing method and apparatus with selective filtering based on motion detection
US8625665B2 (en) * 1996-09-20 2014-01-07 At&T Intellectual Property Ii, L.P. Video coder providing implicit coefficient prediction and scan adaptation for image coding and intra coding of video
US6005622A (en) * 1996-09-20 1999-12-21 At&T Corp Video coder providing implicit or explicit prediction for image coding and intra coding of video
US6341144B1 (en) 1996-09-20 2002-01-22 At&T Corp. Video coder providing implicit coefficient prediction and scan adaptation for image coding and intra coding of video
FR2759524B1 (fr) * 1997-02-10 1999-05-14 Thomson Multimedia Sa Procede et dispositif de codage par estimation de luminance
US6014183A (en) * 1997-08-06 2000-01-11 Imagine Products, Inc. Method and apparatus for detecting scene changes in a digital video stream
MY129827A (en) * 1999-02-05 2007-05-31 Samsung Electronics Co Ltd Digital video processing method and apparatus thereof
US7006569B1 (en) 1999-02-05 2006-02-28 Samsung Electronics Co., Ltd. Digital video processing method and apparatus thereof
DE69920055T2 (de) * 1999-02-26 2005-09-15 Stmicroelectronics Asia Pacific Pte Ltd. Verfahren und vorrichtung zur bestimmung von zeilensprung-/nichtzeilensprungbildern und erkennung von wiederholten halbbildern und szenenänderungen
JP3957915B2 (ja) 1999-03-08 2007-08-15 パイオニア株式会社 フェード検出装置及び情報符号化装置
BRPI0109962B1 (pt) * 2000-04-14 2016-07-19 Siemens Ag processo para o armazenamento e processamento de informação de imagem de imagens sucessivas no tempo
CN102291585A (zh) * 2002-07-15 2011-12-21 诺基亚有限公司 用于视频序列中错误隐藏的方法
JP2004179687A (ja) * 2002-11-22 2004-06-24 Toshiba Corp 動画像符号化／復号化方法及び装置
EP1494077A3 (en) * 2003-07-02 2006-12-27 Fuji Photo Film Co., Ltd. Image forming apparatus and image forming method
US7889792B2 (en) * 2003-12-24 2011-02-15 Apple Inc. Method and system for video encoding using a variable number of B frames
US7869503B2 (en) 2004-02-06 2011-01-11 Apple Inc. Rate and quality controller for H.264/AVC video coder and scene analyzer therefor
US7986731B2 (en) * 2004-02-06 2011-07-26 Apple Inc. H.264/AVC coder incorporating rate and quality controller
US7492820B2 (en) * 2004-02-06 2009-02-17 Apple Inc. Rate control for video coder employing adaptive linear regression bits modeling
US7453938B2 (en) * 2004-02-06 2008-11-18 Apple Inc. Target bitrate estimator, picture activity and buffer management in rate control for video coder
US7519229B2 (en) * 2004-03-30 2009-04-14 Apple, Inc. Video coding system providing separate coding chains for dynamically selected small-size or full-size playback
US20050286629A1 (en) * 2004-06-25 2005-12-29 Adriana Dumitras Coding of scene cuts in video sequences using non-reference frames
FR2887731A1 (fr) * 2005-06-23 2006-12-29 Nextream France Sa Methode et dispositif de detection de fondus dans une sequence d'images
GB2436654A (en) 2006-02-03 2007-10-03 Snell & Wilcox Ltd Detection of a cross-fade in a video sequence
GB2444992A (en) * 2006-12-21 2008-06-25 Tandberg Television Asa Video encoding using picture division and weighting by luminance difference data
US8619874B2 (en) * 2007-04-13 2013-12-31 Apple Inc. Method and system for video encoding and decoding
US8582656B2 (en) * 2007-04-13 2013-11-12 Apple Inc. Method and system for video encoding and decoding
US8593572B2 (en) * 2008-01-30 2013-11-26 Csr Technology Inc. Video signal motion detection
US8111929B2 (en) * 2008-02-29 2012-02-07 Interra Systems Inc. Method and system to detect and quantify blockiness in video files
US8326075B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video encoding using adaptive loop filter
US8325796B2 (en) * 2008-09-11 2012-12-04 Google Inc. System and method for video coding using adaptive segmentation
US8311111B2 (en) 2008-09-11 2012-11-13 Google Inc. System and method for decoding using parallel processing
US8781004B1 (en) 2011-04-07 2014-07-15 Google Inc. System and method for encoding video using variable loop filter
US8780996B2 (en) 2011-04-07 2014-07-15 Google, Inc. System and method for encoding and decoding video data
US9154799B2 (en) 2011-04-07 2015-10-06 Google Inc. Encoding and decoding motion via image segmentation
US8780971B1 (en) 2011-04-07 2014-07-15 Google, Inc. System and method of encoding using selectable loop filters
US8885706B2 (en) 2011-09-16 2014-11-11 Google Inc. Apparatus and methodology for a video codec system with noise reduction capability
US9100657B1 (en) 2011-12-07 2015-08-04 Google Inc. Encoding time management in parallel real-time video encoding
US9262670B2 (en) 2012-02-10 2016-02-16 Google Inc. Adaptive region of interest
US9131073B1 (en) 2012-03-02 2015-09-08 Google Inc. Motion estimation aided noise reduction
US9344729B1 (en) 2012-07-11 2016-05-17 Google Inc. Selective prediction signal filtering
US11425395B2 (en) 2013-08-20 2022-08-23 Google Llc Encoding and decoding using tiling
US9392272B1 (en) 2014-06-02 2016-07-12 Google Inc. Video coding using adaptive source variance based partitioning
US9578324B1 (en) 2014-06-27 2017-02-21 Google Inc. Video coding using statistical-based spatially differentiated partitioning
US10102613B2 (en) 2014-09-25 2018-10-16 Google Llc Frequency-domain denoising
GB201421095D0 (en) * 2014-11-27 2015-01-14 British Broadcasting Corp HEVC Optimization techniques
US9794574B2 (en) 2016-01-11 2017-10-17 Google Inc. Adaptive tile data size coding for video and image compression
US10542258B2 (en) 2016-01-25 2020-01-21 Google Llc Tile copying for video compression

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4779131A (en) * 1985-07-26 1988-10-18 Sony Corporation Apparatus for detecting television image movement
GB2246925B (en) * 1990-08-09 1994-04-27 Sony Broadcast & Communication Video signal processing
GB2248361B (en) * 1990-09-28 1994-06-01 Sony Broadcast & Communication Motion dependent video signal processing
US5200820A (en) * 1991-04-26 1993-04-06 Bell Communications Research, Inc. Block-matching motion estimator for video coder
GB2263602B (en) * 1992-01-24 1995-06-21 Sony Broadcast & Communication Motion compensated video signal processing
US5245436A (en) * 1992-02-14 1993-09-14 Intel Corporation Method and apparatus for detecting fades in digital video sequences
GB2265065B (en) * 1992-03-02 1995-08-16 Sony Broadcast & Communication Motion compensated image processing
US5262855A (en) * 1992-03-25 1993-11-16 Intel Corporation Method and apparatus for encoding selected images at lower resolution
JP2611607B2 (ja) * 1992-06-29 1997-05-21 日本ビクター株式会社 シーンチェンジ検出装置
JP3093494B2 (ja) * 1992-11-18 2000-10-03 株式会社東芝 多様性信号処理装置
JP2591441B2 (ja) * 1993-09-28 1997-03-19 日本電気株式会社 動画像信号の動ベクトル検出装置

Also Published As

Publication number Publication date
US5561477A (en) 1996-10-01
KR960016580A (ko) 1996-05-22
DE69521966T2 (de) 2002-05-29
EP0710031A3 (en) 1999-01-20
JPH08228356A (ja) 1996-09-03
EP0710031B1 (en) 2001-08-01
ES2159593T3 (es) 2001-10-16
EP0710031A2 (en) 1996-05-01
CN1137724A (zh) 1996-12-11
DE69521966D1 (de) 2001-09-06
JP3933718B2 (ja) 2007-06-20
CN1098599C (zh) 2003-01-08

Similar Documents

Publication Publication Date Title
KR100361721B1 (ko) 영상표현신호처리시스템
US5500689A (en) System for detecting a video signal image intensity gradient
KR100464995B1 (ko) 운동의존예측을이용하여비디오정보를압축하는방법및장치
US7146056B2 (en) Efficient spatial scalable compression schemes
KR100587280B1 (ko) 오류 은폐방법
JP4373702B2 (ja) 動画像符号化装置、動画像復号化装置、動画像符号化方法、動画像復号化方法、動画像符号化プログラム及び動画像復号化プログラム
US5235419A (en) Adaptive motion compensation using a plurality of motion compensators
JP2962012B2 (ja) 動画像符号化装置及びその復号装置
US20030012286A1 (en) Method and device for suspecting errors and recovering macroblock data in video coding
US7023918B2 (en) Color motion artifact detection and processing apparatus compatible with video coding standards
WO2004073312A1 (en) Video coding
GB2320836A (en) Error concealing in video signal decoding system
US6480546B1 (en) Error concealment method in a motion video decompression system
JP3519441B2 (ja) 動画像伝送装置
JP3415548B2 (ja) 動画像復号化装置及び動画像復号化方法
EP0577418A2 (en) Apparatus for motion compensation coding of digital video signal
GB2316567A (en) Concealing errors in a block-based image signal bit stream
KR100587274B1 (ko) 엠펙­２ 압축복원시스템에서의 오류 은폐방법
KR0172902B1 (ko) 엠펙 ii 부호기
KR100229794B1 (ko) 움직임 벡터 정보에 대한 오류 복원기능을 갖는영상복호화기
KR100388802B1 (ko) 오류은폐장치및방법
KR100209133B1 (ko) 움직임 벡터정보에 대한 오류 복원기능을 갖는 영상 복호화기
Salari et al. Segmentation based coding algorithm for low bit-rate video
JPH09219865A (ja) 映像符号化装置
JPH089386A (ja) 動画像信号の復号化装置および動きベクトル算出方法ならびに動きベクトル推定方法

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20121019

Year of fee payment: 11

FPAY Annual fee payment

Payment date: 20131018

Year of fee payment: 12

LAPS Lapse due to unpaid annual fee