KR100266345B1 - 화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상복호화 방법, 화상 부호화 프로그램기록 매체, 및 화상 복호화프로그램 기록 매체 - Google Patents

화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상복호화 방법, 화상 부호화 프로그램기록 매체, 및 화상 복호화프로그램 기록 매체 Download PDF

Info

Publication number
KR100266345B1
KR100266345B1 KR1019980700360A KR19980700360A KR100266345B1 KR 100266345 B1 KR100266345 B1 KR 100266345B1 KR 1019980700360 A KR1019980700360 A KR 1019980700360A KR 19980700360 A KR19980700360 A KR 19980700360A KR 100266345 B1 KR100266345 B1 KR 100266345B1
Authority
KR
South Korea
Prior art keywords
pixel
signal
encoding
decoding
value
Prior art date
Application number
KR1019980700360A
Other languages
English (en)
Other versions
KR19990029056A (ko
Inventor
신야 카도노
Original Assignee
모리시타 요이찌
마쯔시다덴기산교 가부시키가이샤
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 모리시타 요이찌, 마쯔시다덴기산교 가부시키가이샤 filed Critical 모리시타 요이찌
Publication of KR19990029056A publication Critical patent/KR19990029056A/ko
Application granted granted Critical
Publication of KR100266345B1 publication Critical patent/KR100266345B1/ko

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/537Motion estimation other than block-based
    • H04N19/543Motion estimation other than block-based using regions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/107Selection of coding mode or of prediction mode between spatial and temporal predictive coding, e.g. picture refresh
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/20Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video object coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Image Processing (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

화상 신호 또는 형상 신호를 종래 방법 이상으로 효율이 좋게 부호화하는 것을 목적으로 한다. 해결 수단으로서, 변화 화소 검출기(2)는 입력 신호(1)를 입력으로 하여 2치 화소값이 변화하는 화소를 검출한다. 또한, 변화 화소 예측기(4)는 메모리(3)에 저장된 참조 화상을 판독하여, 해당 입력 신호의 변화 화소를 예측한다. 차분값 계산기(5)는 변화 화소 검출기(2)의 출력으로부터 변화 화소 예측기(4)의 출력을 감산한다. 차분값 반올림기(7)는 허용치 e와 예측 오차 D를 비교하여, D-e≤x≤D+e로 되는 값 x로 부호화하기 위해 필요한 비트수가 최소인 값 x를 출력한다. 차분값 반올림기(7)의 출력은 부호화기(8)에서 부호화되어 부호화 신호(9)로 된다. 또한, 차분값 반올림기(7)의 출력은 차분값 가산기(11)에서 변화 화소 예측기(4)의 예측 화소와 가산되어 변화 화소가 계산되며, 변화 화소 복호화기(10)에서는 변화 화소 예측기(4)에서 나타내는 복호화 완료의 화소로부터 변화 화소까지의 각 화소값을 복호화하여 메모리(3)에 기억한다.

Description

화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상 복호화 방법, 화상 부호화 프로그램 기록 매체, 및 화상 복호화 프로그램 기록 매체{PICTURE ENCODER, PICTURE DECODER, PICTURE ENCODING METHOD, PICTURE DECODING METHOD, PICTURE ENCODING PROGRAM RECORDING MEDIUM, AND PICTURE DECODING PROGRAM RECORDING MEDIUM}
본 발명은 화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상 복호화 방법, 화상 부호화 프로그램 기록 매체, 및 화상 복호화 프로그램 기록 매체에 관한 것이다.
종래의 기술
화상 부호화는 오랜 역사를 가지고 있으며, ITU-T H.261, ITU-T H.263, ISO MPEG1/2 등의 우수한 표준화안이 확립되어 있다. 화상 부호화 방법을 크게 나누면, 직교 변환을 사용하는 부호화 방법과, 예측 함수를 사용하여 예측치와의 오차를 부호화하는 예측 부호화 방법이 있다.
직교 변환에 의한 부호화 방법은 계산이 복잡하지만, 적은 비트수의 부호화 신호를 얻는 경우에 있어서는 예측 부호화보다 화질이 좋은 부호화를 행할 수 있다. JPEG, MPEG 등의 직교 변환을 이용하는 일반적 부호화 방식에 있어서는 DCT(이산 코사인 변환)를 사용하고 있다. DCT를 사용하면 적은 비트수로 부호화할 수 있다는 것이 공지되어 있으나, 비트 정밀도가 높은 승산이 필요하고, 계산이 복잡해진다는 점과, 가역(可逆) 부호화가 불가능하다는 점이 문제로 된다. 따라서, 가역성이 요구되는 분야에 있어서는 DCT 연산의 사용이 불가능한 것으로 되어 있다.
이에 반하여 예측 부호화는, 계산이 간단하고, 또한 가역 부호화도 가능하다고 하는 특징이 있다. 가역성을 갖는 화상 부호화 방법으로서는, 팩시밀리에 사용되고 있는 MMR(Modified Modified Read)이 유명하다. 이것은, CCITT Rec.T6 "Facsimile Coding Schemes and Coding Control Functions for Group 4 Facsimile Apparatus"에 있어서 사용되고 있는 것으로서, 부호화 완료 직전의 주사선의 화소값의 변화점과 미(未)부호화 주사선의 화소값의 변화점과의 수평 방향의 차분값을 가변 길이 부호화하는 방법이다. 또한, 이 MMR을 좀 더 개량한 MMMR(Modified MMR)은, MPEG4의 평가 모델로서 채용되어 있다(ISO/IEC JTC/SC29/WG11 N1277,July 1996).
한편, 화상 신호를 각 물체마다 분리하여, 분리한 각 물체의 형상을 임의 형상으로 하여 화상 신호를 취급하면, 물체 단위로 화상을 조작하거나 합성할 수 있어서 효율적인 신호 전송으로 이어지게 된다. 또한, 비트수의 제약을 받는 곳에서는, 이러한 정보를 이용함으로써, 중요한 물체를 선택적으로 우선하여 전송·기록하는 것도 가능해진다. 그러나 종래의 기술에 있어서는, 임의의 형상을 갖는 물체를 부호화하는 것은 고려되어 있지 않았다. 그리고, ISO MPEG4에서 임의의 형상을 갖는 화상 신호의 부호화의 표준화가 진행되고 있다. MPEG4에서는 현재 VM3.0(ISO/IEC JTC1/SC29/WG11 N1277에 기재)으로 불리는 평가 모델이 작성되어 있으며, 이것이 임의 형상을 갖는 화상 신호를 부호화할 수 있는, 현재 상태에서 공지되어 있는 유일한 화상 부호화 방법으로 되어 있다.
임의 형상의 화상 신호는, 일반적으로 물체의 형상을 나타내는 형상 정보와, 물체 내부의 각 화소값인 화소값 정보(컬러 정보)로 구성된다. 그리고, 형상 정보로서는, 각 화소값이 유의(有意)한지(형상 내부임) 유의하지 않은지(형상 외부임)를 나타내는 2치(値) 형상 정보나, 다른 화상과 합성할 때의 각 화소마다의 비율(물체가 배경을 은폐하는 비율)인 투과도(透過度) 정보를 이용할 수 있다. 또한, 투과도가 0%와 100%의 2가지밖에 존재하지 않는 경우에는, 형상 정보와 투과도 정보가 일치하기 때문에, 2치 형상 정보와 화소값 정보의 2가지로 임의 형상의 화상 신호를 표현할 수 있다.
도 53은 이들의 정보를 설명하기 위한 도면이다. 도 53의 (a)에 도시하는 물고기의 화상을 다른 화상과 합성할 때, 이 화상의 각 화소를 어떠한 비율로서 이용하여 합성할 것인가를 나타내는 것이 투과도 정보이다. 도 53의 (a) 중에 점선으로 나타내는 수평 주사선 방향의 투과도 정보의 값을 도 53의 (b)에 도시한다. 물고기의 외부는 완전히 투과된다. 여기서는, 편의상 투과도 0을 완전 투과라고 정의하기 때문에, 물고기의 외부에서는 투과도 정보의 값은 0으로 되고, 이것에 반해 물고기 내부는 비(非) 0의 값으로 된다.
도 53의 (c)에, 투과도가 0과 비(非) 0의 2가지인 것으로 하여, 투과도 정보를 2치화한 것을 도시한다. 도 53의 (c)에서 비 0의 투과도로 되는 화소는 화소값 정보의 부호화가 필요하지만, 투과도 0의 화소는 화소값 정보가 불필요하므로, 화소값 정보 부호화에 있어서 이 2치화된 투과도 정보는 대단히 중요하다. 한편, 도 53의 (d)에 도시하는 바와 같이 2치 정보로 표현할 수 없는 투과도 정보의 성분은 그레이 스케일(gray scale)이라고 불리는 다치(多値) 정보이며, 이와 같이 다치 정보로서 표현되는 형상 정보는 화소값 정보와 마찬가지의 파형 부호화를 실행할 수 있다.
화상 부호화에 있어서는, 공간적 상관성에 근거한 화면(프레임)내 부호화와, 시간적 상관성에 근거한 화면간(프레임) 부호화를 구분하여 사용하거나, 병용하는 것이 실행된다. 이 중 화면간 부호화를 하는 경우에는, 근접하는 화면에 있어서의 움직임을 검출하여, 그 움직임만큼 움직임 보상하는 것이 실행된다. 움직임 보상에는 일반적으로 움직임 벡터가 이용된다. 전술한 VM3.0에 있어서는, 화면내 부호화와 화면간 부호화를 블럭 단위로 적응적으로 전환하여, MPEG1/2와 마찬가지의 움직임 보상을 행하여 부호화 효율의 향상을 도모하고 있다.
상기한 바와 같이, 형상 정보와 화소값 정보로 이루어지는 화상을 부호화하는 경우, 화상의 합성에 사용되는 형상 정보에 대해서는, 화소값 정보의 움직임 벡터를 사용하여 형상 정보의 움직임 보상 부호화를 할 경우, 형상 정보를 직접 부호화하는 것보다 부호화 효율이 향상되는 것이, ISO/IEC JTC1/SC29/WG11 N1260 March 1996에서 보고되어 있다.
또한, 움직임 검출·움직임 보상을 행할 때에는, 형상 정보를 2치 형상 정보의 성분과 다치 정보 성분으로 분리하고, 다치 정보 성분은 화소값 정보와 종합하여 동일한 파형 부호화를 하는 것이 효율적이라고 생각되어, 그와 같이 취급되고 있었다.
이상과 같은, 종래의 기술에 의한 화상 부호화 및 그것에 따른 화상 복호화에 있어서는, 다음과 같은 문제점이 있었다.
상술한 바와 같이, MMR 부호화는 가역(무손실, lossless) 부호화의 대표적인 것이기는 하지만, 가역적이기 때문에 시각적으로 중요하지 않은 화질 열화를 허용함으로써 압축율을 대폭 향상하는 것이 불가능하다.
또한, MMR는 화면내의 부호화 방법으로서, 화면간의 상관을 이용한 압축율의 향상은 고려되어 있지 않다. 그리고, MMR 및 그 개량 방법인 MMMR에 있어서는, 현재 주사선의 변화점과 직전의 주사선의 변화점의 차분밖에는 이용하고 있지 않아서, 수직 방향의 직선으로서의 연결(상관)의 용장이 충분히 제거되어 있지 않다. 따라서, 화소값의 변화가 주사선에 따르고 있는 경우는 부호화 효율이 양호하지만, 주사선에 따르고 있지 않는 경우에는 부호화 효율이 불량하게 된다. 또한, MMR이나 MMMR은 직전의 주사선의 변화점의 차분값으로서는 부호화할 수 없는 화소를 부호화하기 때문에, 수직 방향의 상관을 전혀 사용하지 않는 수평 부호화 모드를 갖고 있다. 이 수평 부호화 모드도 수직 방향의 상관을 이용함으로써, 효율을 더욱 향상시킬 수 있다.
또한, 종래의 MMR나 MMMR에서는, 일부의 비트 스트림을 복호화함으로써 계층적으로 화상을 재생할 수 없고, 또한 계층적인 화상 재생이 가능한 다른 방법으로는 부호화 효율이 좋지 않아 부호화 비트수가 증가한다는 결점이 있어서, 효과적인 계층적 화상 재생을 가능하게 하는 부호화 방법은 존재하지 않았다.
또한, 형상 정보와 화상 정보로 이루어지는 화상을 움직임 보상에 의해 부호화하는 경우, 종래에는 형상 정보에 대하여 화상 정보와 동일한 움직임 벡터를 이용하여 움직임 보상을 하고 있었는데, 예를 들어 구체(球體)가 회전할 경우, 형상은 변화하지 않지만 구체로 그려진 도형은 이동하는 것과 같이, 일반적으로 화상 정보의 움직임 벡터와 형상 정보의 움직임 벡터는 일치하지 않는다. 따라서, 이러한 경우에 양호한 부호화를 할 수 없는 것이 종래의 부호화 방법의 문제점이었다.
또한, 전술한 바와 같이 VM3.0에서는, 화면내 부호화와 화면간 부호화를 블럭 단위로 적응적으로 전환하여 부호화 효율의 향상을 도모하는 것이지만, 화면내/화면간 부호화에 관한 판정은, MPEG1/2에 있어서의 적응적 전환의 경우와 마찬가지로, 화소값 정보에 근거하여 결정되고 있어서, 화소값 정보와 성질이 크게 다른 형상 정보를 적절히 또한 효율적으로 부호화하는 것은 곤란하였다.
본 발명은 이러한 점을 해결하기 위해 이루어진 것으로서, 화상 신호를 효율적으로 부호화하는 것이 가능한 화상 부호화 장치, 화상 부호화 방법, 및 화상 부호화 프로그램 기록 매체를 제공하는 것을 목적으로 한다. 또한, 효율적으로 부호화된 상기 부호화 신호를 적절히 복호화하는 것이 가능한 화상 복호화 장치, 화상 복호화 방법, 및 화상 복호화 프로그램 기록 매체를 제공하는 것을 목적으로 한다.
발명의 개시
상기한 목적을 달성하기 위하여, 본 발명의 제 1 화상 부호화 장치는, 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서, 상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과, 부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과, 상기 검출 변화 화소와 상기 예측 변화 화소로부터 양자의 차분을 계산하여, 차분값 D를 출력하는 차분값 계산 수단과, 미리 설정된 허용치와, 상기 차분값 D에 근거하여 정해지는 범위내의 값으로서, 또한 부호화하였을 때의 부호 길이가 최소로 되는 값인 D'를 선택하여, 이것을 수정 차분값으로서 출력하는 반올림 수단과, 상기 수정 차분값 D'와, 상기 예측한 변화 화소로부터 2치 화상 신호를 복호화하는 복호화 수단과, 상기 수정 차분값 D'를 부호화하는 부호화 수단을 구비한 것으로, 허용치 이하의 예측 오차에 있어서, 해당 오차(차분값)의 부호 길이가 최소로 되는 수정 차분값을 선택하여 이를 출력하기 때문에, 부호화에 필요한 비트수를 삭감할 수 있다.
본 발명의 제 2 화상 부호화 장치는, 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서, 상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과, 해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과, 상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 수단과, 참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상과 더불어 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과, 상기 검출 변화 화소와 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 수단과, 상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 수단과, 상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 수단이 출력하는 부호화 모드를 부호화하는 부호화 수단을 구비하였기 때문에, 해당 프레임에 근거하는 예측과, 움직임 보상한 참조 프레임에 근거하는 예측을 비교하여, 부호 길이가 최소로 되는 것을 선택하여 부호화 신호를 출력할 수 있기 때문에, 프레임간의 화소 상관을 이용함으로써 부호화에 필요한 비트수를 삭감할 수 있다.
본 발명의 제 3 화상 부호화 장치는, 2차원 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서, 상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과, 해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과, 상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 수단과, 해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과, 상기 검출 변화 화소와 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 수단과, 상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응해 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 수단과, 상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 수단이 출력하는 부호화 모드를 부호화하는 부호화 수단을 구비한 것으로, 수평 방향의 주사에 의한 예측과, 수직 방향의 주사 예측을 비교하여, 부호 길이가 최소로 되는 것을 선택해 부호화하는 것이 가능하기 때문에, 화상의 수평 상관과 수직 상관에 대한 국소적인 변화를 이용함으로써 부호화에 필요한 비트수를 삭감할 수 있다.
본 발명의 제 4 화상 부호화 장치는, 다치(多値) 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서, 상기 화소값이 소정치 이상으로 변화하는 화소를 검출하고, 상기 검출한 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과, 부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과, 상기 검출 변화 화소와 상기 예측 화소의 차분을 계산하고, 상기 계산한 차분을 차분값 D로서 출력하는 차분값 계산 수단과, 상기 차분값 D와, 상기 검출 변화 화소의 화소값을 부호화하는 부호화 수단과, 상기 차분값 D와 상기 변화 화소의 화소값으로부터 다치 화상 신호를 복호화하는 복호화 수단을 구비한 것으로, 임계값 이상의 화소값의 변화하는 위치를 변화 위치로 판단함으로써, 2치 화상만이 아니라 다치 화상에 대해서도 부호화를 가능하게 할 수 있다.
본 발명의 제 5 화상 부호화 장치는, 화상을 합성할 때의 비율을 나타내는 투과도 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 장치에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 수단과, 상기 참조 화상의 화소값 신호를 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여 보상 화소값 신호를 출력하는 제 1 움직임 보상 수단과, 상기 입력 신호의 화소값 신호와 상기 보상 화소값 신호로부터 양자의 차분을 계산하여 제 1 차분값을 출력하는 제 1 차분값 계산 수단과, 상기 제 1 차분값을 부호화하는 제 1 부호화 수단과, 상기 입력 신호의 투과도 신호와 상기 참조 화상의 투과도 신호를 비교하여 투과도 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 수단과, 상기 참조 화상의 투과도 신호를 상기 투과도 신호의 움직임 벡터를 이용하여 움직임 보상하여 보상 투과도 신호를 출력하는 제 2 움직임 보상 수단과, 상기 입력 신호의 투과도 신호와 상기 보상 투과도 신호로부터 양자의 차분값을 계산하여 제 2 차분값을 출력하는 제 2 차분값 계산 수단과, 상기 제 2 차분값을 부호화하는 제 2 부호화 수단과, 상기 화소값 신호의 움직임 벡터와 상기 투과도 신호의 움직임 벡터를 부호화하는 제 3 부호화 수단을 구비한 것으로, 투과도 신호에 대해서는, 화소값 신호의 움직임 벡터와는 별도로 검출한 움직임 벡터를 이용하여 움직임 보상함으로써, 입력 투과도 신호에 대하여 움직임 보상 신호에 의해 정밀도가 좋게 근사시킬 수 있어서, 움직임 보상 오차가 작아지기 때문에, 부호화 효율이 향상된다.
본 발명의 제 6 화상 부호화 장치는, 청구항 5에 기재된 화상 부호화 장치에 있어서, 상기 제 2 움직임 벡터 검출 수단은, 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 투과도 신호와 상기 참조 화상의 투과도 신호를 비교하여 투과도 신호의 움직임 벡터를 검출하기 때문에, 화소값 신호와 완전히 독립적으로 실행하는 경우에 비해 움직임 검출에 필요한 계산 횟수를 삭감할 수 있다.
본 발명의 제 7 화상 부호화 장치는, 청구항 5에 기재된 화상 부호화 장치에 있어서, 상기 제 1 움직임 벡터 검출 수단은, 상기 제 2 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하기 때문에, 투과도 신호와 완전히 독립적으로 실행하는 경우에 비해서 움직임 검출에 필요한 계산 횟수를 삭감할 수 있다.
본 발명의 제 8 화상 부호화 장치는, 청구항 5에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 상기 화소값 신호의 움직임 벡터와, 상기 투과도 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하기 때문에, 차분 벡터의 발생 빈도가 0 벡터 근방으로 집중되게 되어서, 가변 길이 부호화를 실행함으로써 부호화 효율이 향상되어, 보다 적은 비트수로 부호화하는 것이 가능하게 된다.
본 발명의 제 9 화상 부호화 장치는, 청구항 5에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 상기 투과도 신호의 움직임 벡터와, 상기 투과도 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것으로 함으로써, 상관성이 있는 신호의 움직임 벡터의 차분 벡터를 부호화하기 때문에, 차분 벡터의 발생 빈도가 0 벡터 근방으로 집중하는게 되어서, 가변 길이 부호화를 함으로써, 부호화 효율이 향상되어 보다 적은 비트수로 부호화하는 것이 가능하게 된다.
본 발명의 제 10 화상 부호화 장치는, 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 장치에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 수단과, 상기 참조 화상의 화소값 신호를 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 화소값 신호를 출력하는 제 1 움직임 보상 수단과, 상기 입력 신호의 화소값 신호와 상기 보상 화소값 신호로부터 양자의 차분을 계산하여 제 1 차분값을 출력하는 제 1 차분값 계산 수단과, 상기 제 1 차분값을 부호화하는 제 1 부호화 수단과, 상기 입력 신호의 형상 신호와 상기 참조 화상의 형상 신호를 비교하여 형상 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 수단과, 상기 참조 화상의 형상 신호를 상기 형상 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 형상 신호를 출력하는 제 2 움직임 보상 수단과, 상기 입력 신호의 형상 신호와 상기 보상 형상 신호로부터 양자의 차분값을 계산하여 제 2 차분값을 출력하는 제 2 차분값 계산 수단과, 상기 제 2 차분값을 부호화하는 제 2 부호화 수단과, 상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터를 부호화하는 제 3 부호화 수단을 구비한 것으로, 부호화 효율의 향상을 도모할 수 있음과 더불어, 참조 화상으로서 부호화 및 복호화되어, 움직임 보상값이 가산된 보다 적절한 신호를 이용함으로써, 움직임 보상 오차를 한층 더 감소할 수 있게 된다.
본 발명의 제 11 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 2 움직임 벡터 검출 수단은, 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 형상 신호와 상기 참조 화상의 형상 신호를 비교하여 형상 신호의 움직임 벡터를 검출하는 것으로 함으로써, 투과도 신호의 움직임 검출에 있어서, 화소값 신호에 있어서의 움직임 검출의 결과를 이용하기 때문에, 움직임 검출의 계산 횟수를 삭감할 수 있다.
본 발명의 제 12 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 1 움직임 벡터 검출 수단은, 상기 제 2 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 것으로 함으로써, 화소값 신호의 움직임 검출에 있어서, 투과도 신호에 있어서의 움직임 검출의 결과를 이용하기 때문에, 움직임 검출의 계산 횟수를 삭감할 수 있다.
본 발명의 제 13 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것으로 함으로써, 형상 신호의 움직임 벡터를 부호화하는 대신에, 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터와의 차분 벡터를 부호화하기 때문에, 가변 길이 부호화를 실행함으로써, 부호화 효율을 한층 더 향상시킬 수 있다.
본 발명의 제 14 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 상기 형상 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것으로 함으로써, 화소값 신호의 움직임 벡터를 부호화하는 대신에, 형상 신호의 움직임 벡터와 형상 신호의 움직임 벡터와의 차분 벡터를 부호화하기 때문에, 가변 길이 부호화를 실행함으로써, 부호화 효율을 한층 더 향상시킬 수 있다.
본 발명의 제 15 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 입력 신호의 형상 신호가 화소값이 모두 유의한 것을 나타내는 것이고, 또한 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호가, 화소값이 모두 유의한 것을 나타내는 것인 경우, 또는 상기 입력 신호의 형상 신호가 화소값이 모두 유의하지 않은 것을 나타내는 것이고, 또한 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호가, 화소값이 모두 유의하지 않은 것을 나타내는 것인 경우, 상기 제 2 벡터 검출 수단은 형상 신호의 움직임 벡터의 검출을 하지 않고, 상기 제 1 벡터 검출 수단에 있어서 검출한 화소값 신호의 움직임 벡터를 상기 형상 신호의 움직임 벡터로 하는 것으로 함으로써, 필요성이 낮은 경우에는 형상 신호의 움직임 검출을 하지 않기 때문에, 처리 부담을 경감할 수 있다.
본 발명의 제 16 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호를, 상기 입력 신호의 형상 신호와 비교하여, 비교 결과의 차가 미리 설정된 허용치를 하회하는 경우에, 상기 제 1 벡터 검출 수단은 화소값 신호의 움직임 벡터의 검출을 하지 않고, 상기 제 2 벡터 검출 수단에 있어서 검출한 형상 신호의 움직임 벡터를 상기 화소값 신호의 움직임 벡터로 하는 것으로 함으로써, 필요성이 낮은 경우에는 형상 신호의 움직임 검출을 하지 않기 때문에, 처리 부담을 경감할 수 있다.
본 발명의 제 17 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 직전에 부호화한 입력 신호에 있어서, 상기 입력 신호의 형상 신호의 움직임 벡터가 부호화되어 있던 경우, 상기 직전에 부호화한 형상 신호의 움직임 벡터와, 입력 신호로부터 검출한 형상 신호의 움직임 벡터와의 차분값을 부호화하는 것으로 함으로써, 직전에 형상 신호의 움직임 벡터가 부호화되어 있는 경우에는, 그 움직임 벡터와 검출한 움직임 벡터와의 차분 벡터를 취득하여 부호화하기 때문에, 상관성이 높은 형상 신호끼리의 움직임 벡터의 차분을 이용함으로써 부호화 효율을 향상시키는 것이 가능해진다.
본 발명의 제 18 화상 부호화 장치는, 청구항 10에 기재된 화상 부호화 장치에 있어서, 상기 제 3 부호화 수단은, 직전에 부호화한 입력 신호에 있어서, 상기 입력 신호의 화소값 신호의 움직임 벡터가 부호화되어 있었던 경우, 상기 직전에 부호화한 화소값 신호의 움직임 벡터와, 입력 신호로부터 검출한 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것으로 함으로써, 직전에 화소값 신호의 움직임 벡터가 부호화되어 있는 경우에는, 그 움직임 벡터와 검출한 움직임 벡터와의 차분벡터를 취득하여 부호화하기 때문에, 상관성이 높은 화소값 신호끼리의 움직임 벡터의 차분을 이용함으로써 부호화 효율을 향상시키는 것이 가능해진다.
본 발명의 제 19 화상 부호화 장치는, 청구항 10 내지 18 중 어느 한 항에 기재된 화상 부호화 장치에 있어서, 상기 입력 신호가 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 것인 경우에, 상기 투과도 정보를 상기 형상 신호로 하고, 상기 화상 정보를 상기 화소값 신호로 하는 것으로 함으로써, 투과도 정보를 포함하는 화상 신호에 대하여, 부호화 효율의 향상을 도모하는 것이 가능해진다.
본 발명의 제 20 화상 부호화 장치는, 청구항 10 내지 18 중 어느 한 항에 기재된 화상 부호화 장치에 있어서, 상기 입력 신호가 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 것인 경우에, 상기 투과도 정보를, 형상만을 나타내는 2치 신호와, 그 밖의 신호인 나머지 형상 신호로 분리하고, 상기 분리한 2치 신호를 상기 형상 신호로 하고, 상기 분리한 나머지 형상 신호와 상기 화상 정보를 상기 화소값 신호로 하는 것으로 함으로써, 투과도 정보를 포함하는 화상 신호에 대하여, 부호화 효율의 향상을 도모하는 것이 가능해진다.
본 발명의 제 21 화상 부호화 장치는, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보 중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서, 상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로 통합하여, 블럭화된 정보로서 출력하는 블럭화 수단과, 상기 블럭화 수단에 의해 블럭화된 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 수단과, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 2 부호화 수단을 포함하며, 상기 제 1 부호화 수단 출력과, 상기 제 2 부호화 수단 출력을 부호화 출력으로 하는 것으로, 상관성이 높은 형상 정보, 투과도 정보 및 화소값 정보에 대하여, 종합하여 부호화를 행하기 때문에, 동일한 모드로 되는 부호가 짧은 부호 길이로 되는 가변 길이 부호화를 함으로써, 모드 부호화 신호의 비트수를 삭감하는 것이 가능해진다.
본 발명의 제 22 화상 부호화 장치는, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서, 상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로 통합하여, 블럭화된 정보로서 출력하는 블럭화 수단과, 상기 블럭화 수단에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보의 각각에 대하여 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 수단과, 상기 제 1 부호화 수단에 있어서 선택된 부호화 모드 중 어느 하나의 부호화 모드에 있어서, 상기 블럭화 수단에 의해 블럭화된 상기 화소값 정보를 부호화하는 제 2 부호화 수단과, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 3 부호화 수단을 포함하며, 상기 제 1 부호화 수단 출력, 상기 제 2 부호화 수단 출력 및 상기 제 3 부호화 수단 출력을 부호화 출력으로 하는 것으로, 선택되는 모드가 동일한 것으로 되기 쉽기 때문에, 가변 길이 부호화를 함으로써 모드 부호화 신호의 비트수를 한층 더 삭감하는 것이 가능해진다.
본 발명의 제 23 화상 부호화 장치는, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보 중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서, 상기 입력 화상 신호의 각 화소를, 상기 형상 정보 또는 상기 투과도 정보와, 상기 화소값 정보와의 대응 관계에 근거하여, 대응하는 화소를 1그룹으로 하여 블럭화해서, 블럭화된 정보로서 출력하는 블럭화 수단과, 상기 블럭화 수단에 의해 블럭화된 상기 화소값 정보에 대하여 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 부호화하는 제 1 부호화 수단과, 상기 제 1 부호화 수단에 있어서 선택된 부호화 모드에 있어서, 상기 블럭화 수단에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보를 부호화하는 제 2 부호화 수단과, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 수단을 포함하며, 상기 제 1 부호화 수단 출력, 상기 제 2 부호화 수단 출력 및 상기 제 3 부호화 수단 출력을 부호화 출력으로 하는 것으로, 선택되는 모드가 동일한 것으로 되기 쉽기 때문에, 가변 길이 부호화를 함으로써 모드 부호화 신호의 비트수를 한층 더 삭감하는 것이 가능해진다.
본 발명의 제 24 화상 부호화 장치는, 청구항 21 내지 23 중 어느 한 항에 기재된 화상 부호화 장치에 있어서, 상기 소정의 부호화 모드는 화면내(畵面內) 부호화 및 화면간(畵面間) 부호화인 것으로 함으로써, 화상 신호의 상관 관계에 근거해 부호화를 행하고, 또한 모드 부호화 신호의 비트수 삭감을 도모할 수 있다.
본 발명의 제 25 화상 부호화 장치는, 청구항 22 또는 23에 기재된 화상 부호화 장치에 있어서, 상기 제 2 부호화 수단은, 상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드가 화면내 부호화이었을 경우에, 화면내 부호화를 선택하는 것으로 함으로써, 화상 신호의 상관 관계에 근거하여 부호화를 행하고, 또한 모드를 동일하게 함으로써, 모드 부호화 신호의 비트수 삭감을 한층 더 도모할 수 있다.
본 발명의 제 26 화상 부호화 장치는, 청구항 21 내지 23 중 어느 한 항에 기재된 화상 부호화 장치에 있어서, 상기 소정의 부호화 모드는, 상기 블럭마다의 움직임 벡터의 개수인 것으로 함으로써, 화상 신호의 성질에 대응한 부호화를 행하고, 또한 모드 부호화 신호의 비트수 삭감을 도모할 수 있다.
본 발명의 제 27 화상 부호화 장치는, 청구항 22 또는 23에 기재된 화상 부호화 장치에 있어서, 상기 제 2 부호화 수단은, 상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드인 움직임 벡터의 개수를 상기 부호화 모드로서 선택하는 것으로 함으로써, 화상 신호의 성질에 대응한 부호화를 행하고, 또한 모드를 동일하게 함으로써, 모드 부호화 신호의 비트수 삭감을 한층 더 도모할 수 있다.
본 발명의 제 28 화상 부호화 장치는, 청구항 21 내지 23 중 어느 한 항에 기재된 화상 부호화 장치에 있어서, 상기 소정의 부호화 모드는, 양자화 단계 변경 있음 및 양자화 단계 변경 없음인 것으로 함으로써, 화상 신호의 성질에 대응한 부호화를 행하고, 또한 모드 부호화 신호의 비트수 삭감을 도모할 수 있다.
본 발명의 제 29 화상 부호화 장치는, 청구항 22 또는 23에 기재된 화상 부호화 장치에 있어서, 상기 제 2 부호화 수단은, 상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드가 양자화 단계 변경 없음인 경우에, 양자화 단계 변경 없음을 선택하는 것으로 함으로써, 화상 신호의 성질에 대응한 부호화를 하고, 또한 모드를 동일하게 함으로써, 모드 부호화 신호의 비트수 삭감을 한층 더 도모할 수 있다.
본 발명의 제 30 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 장치에 있어서, 상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 1 변화 화소를 출력하는 제 1 변화 화소 검출 수단과, 부호화 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 수단과, 부호화 및 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 수단과, 상기 제 2 변화 화소와 상기 제 3 변화 화소에 따라서 상기 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과, 상기 제 1 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 수단과, 상기 변화 화소 차분값을 부호화하여 부호화 신호로 하는 예측 오차 부호화 수단을 구비한 것으로 함으로써, 예측에 대한 오차를 부호화함으로써, 부호화 효율의 향상을 도모하는 것이 가능해진다.
본 발명의 제 31 화상 부호화 장치는, 청구항 30에 기재된 화상 부호화 장치에 있어서, 상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은, 상기 제 2 변화 화소 및 상기 제 3 변화 화소의 화소값을 상기 제 1 변화 화소의 화소값과 동일한 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 32 화상 부호화 장치는, 청구항 30에 기재된 화상 부호화 장치에 있어서, 상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은, 상기 주사하는 소정의 방향을, 상기 제 1 변화 화소 검출 수단이 상기 주사하는 소정의 방향과 동일한 방향으로 하는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 33 화상 부호화 장치는, 청구항 30에 기재된 화상 부호화 장치에 있어서, 상기 제 2 변화 화소를 이용하여 예측한 변화 화소와의 차에 의해, 상기 제 3 변화 화소가 부호화되어 있는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 34 화상 부호화 장치는, 청구항 30에 기재된 화상 부호화 장치에 있어서, 제 2 변화 화소, 제 3 변화 화소 및 제 1 변화 화소가 다른 주사선에 있는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 35 화상 부호화 장치는, 청구항 30에 기재된 화상 부호화 장치에 있어서, 상기 변화 화소 예측 수단은, 상기 제 2 변화 화소가 제 m 주사선의 x 번째 화소에 있고, 상기 제 3 변화 화소가 제 n 주사선의 y 번째 화소에 있을 때, 상기 제 1 변화 화소에 대하여, 제 k 주사선의 y-(x-y)*(n-k)/(m-n) 번째 화소인 것으로 예측하는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 36 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 장치에 있어서, 상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 수단과, 부호화 및 복호화 완료 화소로부터 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과, 상기 검출 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 수단과, 상기 변화 화소 차분값의 값이 소정치 미만인 경우에, 상기 변화 화소 차분값을 부호화하여, 차분값 부호화 신호를 출력하는 예측 오차 부호화 수단과, 상기 변화 화소 차분값의 값이 소정치 이상인 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 예측 오차 부호화 수단이 부호화할 수 있는 화소 위치에 위치하지 않는 화소의 수를 산출하고, 상기 산출한 화소수를 부호화하여, 화소수 부호화 신호를 출력하는 화소수 부호화 수단을 포함하며, 상기 예측 오차 부호화 수단과 상기 화소수 부호화 수단은, 상기 차분값 부호화 신호와 상기 화소수 부호화 신호가 일의(一意)에 식별이 가능한 부호화를 행하는 것으로, 예측 오차가 정해진 범위내에 있을 때에는 예측 오차의 부호화 신호를, 범위 밖에 있을 때에는 화소수의 부호화 신호를, 출력하는 부호화 신호로 하기 때문에, 예측 오차가 큰 경우에는 변화 화소의 개수의 변동에 의해, 변화 화소의 예측을 할 수 없는 경우에도 부호화 효율이 저하하는 것을 방지하여, 적절한 부호화를 실행하는 것이 가능해진다.
본 발명의 제 37 화상 부호화 장치는, 청구항 36에 기재된 화상 부호화 장치에 있어서, 상기 예측 오차 부호화 수단 및 상기 화소수 부호화 수단은, 상기 변화 화소 차분값과 비교하는 상기 소정치를 해당 주사선의 화소수를 이용하여 설정하는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 38 화상 부호화 장치는, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 입력으로 하여, 상기 형상 신호를 부호화하는 화상 부호화 장치에 있어서, 상기 입력한 형상 신호로부터, 상기 물체를 나타내는 화소를 포함하는 직사각형 영역인 유의 영역을 추출하고, 상기 추출한 유의 영역의 범위인 유의 영역 범위를 출력하는 유의 영역 추출 수단과, 상기 형상 신호를 복수의 화소로 이루어지는 블럭으로 분할하는 블럭화 수단과, 상기 블럭화 수단이 출력하는 각 블럭마다, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정한 경우는, 적어도 해당 블럭의 상기 유의 영역을 부호화하여 형상 부호화 신호를 출력하는 형상 부호화 수단을 포함하며, 상기 유의 영역 범위와 상기 형상 부호화 신호를 부호화 신호로 하는 것으로, 유의 영역의 범위를 검출하여, 유의 영역의 범위의 내부만 형상 신호를 부호화하도록 형상 신호의 블럭 사이즈를 변경하기 때문에, 유의 영역의 범위 이외를 부호화하는 일이 없어 형상 신호의 부호화 효율이 향상된다.
본 발명의 제 39 화상 부호화 장치는, 청구항 38에 기재된 화상 부호화 장치에 있어서, 상기 형상 부호화 수단은, 상기 블럭화 수단에 의해 구성된 각 블럭중에서, 상기 유의 영역을 포함하는 최소의 직사각형 영역을 추출하고, 상기 추출한 직사각형 영역의 내부만을 부호화하는 것으로 함으로써, 상기한 부호화를 행하여 부호화 효율을 향상시킨다.
본 발명의 제 40 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력으로 하여 상기 2차원 화상 신호를 부호화하는 화상 부호화 장치에 있어서, 상기 화상 신호를 적어도 2개의 화상 신호로 분리하고, 상기 분리한 화상 신호를 2개 이상의 부분 화상 신호로서 출력하는 화상 신호 분리 수단과, 상기 부분 화상 신호 중 적어도 1개를 대상 부분 화상 신호로서 선택하고, 상기 선택한 대상 부분 화상 신호를 부호화하여 제 1 부호화 신호를 출력하는 제 1 화상 신호 부호화 수단과, 상기 제 1 부호화 신호를 복호화한 화상 신호에 근거하여, 상기 부분 화상 신호 중 상기 대상 부분 화상 신호를 제외한 대상외 부분 화상 신호를 예측하고, 상기 예측이 적중할 확률을 계산하고, 상기 계산한 예측 확률을 출력하는 예측 확률 계산 수단과, 상기 예측 확률 계산 수단에 의해 계산한 예측 확률에 따라, 복호화의 우선도를 결정하고, 상기 결정한 우선도에 따른 부호화 방법을 이용하여 상기 대상외 부분 화상 신호를 부호화하는 제 2 화상 신호 부호화 수단을 구비한 것으로, 예측 확률이 낮은 화소로부터 우선적으로 부호화함으로써, 화질 열화가 적은 계층적인 부호화를 부가 정보없이 실현하는 것이 가능하게 된다.
본 발명의 제 41 화상 부호화 장치는, 청구항 40에 기재된 화상 부호화 장치에 있어서, 상기 제 2 화상 신호 부호화 수단은, 상기 예측 확률이 작은 화소가 우선적으로 복호화되도록, 상기 복호화의 우선도를 결정하는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 42 화상 부호화 장치는, 청구항 40에 기재된 화상 부호화 장치에 있어서, 상기 예측 확률 계산 수단은, 근방의 화소값이 동일한 값인 경우에 상기 적중할 확률을 크게 하고, 근방의 화소값이 상이한 값인 경우에 상기 적중할 확률을 작게 하는 것으로 함으로써, 상기한 부호화를 행하여 상기한 효과를 얻을 수 있다.
본 발명의 제 43 화상 복호화 장치는, 부호화 신호를 입력하여, 복호화하는 화상 복호화 장치에 있어서, 상기 부호화 신호를 복호화하여, 부호화 모드와 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서 출력하고, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 수단과, 해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과, 참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과, 상기 모드 신호가 해당 프레임 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고, 상기 모드 신호가 참조 프레임 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 수단을 포함하며, 상기 가산 수단의 출력을 변화 화소로 하는 것으로, 청구항 2의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 44 화상 복호화 장치는, 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서, 상기 부호화 신호를 복호화하여 부호화 모드와 차분값을 취득하며, 상기 취득한 부호화 모드를 모드 신호로서 출력하고, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 수단과, 해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값의 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과, 해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과, 상기 모드 신호가 수평 방향 주사의 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고, 상기 모드 신호가 수직 방향 주사의 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 수단을 구비하며, 상기 가산 수단의 출력을 변화 화소로 하는 것것으로, 청구항 3의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 45 화상 복호화 장치는, 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서, 상기 부호화 신호를 복호화하여 차분값과 변화 화소의 화소값을 취득하며, 상기 취득한 차분값을 복호 차분값으로서 출력하고, 상기 취득한 변화 화소의 화소값을 복호 화소값으로서 출력하는 복호화 수단과, 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력하는 부호화 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과, 상기 복호 차분값과 상기 예측 화소를 가산하고, 상기 가산한 결과를 수정 차분값으로서 출력하는 가산 수단과, 상기 수정 차분값과, 상기 복호 화소값으로부터 다치 화상 신호를 복호화 처리에 의해 취득하는 화상 복호화 수단을 구비한 것으로, 청구항 4의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 46 화상 복호화 장치는, 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서, 상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 수단과, 상기 부호화 신호로부터 투과도 신호의 차분값을 복호화하여, 복호 투과도 차분값으로서 출력하는 제 2 복호화 수단과, 상기 부호화 신호로부터 화소값 신호의 움직임 벡터와 투과도 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 투과도 움직임 벡터를 출력하는 제 3 복호화 수단과, 후술하는 참조 화상의 화소값 신호를 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 수단과, 상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 수단과, 후술하는 참조 화상의 투과도 신호를 상기 복호 투과도 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 투과도 신호로서 출력하는 제 2 움직임 보상 수단과, 상기 복호 투과도 차분값과 보상 투과도 신호를 가산하고, 상기 가산한 결과를 복호화한 투과도 신호로서 출력함과 동시에, 참조 화상의 투과도 신호로서 출력하는 제 2 가산 수단을 구비한 것으로, 청구항 5의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 47 화상 복호화 장치는, 청구항 46에 기재된 화상 복호화 장치에 있어서, 상기 제 3 복호화 수단은, 화소값 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 투과도 움직임 벡터로 하는 것으로 함으로써, 청구항 7의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 48 화상 복호화 장치는, 부호화 신호를 입력하여, 복호화하는 화상 복호화 장치에 있어서, 상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 수단과, 상기 부호화 신호로부터 형상 신호의 차분값을 복호화하여, 복호 형상 차분값으로서 출력하는 제 2 복호화 수단과, 상기 부호화 신호로부터 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 형상 움직임 벡터를 출력하는 제 3 복호화 수단과, 후술하는 참조 화상의 화소값 신호를 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 수단과, 상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 수단과, 후술하는 참조 화상의 형상 신호를 상기 복호 형상 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 형상 신호로서 출력하는 제 2 움직임 보상 수단과, 상기 복호 형상 차분값과 보상 형상 신호를 가산하고, 상기 가산한 결과를 복호화한 형상 신호로서 출력함과 동시에, 참조 화상의 형상 신호로서 출력하는 제 2 가산 수단을 구비한 것으로, 청구항 10의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 49 화상 복호화 장치는, 청구항 48에 기재된 화상 복호화 장치에 있어서, 상기 제 3 복호화 수단은, 화소값 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 형상 움직임 벡터로 하는 것으로 함으로써, 청구항 13의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 50 화상 복호화 장치는, 청구항 48에 기재된 화상 복호화 장치에 있어서, 상기 제 3 복호화 수단은, 형상 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 형상 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 형상 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 화소값 움직임 벡터로 하는 것으로 함으로써, 청구항 14의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 51 화상 복호화 장치는, 청구항 48에 기재된 화상 복호화 장치에 있어서, 상기 제 3 복호화 수단은, 상기 입력 신호가, 직전에 부호화한 형상 신호의 움직임 벡터와, 입력 신호로부터 검출한 형상 신호의 움직임 벡터와의 차분값을 부호화한 것인 경우, 상기 차분값을 복호화하고, 상기 복호화한 차분값을 직전에 복호화한 형상 신호의 움직임 벡터와 가산하여, 상기 복호 형상 움직임 벡터로 하는 것으로 함으로써, 청구항 17의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 52 화상 복호화 장치는, 청구항 48에 기재된 화상 복호화 장치에 있어서, 상기 입력 신호가, 직전에 부호화한 화소값 신호의 움직임 벡터와, 입력 신호로부터 검출한 화소값 신호의 움직임 벡터와의 차분값을 부호화한 것인 경우, 상기 차분값을 복호화하고, 상기 복호화한 차분값을 직전에 복호화한 화소값 신호의 움직임 벡터와 가산하여, 상기 복호 화소값 움직임 벡터로 하는 것으로 함으로써, 청구항 18의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 53 화상 복호화 장치는, 청구항 48 내지 52 중 어느 한 항에 기재된 화상 복호화 장치에 있어서, 상기 입력 신호가, 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 화상 신호를 부호화한 부호화 신호인 경우에, 상기 복호화한 형상 신호를 상기 투과도 정보로 하고, 상기 복호화한 화소값 신호를 상기 화상 정보로 하는 것으로 함으로써, 청구항 19의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 54 화상 복호화 장치는, 청구항 48 내지 52 중 어느 한 항에 기재된 화상 복호화 장치에 있어서, 상기 입력 신호가, 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 화상 신호를, 상기 투과도 정보를, 형상만을 나타내는 2치 신호와 그 밖의 신호인 나머지 형상 신호로 분리하여, 상기 분리한 2치 신호를 형상 신호로 하고, 상기 분리한 나머지 형상 신호와 상기 화상 정보를 화소값 신호로 하여 부호화한 부호화 신호인 경우에, 상기 복호화한 형상 신호를 상기 투과도 정보의 2치 신호로 하고, 상기 복호화한 화소값 신호를 상기 화상 정보 및 상기 투과도 정보의 나머지 형상 신호로 하는 것으로 함으로써, 청구항 20의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 55 화상 복호화 장치는, 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서, 상기 입력한 부호화 신호를 복호화하여, 형상 정보, 투과도 정보 및 화소값 정보의 각각의 부호화 모드를 나타내는 모드 식별 정보를 취득하는 제 1 복호화 수단과, 상기 취득한 모드 식별 정보에 대응하여, 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 복호화하는 제 2 복호화 수단과, 상기 제 2 복호화 수단이 출력하는 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 통합하여 복호 화상 신호로 하는 역(逆)블럭화 수단을 구비한 것으로, 청구항 21의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 56 화상 복호화 장치는, 청구항 55에 기재된 화상 복호화 장치에 있어서, 상기 모드 식별 정보는, 부호화 모드로서 화면내 부호화 및 화면간 부호화를 나타내는 것으로 함으로써, 청구항 24의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 57 화상 복호화 장치는, 청구항 55에 기재된 화상 복호화 장치에 있어서, 상기 모드 식별 정보는, 부호화 모드로서 블럭마다의 움직임 벡터의 개수를 나타내는 것으로 함으로써, 청구항 26의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 58 화상 복호화 장치는, 상기 모드 식별 정보는, 부호화 모드로서 양자화 단계 변경 있음 및 양자화 단계 변경 없음을 나타내는 것으로 함으로써, 청구항 28의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 59 화상 복호화 장치는, 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서, 복호화가 완료된 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 수단과, 복호화가 완료된 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 수단과, 상기 제 2 변화 화소와 상기 제 3 변화 화소에 따라서, 후술하는 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과, 상기 입력한 부호화 신호를 복호화하여 예측 오차를 취득하고, 상기 취득한 예측 오차를 출력하는 예측 오차 복호화 수단과, 상기 예측 변화 화소와, 상기 예측 오차를 가산하여 제 1 변화 화소로서 출력하는 제 1 변화 화소 복호화 수단과, 직전에 복호화한 변화 화소와 상기 제 1 변화 화소 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 수단을 구비한 것으로, 청구항 30의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 60 화상 복호화 장치는, 청구항 59에 기재된 화상 복호화 장치에 있어서, 상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은, 상기 제 2 변화 화소 및 상기 제 3 변화 화소의 화소값을 상기 제 1 변화 화소의 화소값과 동일한 것으로 하는 것으로 함으로써, 청구항 31의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 61 화상 복호화 장치는, 청구항 59에 기재된 화상 복호화 장치에 있어서, 상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은, 상기 주사하는 소정의 방향을 상기 제 1 변화 화소 검출 수단이 상기 주사하는 소정의 방향과 동일한 방향으로 하는 것으로 함으로써, 청구항 32의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 62 화상 복호화 장치는, 청구항 59에 기재된 화상 복호화 장치에 있어서, 상기 제 2 변화 화소를 이용하여 예측한 변화 화소와의 차에 의해, 상기 제 3 변화 화소를 복호화하는 것으로 함으로써, 청구항 33의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 63 화상 복호화 장치는, 청구항 59에 기재된 화상 복호화 장치에 있어서, 제 2 변화 화소, 제 3 변화 화소 및 제 1 변화 화소가 서로 다른 주사선에 있는 것으로 함으로써, 청구항 34의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 64 화상 복호화 장치는, 청구항 59에 기재된 화상 복호화 장치에 있어서, 상기 변화 화소 예측 수단은, 상기 제 2 변화 화소가 제 m 주사선의 x번째 화소에 있고, 상기 제 3 변화 화소가 제 n 주사선의 y 번째 화소에 있을 때, 상기 제 1 변화 화소에 대하여, 제 k 주사선의 y-(x-y)*(n-k)/(m-n) 번째 화소인 것으로 예측하는 것으로 함으로써, 청구항 35의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 65 화상 복호화 장치는, 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서, 복호화가 완료된 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 수단과, 상기 검출 변화 화소에 근거하여 해당 주사선의 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과, 상기 입력하는 부호화 신호를 복호화하고, 차분값 부호화 신호인지, 또는 화소수 부호화 신호인지를 판정하여 식별 신호를 출력하는 모드 복호화 수단과, 상기 식별 신호가 차분값 부호화 신호를 나타내는 경우에, 상기 차분값 부호화 신호를 복호화하여 복호 예측 오차를 출력하는 예측 오차 복호화 수단과, 상기 식별 신호가 차분값 부호화 신호를 나타내는 경우에, 상기 예측 변화 화소와 상기 복호 예측 오차를 가산하고, 상기 가산한 결과를 제 1 복호 변화 화소로서 출력하는 제 1 변화 화소 복호화 수단과, 상기 식별 신호가 화소수 부호화 신호를 나타내는 경우에, 직전에 부호화한 변화 화소로부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 복호 예측 오차의 화소 위치에 위치하지 않는 화소의 수를 상기 화소수 부호화 신호로부터 복호화하고, 상기 복호화한 화소의 수에 근거하여 변화 화소의 위치를 취득하고, 상기 취득한 결과를 제 2 복호 변화 화소로서 출력하는 제 2 변화 화소 복호화 수단과, 상기 식별 신호에 대응하여, 상기 제 1 복호 변화 화소 또는 상기 제 2 복호 변화 화소를 선택하여 출력하는 변화 화소 선택 수단과, 직전에 복호화한 변화 화소와 상기 제 1 변화 화소 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 상기 화소값을 복호화하는 화소값 복호화 수단을 구비한 것으로, 청구항 36의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 66 화상 복호화 장치는, 상기 변화 화소 선택 수단은, 해당 주사선의 화소수에 따라 상기 선택을 하는 것으로 함으로써, 청구항 37의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 67 화상 복호화 장치는, 부호화 신호를 입력해서 복호화하여, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 출력하는 화상 복호화 장치에 있어서, 상기 부호화 신호를 복호화하여, 상기 물체를 나타내는 화소가 존재하는 영역을 직사각형 영역으로 하여 취득하고, 상기 취득한 영역을 유의 영역으로서 출력하는 유의 영역 복호화 수단과, 복수의 화소로 이루어지는 블럭의 각각에 대하여, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정하는 경우에는, 해당 블럭 중 적어도 상기 유의 영역을 복호화하고, 상기 복호화한 결과를 복호 블럭 형상 신호로서 출력하는 형상 복호화 수단과, 상기 복호 블럭 형상 신호를 통합하여, 2차원의 형상 신호를 구성하고, 상기 구성한 2차원의 형상 신호를 복호화 신호로서 출력하는 역블럭화 수단을 구비한 것으로, 청구항 38의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 68 화상 복호화 장치는, 청구항 67에 기재된 화상 복호화 장치에 있어서, 상기 형상 복호화 수단은, 각 블럭마다, 블럭 중에서 상기 유의 영역을 포함하는 최소의 직사각형 영역을 추출하고, 상기 추출한 직사각형 영역의 내부만을 복호화하는 것으로 함으로써, 청구항 39의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 69 화상 복호화 장치는, 부호화 신호를 입력하여, 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서, 상기 부호화 신호를 복호화하여 제 1 복호화 신호를 출력하는 제 1 화상 신호 복호화 수단과, 상기 제 1 화상 신호 복호화 수단에 의해 복호화한 화상 신호에 근거하여, 상기 제 1 화상 신호 복호화 수단에서 복호화되지 않은 화상 신호를 예측하여 출력하는 화상 예측 수단과, 상기 예측한 화상 신호의 예측이 적중할 확률을 계산하여 출력하는 예측 확률 계산 수단과, 상기 예측 확률 계산 수단에서 계산한 예측 확률에 따른 우선도에 의해 상기 입력된 부호화 신호를 복호화하는 제 2 화상 신호 복호화 수단과, 상기 제 1 화상 신호 복호화 수단 출력과 상기 제 2 화상 신호 부호화 수단 출력을 통합하고, 또한 상기 제 1 복호화 수단 및 상기 제 2 복호화 수단 중 어느 것에 의해서도 복호화되지 않는 화상 신호를, 상기 화상 예측 수단이 예측한 화상 신호로 치환하여, 복호 화상 신호로서 출력하는 복호 신호 통합 수단을 구비한 것으로, 청구항 40의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절하다 복호화하는 것이 가능하다.
본 발명의 제 70 화상 복호화 장치는, 청구항 69에 기재된 화상 복호화 장치에 있어서, 상기 제 2 화상 신호 복호화 수단은, 예측이 적중할 확률이 작은 화소에 대하여, 우선적으로 복호화하는 것으로 함으로써, 청구항 41의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 71 화상 복호화 장치는, 청구항 69에 기재된 화상 복호화 장치에 있어서, 상기 예측 확률 계산 수단은, 근방의 화소값이 동일한 값일 경우에, 상기 적중할 확률을 크게 하고, 근방의 화소값이 상이한 값일 경우에, 상기 적중할 확률을 작게 하는 것으로 함으로써, 청구항 42의 화상 부호화 장치에 있어서 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 72 화상 부호화 방법은, 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 방법에 있어서, 상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와, 해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와, 상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와, 참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 움직임 보상과 더불어 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와, 상기 검출 변화 화소와 상기 제 2 예측 화소와의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와, 상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택해서, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와, 상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 구비한 것으로, 해당 프레임에 근거하는 예측과 움직임 보상한 참조 프레임에 근거하는 예측을 비교하여, 부호 길이가 최소로 되는 것을 선택해 부호화 신호를 출력하는 것이 가능하기 때문에, 프레임간의 화소 상관을 이용함으로써, 부호화에 필요한 비트수를 삭감할 수 있다.
본 발명의 제 73 화상 부호화 방법은, 2차원 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 방법에 있어서, 상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와, 해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의 화소값의 변화 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와, 상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와, 해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와, 상기 검출 변화 화소와, 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와, 상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중의 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와, 상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 구비한 것으로, 수평 방향의 주사에 의한 예측과 수직 방향의 주사 예측을 비교하며, 부호 길이가 최소로 되는 것을 선택해 부호화하는 것이 가능하기 때문에, 화상의 수평 상관과 수직 상관에 대한 국소적인 변화를 이용함으로써, 부호화에 필요한 비트수를 삭감할 수 있다.
본 발명의 제 74 화상 부호화 방법은, 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와, 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 방법에 있어서, 상기 입력 신호의 화소값 신호와, 상기 참조 화상의 화소값 신호를 비교하여, 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 단계와, 상기 참조 화상의 화소값 신호를, 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 화소값 신호를 출력하는 제 1 움직임 보상 단계와, 상기 입력 신호의 화소값 신호와, 상기 보상 화소값 신호로부터 양자의 차분을 계산하여, 제 1 차분값을 출력하는 제 1 차분값 계산 단계와, 상기 제 1 차분값을 부호화하는 제 1 부호화 단계와, 상기 입력 신호의 형상 신호와, 상기 참조 화상의 형상 신호를 비교하여, 형상 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 단계와, 상기 참조 화상의 형상 신호를, 상기 형상 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 형상 신호를 출력하는 제 2 움직임 보상 단계와, 상기 입력 신호의 형상 신호와, 상기 보상 형상 신호로부터 양자의 차분값을 계산하여, 제 2 차분값을 출력하는 제 2 차분값 계산 단계와, 상기 제 2 차분값을 부호화하는 제 2 부호화 단계와, 상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터를 부호화하는 제 3 부호화 단계를 구비한 것으로, 부호화 효율의 향상을 도모할 수 있음과 더불어, 참조 화상으로서 부호화 및 복호화되고, 움직임 보상값이 가산된 적절한 신호를 이용함으로써, 움직임 보상 오차의 감소를 한층 더 도모할 수 있다.
본 발명의 제 75 화상 부호화 방법은, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서, 상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와, 상기 블럭화 단계에 의해 블럭화된 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 2 부호화 단계를 구비하며, 상기 제 1 부호화 단계 출력과, 상기 제 2 부호화 단계 출력을 부호화 출력으로 하는 것으로, 상관성이 높은 형상 정보, 투과도 정보 및 화소값 정보에 대하여, 종합하여 부호화를 행하기 때문에, 동일한 모드로 되는 부호가 짧은 부호 길이로 되는 가변 길이 부호화를 실행함으로써, 모드 부호화 신호의 비트수를 삭감하는 것이 가능해진다.
본 발명의 제 76 화상 부호화 방법은, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서, 상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와, 상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와, 상기 제 1 부호화 단계에 있어서 선택된 부호화 모드 중 어느 하나의 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보를 부호화하는 제 2 부호화 단계와, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 구비하며, 상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 것으로, 선택되는 모드가 동일한 것으로 되기 쉽기 때문에, 가변 길이 부호화를 실행함으로써, 모드 부호화 신호의 비트수를 한층 더 삭감할 수 있게 된다.
본 발명의 제 77 화상 부호화 방법은, 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서, 상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와, 상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 부호화하는 제 1 부호화 단계와, 상기 제 1 부호화 단계에 있어서 선택된 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보를 부호화하는 제 2 부호화 단계와, 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 구비하며, 상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 것으로, 선택되는 모드가 동일한 것으로 되기 쉽기 때문에, 가변 길이 부호화를 실행함으로써, 모드 부호화 신호의 비트수를 한층 더 삭감할 수 있게 된다.
본 발명의 제 78 화상 부호화 방법은, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 방법에 있어서, 상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 1 변화 화소를 출력하는 제 1 변화 화소 검출 단계와, 부호화 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와, 부호화 및 복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와, 상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여 상기 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와, 상기 제 1 변화 화소와 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와, 상기 변화 화소 차분값을 부호화하여 부호화 신호로 하는 예측 오차 부호화 단계를 구비한 것으로, 예측에 대한 오차를 부호화함으로써 부호화 효율의 향상을 도모하는 것이 가능해진다.
본 발명의 제 79 화상 부호화 방법은, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 방법에 있어서, 상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 단계와, 부호화 및 복호화 완료 화소로부터 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와, 상기 검출 변화 화소와 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와, 상기 변화 화소 차분값의 값이 소정치 미만인 경우에, 상기 변화 화소 차분값을 부호화하여, 차분값 부호화 신호를 출력하는 예측 오차 부호화 단계와, 상기 변화 화소 차분값의 값이 소정치 이상인 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 예측 오차 부호화 단계가 부호화할 수 있는 화소 위치에 위치하지 않는 화소의 수를 산출하고, 상기 산출한 화소수를 부호화하여, 화소수 부호화 신호를 출력하는 화소수 부호화 단계를 구비하며, 상기 예측 오차 부호화 단계와, 상기 화소수 부호화 단계는, 상기 차분값 부호화 신호와, 상기 화소수 부호화 신호가 일의에 식별이 가능한 부호화를 행하는 것으로, 예측 오차가 정해진 범위내에 있을 때에는 예측 오차의 부호화 신호를, 범위 밖에 있을 때에는 화소수의 부호화 신호를, 출력하는 부호화 신호로 하기 때문에, 예측 오차가 큰 경우에는 변화 화소의 개수의 변동에 의해, 변화 화소의 예측을 할 수 없는 경우에도, 부호화 효율이 저하하는 것을 방지하여, 적절한 부호화를 실행하는 것이 가능해진다.
본 발명의 제 80 화상 부호화 방법은, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 입력으로 하여 상기 형상 신호를 부호화하는 화상 부호화 방법에 있어서, 상기 입력한 형상 신호로부터, 상기 물체를 나타내는 화소를 포함하는 직사각형 영역인 유의 영역을 추출하고, 상기 추출한 유의 영역의 범위인 유의 영역 범위를 출력하는 유의 영역 추출 단계와, 상기 형상 신호를 복수의 화소로 이루어지는 블럭으로 분할하는 블럭화 단계와, 상기 블럭화 단계가 출력하는 각 블럭마다, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정한 경우에는, 적어도 해당 블럭의 상기 유의 영역을 부호화하여 형상 부호화 신호를 출력하는 형상 부호화 단계를 구비하며, 상기 유의 영역 범위와, 상기 형상 부호화 신호를 부호화 신호로 하는 것으로, 유의 영역의 범위를 검출하여, 유의 영역의 범위의 내부만 형상 신호를 부호화하도록 형상 신호의 블럭 사이즈를 변경하기 때문에, 유의 영역의 범위 밖을 부호화하는 일 이 없어져 형상 신호의 부호화 효율이 향상된다.
본 발명의 제 81 화상 부호화 방법은, 복수의 화소로 이루어지는 2차원 화상 신호를 입력으로 하여 상기 2차원 화상 신호를 부호화하는 화상 부호화 방법에 있어서, 상기 화상 신호를 적어도 2개의 화상 신호로 분리하고, 상기 분리한 화상 신호를 2개 이상의 부분 화상 신호로서 출력하는 화상 신호 분리 단계와, 상기 부분 화상 신호 중 적어도 1개를 대상 부분 화상 신호로서 선택하고, 상기 선택한 대상 부분 화상 신호를 부호화하여 제 1 부호화 신호를 출력하는 제 1 화상 신호 부호화 단계와, 상기 제 1 부호화 신호를 복호화한 화상 신호에 근거하여, 상기 부분 화상 신호 중 상기 대상 부분 화상 신호를 제외한 대상외 부분 화상 신호를 예측하고, 상기 예측이 적중할 확률을 계산하고, 상기 계산한 예측 확률을 출력하는 예측 확률 계산 단계와, 상기 예측 확률 계산 단계에서 계산한 예측 확률에 따라, 복호화의 우선도를 결정하고, 상기 결정한 우선도에 따른 부호화 방법을 이용하여, 상기 대상외 부분 화상 신호를 부호화하는 제 2 화상 신호 부호화 단계를 구비한 것으로, 예측 확률이 낮은 화소부터 우선적으로 부호화함으로써, 화질 열화가 적은 계층적인 부호화를 부가 정보없이 실현하는 것이 가능하게 된다.
본 발명의 제 82 화상 복호화 방법은, 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서, 상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와, 해당 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와, 참조 프레임에 있어서의 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와, 상기 모드 신호가 해당 프레임 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고, 상기 모드 신호가 참조 프레임 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 구비하며, 상기 가산 단계의 출력을 변화 화소로 하는 것으로, 청구항 72의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 83 화상 복호화 방법은, 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서, 상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와, 해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와, 해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와, 상기 모드 신호가 수평 방향 주사의 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고, 상기 모드 신호가 수직 방향 주사의 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 구비하며, 상기 가산 단계의 출력을 변화 화소로 하는 것으로, 청구항 73의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 84 화상 복호화 방법은, 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서, 상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 단계와, 상기 부호화 신호로부터 형상 신호의 차분값을 복호화하여, 복호 형상 차분값으로서 출력하는 제 2 복호화 단계와, 상기 부호화 신호로부터 화소값 신호의 움직임 벡터와, 형상 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 형상 움직임 벡터를 출력하는 제 3 복호화 단계와, 후술하는 참조 화상의 화소값 신호를, 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 단계와, 상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 단계와, 후술하는 참조 화상의 형상 신호를, 상기 복호 형상 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 형상 신호로서 출력하는 제 2 움직임 보상 단계와, 상기 복호 형상 차분값과 보상 형상 신호를 가산하고, 상기 가산한 결과를 복호화한 형상 신호로서 출력함과 동시에, 참조 화상의 형상 신호로서 출력하는 제 2 가산 단계를 포함한 것으로, 청구항 74의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 85 화상 복호화 방법은, 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서, 상기 입력한 부호화 신호를 복호화하여, 형상 정보, 투과도 정보 및 화소값 정보의 각각의 부호화 모드를 나타내는 모드 식별 정보를 취득하는 제 1 복호화 단계와, 상기 취득한 모드 식별 정보에 대응하여, 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 복호화하는 제 2 복호화 단계와, 상기 제 2 복호화 단계가 출력하는 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 통합하여 복호 화상 신호로 하는 역블럭화 단계를 구비한 것으로, 청구항 76의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 86 화상 복호화 방법은, 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서, 복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와, 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와, 상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여, 후술하는 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와, 상기 입력한 부호화 신호를 복호화하여 예측 오차를 취득하고, 상기 취득한 예측 오차를 출력하는 예측 오차 복호화 단계와, 상기 예측 변화 화소와, 상기 예측 오차를 가산하여 제 1 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와, 직전에 복호화한 변화 화소와 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값의 변화 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 단계를 구비한 것으로, 청구항 79의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 87 화상 복호화 방법은, 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서, 복호화 완료의 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 단계와, 상기 검출 변화 화소에 근거하여 해당 주사선의 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와, 상기 입력하는 부호화 신호를 복호화하여, 차분값 부호화 신호인지, 또는 화소수 부호화 신호인지를 판정하여, 식별 신호를 출력하는 모드 복호화 단계와, 상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 차분값 부호화 신호를 복호화하여 복호 예측 오차를 출력하는 예측 오차 복호화 단계와, 상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 예측 변화 화소와 상기 복호 예측 오차를 가산하고, 상기 가산한 결과를 제 1 복호 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와, 상기 식별 신호가 화소수 부호화 신호를 나타내는 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 복호 예측 오차의 화소 위치에 위치하지 않는 화소의 수를, 상기 화소수 부호화 신호로부터 복호화하고, 상기 복호화한 화소의 수에 근거하여 변화 화소의 위치를 취득하고, 상기 취득한 결과를 제 2 복호 변화 화소로서 출력하는 제 2 변화 화소 복호화 단계와, 상기 식별 신호에 대응하여, 상기 제 1 복호 변화 화소 또는 상기 제 2 복호 변화 화소를 선택하여 출력하는 변화 화소 선택 단계와, 직전에 복호화한 변화 화소와 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값의 변화 화소가 없는 것으로 하여 해당 화소값을 복호화하는 화소값 복호화 단계를 구비한 것으로, 청구항 80의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 88 화상 복호화 방법은, 부호화 신호를 입력하여 복호화해서, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 출력하는 화상 복호화 방법에 있어서, 상기 부호화 신호를 복호화하여, 상기 물체를 나타내는 화소가 존재하는 영역을 직사각형 영역으로서 취득하고, 상기 취득한 영역을 유의 영역으로서 출력하는 유의 영역 복호화 단계와, 복수의 화소로 이루어지는 블럭의 각각에 관하여, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정하는 경우에는, 해당 블럭중 적어도 상기 유의 영역을 복호화하고, 상기 복호화한 결과를 복호 블럭 형상 신호로서 출력하는 형상 복호화 단계와,
상기 복호 블럭 형상 신호를 통합하여, 2차원의 형상 신호를 구성하고, 상기 구성한 2차원의 형상 신호를 복호화 신호로서 출력하는 역블럭화 단계를 구비한 것으로, 청구항 81의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화할 수 있다.
본 발명의 제 89 화상 복호화 방법은, 부호화 신호를 입력하여, 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서, 상기 부호화 신호를 복호화하여 제 1 복호화 신호를 출력하는 제 1 화상 신호 복호화 단계와, 상기 제 1 화상 신호 복호화 단계에서 복호화한 화상 신호에 근거하여, 상기 제 1 화상 신호 복호화 단계에서 복호화되지 않는 화상 신호를 예측하여 출력하는 화상 예측 단계와, 상기 예측한 화상 신호의 예측이 적중할 확률을 계산하여 출력하는 예측 확률 계산 단계와, 상기 예측 확률 계산 단계에서 계산한 예측 확률에 따른 우선도로 상기 입력된 부호화 신호를 복호화하는 제 2 화상 신호 복호화 단계와, 상기 제 1 화상 신호 복호화 단계 출력과 상기 제 2 화상 신호 부호화 단계 출력을 통합하고, 또한 상기 제 1 복호화 단계 및 상기 제 2 복호화 단계 중 어느 것에 의해서도 복호화되지 않은 화상 신호를, 상기 화상 예측 단계가 예측한 화상 신호로 치환하여, 복호 화상 신호로서 출력하는 복호 신호 통합 단계를 구비한 것으로, 청구항 82의 부호화 방법으로 얻어진 부호화 신호를 적절히 복호화하는 것이 가능하다.
본 발명의 제 90 내지 제 99 화상 부호화 프로그램 기록 매체는, 제 72 내지 제 81 화상 부호화 방법을 실행하는 프로그램을 기록한 것으로, 컴퓨터에 있어서 실행시킴으로써, 부호화 효율이 좋은 화상 부호화를 실행한다.
본 발명의 제 100 내지 제 107 화상 복호화 프로그램 기록 매체는, 제 82 내지 제 189 화상 복호화 방법을 실행하는 프로그램을 기록한 것으로, 컴퓨터에 있어서 실행시킴으로써, 제 72 내지 제 81 화상 부호화 방법에 의해 얻어진 부호화 신호를 적절히 복호화한다.
도 1은 본 발명의 실시예 1에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 2는 본 발명의 실시예 1에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 3은 본 발명의 실시예 2에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 4는 본 발명의 실시예 2에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 5는 본 발명의 실시예 3에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 6은 본 발명의 실시예 3에 의한 화상 복호화 장치의 다른 예의 구성을 나타내는 블럭도이다.
도 7은 본 발명의 실시예 4에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 8은 본 발명의 실시예 4에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 9는 본 발명의 실시예 5에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 10은 본 발명의 실시예 6에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 11은 본 발명의 실시예 7에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 12는 본 발명의 실시예 8에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 13은 본 발명의 실시예 9에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 14는 본 발명의 실시예 10에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 15는 본 발명의 실시예 11에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 16은 본 발명의 실시예 12에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 17은 본 발명의 실시예 13에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 18은 본 발명의 실시예 14에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 19는 본 발명의 실시예 15에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 20은 본 발명의 실시예 16에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 21은 본 발명의 실시예 17에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 22는 본 발명의 실시예 18에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 23은 본 발명의 실시예 19에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 24는 본 발명의 실시예 20에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 25는 본 발명의 실시예 21에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 26은 본 발명의 실시예 22에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 27은 본 발명의 실시예 23에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 28은 본 발명의 실시예 23에 의한 화상 부호화 장치에 있어서의 움직임 벡터의 수의 선택을 설명하기 위한 도면이다.
도 29는 본 발명의 실시예 24에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 30은 본 발명의 실시예 25에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 31은 본 발명의 실시예 25에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 32는 본 발명의 실시예 26에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 33은 본 발명의 실시예 27에 의한 화상 부호화 장치의 동작원리를 설명하기 위한 도면이다.
도 34는 본 발명의 실시예 28에 의한 화상 부호화 장치의 동작원리를 설명하기 위한 도면이다.
도 35는 본 발명의 실시예 29에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 36은 본 발명의 실시예 29에 의한 화상 부호화 장치의 동작원리를 설명하기 위한 도면이다.
도 37은 본 발명의 실시예 30에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 38은 본 발명의 실시예 31에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 39는 본 발명의 실시예 32에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 40은 본 발명의 실시예 33에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 41은 본 발명의 실시예 33에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 42는 본 발명의 실시예 34에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 43은 본 발명의 실시예 35에 의한 화상 부호화 장치 및 화상 복호화 장치에 있어서의 예측 범위의 설정을 설명하기 위한 도면이다.
도 44는 본 발명의 실시예 36에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 45는 본 발명의 실시예 36에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 46은 본 발명의 실시예 37에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 47은 본 발명의 실시예 38에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다.
도 48은 본 발명의 실시예 38에 의한 화상 부호화 장치의 동작 원리를 설명하기 위한 도면이다.
도 49는 본 발명의실시예 39에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다.
도 50은 본 발명의 실시예 40에 의한 화상 부호화 프로그램 및 화상 복호화 프로그램의 기록 매체의 일례인 플로피 디스크를 도시한 도면이다.
도 51은 본 발명의 실시예 40에 의한 화상 부호화 프로그램의 처리 순서를 나타내는 플로우차트이다.
도 52는 본 발명의 실시예 40에 의한 화상 복호화 프로그램의 처리 순서를 나타내는 플로우차트이다.
도 53은 화상 부호화에 있어서의 화상의 형상 정보를 설명하기 위한 도면이다.
발명을 실시하기 위한 최선의 형태
(실시예 1)
본 발명의 실시예 1에 의한 화상 부호화 장치는, 예측 부호화의 실행에 있어서, 미리 정해진 범위내에서 부호화 길이가 짧은 차분값을 선정함으로써, 효율적인 부호화를 행하는 것이다.
도 1은 본 발명의 실시예 1에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (1)은 입력 신호이며, 2치의 화상 신호로서 화상 부호화 장치에 입력된다. 참조부호 (2)는 변화 화소 검출기로서, 입력 신호(1)에 대하여, 그 화소값이 변화하는 화소를 검출하여 검출 변화 화소로서 출력한다. 참조부호 (3)은 메모리이며, 참조 화상으로서 이용하는 부호화 및 복호화 완료의 화상 신호를 일시적으로 기억한다. 참조부호 (4)는 변화 화소 예측기로서, 참조 화상의 화소값이 변화하는 화소에 근거하여, 변화 화소 검출기(2)가 출력하는 변화 화소를 예측하여 예측 변화 화소를 출력한다. 변화 화소 예측기(4)를 이용할 수 있는 예측 방법으로서는, 예를 들면, 2차원 화상 신호의 수직 방향의 강한 상관에 근거하여, 상측 위치의 주사선의 변화 화소와 같은 수평 위치에 변화 화소가 있다고 예측하는 대표적인 예측 방법 등을 이용하는 것이 가능하다. 참조부호 (5)는 차분값 계산기로서, 변화 화소 검출기(2)가 검출하는 변화 화소와 예측기(4)의 차분값 D를 계산한다. 참조부호 (6)은 반올림 오차의 허용치로서 미리 설정되어 차분값 반올림기에 인가되는 값 e이다. 참조부호 (7)은 차분값 반올림기로서, 허용치 e에 의해 정해지는 범위내에서 상기 차분값 D를 수정하여, 수정 차분값 D'를 출력한다. 참조부호 (8)은 부호화기로서, 차분값을 부호화한다. 참조부호 (9)는 부호화기(8)로부터 출력되는 부호화 신호이다. 참조부호 (11)은 차분값 가산기로서, 차분 반올림기(7)가 출력하는 수정 차분값 D'와, 변화 화소 예측기(4)가 출력하는 예측 변화 화소를 가산한다. 참조부호 (10)은 변화 화소 복호화기로서, 차분값 가산기(11)가 출력하는 가산 결과를 이용하여 2치의 화소값을 복호화한다.
이상과 같이 구성된, 실시예 1에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 2치의 화상 신호인 입력 신호(1)가 장치에 입력되면, 변화 화소 검출기(2)는 입력 신호(1)를 입력으로 하여, 2치의 화소값이 변화하는 화소를 검출한다. 한편, 변화 화소 예측기(4)는 메모리(3)에 축적된 참조 화상을 판독하여, 해당 입력 신호에 있어서의 변화 화소를 예측한다. 변화 화소 검출기(2)는 검출한 결과를 검출 변화 화소로서 차분값 계산기(5)에 출력하며, 변화 화소 예측기(4)는 예측한 결과를 예측 변화 화소로서 차분값 계산기(5)에 출력한다. 그리고, 차분값 계산기(5)는, 검출 변화 화소로부터 예측 변화 화소를 감산하여, 변화 화소의 예측 오차에 상당하는 차분값 D를 취득한다. 차분값 계산기(5)는, 차분값 D를 차분값 반올림기(7)에 출력한다.
차분값 반올림기(7)는, 미리 설정되어 인가된 허용치 e와, 차분값 계산기(5)로부터 출력된 예측 오차에 상당하는 차분값 D를 비교하여, 차분값 D가 허용치 e를 넘지 않은 경우에는, D-e≤x≤D+e를 만족하는 값 x로서, 그 값 x를 부호화한 경우의 비트수가 최소의 값으로 되는 값 x를 구하여, 이것을 수정 차분값 D'로서 출력한다. 이에 반하여, 예측 오차에 상당하는 차분값 D가 허용치 e를 넘는 경우에는, 허용치 e에 근거하여 수정 차분값 D'를 구해서, 이것을 부호화기(8)에 출력한다. 그리고, 수정 차분값 D'는 부호화기(8)에서 부호화되어 부호화 신호(9)로 된다.
또한, 차분값 반올림기(7)가 출력하는 수정 차분값 D'는, 차분값 가산기(11)에도 출력된다. 차분값 가산기(11)에 있어서는, 수정 차분값 D'가 변화 화소 예측기(4)가 출력하는 예측 변화 화소에 가산되는 것에 의해, 화소값의 변화 화소가 계산되고, 이 결과는 변화 화소 복호기(10)에 출력된다. 변화 화소 복호화기(10)는, 변화 화소 예측기(4)의 출력이 나타내는 복호화 완료의 화소로부터, 차분값 가산기(11)로부터 입력된 변화 화소의 화소까지의 각 화소에 대하여, 그 화소값을 복호화하여 메모리(3)에 기억시킨다. 이에 따라 메모리(3)의 기억 내용은 참조 화상으로서 이용된다.
이상의 동작을, 도 2를 이용하여 구체적으로 설명한다. 도 2는 2치 화상 신호의 모델로서, 각 화소값을 흰색과 검은색(촘촘한 사선)의 직사각형으로 나타낸 것이며, 여기서는 설명을 간략화하기 위해, 1 화소씩 순차적으로 처리하는 것으로 하여 처리 순서를 설명한다.
도 2a는 입력 신호로서, 좌측 상단으로부터 우측 방향으로 주사하고, 우측 하단을 향해 처리가 진행되는 것으로 한다. 1 라인(주사선)상에서, 화소값이 변화하는(흰색→검은색, 또는 검은색→흰색) 화소가 변화 화소이다. 도 2b의 Pc는 부호화 완료의 최종 화소, Pu는 상측 위치의 주사선에 있어서의 변화 화소인 것으로 하고, 성긴 사선 부분은 아직 부호화되어 있지 않은 화소를 나타내는 것으로 한다. 변화 화소 검출기(2)는, 도 2a에 나타내는 입력 신호중, 도 2b에 나타내는 아직 부호화되어 있지 않은 부분에 대하여, 화소값이 변화하는 변화 화소를 조사하여, 변화 화소로서 P1을 검출하고, 이것을 검출 변화 화소로서 차분값 계산기(5)에 출력한다.
한편, 변화 화소 예측기(4)는, 상기한 방법에 의해 변화 화소를 예측하여, 상측 위치의 주사선의 변화 화소 Pu와 동일한 수평 위치인 것으로 하여 화소 P0을 예측하고, 이것을 예측 변화 화소로서 차분값 계산기(5)에 출력한다. 차분값 계산기(5)는, 검출 변화 화소 P1과 예측 변화 화소 P0과의 차분값으로서, D=1을 차분 반올림기(7)에 출력한다.
여기서, 본 실시예 1의 화상 부호화 장치의 설정으로서는, P0과의 차분값이 작을수록 짧은 부호 길이의 부호를 할당하는 부호화를 행하는 것으로 한다. 그리고, 반올림 오차의 허용치 e로서 1이 인가되어 있는 것으로 한다. 차분값 계산기에 의해 요구되는 P1과 P0의 차는 e 이하이기 때문에, 상술한 조건을 만족하는 수치로서, 차분값 반올림기(7)의 출력은 D"=0을 출력한다. 그 결과, 변화 화소가 반올림되어 복호 처리되기 때문에, 부호화 및 복호화된 화소값은 도 2c와 같이 된다.
이에 반하여, 입력 신호가 도 2d에 나타내는 것인 경우에는, 도 2e에 도시하는 바와 같이, 예측 변화 화소 P0과 검출 변화 화소 P1의 차가 나타내는 차분값 D는 2로 되기 때문에, 이 경우 차분값 D가 허용치 e를 넘게 된다. 그래서, 차분값 반올림기(7)는, 예측 오차(차분값)가 허용 범위를 넘지 않도록, 허용치 e에 근거해 수정을 행하여, 변화 화소 P2에 대응하는 차분값 -1을 출력한다. 이 결과, 부호화 및 복호화된 화소값은 도 2f와 같이 된다.
이와 같이, 본 실시예 1의 화상 부호화 장치에서는, 차분값 반올림기(7)를 구비하여, 검출된 변화 화소와 예측된 변화 화소의 차분값과, 미리 설정된 허용치(6)를 이용하고, 허용치 이하의 예측 오차에 있어서, 해당 오차(차분값)의 부호 길이가 최소로 되는 수정 차분값을 선택하여 이것을 출력하기 때문에, 약간의 화질 열화를 수반하게 되지만, 부호화에 필요한 비트수를 대폭 삭감할 수 있다. 또한, 본 실시예 1의 화상 부호화 장치에 있어서 얻어지는 부호화 신호(9)는, 통상의 화상 복호화 장치에 있어서 복호 처리가 가능하다.
(실시예 2)
본 발명의 실시예 2에 의한 화상 부호화 장치는, 해당 프레임에 의한 예측에 근거한 부호화와, 참조 프레임에 의해 움직임 보상을 수반한 예측에 근거한 부호화를 적응적으로 전환 처리하는 것이다.
도 3은 본 발명의 실시예 2에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (20)은 움직임 보상기로서, 부호화 복호화가 완료된 참조 프레임의 화상 신호에 대하여, 움직임 보상을 행하여 참조 화소값을 생성한다. 참조부호 (21)은 모드 선택기로서, 해당 프레임의 화상 신호에 근거한 예측을 행한 경우의 차분값과, 참조 프레임의 화상 신호에 근거한 예측을 행한 경우의 차분값에 대해 비교하여, 부호화할 때에 필요한 비트수가 적은 쪽을 부호화 모드로서 선택한다. 참조부호 (22)는 전환기로서, 모드 선택기(21)가 선택한 부호화 모드에 대응하는 차분값을 선택하여 출력한다. 참조부호 (1∼9)에 대해서는, 도 1과 마찬가지이며, 그 설명은 실시예 1과 마찬가지이므로, 여기서는 생략한다.
이와 같이 구성된 본 실시예 2의 화상 부호화 장치에 대하여 그 동작을 설명한다. 2치의 화상 신호인 입력 신호(1)가 장치에 입력되면, 입력 신호(1)는 변화 화소 검출기(2)에 입력됨과 동시에, 메모리(3)에도 입력되어, 메모리(3)에 있어서 축적됨으로써, 해당 프레임에 있어서의 부호화 및 복호화 완료의 참조 화상으로서 이용된다. 변화 화소 검출기(2)는 입력 신호(1)를 입력으로 하여, 2치의 화소값이 변화하는 화소를 검출한다. 변화 화소 검출기(2)는 검출한 결과를 검출 변화 화소로서 차분값 계산기(5a, 5b)에 출력한다. 한편, 변화 화소 예측기(4a)는 메모리(3)에 축적된 해당 프레임의 부호화 및 복호화 완료의 참조 화상을 판독하여, 해당 입력 신호에 근거하여 변화 화소를 예측하고, 그 결과를 예측 변화 화소로서 차분값 계산기(5a)에 출력한다. 그리고, 차분값 계산기(5a)는, 검출 변화 화소로부터 예측 변화 화소를 감산하여, 차분값 D를 취득한다. 차분값 계산기(5a)의 출력 D는, 해당 프레임에 있어서의 부호화 복호화 완료 화소에 근거하여 예측한 변화 화소의 예측 오차에 상당하는 것으로서, 차분값 계산기(5a)는, 이 차분값 D를 모드 선택기(21)와 전환기(22)에 출력한다.
움직임 보상기(20)는, 메모리(3)에 축적된 참조 프레임의 부호화 및 복호화 완료 화상에 대하여 움직임 보상을 하고, 변화 화소 예측기(4b)는 이 움직임 보상된 화소에 근거하여 해당 입력 신호의 변화 화소를 예측하여, 그 결과를 예측 변화 화소로서 차분값 계산기(5b)에 출력한다. 차분값 계산기(5b)는, 검출 변화 화소로부터 예측 변화 화소를 감산하여, 차분값 D"를 취득한다. 차분값 계산기(5b)의 출력 D"는, 참조 프레임에 있어서의 부호화 복호화 완료 화소에 근거하여 움직임 보상에 따라 예측한 변화 화소의 예측 오차에 상당하는 것으로서, 차분값 계산기(5b)는, 이 차분값 D"를 모드 선택기(21)와 전환기(22)에 출력한다.
모드 선택기(21)는 차분값 계산기(5a, 5b)로부터 입력된 차분값 D와 차분값 D"에 대해, 각각을 부호화하였을 때의 부호 길이(부호화에 필요한 비트수)를 비교하여, 보다 적은 비트수로 부호화할 수 있는 예측 방법을 선택하여 그 식별 신호를 부호화 모드로서 출력한다. 모드 선택기(21)는 차분값 D를 부호화하였을 때의 부호 길이가 짧다고 판정한 경우에는 부호화 모드 「해당 프레임」을, 차분값 D"를 부호화하였을 때의 부호 길이가 짧다고 판정한 경우에는 부호화 모드 「참조 프레임」을, 전환기(22)와 부호화기(8a)에 출력한다.
전환기(22)는 모드 선택기(21)의 출력에 대응하여, 부호화 모드 「해당 프레임」이면 차분값 계산기(5a)가 출력하는 차분값 D를, 부호화 모드 「참조 프레임」이면 차분값 계산기(5b)가 출력하는 차분값 D"를 부호화기(8b)에 출력한다. 부호화기(8a)는 모드 선택기(21)가 선택한 부호화 모드를 부호화하고, 부호화기(8b)는 출력된 차분값을 부호화하여, 각각 부호화 신호(9a, 9b)로서 출력한다.
본 실시예 2의 화상 부호화 장치에 의한 부호화는 반올림 오차가 없는 무손실(lossless) 부호화로서, 전술한 바와 같이 입력 화상 신호(1)는 변화 화소까지의 부호화 복호화된 화소값으로서 메모리(3)에 기억된다.
이상의 동작을 도 4를 이용하여 구체적으로 설명한다. 도 4는 실시예 1에 있어서 설명을 위해 이용한 도 2와 마찬가지로 2치 화상 신호의 모델로서, 각 화소값을 흰색과 검은색의 직사각형으로 나타낸 것이며, 여기서도 실시예 1과 마찬가지로, 설명을 간략하게 하기 위해 1 화소씩을 순차적으로 처리하는 것으로 하여 처리 순서를 설명한다.
동일 도면에 있어서, 도 4a는 입력 신호, 도 4b는 참조 프레임의 화상 신호이다. 도 4c는 해당 프레임에 근거한 예측을 설명하기 위한 도면이다. P1은 실시예 1과 마찬가지로, 변화 화소 검출기(2)에서 검출된 검출 변화 화소이다. Pc는 복호화 완료의 최종 화소 위치, Pu는 상측 위치의 주사선의 화소값이 변화 화소인 것으로 하고, 성긴 사선의 부분은 아직 부호화되어 있지 않은 화소를 나타내는 것으로 한다. 변화 화소 예측기(4a)는 실시예 1에 있어서의 변화 화소의 예측과 마찬가지의 방법을 이용하여, 상측 위치의 주사선의 변화 화소 Pu에 근거해 상관 관계를 이용한 예측을 행하고, Pu와 동일한 수평 위치에 있는 P0을 해당 프레임에 근거한 예측 변화 화소로 한다.
도 4b의 참조 프레임의 화상 신호는 움직임 보상기(20)에 의한 움직임 보상을 행한 후의 것으로 하고, 변화 화소 예측기(4b)는 예측 변화 화소 Pr을 취득한다. 따라서, 차분값 계산기(5a)에 의한 차분값 D는 P1과 P0의 차인 1이 되고, 차분값 계산기(5b)에 의한 차분값 D"는 P1과 Pr의 차인 0으로 된다. 본 실시예 2의 화상 부호화 장치의 설정에 대해서도 실시예 1과 마찬가지로, P0과의 차분값이 작을수록 짧은 부호 길이의 부호를 할당하는 부호화를 행하는 것으로 하면, P1과 P0의 차를 부호화하는 것보다 Pr과 P1의 차를 부호화하는 편이 부호 길이가 줄어 들게 된다. 따라서, 모드 선택기(21)의 선택은 차분값 D"을 출력하는 「참조 프레임」으로 되고, 부호화 모드 「참조 프레임」과 차분값 D"가 부호화되어, 본 실시예 2의 화상 부호화 장치가 출력하는 부호화 신호로 된다. 도 4e는 이 부호화 신호를 복호화하여 얻어지는 복호화 결과를 나타낸다.
이와 같이, 본 실시예 2의 화상 부호화 장치에서는, 메모리(3)와, 변화 화소 예측기(4a, 4b)와, 차분값 계산기(5a, 5b)와, 움직임 보상기(20)를 구비함으로써, 해당 프레임에 근거하는 예측과, 참조 프레임에 근거하여 움직임 보상을 수반하는 예측을 실행하여, 각각의 예측치와 검출 결과와의 차분값을 취득하고, 모드 선택기(21)와, 전환기(22)와, 부호화기(8a, 8b)를 구비함으로써, 해당 프레임에 근거하는 예측과, 움직임 보상한 참조 프레임에 근거하는 예측과의 차분값을 비교하여, 부호 길이가 최소로 되는 것을 선택하여 부호화할 수 있기 때문에, 프레임간의 화소 상관을 이용함으로써 부호화에 필요한 비트수를 대폭 삭감하는 것이 가능하다.
또, 본 실시예 2의 화상 부호화 장치에서는, 입력 신호(1)가 블럭 단위로 입력되는 것으로 하고, 블럭 단위로 부호화 모드를 선택하는 설정으로 하여, 즉 블럭 단위로 해당 프레임에 의한 예측에 근거하는 부호화와, 참조 프레임에 의해 움직임 보상을 수반하는 예측에 근거하는 부호화를 적응적으로 전환하는 설정으로 할 수 있어서, 상기한 효과를 얻을 수 있다.
또한, 본 실시예 2의 화상 부호화 장치에서는, 변화 화소 검출기(2), 변화 화소 예측기(4a, 4b)에서는 변화 화소까지의 거리(화소수)를 출력하는 것으로 하였지만, 「다음 화소는 변화 화소이다」 및 「다음 화소는 변화 화소가 아니다」의 2종류의 상태를 나타내는 2치 신호로서, 예를 들면 「0」과 「1」을 출력하는 것으로 하고, 차분값 계산기(5a, 5b)는 이러한 2치 신호의 차분값을 계산하는 것으로 할 수도 있다. 단, 이 경우에는 상기한 바와 같이 거리를 부호화하는 것이 아니라, 입력 신호(1)의 각 화소에 대하여 차분값 계산기(5a, 5b)의 출력을 부호화하는 것으로 된다. 이러한 설정으로 함으로써, 변화 화소 검출기(2), 변화 화소 예측기(4a, 4b)의 출력은 2치로 되기 때문에, 부호화 처리를 간편하게 할 수 있다고 하는 효과를 얻을 수 있다.
(실시예 3)
본 발명의 실시예 3에 의한 화상 복호화 장치는, 실시예 2에 의한 화상 부호화 장치에 의해서 효율적으로 부호화된 부호화 신호에 대하여, 적절한 복호화를 행하는 것이다.
도 5는 본 발명의 실시예 3에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (30a, 30b)는 도 3의 부호화 신호(9a, 9b)에 대응하는 부호화 신호로서, 각각 부호화 모드를 부호화한 신호와, 차분값을 부호화한 신호이다. 참조부호 (31a, 31b)는 각각 부호화 모드를 부호화한 신호와, 차분값을 부호화한 신호를 복호화하여, 예측 모드 신호와 복호 차분값을 취득하는 복호화기이다. 참조부호 (32)는 복호화기(31a)가 취득한 예측 모드 신호에 대응하여, 변화 화소의 예측치를 전환하는 전환기이다. 참조부호 (34)는 복호화된 화상 신호이다. 메모리(3), 변화 화소 복호화기(10) 및 차분값 가산기(11)에 대해서는 도 1과 마찬가지이고, 움직임 보상기(20)에 대해서는 도 3과 마찬가지이며, 그 설명은 각각 실시예 1 및 실시예 2와 마찬가지이기 때문에, 여기서는 상세한 설명을 생략한다.
이상과 같이 구성된, 도 5에 도시하는 본 실시예 3에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 실시예 2에 의한 화상 부호화 장치에 있어서, 선택한 부호화 모드를 부호화한 신호(9a)는 입력 신호(30a)로서 본 실시예 3의 화상 복호화 장치에 입력되고, 복호화기(31a)에서 복호화됨에 따라 「해당 프레임」, 또는 「참조 프레임」을 나타내는 예측 모드 신호가 취득된다. 복호화기(31a)는 예측 모드 신호를 전환기(32)에 출력한다.
또한, 실시예 2에 의한 화상 부호화 장치에 있어서, 선택한 차분값을 부호화한 신호(9b)는 입력 신호(30b)로서 본 실시예 3의 화상 복호화 장치에 입력되고, 복호화기(31b)에서 복호화됨에 따라, 복호 차분값이 취득된다. 복호화기(31b)는 복호 차분값을 차분값 가산 수단(11)에 출력한다.
한편, 변화 화소 예측기(4a)는 메모리(3)에 축적된 해당 프레임의 복호화 완료 참조 화상을 판독하고, 해당 화상 신호에 근거하여 변화 화소를 예측하여, 그 결과를 해당 프레임에 근거하는 예측 변화 화소로서 전환기(32)에 출력한다.
또한, 움직임 보상기(20)는 메모리(3)에 축적된 참조 프레임의 복호화 완료 화상에 대하여 움직임 보상을 하고, 변화 화소 예측기(4b)는 이 움직임 보상된 화소에 근거하여 해당 입력 신호의 변화 화소를 예측하여, 그 결과를 참조 프레임에 근거하는 예측 변화 화소로서 전환기(32)에 출력한다.
변화 화소 예측기(4a, 4b)로부터 각각의 예측 변화 화소가 출력된 전환기(22)는, 입력된 예측 모드 신호에 따라서 전환을 행한다. 따라서, 전환기(22)는 입력된 예측 모드 신호가 「해당 프레임」을 나타내는 것이면 변화 화소 예측기(4a)로부터 출력된 해당 프레임에 근거하는 예측 변화 화소를, 입력된 예측 모드 신호가 「참조 프레임」을 나타내는 것이면 변화 화소 예측기(4b)로부터 출력된 참조 프레임에 근거하는 예측 변화 화소를 선택하여, 차분값 가산 수단(11)에 출력한다.
차분값 가산 수단(11)은 전환기(22)로부터 취득한 예측 변화 화소에 대하여, 복호화기(31b)로부터 취득한 복호 차분값을 가산함으로써 변화 화소를 계산하여, 그 결과를 변화 화소 복호화기(10)에 출력한다. 변화 화소 복호화기(10)는 변화 화소 예측 수단(4a)의 예측 변화 화소와, 차분값 가산 수단(11)으로부터 얻어진 변화 화소에 근거하여, 그 사이의 화소값을 복호화한다. 이 복호화의 결과는 메모리(3)에 입력되어 기억됨과 동시에, 복호화된 화상 신호(34)로서 본 실시예 3의 화상 복호화 장치로부터 출력된다. 예컨대, 실시예 2에 있어서 도 4를 이용하여 설명한 바와 같은 부호화 신호를 입력 신호로 한 경우에는, 도 4e에 도시한 바와 같은 복호화 결과를 얻을 수 있다.
도 6은, 본 실시예 3의 응용예에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 도 5에 나타낸 화상 복호화 장치와의 상위점은, 차분값 가산 수단으로서 (11a, 11b)의 2개를 가지며, 전환기(33)는 변화 화소 예측 수단(4a, 4b)의 출력이 아니라, 차분값 가산 수단(11a, 11b)의 출력을 전환하는 구성으로 되어 있다는 점이다. 이러한 구성에 있어서도, 실시예 2에 의한 화상 부호화 장치로부터 출력되는 부호화 신호를, 그 부호화시의 부호화 모드에 대응하여, 적절히 복호화하는 것이 가능해진다. 또한, 변화 화소 복호화기(10)를 복수개 구비하는 구성으로 하고, 전환기의 위치를 해당 복수개의 변화 화소 복호기(10)의 출력을 수신하는 위치로 하여도, 동일한 효과를 얻을 수 있다.
이와 같이, 본 실시예 3에 의한 화상 복호화 장치에서는, 부호화 모드의 부호화 신호를 복호화하는 복호화기(31a)와, 차분값의 부호화 신호를 복호화하는 복호화기(31b)와, 해당 프레임에 근거하여 변화 화소를 예측하는 변화 화소 예측 수단(4a)과, 참조 프레임에 근거하여, 움직임 보상과 더불어 변화 화소를 예측하는 변화 화소 예측 수단(4b)과, 예측 변화 화소에 근거하여 복호 처리를 하는 차분값가산 수단(11), 및 변화 화소 복호화기(10)를 구비하고, 복호화기(31a)가 취득하는 예측 모드에 따라, 전환기가 전환을 행함으로써, 부호화시의 부호화 모드에 대응한 예측 모드에 있어서, 해당 프레임에 근거하는 예측치를 이용하는 복호화와, 참조 프레임에 근거하는 예측치를 이용하는 복호화를 적응적으로 전환하여 실행하여, 실시예 2에 있어서 효율적으로 부호화된 부호화 신호를 적절히 복호화하는 것이 가능해진다.
또, 실시예 2 및 실시예 3에 있어서는, 참조 프레임으로서 복수의 프레임을 준비하여, 3종류 이상의 예측 모드를 이용하는 것으로 하는 것도 가능하다.
또한, 실시예 3에 있어서, 블럭 단위로 부호화 모드를 선택하여 부호화된 부호화 신호를 처리하는 경우에도, 블럭 단위로 신호를 입력하고, 블럭마다 예측 모드를 취득하여 부호화 모드에 대응한 처리를 함으로써, 적절히 복호화하는 것이 가능하다.
(실시예 4)
본 발명의 실시예 4에 의한 화상 부호화 장치는, 수평 주사에 의한 예측에 근거하는 부호화와, 수직 주사에 의한 예측에 근거하는 부호화를 적응적으로 전환하여 처리하는 것이다.
도 7은 본 발명의 실시예 4에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (40a, 40b)는 수평 주사기이고, 참조부호 (41a, 41b)는 수직 주사기이다. 다른 참조부호에 대해서는, 도 3과 마찬가지이며, 그 설명은 실시예 2와 마찬가지이기 때문에, 여기서는 생략하기로 한다.
이와 같이 구성된 본 실시예 4의 화상 부호화 장치에 대하여 그 동작을 설명한다. 2치의 화상 신호인 입력 신호(1)가 장치에 입력되면, 입력 신호(1)는 수평 주사기(40a)에 의해서 수평 방향으로 주사되어 변화 화소 검출기(2a)에 입력되고, 또한 수직 주사기(41a)에 의해서 수직 방향으로 주사되어 변화 화소 검출기(2b)에 입력된다. 또한, 입력 신호(1)는 메모리(3)에도 입력되어, 메모리(3)에 있어서 축적됨으로써, 해당 프레임에 있어서의 부호화 및 복호화 완료의 참조 화상으로서 이용된다. 변화 화소 검출기(2a)는 수평 방향으로 주사된 입력 신호(1)를 입력으로 하여, 2치의 화소값이 변화하는 화소를 검출한다. 변화 화소 검출기(2b)는 수직 방향으로 주사된 입력 신호(1)를 입력으로 하여, 2치의 화소값이 변화하는 화소를 검출한다. 변화 화소 검출기(2a, 2b)는 검출한 결과를 검출 변화 화소로서 차분값 계산기(5a, 5b)에 출력한다.
한편, 수평 주사기(40b)는 메모리(3)에 축적된 해당 프레임의 부호화 및 복호화 완료의 참조 화상을 판독해서, 수평 방향으로 주사하여 변화 화소 예측기(4a)에 입력한다. 변화 화소 예측기(4a)는 변화 화소를 예측하여, 그 결과를 예측 변화 화소로서 차분값 계산기(5a)에 출력한다. 그리고, 차분값 계산기(5a)는 검출 변화 화소로부터 예측 변화 화소를 감산하여, 수평 방향 주사에 의한 차분값 Dh를 취득한다. 차분값 계산기(5a)의 출력 Dh는 수평 방향 주사에 의해 예측한 변화 화소의 예측 오차에 상당하는 것으로서, 차분값 계산기(5a)는 이 차분값 Dh를 모드 선택기(21)와 전환기(22)에 출력한다.
한편, 수직 주사기(41b)는 메모리(3)에 축적된 해당 프레임의 부호화 및 복호화 완료의 참조 화상을 판독해서, 수직 방향으로 주사하여 변화 화소 예측기(4b)에 입력한다. 변화 화소 예측기(4b)는 변화 화소를 예측하여, 그 결과를 예측 변화 화소로서 차분값 계산기(5b)에 출력한다. 그리고, 차분값 계산기(5b)는 검출 변화 화소로부터 예측 변화 화소를 감산하여, 수직 방향 주사에 의한 차분값 Dv를 취득한다. 차분값 계산기(5b)의 출력 Dv는, 수직 방향 주사에 의해 예측한 변화 화소의 예측 오차에 상당하는 것으로서, 차분값 계산기(5b)는 이 차분값 Dv를 모드 선택기(21)와 전환기(22)에 출력한다.
모드 선택기(21)는 차분값 계산기(5a, 5b)로부터 입력된 차분값 Dh와 차분값 Dv에 대해, 각각을 부호화하였을 때의 부호 길이(부호화에 필요한 비트수)를 비교하여, 보다 적은 비트수로 부호화할 수 있는 예측 방법을 선택해 그 식별 신호를 부호화 모드로서 출력한다. 모드 선택기(21)는 차분값 Dh를 부호화하였을 때의 부호 길이가 짧다고 판정한 경우에는 부호화 모드 「수평 방향」을, 차분값 Dv를 부호화하였을 때의 부호 길이가 짧다고 판정한 경우에는 부호화 모드 「수직 방향」을, 전환기(22)와 부호화기(8a)에 출력한다.
전환기(22)는 모드 선택기(21)의 출력에 대응하여, 부호화 모드 「수평 방향」이면 차분값 계산기(5a)가 출력하는 차분값 Dh를, 부호화 모드 「수직 방향」이면 차분값 계산기(5b)가 출력하는 차분값 Dv를 부호화기(8b)에 출력한다. 부호화기(8a)는, 모드 선택기(21)가 선택한 부호화 모드를 부호화하고, 부호화기(8b)는 출력된 차분값을 부호화하여, 각각 부호화 신호(9a, 9b)로서 출력한다.
본 실시예 4의 화상 부호화 장치에 의한 부호화는, 반올림 오차를 수반하지 않는 무손실 부호화로, 전술한 바와 같이 입력 화상 신호(1)는 변화 화소의 화소까지의 부호화 복호화된 화소값으로서 메모리(3)에 기억된다.
도 8은, 본 실시예 4의 화상 부호화 장치에 의한, 주사 방향 전환을 설명하기 위한 도면이다. 화상 신호는 수평 및 수직 방향으로 상관이 있으며, 종래의 기술에 의한 화상 부호화 방법에 있어서도 이러한 상관 관계를 이용하여 압축화를 도모하는 것이 이루어져 왔다. 그리고, 종래의 기술에 의한 상관 관계의 이용에 대해서는, 예를 들어 MMR의 경우에서 볼 수 있는 바와 같이, 수평 방향, 또는 수직 방향 중 어느 한 방향에 있어서의 상관 관계에 따라서만, 부호화를 행하는 것이었다. 그러나, 화상을 부분적으로 보면, 수평, 또는 수직의 한쪽 상관이 다른쪽보다 강한 것이 있다. 예를 들면, 도 8과 같이 수평 방향의 상관이 수직 방향의 상관보다 강한 경우에는, 수직 방향의 예측에 근거하는 것보다 수평 방향의 예측에 근거하는 쪽이 화소 위치의 변화 화소의 예측 오차가 작아져서, 보다 부호화 효율을 향상하는 것이 가능해진다. 따라서, 화상의 성질에 따라 주사의 방향을 변환하여, 수직 방향의 예측과 수평 방향의 예측을 전환함으로써 부호화 효율을 크게 향상하는 것이 가능하다.
이와 같이, 본 실시예 4의 화상 부호화 장치에서는, 수평 주사기(40a, 40b)와, 수직 주사기(41a, 41b)와, 변화 화소 검출기(2a, 2b)와, 메모리(3)와, 변화 화소 예측기(4a, 4b) 및 차분값 계산기(5a, 5b)를 구비함으로써, 수평 방향의 주사에 의한 예측과, 수직 방향의 주사 예측을 실행하여, 각각의 예측치와 검출 결과와의 차분값을 취득하고, 모드 선택기(21)와, 전환기(22) 및 부호화기(8a, 8b)를 구비함으로써, 수평 방향의 주사에 의한 예측과, 수직 방향의 주사 예측과의 차분값을 비교하여, 부호 길이가 최소로 되는 것을 선택하여 부호화하는 것이 가능하기 때문에, 화상의 수평 상관과 수직 상관에 대한 국소적인 변화를 이용함으로써 부호화에 필요한 비트수를 대폭 삭감할 수 있다.
또, 본 실시예 4의 화상 부호화 장치에 대해서도, 입력 신호(1)가 블럭 단위로 입력되는 것으로 하고, 블럭 단위로 부호화 모드를 선택하는 설정으로 하여, 즉 블럭 마다 수평 주사에 의한 예측에 근거하는 부호화와, 수직 주사에 의한 예측에 근거하는 부호화를 적응적으로 전환하는 설정으로 할 수 있어서, 상기한 효과를 얻을 수 있다.
또한, 본 실시예 4의 화상 부호화 장치에 대해서도, 실시예 2와 마찬가지로, 변화 화소 검출기(2), 변화 화소 예측기(4a, 4b)가 변화 화소까지의 거리(화소수)를 출력하는 것이 아니라, 화소의 변화 상태를 나타내는 2치 신호를 출력하는 설정으로 하는 것도 가능하여, 마찬가지로 처리 부담을 경감하는 것이 가능하게 된다.
(실시예 5)
본 발명의 실시예 5에 의한 화상 복호화 장치는, 실시예 4에 의한 화상 부호화 장치에 의해 효율적으로 부호화된 부호화 신호에 대하여, 적절한 복호화를 행하는 것이다.
도 9는 본 발명의 실시예 5에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (40b, 41b)는 도 7과 마찬가지이고, 다른 부호는 도 5와 마찬가지이며, 그 설명은 실시예 4 및 실시예 3과 마찬가지이기 때문에, 여기서는 상세한 설명을 생략한다.
이상과 같이 구성된, 본 실시예 5에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 실시예 4에 의한 화상 부호화 장치에 있어서, 선택한 부호화 모드를 부호화한 신호(9a)는 입력 신호(30a)로서 본 실시예 5의 화상 복호화 장치에 입력되고, 복호화기(31a)에서 복호화됨에 따라, 「수평 방향」, 또는 「수직」을 나타내는 예측 모드 신호가 취득된다. 복호화기(31a)는 예측 모드 신호를 전환기(32)에 출력한다.
또한, 실시예 4에 의한 화상 부호화 장치에 있어서, 선택한 차분값을 부호화한 신호(9b)는 입력 신호(30b)로서 본 실시예 5의 화상 복호화 장치에 입력되고, 복호화기(31b)에서 복호화됨에 따라, 복호 차분값이 취득된다. 복호화기(31b)는 복호 차분값을 차분값 가산 수단(11)에 출력한다.
한편, 수평 주사기(40b)는, 메모리(3)에 축적된 해당 프레임의 부호화 및 복호화 완료의 참조 화상을 판독해서, 수평 방향으로 주사하여 변화 화소 예측기(4a)에 입력한다. 변화 화소 예측기(4a)는 변화 화소를 예측하여, 그 결과를 예측 변화 화소로서 전환기(22)에 출력한다.
한편, 수직 주사기(41b)는 메모리(3)에 축적된 해당 프레임의 부호화 및 복호화 완료의 참조 화상을 판독해서, 수직 방향으로 주사하여 변화 화소 예측기(4b)에 입력한다. 변화 화소 예측기(4b)는 변화 화소를 예측하여, 그 결과를 예측 변화 화소로서 전환기(22)에 출력한다.
변화 화소 예측기(4a, 4b)로부터 각각의 예측 변화 화소가 출력된 전환기(22)는, 입력된 예측 모드 신호에 따라 전환을 행한다. 따라서, 전환기(22)는 입력된 예측 모드 신호가 「수평 방향」을 나타내는 것이면 변화 화소 예측기(4a)로부터 출력된 수평 방향 주사에 근거하는 예측 변화 화소를, 입력된 예측 모드 신호가 「수직 방향」을 나타내는 것이면 변화 화소 예측기(4b)로부터 출력된 수직 방향 주사에 근거하는 예측 변화 화소를 선택하여, 차분값 가산 수단(11)에 출력한다.
차분값 가산 수단(11)은, 전환기(22)로부터 취득한 예측 변화 화소에 대하여, 복호화기(31b)에서 취득한 복호 차분값을 가산함으로써, 변화 화소를 계산해 그 결과를 변화 화소 복호화기(10)에 출력한다.변화 화소 복호화기(10)는, 변화 화소 예측 수단(4a)의 예측 변화 화소와, 차분값 가산 수단(11)으로부터 얻어진 변화 화소에 근거하여, 그 사이의 화소값을 복호화한다. 이 복호화의 결과는 메모리(3)에 입력되어 기억됨과 동시에, 복호화된 화상 신호(34)로서 본 실시예 5의 화상 복호화 장치로부터 출력된다.
이와 같이, 본 실시예 5에 의한 화상 복호화 장치에서는, 부호화 모드의 부호화 신호를 복호화하는 복호화기(31a)와, 차분값의 부호화 신호를 복호화하는 복호화기(31b)와, 수평 방향 주사에 근거하여 변화 화소를 예측하는 변화 화소 예측 수단(4a)과, 수직 방향 주사에 근거하여 변화 화소를 예측하는 변화 화소 예측 수단(4b)과, 예측 변화 화소에 근거하여 복호 처리를 하는 차분값 가산 수단(11) 및 변화 화소 복호화기(10)를 구비하며, 복호화기(31a)가 취득하는 예측 모드에 따라, 전환기가 전환을 함으로써, 부호화시의 부호화 모드에 대응한 예측 모드에 있어서, 수평 방향 주사에 근거하는 예측치를 이용하는 복호화와, 수직 방향 주사에 근거하는 예측치를 이용하는 복호화를 적응적으로 전환하여 실행하여, 실시예 4에 있어서 효율적으로 부호화된 부호화 신호를 적절히 복호화하는 것이 가능해진다.
또, 본 실시예 5에 있어서는, 실시예 3에 있어서, 도 5에 나타낸 구성에 준한 구성을 갖는 화상 복호화 장치로서 설명하였으나, 실시예 3에 있어서 도 6에 나타낸 구성에 준한 것으로 하는 것도, 또한 동 실시예에 있어서 설명한 바와 같이, 전환기가 변화 화소 복호화기의 출력을 수신하는 구성으로 하는 것도 가능하며, 마찬가지로 적절한 복호화를 할 수 있다.
또한, 실시예 5에 있어서, 블럭 단위로 부호화 모드를 선택하여 부호화된 부호화 신호를 처리하는 경우에도, 블럭 단위로 신호를 입력하고, 블럭마다 예측 모드를 취득하여 부호화 모드에 대응한 처리를 함으로써, 적절히 복호화하는 것이 가능하다.
(실시예 6)
본 발명의 실시예 6에 의한 화상 부호화 장치는, 다치(多値) 화상 신호를 효율적으로 부호화하는 것이다.
도 10은 본 발명의 실시예 6에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 입력 신호(1a)는 다치 화상 신호로서 본 실시예 6의 화상 부호화 장치에 입력된다. 참조부호 (8a, 8b)는 부호화기이다. 이와 같이, 다치 신호가 입력되어 처리되는 점과, 부호화기를 2개 구비하는 구성이라는 점이 실시예 1과 상이하고, 이 이외에는 도 1과 마찬가지이며, 설명은 실시예 1과 마찬가지이므로, 여기서는 생략한다.
이상과 같이 구성된, 본 실시예 6에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 입력 신호(1a)가 입력되면, 변화 화소 검출기(2)는 이 다치 입력 신호에 대하여, 최종 부호화 복호화 위치의 화소값과, 해당 위치에 후속하는 위치의 화소값을 비교하여, 각 화소마다 「변화 있음」 또는, 「변화없음」의 판정을 한다. 그리고, 「변화있음」이라고 판정되는 화소의 수인 변화 화소수를 계산하여, 변화 화소수를 소정의 값과 비교한다. 여기서는 그 소정값이 60인 것으로 한다. 「변화있음」이라고 판정되고, 변화 화소수가 60 이상으로 된 화소를 변화 화소라고 판단하고, 그 변화 화소의 화소값과 위치를 검출 변화 화소로서 차분값 계산기(5), 변화 화소 복호기(10) 및 부호화기(8a)에 출력한다.
또한, 변화 화소 예측기(4)는 메모리(3)에 축적된 해당 프레임의 부호화 복호화 완료의 참조 화상을 판독하고, 이것에 근거하여 변화 화소를 예측해 이 예측을 예측 변화 화소로서 차분값 계산기(5), 차분값 가산기(11) 및 변화 화소 복호화 수단에 출력한다. 차분값 계산기(5)는 검출 변화 화소로부터 예측 변화 화소를 감산하여 얻어진 차분값을 부호화기(8b)와, 차분값 가산기(11)에 출력한다. 차분값 가산기(11)는, 입력된 예측 변화 화소와 차분값을 가산하여, 변화 화소 복호기(10)에 출력하고, 변화 화소 복호화기(10)는 입력에 근거하여 변화 화소까지의 화소값 및 변화 화소의 화소값을 복호화하여 메모리(3)에 기억한다.
부호화기(8a)와 부호화기(8b)는, 각각 입력된 변화 화소의 화소값과 차분값을 부호화하여 부호화 신호(9a, 9b)를 출력한다.
이와 같이, 본 실시예 6에 의한 화상 부호화 장치에서는, 실시예 1과 마찬가지의 구성에 있어서, 화소마다 변화의 유무를 조사하여 「변화있음」이라고 판정되는 화소의 수를 계산하여, 임계값 이상의 개수의 화소가 「변화있음」이라고 판정되게 된 화소를 변화 화소라고 판단함으로써, 2치 화상만이 아니라 다치 화상에 대해서도 마찬가지의 부호화를 가능하게 할 수 있다.
(실시예 7)
본 발명의 실시예 7에 의한 화상 복호화 장치는, 실시예 6에 의한 화상 부호화 장치에 의해 부호화된 부호화 신호에 대하여, 복호화를 행하여 다치의 화상 신호를 얻는 것이다.
도 11은 본 발명의 실시예 7에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 복호화기(31a)는 변화 화소의 화소값을 부호화한 부호화 신호에 대하여 복호화를 행하고, 복호화기(31b)는 예측 차분값을 부호화한 부호화 신호를 복호화한다. 이 이외에는 도 5와 마찬가지이며, 설명은 실시예 3과 마찬가지이므로, 여기서는 생략한다.
이상과 같이 구성된, 본 실시예 7에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 실시예 6에 의한 화상 부호화 장치에 있어서, 변화 화소의 화소값을 부호화한 신호(9a)는 입력 신호(30a)로서 본 실시예 7의 화상 복호화 장치에 입력되고, 복호화기(31a)에서 복호화됨에 따라 복호 화소값을 얻을 수 있으며, 이 복호 화소값은 변화 화소 복호화기(10)에 입력된다.
또한, 실시예 6에 의한 화상 부호화 장치에 있어서, 예측 차분값을 부호화한 신호(9b)는 입력 신호(30b)로서 본 실시예 7의 화상 복호화 장치에 입력되고, 복호화기(31b)에서 복호화됨에 따라 복호 차분값을 얻을 수 있으며, 이 복호 차분값은 차분값 가산기(11)에 입력된다.
한편, 변화 화소 예측기(4)는 메모리(3)에 축적된 복호화 완료의 참조 화상을 판독하여, 해당 화상 신호에 근거해 변화 화소를 예측하고, 그 결과를 예측 변화 화소로서 변화 화소 복호화기(10)와 차분값 가산기(11)에 출력한다. 차분값 가산기(11)는 입력된 예측 변화 화소와 차분값을 가산하여 변화 화소 복호기(10)에 출력하고, 변화 화소 복호화기(10)는, 입력에 근거하여 변화 화소까지의 화소값 및 변화 화소의 화소값을 복호화해서 다치 화상 신호(34)로서 출력함과 동시에, 메모리(3)에 기억한다.
이와 같이, 본 실시예 7에 의한 화상 복호화 장치에서는, 변화 화소의 화소값을 부호화한 부호화 신호에 대하여 복호화를 하는 복호화기(31a)와, 예측 차분값을 부호화한 부호화 신호에 대하여 복호화를 하는 복호화기(31b)를 구비한 것으로, 실시예 6에 의한 화상 부호화 장치에 있어서 부호화된 부호화 신호를 적절히 복호화하여 다치의 화상 신호를 얻는 것이 가능해진다.
(실시예 8)
본 발명의 실시예 8에 의한 화상 부호화 장치는, 화상을 합성할 때의 비율을 나타내는 투과도 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하여, 참조 화상을 참조해 이 입력 신호를 부호화하는 것이다.
도 12는, 본 발명의 실시예 8에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (60a)는 화소값 신호, 참조부호 (60b)는 투과도 신호이며, 화상 신호를 구성하는 것으로서, 각각 본 실시예 8의 화상 부호화 장치에 입력 신호로서 입력된다. 참조부호 (61)은 메모리이며, 참조 화상으로서 이용하는 부호화 및 복호화 완료의 화상 신호 등의 데이터를 일시적으로 기억한다. 참조부호 (62a, 62b)는 움직임 검출기이며, 참조 화상에 대하여 움직임 검출을 하여 움직임 벡터를 출력한다. 참조부호 (63a, 63b)는 움직임 보상기이며, 부호화 복호화 완료의 참조 프레임의 화상 신호에 대해, 움직임 보상을 하여 참조 화소값을 생성한다. 참조부호 (64a, 64b)는 차분값 계산기이며, 입력 신호와, 움직임 보상을 수반한 신호와의 차분을 계산하여 차분값을 출력한다. 참조부호 (65a, 67b)는 부호화기이며, 움직임 벡터의 부호화를 행한다. 참조부호 (67a, 65b)는 부호화기이며, 차분값의 부호화를 행한다. 참조부호 (66a, 68b)는 부호화 신호이며, 움직임 벡터를 부호화한 것이다. 참조부호 (67a, 65b)는 부호화 신호이며, 차분값을 부호화한 것이다.
이상과 같이 구성된, 본 실시예 8에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 화상 신호는 화소값 신호(60a)와 투과도 신호(60b)로서, 본 실시예 8의 화상 부호화 장치에 입력된다. 여기서, 투과도 신호란, 종래 기술의 설명에 있어서 이용한 도 53b에 도시하는 것으로서, 다른 화상과 합성할 때에, 각 화소를 어떤 비율로 합성하는가를 나타내는 것이다. 화소값 신호(60a)는, 메모리(61), 움직임 검출기(62a) 및 차분값 계산 수단(64a)에 입력되고, 투과도 신호(60b)는 메모리(61), 움직임 검출기(62b) 및 차분값 계산 수단(64b)에 입력된다.
움직임 검출기(62a, 62b)는, 각각 입력된 신호와, 메모리(61)로부터 판독한 참조 화상이 갖는 부호화 완료의 화소값에 대하여 비교함으로써 움직임 검출을 하여, 계산에 의해 각각의 신호의 움직임 벡터를 취득한다.
움직임 검출기(62a)에서 취득된 화소값 신호의 움직임 벡터는, 부호화기(65a), 움직임 보상기(63a) 및 메모리(61)에 출력된다. 움직임 보상기(63a)는 화소값 신호의 움직임 벡터로 표시되는 화소값을 메모리(61)로부터 판독하여 화소값 신호의 움직임 보상값을 차분값 계산기(64a)에 출력한다.
차분값 계산기(64a)는 입력 화소값 신호와, 움직임 보상값의 차분값을 계산에 의해 취득하여, 이것을 부호화기(67a)에 출력한다. 화소값 신호의 움직임 벡터는 부호화기(65a)에서 부호화되어 부호화 신호(66a)로 되고, 차분값은 부호화기(67a)에서 부호화되어 부호화 신호(68a)로 된다.
마찬가지로, 움직임 검출기(62b)에서 취득된 투과도 신호의 움직임 벡터는, 부호화기(67b), 움직임 보상기(63b) 및 메모리(61)에 출력된다. 움직임 보상기(63b)는 투과도 신호의 움직임 보상을 하여, 취득한 움직임 보상값을 차분값 계산기(64a)에 출력한다. 그리고, 차분값 계산기(64b)는 차분값 계산기(64a)와 마찬가지로 취득한 차분값을 부호화기(67a)에 출력한다. 화소값 신호와 마찬가지로, 투과도 신호의 움직임 벡터는 부호화기(67b)에서 부호화되어 부호화 신호(68b)로 되고, 차분값은 부호화기(65b)에서 부호화되어 부호화 신호(66b)로 된다. 본 실시예 8은 가역 부호화의 일례이며, 부호화한 입력 신호는 메모리(61)에 기억되어, 후속하는 화상 신호에 대한 부호화에 사용된다(도시하지 않음).
이와 같이, 본 실시예 8에 의한 화상 부호화 장치에서는, 화소값 신호(60a)의 처리를 하는 움직임 검출기(62a), 움직임 보상기(63a), 차분값 계산기(64a), 부호화기(65a) 및 부호화기(67a)와, 투과도 신호(60b)의 처리를 하는 움직임 검출기(62b), 움직임 보상기(63b), 차분값 계산기(64b), 부호화기(65b) 및 부호화기(67b)를 구비함으로써, 화소값 신호(60a)와 투과도 신호(60b)의 각각에 대하여, 각기 움직임 검출을 행하여 움직임 벡터를 취득해서, 움직임 보상을 하는 것이 가능해진다.
종래 기술의 설명에 있어서 설명한 바와 같이, 종래의 기술에 의한 화상 부호화에서는, 형상 정보와 화소값 정보로 이루어지는 화상을 부호화하는 경우, 화상의 합성에 사용되는 형상 정보에 대해서는, 부호화 효율의 향상을 위해 화소값 정보의 움직임 벡터를 사용하여 형상 정보의 움직임 보상 부호화를 행하였다. 따라서, 본 실시예 8의 입력 화상 신호와 같은 신호를 부호화하는 경우, 화소값 신호의 움직임 벡터를 이용하여, 투과도 신호의 움직임 보상 부호화를 행하게 된다. 그러나, 투과도 신호는 물체의 형상을 나타내는 신호이지만, 그 움직임 벡터는 반드시 화소값 신호의 움직임 벡터와 일치하는 것은 아니다. 회전하는 원반의 형상은 변하지 않지만, 원반에 그려진 무늬는 이동하는 경우가 그 예이다. 따라서, 이러한 경우에는 화소값 신호의 움직임 벡터와, 투과도 신호의 움직임 벡터와의 차가 크기 때문에, 화소값 신호의 움직임 벡터를 이용하여 투과도 신호의 움직임 보상을 한 경우의 움직임 오차가 커져서, 차분값의 부호화 길이가 길어져서 부호화 효율이 저하되게 된다.
이것에 대하여, 본 실시예 8의 화상 부호화 장치는, 투과도 신호에 대해서는, 화소값 신호의 움직임 벡터와는 별도로 검출한 움직임 벡터를 이용하여 움직임 보상함으로써, 입력 투과도 신호에 대하여 움직임 보상 신호에 의해 정밀도가 좋게 근사시킬 수 있고, 움직임 보상 오차가 작아지기 때문에, 부호화 효율이 향상된다.
또, 본 실시예 8의 화상 부호화 장치에 대해서도, 입력 신호가 블럭 단위로 입력되는 것으로 하여, 블럭 단위로 움직임 보상과 부호화를 하는 설정으로 할 수 있어서, 상기한 효과를 얻을 수 있다.
(실시예 9)
본 발명의 실시예 9에 의한 화상 부호화 장치는, 실시예 8과 마찬가지로, 투과도 신호와, 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 13은 본 발명의 실시예 8에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호는 도 12와 동일하며, 그 설명은 실시예 8과 마찬가지이다. 본 실시예 9에 의한 화상 부호화 장치에서는, 화소값 신호(60a)에 대한 움직임 검출기(62a)가, 취득한 화소값 신호의 움직임 벡터를 투과도 신호(60b)에 대한 움직임 검출기(62b)에 출력하고, 움직임 검출기(62b)는 입력된 화소값 신호의 움직임 벡터의 근방에 있어서, 투과도 신호의 움직임 검출을 행하는 점이 실시예 8에 의한 화상 부호화 장치의 구성과 상위한 점이다.
또한, 본 실시예 9에 따른 화상 부호화 장치의 동작에 대해서도, 움직임 검출기(62a)가 상술한 출력을 하고, 움직임 검출기(62b)가 상술한 검출을 하는 점 이외에는, 실시예 8과 마찬가지의 동작으로 된다.
이와 같이, 본 실시예 9에 의한 화상 부호화 장치에서는, 실시예 8의 구성에 근거하여, 화소값 신호(60a)에 대한 움직임 검출기(62a)가, 취득한 화소값 신호의 움직임 벡터를 투과도 신호(60b)에 대한 움직임 검출기(62b)에 출력하고, 움직임 검출기(62b)는, 입력된 화소값 신호의 움직임 벡터의 근방에 있어서, 투과도 신호의 움직임 검출을 행하는 것으로 함으로써, 투과도 신호의 움직임 검출에 있어서 화소값 신호에 있어서의 움직임 검출의 결과를 이용하는 것이다.
화소값 신호와 투과도 신호와의 움직임 벡터는, 실시예 8에 나타낸 예와 같이 크게 상이한 것도 있지만, 많은 화상에 있어서는 거의 일치한다. 그래서, 투과도 신호의 움직임 벡터를 검출할 때에, 화소값 신호의 움직임 벡터 근방에서만 투과도 신호의 움직임 벡터를 검출하면, 화소값 신호와 완전히 독립적으로 실행하는 경우에 비해 움직임 검출에 필요한 계산 횟수를 삭감할 수 있다. 또, 화소값 신호와 독립적으로 움직임 검출하는 경우와 비교하면, 선택 가능한 움직임 벡터수가 제한되어 있기 때문에 투과도 신호의 움직임 보상 오차에 대해서는 다소 증가하게 되지만, 그 비율은 얼마 되지 않는다. 따라서, 본 실시예 9의 화상 부호화 장치에서는, 실시예 8과 마찬가지로, 각 신호에 대하여 적절한 움직임 보상을 함으로써, 부호화 효율의 향상을 도모함과 동시에, 움직임 검출의 계산 횟수를 삭감하는 것이 가능하다.
또, 본 실시예 9의 화상 부호화 장치에서는, 투과도 신호의 움직임 검출에 있어서, 화소값 신호의 움직임 벡터를 이용하는 것으로 하였지만, 도 12에 도시한 실시예 8에 의한 화상 부호화 장치의 구성에 근거하여, 투과도 신호(60b)에 관한 움직임 검출기(62b)는, 취득한 투과도 신호의 움직임 벡터를 화소값 신호(60a)에 대한 움직임 검출기(62a)에 출력하고, 움직임 검출기(62a)는 입력된 투과도 신호의 움직임 벡터의 근방에 있어서, 화소값 신호의 움직임 검출을 하는 것으로 하여, 화소값 신호의 움직임 검출에 있어서, 투과도 신호에 있어서의 움직임 검출의 결과를 이용하는 것으로 한 구성으로 하는 것도 가능하며, 역시 움직임 검출의 계산 횟수의 삭감을 도모하는 것이 가능하다.
또한, 설정에 의해 블럭 단위에서의 부호화가 가능하다는 점은, 실시예 8과 마찬가지이다.
(실시예 10)
본 발명의 실시예 10에 의한 화상 부호화 장치는, 실시예 8 및 실시예 9와 마찬가지로, 투과도 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 13은 본 발명의 실시예 10에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (70)은 움직임 벡터의 차분 계산기이며, 움직임 검출기(62a)로부터 취득하는 화소값 신호의 움직임 벡터와, 움직임 검출기(62b)로부터 취득하는 투과도 신호의 움직임 벡터와의 차분 벡터를 취득한다. 부호화기(67b)는 실시예 8에서는 투과도 신호의 움직임 벡터를 부호화하였지만, 본 실시예 10에서는, 차분값 계산기(70)가 취득하는 움직임 벡터의 차분 벡터를 부호화한다. 다른 부호는 도 12와 동일한 것이며, 설명은 실시예 8과 마찬가지이다.
본 실시예 10에 의한 화상 부호화 장치의 동작에 대해서는, 움직임 검출기(62a, 62b)가 움직임 벡터를 차분값 계산기(70)에 출력하고, 차분값 계산기(70)가 상술한 차분 벡터를 취득하여 부호화기(67b)에 출력하며, 부호화기(67b)가 움직임 벡터의 차분 벡터를 부호화하는 점 이외에는, 실시예 8의 것과 마찬가지의 동작으로 된다.
이와 같이, 본 실시예 10의 화상 부호화 장치에서는, 실시예 8의 화상 부호화 장치의 구성에 근거하여, 움직임 벡터의 차분값 계산기(70)를 추가한 구성으로 함으로써, 투과도 신호의 움직임 벡터를 부호화하는 대신에, 화소값 신호의 움직임 벡터와 투과도 신호의 움직임 벡터와의 차분 벡터를 부호화한다. 실시예 9에 있어서 설명한 바와 같이 양 신호의 움직임 벡터는 상관이 있는 경우가 많기 때문에, 양 신호의 움직임 벡터의 차분 벡터를 부호화하면, 차분 벡터의 발생 빈도가 0 벡터 근방으로 집중한다. 그 결과, 0 벡터 근방의 차분 벡터에 짧은 부호 길이의 부호를 할당하는 가변 길이 부호화를 함으로써, 부호화 효율이 향상되어 보다 적은 비트수로 부호화하는 것이 가능하게 된다.
또, 본 실시예 10의 화상 부호화 장치에서는, 투과도 신호의 움직임 벡터를 부호화하는 대신에, 양 신호의 움직임 벡터의 차분 벡터를 부호화하는 것으로 하였지만, 차분값 계산기(70)가 취득한 차분 벡터를 부호화기(67b)가 아니라 부호화기(65a)에 출력하는 구성도 가능하며, 화소값 신호의 움직임 벡터를 부호화하는 대신에, 양 신호의 움직임 벡터의 차분 벡터를 부호화하는 것으로도, 동일한 효과를 얻을 수 있다.
또한, 설정에 의해 블럭 단위에서의 부호화가 가능하다는 점은, 실시예 8과 마찬가지이다.
(실시예 11)
본 발명의 실시예 11에 의한 화상 복호화 장치는, 실시예 8에 의한 화상 부호화 장치에 의해서 효율적으로 부호화된 부호화 신호에 대하여, 적절한 복호화를 하는 것이다.
도 15는 본 발명의 실시예 11에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (82a, 82b)는 도 12의 부호화 신호(68a, 66b)에 대응하는 부호화 신호이며, 화소값 신호 및 투과도 신호 각각의 차분값을 부호화한 신호이다. 참조부호 (80a, 80b)는, 도 12의 부호화 신호(66a, 68b)에 대응하는 부호화 신호이며, 화소값 신호 및 투과도 신호 각각의 움직임 벡터를 부호화한 신호이다. 참조부호 (83a, 83b)는 복호화기로서, 화소값 신호 및 투과도 신호 각각의 차분값의 부호화 신호를 복호화하여, 화소값 신호 및 투과도 신호의 복호 차분값을 출력한다. 참조부호 (81a, 81b)는 복호화기로서, 화소값 신호 및 투과도 신호 각각의 움직임 벡터의 부호화 신호를 복호화하여, 화소값 신호 및 투과도 신호의 복호 움직임 벡터를 출력한다. 참조부호 (61)은 메모리이며, 참조 화상으로서 이용하는 부호화 및 복호화 완료의 화상 신호 등의 데이터를 일시적으로 기억한다. 참조부호 (63a, 63b)는 움직임 보상기이며, 복호 움직임 벡터를 이용하여 움직임 보상을 한다. 참조부호 (84a, 84b)는 차분값 가산기이며, 복호 차분값을 이용하여 가산 처리를 한다. 참조부호 (85a, 85b)는 복호화된 화상 신호이다.
이상과 같이 구성된, 본 실시예 11에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 실시예 8에 의한 화상 부호화 장치에 있어서, 화소값 신호 및 투과도 신호 각각의 차분값을 부호화한 신호(68a, 66b)는, 입력 신호(82a, 82b)로서 본 실시예 11에 의한 화상 복호화 장치에 입력되고, 복호화기(83a, 83b)에 의해 복호화되어, 화소값 신호 및 투과도 신호의 복호 차분값으로서, 차분값 가산기(84a, 84b)에 출력된다. 또한, 실시예 8에 의한 화상 부호화 장치에 있어서, 화소값 신호 및 투과도 신호 각각의 움직임 벡터를 부호화한 신호(66a, 68b)는, 입력 신호(80a, 80b)로서 본 실시예 11에 의한 화상 복호화 장치에 입력되고, 복호화기(81a, 81b)에 의해 복호화되어, 화소값 신호 및 투과도 신호의 복호 움직임 벡터로서, 움직임 보상기(63a, 63b)에 출력된다.
움직임 보상기(63a, 63b)는, 각각 입력된 움직임 벡터로 표시되는 화소값을 메모리(61)로부터 판독하고, 움직임 보상을 하여 움직임 보상값을 차분값 가산기(84a, 84b)에 출력한다. 차분값 가산기(84a, 84b)는, 각각 입력된 복호 차분값과 움직임 보상값을 가산 처리하여, 복호화된 화상 신호(85a, 85b)로서 출력함과 동시에, 메모리(61)에 있어서 기억되게 된다.
이와 같이, 본 실시예 11에 의한 화상 복호화 장치에서는, 화소값 신호의 부호화 신호의 처리를 하는 복호화기(81a) 및 복호화기(83a), 움직임 보상기(63a), 차분값 계산기(84a)와, 투과도 신호의 부호화 신호의 처리를 하는 복호화기(81b) 및 복호화기(83b), 움직임 보상기(63b), 차분값 계산기(84b)를 구비함으로써, 화소값 신호의 부호화 신호(80a, 82a)와 투과도 신호의 부호화 신호(80b, 82b)에 대하여, 각기 별도로 복호화 처리를 하는 것이 가능해져, 적절히 복호화하여 화상 신호를 얻는 것이 가능해진다.
또, 본 실시예 11에 의한 화상 복호화 장치에서는, 실시예 8에 의한 화상 부호화 장치에 있어서 얻어지는 부호화 신호를 복호화하는 것으로 하였지만, 실시예 9에 의한 화상 부호화 장치에 있어서 얻어지는 부호화 신호에 대해서도, 마찬가지로 적절히 복호화를 하는 것이 가능하다.
또한, 실시예 8, 또는 실시예 9에 있어서, 블럭 단위로 입력되어 부호화된 부호화 신호에 대해서는, 블럭 단위로 입력하여 복호화하는 설정으로 함으로써 적절히 복호화를 할 수 있는 것이다.
(실시예 12)
본 발명의 실시예 12에 의한 화상 복호화 장치는, 실시예 10에 의한 화상 부호화 장치에 의해서 효율적으로 부호화된 부호화 신호에 대하여, 적절한 복호화를 하는 것이다.
도 16은, 본 발명의 실시예 12에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (86)은 움직임 벡터의 차분값 가산기이며, 복호 움직임 벡터와 복호 차분 움직임 벡터의 가산 처리를 한다. 다른 참조부호는 도 15와 마찬가지이며, 그 설명은 실시예 11과 마찬가지이므로, 여기서는 그 상세한 설명을 생략한다.
이상과 같이 구성된, 본 실시예 12에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 복호화기(81a)는 입력 신호(80a)의 복호화에 따라서 취득한 화소값 신호의 복호 움직임 벡터를, 움직임 보상기(63a)에 출력함과 동시에, 움직임 벡터의 차분값 가산기(86)에도 출력한다. 복호화기(80b)에는, 실시예 11의 경우와 같이, 투과도 신호의 움직임 벡터의 부호화 신호가 입력되는 것이 아니라, 실시예 10의 차분 움직임 벡터의 부호화 신호(68b)(도 14)가 입력되고, 복호화기(80b)는 실시예 11의 경우와 같이 복호화에 의해 투과도 신호의 움직임 벡터를 취득하는 것이 아니라, 차분 벡터를 취득하여, 이 복호 차분 움직임 벡터를 움직임 벡터의 차분값 가산기(86)에 출력한다. 출력되는 복호 차분 움직임 벡터는, 화소값 신호의 움직임 벡터와 투과도 신호의 움직임 벡터와의 차분 벡터이기 때문에, 이 차분 벡터가 차분값 가산기(86)에 있어서, 화소값 신호의 복호 움직임 벡터와 가산됨에 의해, 투과도 신호의 움직임 벡터가 취득되게 된다. 복호화된 투과도 신호의 움직임 벡터는 움직임 보상기(63b)에 출력된다.
다른 동작에 대해서는, 실시예 11의 화상 복호화 장치에 있어서의 처리와 동등하게 되어, 화소값 신호의 복호 신호(85a)와, 투과도 신호의 복호 신호(85b)가 장치로부터의 출력으로 된다.
이와 같이, 본 실시예 12의 화상 복호화 장치에서는, 실시예 11의 화상 복호화 장치의 구성에 근거하여, 움직임 벡터의 차분값 가산기(86)를 추가하는 구성으로 한 것으로, 복호 움직임 벡터와 복호 차분 벡터와의 가산을 행할 수 있어서, 부호화 신호로서 차분 벡터의 부호화 신호를 출력하는 실시예 10의 출력 부호화 신호를 적절히 복호화하는 것이 가능하다.
또, 실시예 10에 있어서 블럭 단위에서의 부호화가 실행되고 있는 경우에도 설정에 의해 대응이 가능한 것은, 실시예 11과 마찬가지이다.
(실시예 13)
본 발명의 실시예 13에 의한 화상 부호화 장치는, 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와, 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 17은, 본 발명의 실시예 13에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (60a)는 화소값 신호, 참조부호 (60b)는 형상 신호이며, 화상 신호를 구성하는 것으로서, 각각 본 실시예 8의 화상 부호화 장치에 입력 신호로서 입력된다. 참조부호 (69a, 69b)는 복호화기이고, 부호화기(67a, 65b)로부터 출력되는 차분값의 부호화 신호를 복호화한다. 참조부호 (75a, 75b)는 차분값 가산기이며, 복호화된 차분값과 움직임 보상값을 가산 처리하여 메모리(61)에 기억시킨다. 다른 참조부호에 대해서는, 도 12와 마찬가지이며, 설명은 실시예 8과 마찬가지이므로, 여기서는 생략한다.
이상과 같이 구성된, 본 실시예 13에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 입력 신호인 블럭화된 형상 부가 화상 신호는, 화소값 신호(60a)와 형상 신호(60b)로서, 본 실시예 13의 화상 부호화 장치에 입력된다. 여기서, 형상 신호란, 종래 기술의 설명에 있어서 이용한 도 53에 도시한 것으로서, 도 53의 (c)에 도시하는 2치 정보, 또는 도 53의 (d)에 도시하는 다치 정보로 된다. 다치 정보인 경우에는, 실시예 8에 있어서의 투과도 신호와 마찬가지의 것으로 된다.
본 실시예 13의 화상 부호화 장치에 있어서는, 실시예 8과 마찬가지의 처리에 의해, 화소값 신호와 형상 신호가 각각 부호화되어, 화소값 신호의 움직임 벡터의 부호화 신호(66a), 화소값 신호의 차분값의 부호화 신호(68a), 형상 신호의 움직임 벡터의 부호화 신호(66b) 및 형상 신호의 차분값의 부호화 신호(68b)가 얻어진다.
실시예 8에 의한 장치에서는, 부호화된 신호가 메모리(61)에 입력되어 있었지만, 본 실시예 13에서는, 부호화된 차분값이 각각 복호화기(69a, 69b)에서 복호화되어, 차분값 가산기(75a, 75b)에 출력되고, 차분값 가산기(75a, 75b)에서 움직임 보상기(63a, 63b)로부터 출력된 움직임 보상값이 가산된 후에 메모리(61)에 입력된다. 따라서, 부호화에 이용되는 참조 화상은, 부호화 및 복호화되어 움직임 보상값이 가산된 것으로 되는 점이 실시예 8과 상이하다.
이와 같이, 본 실시예 13에 의한 화상 부호화 장치에서는, 실시예 8에 의한 화상 부호화 장치의 구성에 근거하여, 복호화기(69a, 69b)와, 차분값 가산기(75a, 75b)를 추가하는 구성으로 한 것으로, 실시예 8과 마찬가지로, 움직임 보상 오차를 작게 함으로써, 부호화 효율의 향상을 도모할 수 있음과 함께, 약간의 처리 부담의 증대를 수반하게 되기는 하지만, 참조 화상으로서 부호화 및 복호화되어, 움직임 보상값이 가산된 보다 적절한 신호를 이용함으로써, 움직임 보상 오차를 한층 감소시키는 것이 가능하게 된다.
또, 본 실시예 13에 의한 화상 부호화 장치로 출력되는 부호화 신호는, 실시예 8과 마찬가지로, 실시예 11에 의한 화상 복호화 장치에 있어서, 적절히 복호화하는 것이 가능하다.
(실시예 14)
본 발명의 실시예 14에 의한 화상 부호화 장치는, 실시예 13과 마찬가지로, 형상 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여, 이 입력 신호를 부호화하는 것이다.
도 18은, 본 발명의 실시예 14에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호는 도 17과 동일한 것이며, 설명은 실시예 13과 마찬가지이다. 본 실시예 14에 의한 화상 부호화 장치에서는, 실시예 9와 마찬가지로, 화소값 신호(60a)에 대한 움직임 검출기(62a)가, 취득한 화소값 신호의 움직임 벡터를 투과도 신호(60b)에 대한 움직임 검출기(62b)에 출력하고, 움직임 검출기(62b)는 입력된 화소값 신호의 움직임 벡터의 근방에 있어서, 투과도 신호의 움직임 검출을 하는 점이 실시예 13에 의한 화상 부호화 장치의 구성과 상이한 점이다.
또한, 본 실시예 14에 의한 화상 부호화 장치의 동작에 대해서도, 움직임 검출기(62a)가 상술한 출력을 하고, 움직임 검출기(62b)가 상술한 검출을 하는 점 이외에는, 실시예 13과 마찬가지의 동작으로 된다.
이와 같이, 본 실시예 14에 의한 화상 부호화 장치에서는, 실시예 13의 구성에 근거하여, 화소값 신호(60a)에 대한 움직임 검출기(62a)가, 취득한 화소값 신호의 움직임 벡터를 형상 신호(60b)에 대한 움직임 검출기(62b)에 출력하고, 움직임 검출기(62b)는 입력된 화소값 신호의 움직임 벡터의 근방에 있어서, 형상 신호의 움직임 검출을 하는 것으로 함으로써, 실시예 9와 마찬가지로 형상 신호의 움직임 검출에 있어서, 화소값 신호에 있어서의 움직임 검출의 결과를 이용함으로써 움직임 검출의 계산 횟수를 삭감할 수 있는 것이다.
또, 형상 신호의 움직임 벡터의 근방에 있어서, 화소값 신호의 움직임 벡터를 검출하도록 하는 구성으로 할 수 있는 점은 실시예 9와 마찬가지이며, 본 실시예 14의 화상 부호화 장치에서 얻어지는 부호화 신호를 실시예 11에 의한 화상 복호화 장치에 의해 복호화할 수 있는 점은 실시예 13과 마찬가지이다.
(실시예 15)
본 발명의 실시예 15에 의한 화상 부호화 장치는, 실시예 13 및 실시예 14와 마찬가지로, 형상 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 19는, 본 실시예 15에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 움직임 벡터의 차분 계산기(70)는 도 13에 나타내는 실시예 10과 마찬가지다. 또한, 부호화기(67b)도 실시예 10과 마찬가지로, 차분값 계산기(70)가 취득하는 움직임 벡터의 차분 벡터를 부호화한다. 다른 참조부호는 도 17과 동일한 것이며, 그 설명은 실시예 13과 마찬가지이다.
본 실시예 15에 의한 화상 부호화 장치의 동작에 대해서는, 움직임 검출기(62a, 62b)가 움직임 벡터를 차분값 계산기(70)에 출력하고, 차분값 계산기(70)가 상술한 차분 벡터를 취득하여 부호화기(67b)에 출력하며, 부호화기(67b)가 움직임 벡터의 차분 벡터를 부호화한다는 점은 실시예 10과 마찬가지이며, 다른 동작은 실시예 13과 마찬가지이다.
이와 같이, 본 실시예 15의 화상 부호화 장치에서는, 실시예 13의 화상 부호화 장치의 구성에 근거하여, 움직임 벡터의 차분값 계산기(70)를 추가한 구성으로 함으로써, 형상 신호의 움직임 벡터를 부호화하는 대신에, 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터와의 차분 벡터를 부호화한다. 따라서, 실시예 10과 마찬가지로 가변 길이 부호화를 함으로써, 부호화 효율의 향상을 한층 도모할 수 있게 된다.
또, 화소값 신호의 움직임 벡터를 부호화하는 대신에, 차분 벡터를 부호화하는 설정으로 하는 것도 가능하다는 점은, 실시예 10과 마찬가지이다.
또한, 본 실시예 15에 의한 화상 부호화 장치에서 출력되는 부호화 신호는, 실시예 10과 마찬가지로, 실시예 12에 의한 화상 복호화 장치에 있어서 적절히 복호화하는 것이 가능하다.
(실시예 16)
본 발명의 실시예 16에 의한 화상 부호화 장치는, 실시예 13 내지 실시예 15와 마찬가지로, 형상 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 20은 본 발명의 실시예 16에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (90)은 움직임 검출 판정기이며, 입력 형상 신호(60b)와 움직임 검출기(62a)가 출력하는 화소값 신호의 움직임 벡터를 입력하여, 화소값 신호의 움직임 벡터에 의한 형상 신호의 움직임 보상의 가부를 판정하고, 해당 판정에 따라 형상 신호의 움직임 검출기(62b)에 움직임 검출을 할지 여부의 지시를 출력한다.
이상과 같이 구성된, 본 실시예 16에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 본 실시예 16에 의한 화상 부호화 장치에 입력된 화소값 신호(60a)의 처리에 대해서는, 움직임 검출기(62a)에서 취득된 화소값 신호의 움직임 벡터가 움직임 검출 판정기(90)에도 출력되는 점 이외에는, 실시예 13과 마찬가지로 처리되어, 화소값 신호의 움직임 벡터의 부호화 신호(66a)와, 화소값 신호의 차분값의 부호화 신호(68a)를 얻을 수 있다.
한편, 입력 형상 신호(60b)에 대해서는, 우선 움직임 검출 판정기(90)에 입력된다. 움직임 검출 판정기(90)는, 입력된 화소값 신호의 움직임 벡터를 이용하여 입력 형상 신호(60b)의 움직임 보상을 하고, 움직임 보상된 형상 신호와, 입력된 형상 신호(60b)를 비교하여, 일치하고 있는지 여부를 조사한다. 그리고, 일치하고 있으면 움직임 검출기(61b)에 대하여 화소값 신호의 움직임 벡터를 출력하고, 움직임 검출기(61b)는 형상 신호에 대한 움직임 검출을 실행하지 않고서, 입력된 화소값 신호의 움직임 벡터를 형상 신호의 움직임 벡터로 한다. 반대로, 움직임 검출 판정기(90)에 의한 비교의 결과가 일치하지 않으면, 움직임 검출 판정기(90)는 움직임 검출기(61b)에 움직임 검출을 하도록 지시를 출력하여, 움직임 검출기(61b)에 의한 움직임 벡터의 계산이 행하여진다. 형상 신호에 대해서도, 이 이후의 처리는 실시예 13과 마찬가지로 되어, 부호화 신호(66b, 68b)가 얻어진다.
이와 같이, 본 실시예 16에 의한 화상 부호화 장치에서는, 실시예 13에 의한 화상 부호화 장치에 움직임 검출 판정기(90)를 추가하는 구성으로 한 것에 의해, 입력 화소값 신호의 움직임 벡터를 이용하여 입력 형상 신호의 움직임 보상을 행하는지의 가부를 판정하여, 가능하다고 판정하는 경우에는 입력 형상 신호에 대한 움직임 검출을 하지 않음으로써, 계산을 생략하여 처리 부담의 저감을 도모하는 것이 가능하다. 또한, 불가능이라고 판정하는 경우에는, 실시예 13과 마찬가지로, 형상 신호에 대한 움직임 검출을 하기 때문에, 부호화 효율이나 부호화 신호의 화질에 영향을 미치지 않는다.
또, 본 실시예 16에서는, 움직임 보상된 형상 신호와, 입력된 형상 신호가 일치하고 있는 경우에 형상 신호에 관한 움직임 검출을 하지 않는 것으로 하였지만, 움직임 보상 오차의 증가에 의한 약간의 부호화 효율의 열화를 허용할 수 있는 것이면, 판정에 있어서 움직임 보상에 의한 오차가 소정치 이하인 경우에도 움직임 검출을 하지 않는 것으로 하는 설정도 가능하여, 처리 부담의 저감을 한층 더 도모하는 것이 가능해진다.
(실시예 17)
본 발명의 실시예 17에 의한 화상 부호화 장치는, 실시예 13 내지 실시예 16과 마찬가지로, 형상 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 이 입력 신호를 부호화하는 것이다.
도 21은, 본 발명의 실시예 17에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (93)은 전환 판정기이며, 화소값 신호, 및 형상 신호의 움직임 벡터를 입력하고, 실시예 16과 마찬가지로, 화소값 신호의 움직임 벡터를 이용한 형상 신호의 움직임 보상의 가부의 판정을 하여, 그 판정에 따라 전환기(94)에 대한 지시를 한다. 전환기(94)는, 전환 판정기(93)의 지시에 대응하여, 차분값 계산기(70)에 관한 출력을 화소값 신호의 움직임 벡터로 할지, 형상 신호의 움직임 벡터로 할지를 전환한다. 움직임 벡터용 메모리(95)는 전환기(94)로부터 출력된 움직임 벡터를 지연시켜 차분 검출기(70)에 입력하기 위해서 일시 기억을 행한다. 다른 참조부호는, 도 19와 마찬가지이며, 그 설명은 실시예 15와 마찬가지이다.
본 실시예 17의 장치의 동작에 대해서도, 전환 판정기(93)의 판정에 의해, 차분값 계산기(70)에 의해 취득되는 차분 움직임 벡터가 상이하다는 점 이외에는 실시예 15와 마찬가지이기 때문에, 그 점에 대해서만 동작을 설명한다.
전환 판정기(93)는 직전에 부호화한 입력 신호에 대하여, 그 화소값 신호의 움직임 벡터의 부호화 신호와, 형상 신호의 움직임 벡터를 입력하여 비교함으로써, 직전에 부호화한 입력 신호에 있어서, 그 형상 신호의 움직임 벡터가 부호화되어 있는지 여부를 조사한다. 즉, 직전에 부호화한 신호를 처리함으로써, 부호화기(67b)로부터 얻어진 차분 움직임 벡터의 부호화 신호는, 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터와의 차분 벡터였는지, 형상 신호의 움직임 벡터끼리의 차분 벡터였는지를 조사한다. 그리고, 형상 신호의 움직임 벡터끼리의 차분 벡터가 부호화되어 있었던 경우에는, 전환기(94)에 지시를 보냄으로써 지연용 메모리(95)에 형상 신호로부터 검출한 움직임 벡터를 입력시킨다. 따라서, 이 경우, 차분값 계산기(70)는 지연용 메모리(95)로부터 취득하는 상기 직전에 부호화한 형상 신호의 움직임 벡터와, 입력 형상 신호로부터 검출한 움직임 벡터와의 차분 벡터를 취득하고, 부호화기(67b)는 이 차분 벡터를 부호화한다. 한편, 직전의 입력 신호에 있어서, 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터와의 차분 벡터가 부호화되어 있던 경우는, 전환기(94)에 지시를 보냄으로써 실시예 15와 마찬가지로 양 신호의 움직임 벡터의 차분 벡터가 부호화되게 된다.
이와 같이, 본 실시예 17의 화상 부호화 장치에서는, 실시예 15에 의한 화상 부호화 장치의 구성에 근거하여, 전환 판정기(93)와, 전환기(94)와, 지연용 메모리(95)를 추가하는 구성으로 함으로써, 직전에 형상 신호의 움직임 벡터가 부호화되어 있는 경우에는, 그 움직임 벡터와 검출한 움직임 벡터와의 차분 벡터를 취득하여 부호화하기 때문에, 상관성이 높은 형상 신호끼리의 움직임 벡터의 차분을 이용함으로써 부호화 효율을 향상시키는 것이 가능해진다.
또, 본 실시예 17에 대해서는, 형상 신호의 움직임 벡터에 대하여 이러한 판정과 차분 벡터의 부호화를 하는 것으로 하고 있지만, 화소값 신호의 움직임 벡터에 대하여 이러한 판정과 차분 벡터의 부호화를 하는 것으로 하는 것도 가능하여, 마찬가지로 부호화 효율의 향상을 도모하는 것이 가능하다.
(실시예 18)
본 발명의 실시예 18에 의한 화상 부호화 장치는, 형상 정보와 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하여, 각 신호에 적합한 모드에서 부호화하는 것이다.
도 22는, 본 발명의 실시예 18에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (101)은, 입력되는 화상 신호이며, 형상 정보와 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성된다. 참조부호 (102)는 블럭화기이며, 입력 화상 신호(101)를 블럭화하여, 블럭화된 형상 신호(103), 블럭화된 투과도 신호(105) 및 블럭화된 화소값 신호(107)를 출력한다. 참조부호 (110)은 형상 부호화 모드 판정기, 참조부호 (114)는 투과도 부호화 모드 판정기, 참조부호 (116)은 화소값 부호화 모드 판정기이며, 각각 형상 신호(103),투과도 신호(105) 및 화소값 신호(107)에 대하여 적절한 부호화 모드를 판정하여, 형상 부호화 모드(111), 투과도 부호화 모드(115) 및 화소값 부호화 모드(119)를 출력한다. 참조부호 (112)는 형상 부호화기, 참조부호 (116)은 투과도 부호화기, 참조부호 (120)은 화소값 부호화기이며, 각각 모드 판정기의 판정에 따라서 각각 신호를 부호화하여, 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(121)를 출력한다. 참조부호 (122)는 모드 부호화기이며, 부호화 모드(111, 115, 119)를 종합해 부호화하여 모드 부호화 신호(123)를 출력한다.
이상과 같이 구성된, 본 실시예 18에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 우선, 형상 정보, 투과도 정보 및 화소값 정보로 구성되는 입력 화상 신호(101)가 본 실시예 18의 화상 부호화 장치에 입력된다. 여기서, 투과도 정보와 형상 정보에 대하여, 종래 기술의 설명에 이용한 도 53을 참조하여 설명한다. 투과도 정보란, 도 53의 (a)에 도시하는 화상을 다른 화상과 합성할 때에, 각 화소를 어떠한 비율로 합성하는가를 나타내는 것으로서, 기본적으로는 도 53의 (d)에 도시되는 바와 같은 다치 정보이다. 형상 정보는, 도 53의 (c)에서 도시되는 2치의 정보로서, 투과도 정보를 0 또는 비(非) 0으로서 2치화한 것이며, 물체가 「있음/없음」을 나타내는 정보로 된다. 또, 투과도 정보가 완전 투과와 완전 불투과의 2가지밖에 존재하지 않는 경우에는, 상술한 것으로부터 형상 정보만으로 표현할 수 있으며, 투과도 정보는 불필요하다. 따라서, 이 경우에는, 형상 정보와 화소값 정보만을 부호화 또는 복호화하면 되게 된다.
블럭화기(102)는, 입력 화상 신호(101)에 대하여, 형상 정보·투과도 정보와 화소값 정보와의 화소값의 대응 관계에 근거하여, 복수의 화소를 통합해서 블럭화하고, 블럭화된 형상 신호(103), 블럭화된 투과도 신호(105) 및 블럭화된 화소값 신호(107)를 출력한다. 형상 신호(103)는 형상 부호화 모드 판정기(110)와 형상 부호화기(112)에 출력되고, 투과도 신호(105)는 투과도 부호화 모드 판정기(114)와 투과도 부호화기(116)에 출력되며, 그리고 화소값 신호(107)는 화소값 부호화 모드 판정기(118)와 화소값 부호화기(120)에 출력된다.
형상 부호화 모드 판정기(110), 투과도 부호화 모드 판정기(114) 및 화소값 부호화 모드 판정기(118)는, 각각 입력된 형상 신호(103), 투과도 신호(105) 및 화소값 신호(107)에 대하여, 적절한 부호화 모드를 판정해서 형상 부호화 모드(111), 투과도 부호화 모드(115) 및 화소값 부호화 모드(119)를 출력한다. 각 부호화 모드는 각 부호화기에 출력됨과 동시에, 모드 부호화기(122)에도 출력된다.
형상 부호화기(112), 투과도 부호화기(116) 및 화소값 부호화기(120)는, 각각 입력된 부호화 모드에 대응하여, 각각 입력된 신호를 출력해서 형상 부호화 신호(113), 투과도 부호화 신호(117) 및 화소값 부호화 신호(121)를 출력한다. 한편, 모드 부호화기(122)는, 입력된 각 부호화 모드를 종합해 부호화하여 모드 부호화 신호(123)를 출력한다. 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(121) 및 모드 부호화 신호(123)가, 본 실시예 18에 의한 화상 부호화 장치의 부호화 출력으로 된다.
이와 같이, 본 실시예 18에 의한 화상 부호화 장치에서는, 입력 화상 신호를 블럭화하고, 또한 형상 신호, 투과도 신호, 및 화소값 신호로 분리하여 출력하는 블럭화기(101)와, 각 신호에 적합한 부호화 모드를 판정하는 부호화 모드 판정기(110, 114, 118)와, 각 신호를 부호화 모드에 대응하여 부호화하는 부호화기(112, 116, 120)와, 부호화 모드를 종합하여 부호화하는 모드 부호화기(122)를 구비한 것에 의해, 분리한 각 신호에 적합한 모드에서의 부호화를 행하고, 그 선택한 모드에 관한 정보는 종합하여 부호화하는 것이 가능해진다. 형상 정보, 투과도 정보 및 화소값 정보에 대해서는, 서로 상관이 있는 것이 많고, 따라서 동일한 부호화 모드가 선택되기 쉽게 된다. 그래서, 동일한 모드로 되는 부호가 짧은 부호 길이로 되는 가변 길이 부호화를 함으로써, 모드 부호화 신호의 비트수를 삭감하는 것이 가능하게 되는 효과를 얻을 수 있다.
(실시예 19)
본 발명의 실시예 19에 의한 화상 부호화 장치는, 실시예 18과 마찬가지로, 형상 정보와 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하여, 각 신호에 적합한 모드에서 부호화하는 것이다.
도 23은, 본 발명의 실시예 19에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 형상 부호화 모드 판정기(110)는, 형상 신호(103)에 적응한 부호화 모드를 판정하여, 그 판정 결과를 부호화 모드로서 형상 부호화기(112) 및 모드 부호화기(122)에 출력함과 동시에, 투과도 부호화 모드 판정기(130) 및 화소값 부호화 모드 판정기(132)에도 출력한다. 그리고, 투과도 부호화 모드 판정기(130)는 입력된 형상 부호화 모드(111)를 참조하여 판정을 하고, 그 판정 결과를 부호화 모드로서 투과도 부호화기(116) 및 모드 부호화기(122)에 출력함과 동시에, 화소값 부호화 모드 판정기(132)에도 출력한다. 화소값 부호화 모드 판정기(132)는 입력된 형상 부호화 모드(111) 및 투과도 부호화 모드(115)를 참조하여 판정을 행한다.
본 실시예 19의 화상 부호화 장치의 동작에 대해서는, 상기 각 모드 판정기의 판정을 제외하고는 실시예 18과 마찬가지로 되며, 마찬가지로 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(121) 및 모드 부호화 신호(123)가 출력된다.
이와 같이, 본 실시예 19에 의한 화상 부호화 장치에서는, 형상 부호화 모드를 참조하여 투과도 신호의 부호화 모드를 판정하는 투과도 부호화 모드 판정기(130)와, 형상 부호화 모드 및 투과도 부호화 모드를 참조하여 화소값 신호의 부호화 모드를 판정하는 화소값 부호화 모드 판정기(132)를 구비한 것에 의해, 선택되는 모드가 동일한 것으로 되기 쉽다. 따라서, 모드가 일치하는 경우에 짧은 부호를 할당하는 모드 부호화기(122)에서는, 실시예 18보다 가변 길이 부호화의 효율이 더욱 향상되어, 모드 부호화 신호의 비트수를 삭감하는 것이 가능하다고 하는 효과를 얻을 수 있다.
(실시예 20)
본 발명의 실시예 20에 의한 화상 부호화 장치는, 실시예 19와 마찬가지로, 모드 부호화 신호의 부호화 효율을 향상시키는 것이다.
도 24는, 본 발명의 실시예 20에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 화소값 부호화 모드 판정기(118)는, 화소값 신호(107)에 적응한 부호화 모드를 판정하여, 그 판정 결과를 부호화 모드로서 화소값 부호화기(120) 및 모드 부호화기(122)에 출력함과 동시에, 투과도 부호화 모드 판정기(136) 및 형상 부호화 모드 판정기(138)에도 출력한다. 그리고, 투과도 부호화 모드 판정기(136)는, 입력된 화소값 부호화 모드(119)를 참조하여 판정을 하고, 그 판정 결과를 부호화 모드로서 투과도 부호화기(116) 및 모드 부호화기(122)에 출력함과 동시에, 형상 부호화 모드 판정기(138)에도 출력한다. 형상 부호화 모드 판정기(138)는, 입력된 화소값 부호화 모드(119) 및 투과도 부호화 모드(115)를 참조하여 판정을 한다.
본 실시예 20의 화상 부호화 장치의 동작에 대해서는, 상기 각 모드 판정기의 판정을 제외하고는 실시예 18과 마찬가지이며, 마찬가지로 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(121) 및 모드 부호화 신호(123)가 출력된다.
이와 같이, 본 실시예 20에 의한 화상 부호화 장치에서는, 화소값 부호화 모드를 참조하여 투과도 신호의 부호화 모드를 판정하는 투과도 부호화 모드 판정기(136)와, 화소 부호화 모드 및 투과도 부호화 모드의 양쪽을 참조하여 형상 신호의 부호화 모드를 판정하는 형상 부호화 모드 판정기(138)를 구비한 것에 의해, 선택되는 모드가 동일한 것으로 되기 쉽다. 따라서, 모드가 일치하는 경우에 짧은 부호를 할당하는 모드 부호화기(122)에서는, 실시예 18보다 가변 길이 부호화의 효율이 더욱 향상되어 모드 부호화 신호의 비트수를 삭감할 수 있다고 하는 효과를 얻을 수 있다.
(실시예 21)
본 발명의 실시예 21에 의한 화상 복호화 장치는, 실시예 18에 의한 화상 부호화 장치에 의해 효율적으로 부호화된 부호화 신호에 대하여, 적절한 복호화를 하는 것이다.
도 25는 본 발명의 실시예 21에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 입력 신호(113, 117, 119, 123)는, 실시예 18에 의한 화상 부호화 장치에 있어서 출력되는 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(119) 및 모드 부호화 신호(123)이다. 참조부호 (150)은 모드 복호화기이며, 모드 부호화 신호(123)를 복호화하여 형상 부호화 모드(151), 투과도 부호화 모드(153) 및 화소값 부호화 모드(155)를 출력한다. 참조부호 (156)은 형상 복호화기, 참조부호 (158)은 투과도 복호화기, 참조부호 (160)은 화소값 복호화기이며, 각각 모드 복호화기(150)로부터 입력되는 부호화 모드에 따라, 형상 부호화 신호(113), 투과도 부호화 신호(117) 및 화소값 부호화 신호(119)를 복호화하여 형상 복호화 신호(157), 투과도 복호화 신호(159) 및 화소값 복호화 신호(161)를 출력한다. 참조부호 (162)는 역(逆)블럭화기이며, 형상 복호화 신호(157), 투과도 복호화 신호(159) 및 화소값 복호화 신호(161)를 입력하여, 이들을 통합해서 복호 화상 신호(163)를 출력한다.
이상과 같이 구성된, 본 실시예 21에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 본 실시예 21에 의한 화상 복호화 장치에, 형상 부호화 신호(113), 투과도 부호화 신호(117), 화소값 부호화 신호(119) 및 모드 부호화 신호(123)가 입력되어, 각각 형상 복호화기(156), 투과도 복호화기(158), 화소값 복호화기(160) 및 모드 복호화기(150)에 입력된다.
모드 복호화기(150)는, 모드 부호화 신호(123)를 복호화하여, 형상 부호화 모드(151), 투과도 부호화 모드(153) 및 화소값 부호화 모드(155)를 각각 형상 복호화기(156), 투과도 복호화기(158) 및 화소값 복호화기(160)에 출력한다. 형상 복호화기(156), 투과도 복호화기(158) 및 화소값 복호화기(160)는, 각각 입력된 부호화 모드에 대응하여, 입력된 부호화 신호를 복호화해 형상 복호화 신호(157), 투과도 복호화 신호(159) 및 화소값 복호화 신호(161)를 역블럭화기(162)에 출력한다. 역블럭화기(162)는 입력된 복호화 신호를 통합하여 복호 화상 신호(163)를 출력한다.
이와 같이, 본 실시예 21에 의한 화상 복호화 장치에서는, 모드 복호화기(150)와, 형상 복호화기(156), 투과도 복호화기(158), 화소값 복호화기(160) 및 역블럭화기(162)를 구비한 것에 의해, 실시예 18에 의한 화상 부호화 장치에서 얻어진 부호화 신호에 대하여 적절히 복호화해서, 이를 다시 통합 처리하여, 복호 화상 신호(163)를 얻는 것이 가능해진다.
또, 본 실시예 21의 화상 복호화 장치에서는, 실시예 18에 의한 화상 부호화 장치에서 얻어진 부호화 신호를 복호화하는 것으로 하였지만, 실시예 19 및 실시예 20에 의한 화상 부호화 장치에서 얻어진 부호화 신호에 대해서도, 마찬가지로 적절한 복호화를 행하는 것이 가능하다.
(실시예 22)
본 발명의 실시예 22에 의한 화상 부호화 장치는, 화면내/화면간 부호화를 입력 신호에 적응하여 전환하여 부호화하는 것이다.
도 26은 본 발명의 실시예 22에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (178)은 화소값 부호화의 화면내/화면간 부호화 판정기이며, 화소값 신호의 부호화의 모드에 대하여, 화면내, 또는 화면간의 판정을 하여 화소값 신호의 부호화 모드(119)를 출력한다. 참조부호 (138)은 형상 부호화 모드 판정기이며, 도 24의 참조부호 (138)로 나타내는 실시예 20에 있어서의 형상 부호화 모드 판정기에 상당하는 것이다. 참조부호 (170, 176)은 스위치로서, 판정기(178)의 출력에 따라 전환되어 형상 신호의 부호화 모드를 결정한다. 참조부호 (172)는 형상 부호화의 화면내/화면간 부호화 판정기이며, 형상 신호의 부호화의 모드에 대하여, 화면내, 또는 화면간의 판정을 하고, 판정의 결과에 의해 형상 신호의 부호화 모드(173)를 출력한다. 다른 참조부호에 대해서는, 도 22와 마찬가지이며, 그 설명은 실시예 18과 마찬가지이다.
이상과 같이 구성된, 본 실시예 22에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 우선, 입력 화상 신호(101)가 본 실시예 22의 화상 부호화 장치에 입력되면, 블럭화기(102)는 실시예 18과 마찬가지로, 블럭화와 신호의 분리를 실행하여 화소값 신호와 형상 신호를 출력한다.
분리된 화소값 신호(107)가 화소값 부호화의 화면내/화면간 부호화 판정기(178)에 입력되면, 판정기(178)는 화소값 신호(107)에 대하여, 화면내 부호화, 또는 화면간 부호화 중 어느 것으로 부호화할 것인가를 판정하고, 그 판정의 결과를 「화면내」, 또는 「화면간」 중 어느 하나를 나타내는 화소값 부호화 모드(119)로서, 화소값 부호화기(120)와, 모드 부호화기(122) 및 형상 부호화 모드 판정기(138)에 출력한다.
형상 부호화 모드 판정기(138)에서는, 스위치(170, 176)가 화소값 부호화 모드(119)에 따라 전환된다. 화소값 부호화 모드가 「화면내」를 나타내는 경우에는 판정기(178)에 입력되지 않도록, 「화면간」을 나타내는 경우에는 판정기(178)에 입력되도록 전환된다. 따라서, 화소값 부호화 모드(119)가 화면내 부호화를 나타내는 경우, 판정기(138)로부터는 화면내 부호화를 나타내는 형상 판정 모드(111)가 출력되게 된다.
한편, 화소값 부호화 모드(119)가 화면간 부호화를 나타내는 경우에는, 형상 신호(105)에 대응하여, 해당 형상 신호를 화면내 부호화, 또는 화면간 부호화 중 어느 것으로 부호화할 것인가를 화면내/화면간 부호화 판정기(172)가 판정하고, 그 판정 결과가 형상 부호화 모드(111)로서 출력된다.
어느쪽의 경우에도, 형상 부호화 모드(111)는 형상 부호화기(112)와 모드 부호화기(122)에 출력된다. 그리고, 화소값 부호화기(120), 형상 부호화기(112) 및 모드 부호화기(122)의 동작은 실시예 18과 마찬가지로 되어, 각 부호화 신호가 출력된다.
이상의 동작을 함으로써, 본 실시예 22에 의한 화상 부호화 장치에서는, 화소값 신호가 화면내 부호화되는 경우, 형상 신호는 반드시 화면내 부호화되게 된다. 일반적으로, 화소값이 일치하지 않는 경우에는 형상도 일치하지 않기 때문에, 화소값 신호가 화면내 부호화되어야 할 것, 즉 시간적으로 상관이 적은 것인 경우에는, 본 실시예 22와 같이 형상 신호의 부호화의 부호화 모드수를 제한하더라도, 형상 신호 부호화의 부호화 효율은 거의 열화하지 않는다.
또한, 끼워 넣기 화상(합성 화상) 등과 같이 합성시의 형상 신호가 일정하더라도 합성되는 화소값이 변화하는 경우가 있어서, 이러한 경우 등에 있어서는 화소값 신호에 의해 화면간 부호화가 선택되더라도, 형상 신호에 대하여 화면간 부호화가 적절하다고는 한정되지 않는다. 본 실시예 22의 장치에서는, 화소값 신호에 대하여 화면간 부호화가 선택된 경우, 형상 신호에 대해서는 화면내/화면간 중 어느 것으로 할 것인가를 판정하게 되기 때문에, 형상 신호의 부호화는 화면내 부호화의 부호화 모드도 선택하는 것이 가능하며, 형상 신호의 부호화에 있어서 부적절한 화면간 부호화를 해버림으로 인하여 부호화 효율이 크게 열화하는 것을 방지할 수 있다.
또한, 형상 신호, 또는 화소값 신호중 적어도 한쪽이 화면간 부호화되어 있는 경우에는, 화면간 부호화에 있어서 실행하는 움직임 보상 등을 위해 필요한 많은 부가 정보가 필요하게 된다. 본 실시예 22에 의한 화상 부호화 장치에서는, 형상 신호만이 화면간 부호화되는 일이 없기 때문에, 화소값 신호에 대하여 화면내 부호화가 선택된 경우에는 비트수를 절약할 수 있게 된다. 일반적으로, 상기한 부가 정보에 대해서는, 화소값 신호를 화면내 부호화한 경우의 비트수보다는 적지만, 형상 신호의 화면내 부호화에 필요한 비트수와 비교하면 무시할 수 없는 정도의 비트수이기 때문에, 그 효과도 크다.
이와 같이, 본 실시예 22의 화상 부호화 장치에 의하면, 화소값 부호화의 화면내/화면간 부호화 판정기(178)와, 형상 부호화의 화면내/화면간 부호화 판정기(172)를 내포하는 형상 부호화 모드 판정기(138)를 구비한 것에 의해, 화소값 신호의 부호화 모드가 화면내 부호화인 경우에는 형상 신호의 부호화 모드를 화면내 부호화로 하고, 화소값 신호의 부호화 모드가 화면간 부호화인 경우에는, 형상 신호의 부호화 모드에 대한 판정을 하여 선택하기 때문에, 화소값 신호의 부호화 모드(119)와 형상 신호의 부호화 모드(111)와의 상관을 높여 모드 부호화 신호의 비트수의 삭감을 도모하고, 또한 화면간 부호화를 행한다고 하는 선택을 억제함으로써 움직임 보상을 위한 부가 정보의 비트수를 억제하는 것도 가능해진다.
(실시예 23)
본 발명의 실시예 23에 의한 화상 부호화 장치는, 부호화에 있어서의 움직임 벡터의 수를 입력 신호에 적응하여 전환하여 부호화하는 것이다.
도 27은, 본 발명의 실시예 23에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (188)은 화소값 부호화의 움직임 벡터수 판정기이며, 화소값 신호의 부호화의 모드에 있어서, 움직임 벡터의 수를 몇으로 할지 여부를 판정하여, 화소값 신호의 부호화 모드(119)를 출력한다. 참조부호 (138)은 형상 부호화 모드 판정기이며, 도 24의 참조부호 (138)로 나타내는 실시예 20에 있어서의 형상 부호화 모드 판정기에 상당하는 것이다. 참조부호 (180, 186)은 스위치로서, 판정기(188)의 출력에 따라 전환되어 형상 신호의 부호화 모드를 결정한다. 참조부호 (182)는 형상 부호화의 움직임 벡터수 판정기이며, 형상 신호의 부호화의 모드에 대하여 움직임 벡터수를 몇으로 할 것인가를 판정하여, 그 판정의 결과에 의해 형상 신호의 부호화 모드(183)를 출력한다. 다른 참조부호에 대해서는, 도 22와 마찬가지이며, 그 설명은 실시예 18과 마찬가지이다.
이상과 같이 구성된, 본 실시예 23에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 우선, 입력 화상 신호(101)가 본 실시예 23의 화상 부호화 장치에 입력되면, 블럭화기(102)는 실시예 18과 마찬가지로, 블럭화와 신호의 분리를 실행하여 화소값 신호와 형상 신호를 출력한다.
분리된 화소값 신호(107)가 화소값 부호화의 움직임 벡터수 판정기(188)에 입력되면, 판정기(188)는 화소값 신호(107)에 대하여 움직임 벡터수를 몇으로 하여 부호화할 것인가를 판정하고, 그 판정의 결과를 화소값 부호화 모드(119)로서, 화소값 부호화기(120)와, 모드 부호화기(122) 및 형상 부호화 모드 판정기(138)에 출력한다.
도 28은 움직임 벡터의 수에 대하여 설명하기 위한 도면이다. 물체의 윤곽 근방에서는 움직임이 복잡하며, 블럭마다 1개의 움직임 벡터(MV)를 이용한 것으로는 움직임 보상 오차를 충분히 작게 하는 것이 곤란하다. 이러한 경우에는 블럭을 분할하고, 각 분할 블럭에 대하여 움직임 벡터를 할당하는 것이 바람직하며, 이와 같이 화상의 성질에 따라 적응적으로 움직임 벡터의 수를 변경함으로써 부호화 효율을 향상시키는 것이 알려져 있다. 따라서, 본 실시예 23의 화상 부호화 장치에서는, 도시하는 바와 같이 블럭마다 1개의 움직임 벡터(MV1)를 이용하여 움직임 보상할 것인지, 해당 블럭을 4분할하여 각 분할 블럭에 1개씩, 합계 4개의 움직임 벡터(MV1, MV2, MV3, MV4)를 이용하여 움직임 보상할 것인지를, 적응적으로 전환하는 것으로 한다. 따라서, 판정기(188)에서는, 움직임 벡터의 수를 1개로 할 것인지 4개로 할 것인지를 판정하여, 화소값 신호의 부호화 모드로서 「1」 또는, 「4」를 상기 출력한다.
형상 부호화 모드 판정기(138)에서는, 스위치(180, 186)가 화소값 부호화 모드(119)에 따라 전환된다. 화소값 부호화 모드가 「1」을 나타내는 경우에는 판정기(182)에 입력되지 않도록, 「4」를 나타내는 경우에는 판정기(182)에 입력되도록 전환된다. 따라서, 화소값 부호화 모드(119)가 「1」일 경우, 판정기(138)로부터는 움직임 벡터의 수로서 최소 개수인 「1」의 형상 판정 모드(111)가 출력되게 된다.
한편, 화소값 부호화 모드(119)가 「4」를 나타내는 경우에는, 형상 신호(105)에 대응하여, 움직임 벡터의 수를 1개로 할 것인지 4개로 할 것인지를 움직임 벡터수 판정기(182)가 판정하여, 그 판정 결과가 형상 부호화 모드(111)로서 출력된다.
어느쪽의 경우에 있어서도, 형상 부호화 모드(111)는 형상 부호화기(112)와 모드 부호화기(122)에 출력된다. 그리고, 화소값 부호화기(120), 형상 부호화기(112) 및 모드 부호화기(122)의 동작은 실시예 18과 마찬가지이며, 각 부호화 신호가 출력된다.
이상의 동작을 함으로써, 본 실시예 23에 의한 화상 부호화 장치에서는, 화소값 신호가 최소 개수의 움직임 벡터를 이용하여 부호화되는 경우, 형상 신호는 반드시 최소 개수의 움직임 벡터를 이용하여 부호화되게 된다. 움직임 벡터수를 많게 하면, 움직임 벡터를 부호화하는데 필요한 부가 정보가 증대하기 때문에 바람직하지 않게 되므로, 이러한 경우에는 형상 신호 부호화를 위한 움직임 벡터수를 억제함으로써 부담의 증대를 방지하는 것이다.
이와 같이, 본 실시예 23의 화상 부호화 장치에 의하면, 화소값 부호화의 움직임 벡터수 판정기(188)와, 형상 부호화의 움직임 벡터수 판정기(182)를 포함하는 형상 부호화 모드 판정기(138)를 구비한 것에 의해, 화소값 신호의 부호화 모드가 최소 개수의 움직임 벡터를 이용하는 경우에는, 형상 신호의 부호화 모드를 최소 개수로 하고, 화소값 신호의 부호화 모드가 다수의 벡터를 이용하는 경우에는, 형상 신호의 부호화 모드에 대한 판정을 하여 선택하기 때문에, 화소값 신호의 부호화 모드(119)와 형상 신호의 부호화 모드(111)와의 상관을 높여 모드 부호화 신호의 비트수의 삭감을 도모하는 것이 가능해지며, 또한 움직임 벡터의 수를 많게 하는 선택을 억제함으로써, 부가 정보를 증대시키기 위한 비트수 증가도 억제하는 것이 가능하다.
(실시예 24)
본 발명의 실시예 24에 의한 화상 부호화 장치는, 양자화 단계의 변경/비변경을 입력 신호에 적응하여 전환하여 부호화하는 것이다.
도 29는, 본 발명의 실시예 24에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (198)은 화소값 부호화의 양자화 단계 변경/비변경 판정기이며, 화소값 신호의 부호화의 모드에 대하여 양자화 단계를 변경할 것인지, 또는 변경하지 않을 것인지의 판정을 하여, 화소값 신호의 부호화 모드(119)를 출력한다. 참조부호 (138)은 형상 부호화 모드 판정기이며, 도 24의 참조부호 (138)로 나타내는 실시예 20에 있어서의 형상 부호화 모드 판정기에 상당하는 것이다. 참조부호 (190, 196)은 스위치로서, 판정기(198)의 출력에 따라 전환되어 형상 신호의 부호화 모드를 결정한다. 참조부호 (192)는 형상 부호화의 양자화 단계 변경/비변경 판정기이며, 형상 신호의 부호화의 모드에 대하여, 양자화 단계를 변경할 것인지, 또는 변경하지 않을 것인지 여부의 판정을 하여, 판정의 결과에 의해 형상 신호의 부호화 모드(193)를 출력한다. 다른 참조부호에 대해서는, 도 22와 마찬가지이며, 그 설명은 실시예 18과 마찬가지이다.
이상과 같이 구성된, 본 실시예 24에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 우선, 입력 화상 신호(101)가 본 실시예 24의 화상 부호화 장치에 입력되면, 블럭화기(102)는 실시예 18과 마찬가지로, 블럭화와 신호의 분리를 실행하여 화소값 신호와 형상 신호를 출력한다.
분리된 화소값 신호(107)가 화소값 부호화의 양자화 단계 변경/비변경 판정기(198)에 입력되면, 판정기(198)는 화소값 신호(107)에 대하여 양자화 단계를 변경할 것인지, 또는 변경하지 않을 것인지 여부를 판정하여, 그 판정의 결과를 「변경」, 또는 「비변경」 중 어느 하나를 나타내는 화소값 부호화 모드(119)로서 화소값 부호화기(120)와, 모드 부호화기(122) 및 형상 부호화 모드 판정기(138)에 출력한다.
형상 부호화 모드 판정기(138)에서는, 스위치(190, 196)가 화소값 부호화 모드(119)에 따라 전환된다. 화소값 부호화 모드가 「비변경」을 나타내는 경우에는 판정기(192)에 입력되지 않도록, 「변경」을 나타내는 경우에는 판정기(192)에 입력되도록 전환된다. 따라서, 화소값 부호화 모드(119)가 양자화 단계를 변경하지 않는 것을 나타내는 경우, 판정기(138)로부터는 「비변경」을 나타내는 형상 판정 모드(111)가 출력되게 된다.
한편, 화소값 부호화 모드(119)가 양자화 단계를 변경하는 것을 나타내는 경우에는, 형상 신호(105)에 대응하여, 양자화 단계를 변경할 것인지, 또는 변경하지 않을 것인지 여부를 판정기(192)가 판정하고, 그 판정 결과가 형상 부호화 모드(111)로서 출력된다.
어느쪽의 경우에 있어서도, 형상 부호화 모드(111)는 형상 부호화기(112)와 모드 부호화기(122)에 출력된다. 그리고, 화소값 부호화기(120), 형상 부호화기(112) 및 모드 부호화기(122)의 동작은 실시예 18과 마찬가지로 되어, 각 부호화 신호가 출력된다.
양자화 단계의 값은 압축의 정도, 즉 부호화 신호의 전송 비율에 직결되는 것이기 때문에, 일반적으로 화상을 부호화한 부호화 신호의 전송 비율, 또는 기록 비율이 거의 일정하게 되도록, 전송 비율이 소정의 값보다 크면 양자화 단계를 개략적으로 하고, 반대로 전송 비율이 작으면 양자화 단계를 세밀하게 하는 제어가 행하여진다. 또한, 양자화 단계의 값은, 부호화 신호의 화질에도 직접적으로 영향을 미치는 것이기 때문에, 화소값이 급격하게 변화하는 화상인 경우에는, 시각적으로 진폭 방향의 화질 열화를 검지하기 어려우므로, 양자화 단계를 크게 하여, 압축율을 높이는 것이 가능해진다. 이러한 화소값의 변화에 따라 양자화 단계를 변경하는 것도 일반적으로 실행된다.
이러한 양자화 단계를 변경하는 제어를 하는 경우에는, 「양자화 단계가 변화하였다」는 것을 나타내는 부가 정보가 블럭마다 부가되어, 화상의 데이터와 동시에 부호화된다. 그러나, 양자화 단계의 변경에 대해서는 화소값 신호와 형상 신호에 대하여 동시에 변화시켜야 하는 것이 많으며, 화소값 신호의 양자화 단계가 변경되지 않은 경우에는, 형상 신호의 양자화 단계를 변화시키지 않도록 제한을 가하더라도, 이러한 제한에 의한 화질 열화는 얼마되지 않는 한편, 양자화 단계의 변화를 나타내는 부가 정보를 크게 삭감하는 것이 가능하다.
이와 같이, 본 실시예 24의 화상 부호화 장치에 따르면, 화소값 부호화의 양자화 단계 변경/비변경 판정기(198)와, 형상 부호화의 양자화 단계 변경/비변경 판정기(192)를 포함하는 형상 부호화 모드 판정기(138)를 구비한 것에 의해, 화소값 신호의 부호화 모드가 「양자화 단계 비변경」인 경우에는 형상 신호의 부호화 모드를 「양자화 단계 비변경」으로 하고, 화소값 신호의 부호화 모드가 「양자화 단계 변경」인 경우에는, 형상 신호의 부호화 모드에 대한 판정을 하여 선택하기 때문에, 화소값 신호의 부호화 모드(119)와 형상 신호의 부호화 모드(111)와의 상관을 높여 모드 부호화 신호의 비트수의 삭감을 도모하는 것이 가능해짐과 동시에, 양자화 단계가 변경된다고 하는 선택을 억제함으로써, 양자화 단계 변경에 의한 부가 정보의 증대를 억제하여, 비트수의 삭감을 도모하는 것도 가능해진다.
또, 실시예 22 내지 실시예 24의 화상 부호화 장치에 대해서는, 도 24에 나타내는 실시예 20에 준한 구성으로 한 것이지만, 도 23에 나타내는 실시예 19에 준한 구성으로 하는 것도 가능하며, 역시 부호화 모드의 상관을 높이고, 부가 정보의 증대를 억제함에 따른 비트수 삭감을 도모하는 것이 가능하다. 또한, 도 20에 나타내는 실시예 18에 준한 구성으로 하는 것도 가능하며, 각 신호에 적합한 부호화를 실현하면서, 비트수 삭감을 도모하는 것이 가능하다.
또한, 실시예 22 내지 실시예 24의 화상 부호화 장치에서 얻어진 부호화 신호는, 실시예 21에 의한 화상 복호화 장치에 있어서 적절한 복호화가 가능하다.
또한, 실시예 18 내지 실시예 21에서는, 입력 화상 신호가 화소값 정보 이외에 투과도 정보와 형상 정보로 구성되는 것으로 하여, 화소값 신호, 투과도 신호, 및 형상 신호로의 분리를 행하는 것으로 하고 있으나, 실시예 22 내지 실시예 24에서는 입력 화상 신호를 화소값 신호와 형상 신호로 분리하는 것으로 하고 있다. 이에 대해서는, 실시예 22 내지 실시예 24에 있어서도, 투과도 정보와 형상 정보가 일치하는 경우에는 형상 정보만을 이용하는 것이 가능한 한편, 일치하지 않는 경우에는 블럭화기의 설정에 의해 투과도 정보를 형상 신호로 하는 것, 혹은 다치 신호인 투과도 정보를 화소값 정보와 함께 취급하는 것으로 함으로써, 형상 신호와 화소값 신호를 얻는 것이 가능하다.
(실시예 25)
본 발명의 실시예 25에 의한 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 변화 화소의 예측과 검출을 하는 것이다.
도 30은 본 발명의 실시예 25에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (201)은 입력 신호이며, 2치의 화상 신호로서 화상 부호화 장치에 입력된다. 참조부호 (204c)는 제 1 변화 화소 검출기이며, 입력 신호(201)에 대하여 그 화소값이 변화하는 화소를 검출하여, 제 1 검출 변화 화소(205c)로서 출력한다. 참조부호 (202a, 202b)는 메모리이며, 입력 신호를 일시 기억함으로써 지연시켜, 참조 신호(203a, 203b)로서 출력한다. 참조부호 (204a, 204b)는 변화 화소 검출기이며, 참조 신호(203a, 203b)에 대하여 그 화소값이 변화하는 화소를 검출하여, 제 2, 제 3 검출 변화 화소(203a, 203b)로서 출력한다. 참조부호 (206)은 변화 화소 예측기로서, 검출 변화 화소(203a, 203b)에 근거하여 제 1 변화 화소 검출기(204c)가 출력하는 변화 화소를 예측하여, 예측 변화 화소(207)를 출력한다. 참조부호 (208)은 감산기이며, 제 1 변화 화소(205c)와 예측 변화 화소(207)와의 차분을 취득함으로써, 그 차분을 예측 오차(209)로서 출력한다. 참조부호 (210)은 부호화기로서, 예측 오차(209)를 부호화하여 부호화 신호(211)를 출력한다.
이상과 같이 구성된, 실시예 25에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다.
도 31은 본 실시예 25의 화상 부호화 장치에 의한 부호화의 동작의 원리를 설명하기 위한 도면이다. 여기서는 설명을 간략하게 하기 위해, 1 화소씩 순차적으로 처리하는 것으로 하여 처리 순서를 설명한다. 도 31에 있어서, 좌측 상단 화소로부터 오른쪽 방향으로 주사가 행해져서, 우측 하단 방향으로 부호화가 이루어지는 것으로 한다. 각 화소의 화소값은 2치의 값을 가지며, 사선의 유무에 의해 참, 거짓의 값(2치)을 나타내는 것으로 한다. 또한, 여기서는, 1 번째 라인과 2 번째 라인에서는 부호화가 완료되어, 3 번째 라인(제 1 변화 화소가 존재하는 라인)을 부호화하는 것으로 한다.
변화 화소는 상기한 바와 같은 주사에 있어서, 화소값이 변화하는 최초의 화소를 의미하며, 부호화 완료 라인(주사선)상의 변화 화소를 제 2 변화 화소 및 제 3 변화 화소로 하고, 미(未)부호화 주사선상의 최초의 변화 화소를 제 1 변화 화소로 한다. 따라서, 제 2 변화 화소와 제 3 변화 화소로부터, 제 1 변화 화소를 예측하여, 해당 예측한 제 1 변화 화소와 실제 제 1 변화 화소와의 차분값(예측 오차)을 계산하면 예측 오차는 0 근방으로 집중하는 분포로 되기 때문에, 가변 길이 부호화 등을 사용하여 적은 비트수로 효율적인 부호화가 가능하게 된다.
도 30에 있어서, 우선, 입력 신호(201)가 장치에 입력된다. 화상 입력 신호(201)에 대해서는 통상의 컬러 신호(화소값 신호)나 물체의 형상 또는 물체의 합성의 비율을 나타내는 형상 신호로 하는 것이 가능하다. 입력 신호(201)는, 메모리(202a, 202b)에 입력되어 일시 기억된다. 한편 입력 신호(201)는 제 1 변화 화소 검출기(204c)에도 입력되며, 변화 화소 검출기(204c)는 2치의 화소값이 변화하는 화소를 검출한다. 이것이 도 31의 제 1 변화 화소이다. 도 30에 있어서, 제 1 변화 화소(205c)는 감산기(208)에 입력된다.
한편 메모리(202a)는, 일시 기억한 입력 신호(201)를 2 라인분 지연시켜 참조 신호(203a)로서 변화 화소 검출기(204a)에 출력하고, 변화 화소 검출기(204a)는 도 31의 제 2 변화 화소(205a)를 검출한다. 마찬가지로, 메모리(202b)는, 일시 기억한 입력 신호(201)를 1 라인분 지연시켜 참조 신호(203b)로서 변화 화소 검출기(204b)에 출력하며, 변화 화소 검출기(204b)는 도 31의 제 3 변화 화소를 검출한다. 도 30에 있어서, 변화 화소(205a, 205b)는 변화 화소 예측기(207)에 입력된다.
화상은, 일반적으로 수평 및 수직 방향에 대하여 상관을 갖고 있으며, 제 1, 제 2 변화 화소는 거의 직선상으로 늘어서는 경우가 많다. 변화 화소 예측기(206)는 이에 근거하여 입력된 변화 화소로부터 예측을 하여, 얻어진 예측 변화 화소(207)를 감산기(208)에 출력한다. 감산기(208)는 입력된 제 1 변화 화소(205c)와 예측 변화 화소(207)와의 차분을 취득함으로써, 그 차분을 예측 오차(209)로서 부호화기(210)에 출력하고, 부호화기(210)는 예측 오차(209)를 부호화하여, 부호화 신호(211)를 출력한다. 예측 변화 화소와, 검출한 제 1 변화 화소와의 차분값인 예측 오차는 0 근방으로 집중되는 분포로 되기 때문에, 이것을 부호화하면 0에 가까운 값에 비트수가 적은 부호를 할당하는 가변 길이 부호화 등을 사용하여, 적은 비트수로 효율적으로 부호화하는 것이 가능하게 된다.
이와 같이, 본 실시예 25의 화상 부호화 장치에서는, 메모리(202a, 202b)와, 변화 화소 검출기(204a∼204c)와, 변화 화소 예측기(207)와, 감산기(208) 및 부호화기(210)를 구비한 것에 의해, 입력 신호를 지연시킨 참조 신호로부터 검출한 변화 화소에 근거하여 해당 입력 신호의 변화 화소를 예측하고, 이 예측에 대한 오차를 부호화하는 것으로 함으로써, 부호화 효율의 향상을 도모하는 것이 가능해진다.
(실시예 26)
본 발명의 실시예 26에 의한 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 변화 화소의 예측과 검출을 하는 것이며, 실시예 25와는 예측에 이용하는 변화 화소의 취득 방법이 상이한 것이다.
도 32는 본 발명의 실시예 26에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (201)은 입력 신호이며, 2치의 화상 신호로서 화상 부호화 장치에 입력된다. 참조부호 (204)는 변화 화소 검출기이며, 입력 신호(201)에 대하여 그 화소값이 변화하는 화소를 검출하여 검출 변화 화소(205)로서 출력한다. 참조부호 (216a, 216b)는 메모리이며, 입력된 변화 화소를 일시 기억함으로써 지연시킨다. 메모리(216a)는 검출 변화 화소(205)를 지연시켜 참조 변화 화소(217a)를 출력하고, 메모리(216b)는 참조 신호(217a)를 지연시켜 참조 변화 화소(217b)를 출력한다. 참조부호 (206)은 변화 화소 예측기이며, 참조 변화 화소(217a, 217b)에 근거하여 변화 화소를 예측하여, 예측 변화 화소(207)를 출력한다. 감산기(208)와 부호화기(210)에 대해서는 실시예 25와 동일하다.
이상과 같이 구성된, 실시예 26에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 실시예 25와 마찬가지의 입력 신호(201)가 본 실시예 26의 화상 부호화 장치에 입력되고, 변화 화소 검출기(204)에 의해서 2치의 화소값이 변화하는 화소가 검출되어, 검출 변화 화소(205)가 메모리(216a)와 감산기(208)에 출력된다. 메모리(216a)에 입력된 검출 변화 화소(205)는, 1 라인분의 지연후에, 참조 변화 화소(217a)로서 변화 화소 예측기(206)와 메모리(216b)에 출력된다. 메모리(216b)에 입력된 참조 변화 화소(217a)는 1 라인분 더 지연된 후, 참조 변화 화소(217b)로서 변화 화소 예측기(206)에 출력된다. 참조 변화 화소(217a, 217b)를 실시예 25에 있어서의 제 2, 제 3 변화 화소로서 취급함으로써, 변화 화소 예측기(206)는 실시예 25와 마찬가지의 예측을 하는 것이 가능해져서, 예측 변화 화소(207)를 얻을 수 있다. 이후의 처리는 실시예 25와 마찬가지로 된다.
이와 같이, 본 실시예 26의 화상 부호화 장치에서는, 메모리(216a, 216b)와, 변화 화소 검출기(204)와, 변화 화소 예측기(207)와, 감산기(208) 및 부호화기(210)를 구비한 것에 의해, 입력 신호로부터 검출한 변화 화소를 메모리에 있어서 지연시킴으로써 참조 변화 화소를 취득하고, 이 참조 변화 화소에 근거하여 해당 입력 신호의 변화 화소를 예측하여, 이 예측에 대한 오차를 부호화하는 것으로 함으로써, 실시예 25와 마찬가지의 부호화 효율의 향상을 도모하는 것이 가능해진다.
(실시예 27)
본 발명의 실시예 27에 의한 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 변화 화소의 예측과 검출을 행하는 것이며, 실시예 25와는 예측에 이용하는 변화 화소의 취득 방법이 상이한 것이다.
본 실시예 27의 화상 부호화 장치는, 실시예 25에 의한 장치와 마찬가지의 구성으로서, 그 설명에는 도 30을 이용한다. 실시예 25에 의한 화상 부호화 장치에서는, 도 31을 이용하여 설명한 바와 같이, 부호화하는 주사선에 대하여 직전의 1라인 및 2라인의 주사선에 있어서의 변화 화소를 예측에 이용하였는데, 본 실시예 27의 화상 부호화 장치에서는 수 라인전의 주사선에 있어서의 변화 화소에 근거하여 예측을 하는 것이다.
도 33은 본 실시예 27의 화상 부호화 장치에 의한 부호화의 동작의 원리를 설명하기 위한 도면이다. 부호화를 행하는 최하부에 위치하는 주사선에 대하여, 7 라인 및 4 라인전의 주사선에서 검출된 제 2, 제 3 변화 화소에 근거하여, 제 1 변화 화소가 직선상에 존재하는 것으로 예측하면, 도시하는 예측 변화 화소가 얻어진다. 이 예측 변화 화소와, 입력 신호로부터 해당 주사선에 있어서 검출된 제 1 변화 화소와의 예측 오차를 이용하여, 「예측한 변화 화소의 1 화소 오른쪽」이라는 정보를 부호화함으로써, 실시예 25와 마찬가지로 부호화 효율의 향상을 도모할 수 있다.
본 실시예 27의 화상 부호화 장치의 동작에 대해서는, 메모리(202a, 202b)에서의 일시 기억에 의한 지연 시간이 상이한 점 이외에는, 실시예 25와 마찬가지의 것으로 된다. 또한, 변화 화소 예측기(206)의 예측에 대해서는 다음과 같이 연산에 의해 변화 화소를 예측할 수 있다. 제 2 변화 화소를 제 m 라인의 x 번째 화소, 제 3 변화 화소를 제 n 라인의 y 번째 화소, 제 1 변화 화소의 예측점을 제 k 라인의 z 번째 화소로 하여, 3점이 직선상에 늘어서는 것으로 하면 x-y:z-y=m-n:k-n이라는 관계가 성립함으로써, z-y=(x-y)*(k-n)/(m-n)으로 된다. 따라서, z=y-(x-y)*(n-k)/(m-n)으로 되기 때문에, 제 1 변화 화소는 제 k 라인의 y-(x-y)*(n-k)/(m-n)번째 화소로 된다.
이와 같이, 본 실시예 27에 의한 화상 부호화 장치에서는, 실시예 25에 의한 화상 부호화 장치와 동일한 구성에 의해, 설정에 따라 메모리(202a, 202b)를 이용한 지연 시간을 변경하여, 마찬가지의 효과를 얻을 수 있다.
(실시예 28)
본 발명의 실시예 28에 의한 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 변화 화소의 예측과 검출을 하는 것이며, 실시예 25와는 예측에 이용하는 변화 화소의 취득 방법이 상이한 것이다.
본 실시예 28의 화상 부호화 장치는, 도 30에 나타내는 실시예 25에 의한 장치와 마찬가지의 구성으로서, 부호화 신호(211)를 복호화하는 복호화기를 구비하여, 이 복호화기가 출력하는 부호화 및 복호화 완료의 신호를 어느 하나의 메모리에 출력하는 것이다. 실시예 25에 의한 화상 부호화 장치에서는, 도 31을 이용하여 설명한 바와 같이, 부호화하는 주사선에 대하여 1 라인 및 2 라인 위에 위치하는 주사선에 있어서의 변화 화소를 예측에 이용하였지만, 본 실시예 28의 화상 부호화 장치에서는 부호화 및 복호화 완료의 하부 위치에 있는 주사선에 있어서의 변화 화소를 예측에 이용하는 것이다.
도 34는 본 실시예 28의 화상 부호화 장치에 의한 부호화의 동작의 원리를 설명하기 위한 도면이다. 부호화를 하는 주사선(도면에 있어서, 제 1 변화 화소가 존재하는 라인)에 대하여, 4 라인 위 및 3 라인 아래의 주사선에 있어서 검출된 제2 및 제 3 변화 화소에 근거하여, 제 1 변화 화소가 직선상에 존재하는 것으로 예측하면, 도시하는 예측 변화 화소를 얻을 수 있다. 이 예측 변화 화소와, 입력 신호로부터 해당 주사선에 있어서 검출된 제 1 변화 화소와의 예측 오차를 이용하여, 「예측한 변화 화소의 2 화소 오른쪽」이라는 정보를 부호화함으로써, 실시예 25 및 실시예 27과 마찬가지로 부호화 효율의 향상을 도모할 수 있다.
본 실시예 28의 화상 부호화 장치의 동작에 대해서는, 메모리(202a, 202b)에서의 일시 기억에 의한 지연 시간이 상이한 점과, 부호화기(210)가 출력하는 부호화 신호(211)가 복호화되어 어느 하나의 메모리에 입력되고, 상당하는 변화 화소 검출기는 이 부호화 및 복호화 신호로부터 변화 화소를 검출하는 점만이 실시예 25와 상이하다.
이와 같이, 본 실시예 28에 의한 화상 부호화 장치에서는, 실시예 25에 의한 화상 부호화 장치에 부호화 신호를 복호화하여 참조 화상으로 하는 경로를 추가한 구성에 의해, 마찬가지의 효과를 얻을 수 있다.
(실시예 29)
본 발명의 실시예 29에 의한 화상 부호화 장치는, 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 변화 화소의 예측과 검출을 하는 것이며, 실시예 26과 마찬가지로 검출한 변화 화소를 지연시켜 예측에 이용하는 것이다.
도 35는 본 발명의 실시예 29에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (216, 220)은 메모리이며, 입력된 변화 화소를 일시 기억함으로써 지연시킨다. 메모리(216)는 검출 변화 화소(205)를 지연시켜 지연 변화 화소(217)를 출력하고, 메모리(220)는 예측 오차(209)를 지연시켜 지연 예측 오차(221)를 출력한다. 참조부호 (222, 224)는 가산기이며, 가산기(222)는 지연 변화 화소(217)와 지연 예측 오차(221)를 가산 처리하고, 가산기(224)는 예측 오차(209)와 지연 예측 오차(221)를 가산 처리한다. 다른 참조부호는 도 32와 동일하며, 그 설명은 실시예 26과 동일하다.
이상과 같이 구성된, 실시예 29에 의한 화상 부호화 장치에 대하여, 그 동작을 설명한다. 도 36은 본 실시예 29의 화상 부호화 장치에 의한 부호화 동작의 원리를 설명하기 위한 도면이다. 실시예 26에서는, 검출된 제 1 변화 화소를 지연시켜, 제 2 및 제 3 변화 화소를 취득하였다. 이에 반하여 본 실시예 29에 의한 화상 부호화 장치에서는, 제 2 변화 화소와 제 3 변화 화소와의 차를 제 3 변화 화소에 가산하여, 제 1 변화 화소의 예측값으로서 사용하는 것이다. 도시하는 바와 같이, 제 2 변화 화소와 제 3 변화 화소와의 차는 「왼쪽으로 2 화소」이고, 제 3 변화 화소에 이 「왼쪽으로 2 화소」를 가산함으로써, 부호화를 하는 주사선(도면에 있어서, 제 1 변화 화소가 존재하는 라인)상에서, 동일 도면의 예측한 변화 화소를 얻을 수 있다. 한편, 해당 부호화하는 주사선에 있어서는 제 1 변화 화소가 검출되고, 이 검출된 제 1 변화 화소와, 상기 예측하는 변화 화소와의 차인 「왼쪽으로 1 화소」를 부호화하면, 실시예 26과 마찬가지의 효과를 실현할 수 있다.
도 35에 있어서, 입력 신호(201)가 본 실시예 29의 화상 부호화 장치에 입력되고, 변화 화소 검출기(204)에 의해서 2치의 화소값이 변화하는 위치가 검출되어, 이 제 1 변화 화소(205)가 메모리(216)와 감산기(208)에 출력된다. 메모리(216)에 있어서, 1라인분 지연된 지연 변화 화소(217)는 도 36에 있어서의 제 3 변화 화소이다. 지연 변화 화소(217)는 가산기(222)에 입력되며, 도 36에 있어서의 제 2 및 제 3 변화 화소의 차분에 상당하는, 지연 예측 오차(221)와 가산되어 얻어진 예측 변화 화소(207)가 감산기(208)에 출력된다.
감산기(208)는, 검출 변화 화소(204)와 예측 변화 화소(207)와의 차분을 예측 오차(209)로서 출력하고, 이 예측 오차(209)가 부호화기(210)에 있어서 부호화되어 부호화 신호(211)가 출력된다.
예측 오차(209)는 또한, 가산기(224)에서 지연 예측 오차(221)와 가산된다. 이 결과 얻어지는 지연 예측 오차(221)는 전술한 바와 같이 제 2 및 제 3 변화 화소의 차분에 상당하는 것이며, 메모리(220)에서 일시 기억됨에 따라 지연되어, 다음 부호화에 이용된다. 즉, 도 36에 있어서는, 다음 라인(1개 아래의 라인)에 있어서는, 지연 오차(221)인 상기 「왼쪽으로 2 화소」와, 예측 오차(209)인 상기 「왼쪽으로 1 화소」가 가산된 「왼쪽으로 3 화소」가 예측치로서 이용되게 된다.
이와 같이, 본 실시예 29의 화상 부호화 장치에서는, 메모리(216, 220)와, 변화 화소 검출기(204)와, 가산기(216, 220)와, 감산기(208) 및 부호화기(210)를 구비한 것에 의해, 입력 신호로부터 검출한 변화 화소와 예측 오차에 대하여, 지연 처리와 가산 처리를 실행함으로써, 실시예 26과 마찬가지로 부호화 효율의 향상을 도모하는 것이 가능해진다.
또, 실시예 25 내지 실시예 29의 화상 부호화 장치에 있어서는, 모두 입력을 블럭 단위로 실행하며, 블럭 단위로 처리하는 것이 가능하다.
(실시예 30)
본 발명의 실시예 30에 의한 화상 복호화 장치는, 실시예 25에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하여, 복수의 화소로 이루어지는 2차원 화상 신호를 얻는 것이다.
도 37은 본 발명의 실시예 30에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (211)은 입력 신호이며, 실시예 25에 의한 화상 부호화 장치로부터 출력되는 예측 오차의 부호화 신호(도 30의 참조부호 (211))이다. 참조부호 (230)은 복호화기이며, 부호화 신호(211)를 복호화하여 복호 예측 오차(231)를 출력한다. 참조부호 (232)는 가산기이며, 복호 예측 오차(231)와 예측 변화 화소(207)를 가산 처리하여, 얻어진 복호 변화 화소(233)를 출력한다. 참조부호 (234)는 화소값 생성기이며, 복호 변화 화소(233)와 직전에 복호화한 변화 화소와의 사이에 위치하는 화소를 소정의 화소값, 즉 변화 화소로 되지 않은 화소의 화소값으로서, 복호화한 화상 신호(235)를 생성하여 출력한다. 다른 참조부호는 도 30과 마찬가지이며, 그 설명은 실시예 25와 마찬가지이다.
이상과 같이 구성된, 본 실시예 30에 의한 화상 복호화 장치에 대하여, 그 동작을 설명한다. 부호화 신호(211)가 입력되면, 예측 오차를 부호화한 이 입력 신호(211)는 복호화기(230)에서 복호화되어, 그 결과 얻어지는 복호 예측 오차(231)가 가산기(232)에 출력된다.
한편, 직전에 복호화된 화상 신호(235)는 메모리(202a, 202b)에 입력되고, 실시예 25와 마찬가지로 변화 화소의 예측이 행해져, 변화 화소 예측기(206)로부터 가산기(232)에 예측 변화 화소(207)가 출력된다. 가산기(232)는 예측 변화 화소(207)에 대하여, 입력된 복호 예측 오차(231)를 가산함으로써, 복호 변화 화소(233)를 취득하여 이를 화소값 생성기(234)에 출력한다. 화소값 생성기(234)는, 복호 변화 화소(233)와 직전에 복호화한 변화 화소와의 사이에 위치하는 화소를 소정의 화소값, 즉 변화 화소로 되지 않은 화소의 화소값으로서, 복호화한 화상 신호(235)를 생성하여 출력한다.
이와 같이, 본 실시예 30에 의한 화상 복호화 장치는, 메모리(202a, 202b)와, 변화 화소 검출기(204a, 204b)와, 변화 화소 예측기(207)와, 복호화기(230)와, 가산기(232) 및 화소값 생성기(234)를 구비한 것에 의해, 예측 변화 화소와, 복호 예측 오차를 이용하여 복호 변화 화소를 얻고, 이것에 근거하여 복호 화상 신호(235)를 얻기 때문에, 실시예 25에 의한 부호화 신호를 적절히 복호 처리할 수 있다.
또, 본 실시예 30에서는, 실시예 25의 화상 부호화 장치에 의한 부호화 신호를 복호화하는 것으로 하였지만, 실시예 27 및 실시예 28에 의한 화상 부호화 장치에 의해 얻어진 부호화 신호도 마찬가지로 복호화할 수 있다.
(실시예 31)
본 발명의 실시예 31에 의한 화상 복호화 장치는, 실시예 26에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하여, 복수의 화소로 이루어지는 2차원 화상 신호를 얻는 것이다.
도 38은 본 발명의 실시예 31에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 복호화기(230), 가산기(232) 및 화소값 생성기(234)는 도 37과 마찬가지이고, 그 이외에는 도 32와 마찬가지이며, 그 설명은 실시예 30 및 실시예 26과 마찬가지이다.
이상과 같이 구성된, 본 실시예 31에 의한 화상 복호화 장치에 대하여, 그 동작을 설명한다. 부호화 신호(211)가 입력되면, 예측 오차를 부호화한 이 입력 신호(211)는 복호화기(230)에서 복호화되고, 그 결과 얻어지는 복호 예측 오차(231)가 가산기(232)에 출력된다. 한편, 직전에 복호화된 복호 변화 화소(233)는 메모리(216a)에 입력되고, 실시예 26과 마찬가지로 변화 화소의 예측이 행해져, 변화 화소 예측기(206)로부터 가산기(232)에 예측 변화 화소(207)가 출력된다. 이후의 처리는, 실시예 30의 경우와 마찬가지이다.
이와 같이, 본 실시예 31에 의한 화상 복호화 장치는, 메모리(216a, 216b)와, 변화 화소 예측기(207)와, 복호화기(230)와, 가산기(232) 및 화소값 생성기(234)를 구비한 것에 의해, 예측 변화 화소와 복호 예측 오차를 이용하여, 복호 변화 화소를 얻고, 이것에 근거하여 복호 화상 신호(235)를 얻기 때문에, 실시예 26에 의한 부호화 신호를 적절히 복호 처리할 수 있다.
(실시예 32)
본 발명의 실시예 32에 의한 화상 복호화 장치는, 실시예 29에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하여, 복수의 화소로 이루어지는 2차원 화상 신호를 얻는 것이다.
도 39는 본 발명의 실시예 32에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 복호화기(230), 가산기(232) 및 화소값 생성기(234)는 도 37과 마찬가지이고, 그 이외에는 도 35와 마찬가지이며, 그 설명은 실시예 30 및 실시예 29와 마찬가지이다.
이상과 같이 구성된, 본 실시예 32에 의한 화상 복호화 장치에 대하여, 그 동작을 설명한다. 부호화 신호(211)가 입력되면, 예측 오차를 부호화한 이 입력 신호(211)는 복호화기(230)에서 복호화되고, 그 결과 얻어지는 복호 예측 오차(231)가 가산기(232)에 출력된다. 한편, 직전에 복호화된 복호 변화 화소(233)는 메모리(216)에 입력되고, 실시예 29와 마찬가지로 변화 화소의 예측이 행해져, 가산기(222)로부터 가산기(232)에 예측 변화 화소(207)가 출력된다. 이 이후의 처리는, 실시예 30의 경우와 마찬가지이다.
이와 같이, 본 실시예 31에 의한 화상 복호화 장치는, 메모리(216, 220)와, 가산기(224, 222, 232)와, 복호화기(230) 및 화소값 생성기(234)를 구비한 것에 의해, 예측 변화 화소와 복호 예측 오차를 이용하여 복호 변화 화소를 얻고, 이에 근거하여 복호 화상 신호(235)를 얻기 때문에, 실시예 29에 의한 부호화 신호를 적절히 복호 처리할 수 있다.
또, 실시예 25 내지 실시예 29 중 어느 하나의 화상 부호화 장치에 있어서, 블럭 단위에서의 부호화가 행해지고 있는 경우, 실시예 30 내지 실시예 32의 화상 복호화 장치에 있어서, 블럭 단위에서의 부호화 신호를 입력으로 하고, 블럭 단위로 처리를 함으로써, 적절한 처리를 행할 수 있다.
(실시예 33)
본 발명의 실시예 33에 의한 화상 부호화 장치는, 화상 신호에 대응하여 예측 오차, 또는 화소수의 부호화 결과를 전환하여 출력하는 것이다.
도 40은 본 발명의 실시예 33에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (240)은 감산기이며, 검출된 변화 화소(205b)와 변화 화소(205c)와의 차분(241)을 취득한다. 참조부호 (242)는 부호화기이며, 차분(41)을 부호화하여 부호화 신호(243)를 출력한다. 참조부호 (244)는 비교기이며, 예측 오차(209)와 소정값을 비교하여, 그 결과에 의해 스위치(246)의 전환을 제어한다. 참조부호 (246)은 스위치이며, 부호화 신호(247)와 부호화 신호(243) 중 어느 것을 본 실시예 33의 화상 부호화 장치의 출력 부호화 신호(211)로 할 것인지에 대한 전환을, 비교기(244)로부터의 제어에 의해 실행한다. 다른 참조부호는 도 30과 동일하며, 그 설명은 실시예 25와 동일하다. 실시예 25에 의한 화상 부호화 장치는, 예측 오차의 부호화를 하는 것이었지만, 예측 오차가 작다는 것을 전제로 하고 부호화를 행하기 때문에, 예측 오차가 커진 경우에는 부호화 효율이 저하된다. 이러한 경우에는, 예측 오차를 부호화하는 것보다, 변화 화소 자체(위치)를 부호화하는 편이 효율적으로 된다. 따라서, 본 실시예 33에 의한 화상 부호화 장치에서는, 예측 오차의 부호화와, 변화 화소의 위치를 나타내는 화소수의 부호화를 실행하여 얻는 것이다. 또한, 변화 화소 자체(위치)의 부호화를 행함으로써, 변화 화소의 개수가 변화하여 예측이 곤란해지거나, 또는 불가능해져서, 예측 오차의 부호화가 곤란해지거나, 또는 불가능해지는 경우에 있어서도, 부호화의 실행이 가능해지는 것이다.
이상과 같이 구성된, 실시예 33에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다.
도 41은 본 실시예 33의 화상 부호화 장치에 의한 부호화의 동작의 원리를 설명하기 위한 도면이다. 제 2, 제 3 변화 화소로부터의 제 1 변화 화소의 예측은, 실시예 25의 경우와 마찬가지이다. 그리고 본 실시예 33에서는, 예측 변화 화소를 중심으로 하여, 미리 정해진 값에 따른 예측 범위를 설정한다. 그리고, 검출한 제 1 변화 화소가 이 예측 범위에 있는지 여부에 따라, 부호화 전환을 행하는 것으로서, 예측 범위에 있으면 예측 오차를 부호화하고, 예측 범위에 없으면 제 1 변화 화소를 부호화한다.
또한, 본 실시예 33에서는, 제 3 변화 화소는 부호화 및 복호화 완료된 것이기 때문에, 제 1 변화 화소를 부호화하기 위해서는, 제 3 변화 화소와 제 1 변화 화소와의 주사 순서의 차, 즉 그 사이에 존재하는 화소수를 부호화하면 좋은 것으로 된다. 그리고, 그 사이의 화소 중, 상기한 예측 범위에 위치하는 것에 대해서는, 예측 오차에 의해 부호화되는 것으로, 제거하는 것이 가능하다. 따라서, 제 1 변화 화소를 부호화하기 위해서는, 상기 변화 화소의 차보다, 예측 범위의 화소를 제외한 것을 부호화하면 좋은 것으로 된다.
예를 들면, 동일 도면에 있어서의 변화 화소 A 및 변화 화소 B는, 예측 범위의 밖에 있는 것으로서, 제 1 변화 화소로서 이들의 점이 검출된 경우의 취급을 설명한다. 실시예 25의 설명과 마찬가지로, 주사 방향은 좌측 상단→우측 하단으로서, 제 1 변화 화소는, 3*12+6=42 번째, 변화 화소 A는 4*12+1=49 번째, 변화 화소 B는 4*12+10=58 번째로 된다. 제 3 변화 화소와 변화 화소 A와의 사이에 예측 범위가 없기 때문에, 이 양자간에 있는 화소수 49-42=7이 변화 화소 A, 즉 A의 위치를 나타내는 정보로서 부호화된다. 이에 반하여, 변화 화소 B의 경우에는 제 3 변화 화소와 변화 화소 B와의 사이에 예측 범위가 포함되기 때문에, 이 예측 범위에 존재하는 5 화소를 제외하고, 58-42-5=11이 변화 화소 B, 즉 B의 위치를 나타내는 정보로서 부호화되게 된다.
입력 신호(201)가 본 실시예 33의 화상 부호화 장치에 입력된 후, 메모리(202a, 202b)에 의한 지연으로부터, 감산기(208)에 의한 예측 오차(209)의 취득까지는 실시예 25와 마찬가지로 실행되며, 부호화기(210)에 의해 예측 오차(209)의 부호화 신호(247)가 얻어진다. 실시예 25에서는 이 부호화 신호가 출력되는 부호화 신호였지만, 본 실시예 33에서는 부호화 신호(247)가 스위치(246)에 출력된다. 또한, 예측 오차(209)는 부호화기(242)와 비교기(244)에도 출력된다.
한편, 변화 화소 검출기(204b)로부터 검출된 제 3 변화 화소(205b)와, 변화 화소 검출기(204c)로부터 검출된 제 1 변화 화소(105c)는 감산기(240)에 출력되고, 그 차분으로서 양자간에 존재하는 화소수(241)가 취득되어 부호화기(242)에 출력된다. 부호화기(242)는 입력된 차분(241)과 예측 오차(209)로부터 예측 범위에 존재하는 화소를 제외한 화소수 부호화 신호(243)를 얻어, 이것을 스위치(246)에 출력한다.
비교기(244)는, 입력된 예측 오차에 대하여, 예측 범위에 있는지 여부를 판정하여, 예측 범위에 있는 경우에는 스위치(246)에 있어서 예측 오차 부호화 신호(247)를 출력(211)으로 하도록, 또한 예측 범위에 없는 경우에는 스위치(246)에 있어서 화소수 부호화 신호(243)를 출력(211)으로 하도록 신호(245)에 의해 제어한다.
이와 같이, 본 실시예 33에 의한 화상 부호화 장치에서는, 실시예 25에 의한 화상 부호화 장치에 근거하여, 감산기(240)와, 화소수의 부호화기(242)와, 비교기(244) 및 스위치(246)를 구비한 구성으로 한 것에 의해, 예측 오차가 정해진 범위내에 있을 때에는 예측 오차의 부호화 신호를, 범위 밖에 있을 때에는 화소수의 부호화 신호를, 출력하는 부호화 신호로 하기 때문에, 예측 오차가 큰 경우에는 변화 화소의 개수의 변동에 의해, 변화 화소의 예측일 불가능한 경우에도 부호화 효율이 저하하는 것을 방지하여, 적절한 부호화를 실행하는 것이 가능해진다.
(실시예 34)
본 발명의 실시예 34에 의한 화상 복호화 장치는, 실시예 33에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하여, 복수의 화소로 이루어지는 2차원 화상 신호를 얻는 것이다.
도 42는 본 발명의 실시예 34에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (50)은 모드 복호화기이며, 입력 신호에 대하여 예측 오차가 부호화된 신호인지, 변화 화소의 위치(화소수)가 부호화된 신호인지를 판정하여 부호화 모드(251)를 출력한다. 참조부호 (256)은 화소수 복호화기이며, 입력 신호(255)를 복호화하여 복호화 화소수(257)를 출력한다. 참조부호 (258)은 가산기이며, 예측 변화 화소(205b)와 복호 화소수(257)를 가산 처리하여 복호 변화 화소(259)를 출력한다. 참조부호 (252)와 참조부호 (260)은 스위치이며, 모드 복호화기(250)가 출력하는 부호화 모드에 대응하여, 입력 신호와 출력 신호에 대한 전환을 행한다. 다른 참조부호는 도 30과 마찬가지이며, 그 설명은 실시예 25와 마찬가지이다.
이상과 같이 구성된, 본 실시예 34에 의한 화상 복호화 장치에 대하여, 그 동작을 설명한다. 부호화 신호(211)가 입력되면, 우선 모드 복호화기(250)에 의해서, 예측 오차를 부호화한 것인지, 화소수를 부호화한 것인지가 판정되고, 그 판정의 결과에 의해 「예측 오차」, 또는 「화소수」의 부호화 모드가 출력되어, 스위치(252)와 스위치(260)와의 전환을 제어한다.
예측 오차가 부호화되어 있었던 경우의 동작은, 실시예 30과 마찬가지로 된다. 한편, 화소수가 부호화되어 있었던 경우, 스위치(252)를 전환함에 따라, 입력 신호(211)는 복호화기(256)에 의해서 복호화되고, 변화 화소의 차인 화소수가 복호화되어, 이 복호 화소수(257)가 가산기(258)에 출력된다. 가산기(258)에 있어서는, 복호 화소수(257)가 직전에 복호화되어 얻어진 복호 화상 신호(235)에 근거하여 예측된 예측 변화 화소와 가산되어 복호 변화 화소(259)를 얻을 수 있다. 어느 경우에 있어서도, 복호 변화 화소(261)에 근거하여 실시예 30과 마찬가지로 복호 화상 신호(235)가 출력된다.
이와 같이, 본 실시예 34에 의한 화상 복호화 장치에서는, 실시예 30에 의한 화상 복호화 장치에 근거하여, 모드 복호화기(250)와, 가산기(258)와, 화소수의 복호화기(256)와, 스위치(252, 260)를 구비한 구성으로 한 것에 의해, 모드 복호화기(250)가 취득하는 부호화 모드에 대응하여, 스위치(252, 260)가 전환되어, 적절한 복호화가 선택적으로 실행되기 때문에, 실시예 33에 있어서 부호화된 부호화 신호를 적절히 복호화하는 것이 가능하다.
(실시예 35)
본 발명의 실시예 35에 의한 화상 부호화 장치 및 화상 복호화 장치는, 예측범위의 설정을 화상 신호에 대응하여 변경할 수 있는 것이다.
본 실시예 35에 의한 화상 부호화 장치 및 화상 복호화 장치는, 실시예 33 및 실시예 34와 동일한 구성이다.
도 43은 본 실시예 35에 의한 부호화, 또는 복호화 동작의 원리를 설명하기 위한 도면이다. 동일 도면의 왼쪽에는 입력 화상이 8×8 화소로 구성되는 경우를, 또한 오른쪽에는 동일한 예를 1/2로 서브샘플하여 4×4 화소의 구성으로 한 것을 도시하고 있다. 서브샘플된 것의 화소수는 1/2이며, 한편 화소간의 거리는 2배로 된다. 따라서, 서브샘플된 경우에는, 그 예측 범위를 본래 것의 예측 범위의 1/2에 상당하는 범위로 함으로써, 거의 동일한 공간 위치를 검색하게 된다. 예를 들면, 오른쪽의 서브샘플된 것의 예측 범위로서, 왼쪽의 본래의 것과 동일한 ±2 화소라는 범위를 사용하면, 1 라인의 화소수를 초과하는 것으로 되어, 실시예 33 및 실시예 34에 있어서, 모드 전환이 적절히 실행되지 않는다. 이에 반하여, 도시하는 바와 같이, 오른쪽의 서브샘플된 것의 경우, 예측 범위를 1/2로 하게 되면, 모드 전환을 적절히 실행할 수 있기 때문에, 동일 실시예에 의한 부호화 효율의 향상을 실현할 수 있다.
이와 같이, 본 실시예 35에 의한 화상 부호화 장치 및 화상 복호화 장치에서는, 실시예 33에 의한 화상 부호화 장치, 또는 실시예 34에 의한 화상 복호화 장치에 있어서, 예측 범위의 크기를 화상 신호의 크기에 대응하여 변경할 수 있도록 한 것에 의해, 서브샘플하는 경우에도, 적절히 전환을 실행하여 부호화 효율의 향상을 도모하는 것이 가능해진다.
(실시예 36)
본 발명의 실시예 36에 의한 화상 부호화 장치는, 물체의 형상을 나타내는 형상 신호를 부호화하는 것으로서, 화상 신호로부터 유의 영역을 추출하여 효율적인 부호화를 행하는 것이다.
도 44는 본 발명의 실시예 36에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (401)은 입력 신호인 2차원의 형상 신호이다. 참조부호 (402)는 유의 영역 추출기이며, 입력 형상 신호(401)로부터 유의 영역을 추출하여 유의 영역 신호(403)를 출력한다. 참조부호 (404)는 블럭화기이며, 입력 형상 신호(401)를 블럭화하여 블럭화 형상 신호(405)를 출력한다. 참조부호 (408)은 스위치이며, 유의 영역 신호(403)에 대응하여 전환을 실행한다. 참조부호 (412)는 블럭 사이즈 변경기이며, 유의 영역 신호(403)에 대응하여 블럭의 크기를 변경하고, 변경한 블럭화 형상 신호(413)를 출력한다. 참조부호 (418, 414)는 부호화기이며, 각각 유의 영역 신호(403)와, 블럭화 형상 신호(413)를 부호화하여 부호화 신호(419, 415)를 출력한다.
이상과 같이 구성된, 본 실시예 36에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 2차원 형상 신호인 입력 신호(401)가, 본 실시예 36의 화상 부호화 장치에 입력되어 유의 영역 추출기(402)와 블럭화기(404)에 입력된다. 유의 영역 추출기(402)는 유의 영역의 범위를 검출하여, 유의 영역 신호(403)를 스위치(408), 블럭 사이즈 변경기(412) 및 부호화기(418)에 출력한다.
도 45는 본 실시예 36의 화상 부호화 장치에 의한 부호화의 동작의 원리를 설명하기 위한 도면이다. 사선으로 나타내는 부분이 물체의 내부의 화소, 즉 유의한 화상 신호가 존재하는 화소이고, 사선부를 포함하는 최소의 직사각형, 즉 동일 도면의 굵은 선으로 나타내는 직사각형이 유의 영역의 범위에 상당한다.
블럭화기(405)는 입력된 형상 신호를 블럭화하여, 블럭화 형상 신호(405)를 스위치(408)에 출력한다. 여기서, 스위치(408)는 유의 영역 신호(403)가 나타내는 유의 영역의 범위에 블럭화 형상 신호(405)가 상당할 때 ON 상태로 된다. 즉, 유의 영역 이외의 경우, 블럭화 형상 신호는 부호화 처리가 이루어지지 않는다.
스위치가 ON일 때, 블럭화 형상 신호(405)는 블럭 사이즈 변경기(412)에 입력되고, 블럭 사이즈 변경기(412)에 입력된 유의 영역 신호(403)에 대응하여, 유의 영역을 포함하는 최소 블럭으로 사이즈가 변경되며, 해당 변경된 형상 신호(413)가 부호화기(414)에 출력되고, 부호화되어 형상 신호의 부호화 신호(415)로 된다. 한편, 유의 영역의 범위를 나타내는 유의 영역 신호도 부호기(418)에 있어서 부호화되어, 부호화 신호(419)가 출력된다.
이와 같이, 본 실시예 36에 의한 화상 부호화 장치에 있어서는, 유의 영역 검출기(102)와 블럭 사이즈 변경기(412)를 구비한 것에 의해, 유의 영역의 범위를 검출하여, 유의 영역의 범위 내부만 형상 신호를 부호화하도록 형상 신호의 블럭 사이즈를 변경하기 때문에, 유의 영역의 범위 이외의 것을 부호화하는 일이 없어서 형상 신호의 부호화 효율이 향상된다.
(실시예 37)
본 발명의 실시예 37에 의한 화상 복호화 장치는, 실시예 36에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하여, 2차원 형상 신호를 얻는 것이다.
도 46은 본 발명의 실시예 37에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (419, 415)는 실시예 36의 화상 부호화 장치로부터 출력되는 부호화 신호이다. 참조부호 (420)은 유의 영역 신호의 복호화기, 참조부호 (422)는 형상 신호의 복호화기이며, 각각의 입력 신호를 복호화하여, 복호 유의 영역 신호(421), 최소 블럭화 복호 형상 신호(423)를 출력한다. 참조부호 (430)은 블럭 사이즈 변경기이며, 복호 유의 영역 신호(421)에 대응하여, 블럭의 크기를 변경하고, 변경한 복호 블럭화 형상 신호(431)를 출력한다. 참조부호 (426)은 스위치이며, 유의 영역 신호(421)에 대응하여 전환을 행한다. 참조부호 (432)는 역블럭화기이며, 블럭화 형상 신호(427)를 통합하여, 복호 형상 신호(433)를 출력한다.
이상과 같이 구성된, 본 실시예 37에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 부호화 신호(419, 415)가 각각 복호화기(420, 422)에 입력되어, 복호화된다. 복호화기(419)는, 복호 유의 영역 신호(421)를 블럭 사이즈 변경기(430)와 스위치(426)에 출력한다. 한편, 복호화기(422)는 유의 영역의 범위를 포함하는 최소 블럭인 최소 블럭화 형상 신호(423)를 블럭 사이즈 변경기(430)에 출력한다. 블럭 사이즈 변경기(430)는 입력된 복호 유의 영역 신호에 근거하여, 블럭 사이즈를 소정의 크기로 변경하여, 변경된 블럭화 형상 신호(431)로서, 스위치(426)에 출력한다. 스위치(426)는 유의 영역 신호(421)가 나타내는 유의 영역의 범위를 포함하는 신호가 입력된 경우에만 ON으로 되고, 그 이외에는 유의 영역의 범위 밖인 것을 나타내는 값을 출력한다. 역블럭화기(432)는 입력된 블럭화 형상 신호와, 유의 영역의 범위 밖인 것을 나타내는 신호를 통합하여, 2차원 형상 신호를 복호화 신호(433)로서 출력한다.
이와 같이, 본 실시예 37에 의한 화상 복호화 장치에서는, 복호화기(420, 422)와, 블럭 사이즈 변경기(430)와, 스위치(426) 및 역블럭화기(432)를 구비한 것에 의해, 유의 영역의 범위를 복호화하고, 그것을 근거로 하여 형상 신호를 복호화함으로써, 실시예 36에서 부호화한 부호화 신호를 정확하게 복호화할 수 있다.
(실시예 38)
본 발명의 실시예 38에 의한 화상 부호화 장치는, 예측 확률에 따른 부호화를 행하는 것에 의해, 양호한 계층적 부호화를 실현하는 것이다.
도 47은 본 발명의 실시예 38에 의한 화상 부호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (1)은 입력 화상 신호이다. 참조부호 (300)은 분리기이며, 입력 화상 신호(1)를 2개의 화상 신호(301a, 301b)로 분리하여 출력한다. 참조부호 (302, 308a, 308b)는 부호화기이며, 모두, 입력된 신호를 부호화하여 부호화 신호를 출력한다. 참조부호 (330)은 복호화기이며, 부호화 신호(303a)를 복호화하여 복호화 화상 신호(331)를 출력한다. 참조부호 (304)는 예측 확률 계산기이며, 입력된 화상 신호(331)에 근거하여 화상 신호(301b)의 화소값을 예측하고, 그 예측에 대한 예측 확률을 계산하여 확률값(305)을 출력한다. 참조부호 (306)은 제 2 분리기이며, 입력된 확률값(305)에 대응하여, 화상 신호(301b)를 화상 신호(307a)와 화상 신호(307b)로 분리하여 출력한다.
이상과 같이 구성된, 본 실시예 38에 의한 화상 부호화 장치에 대하여 그 동작을 설명한다. 입력 신호(1)가 본 실시예 38의 화상 부호화 장치에 입력되고, 우선 분리기에 있어서, 화상 신호(301a, 301b)로 분리된다. 여기서, 신호(301a)는 우선적으로 선택된 신호로서 부호화기(302)에 입력되며, 신호(301b)는 제 2 분리기(306)에 출력된다. 도 48은 본 실시예 38의 화상 부호화 장치에 의한 부호화 동작의 원리를 설명하기 위한 도면이다. 도 48a에 있어서, 실선으로 된 동그라미 모양의 화소는 화상 신호(301a)에 대응하고, 파선으로 된 동그라미 모양의 화소는 화상 신호(301b)에 대응한다. 또한, 도 48은 2치 화상 신호의 모델로서, 사선은 참값을 나타내고, 사선이 없는 동그라미 부분은 거짓값을 나타내는 것으로 한다. 부호화기(302)는 우선도가 높은 화상 신호(301a)를 부호화하여, 얻어진 부호화 신호(303a)를 부호화 출력으로 함과 동시에, 복호화기(330)에도 출력한다.
복호화기(330)가 복호 처리를 한 복호 신호가 예측 확률 계산기(304)에 입력된다. 예측 확률 계산기(304)는, 복호화한 우선도가 높은 화상 신호에 근거하여 우선도가 낮은 화상 신호의 화소값을 예측하고, 그 예측 확률을 계산한다. 도 48a에 있어서, A는 인접 4 방향이 거짓값, B는 인접 4 방향이 참값이고, 이것에 대하여 C는 인접 2 방향이 참값, 인접 2 방향이 거짓값이다. 그 결과, A는 거짓값, B는 참값이라고 하는 예측에 대하여 확률이 높은 것으로 되지만, C에 대해서는 참 거짓 중 어느 것일까에 대해서도 예측이 적중할 확률이 낮게 된다. 그래서, 도 48a에 도시하는 A나 B보다도, C를 우선적으로 부호화해 주면, 도 48b에 도시하는 바와 같이 C를 복호화함과 동시에, A나 B를 예측에 근거하여 재생한 경우의 화질 열화가 적어지게 되어, 바람직한 계조(階調) 부호화를 실행할 수 있다.
따라서, 예측 확률 계산기(304)가 출력하는 확률값(305)에 근거하여, 제 2 분리기(306)는, 입력된 화상 신호(301b)에 대하여 확률값(305)이 높은 것을 화상 신호(307a)로 하고, 그 이외의 것을 화상 신호(307b)로서 분리하여, 각각을 부호화기(308a, 308b)에 출력한다. 각 부호화기는, 각각 입력된 화상 신호를 부호화하여 부호화 신호(303b, 303c)를 출력한다. 이상과 같이 하여 출력된 부호화 신호(303a∼303c)는, 이 순서대로 우선도가 높은 것으로 하여 전송 또는 기록되면, 복호화에 있어서 우선도가 높은 부호화 신호부터 순차적으로 복호화됨에 따라, 복호화 과정에서 복호화 처리가 중단된 경우에 있어서도, 화질 열화가 적은 복호화 화상을 얻을 수 있다.
이와 같이, 본 실시예 38의 화상 부호화 장치에서는, 분리기(300, 306)와, 부호화기(302, 308a, 308b)와, 복호화기(330) 및 예측 확률 계산기(304)를 구비한 것에 의해, 예측 확률이 낮은 화소부터 우선적으로 부호화함으로써, 화질 열화가 적은 계층적인 부호화를 부가 정보없이 실현하는 것이 가능하게 된다.
(실시예 39)
본 발명의 실시예 39에 의한 화상 복호화 장치는, 실시예 38에 의한 부호화 장치가 출력하는 부호화 신호를 복호화하는 것이다.
도 49는 본 발명의 실시예 39에 의한 화상 복호화 장치의 구성을 나타내는 블럭도이다. 동일 도면에 있어서, 참조부호 (303a∼303c)는 실시예 38의 화상 부호화 장치로부터 출력되는 부호화 신호이며, 참조부호 (310, 316a, 316b)의 복호화기에 의해 복호화되어, 복호 신호(311, 317a, 317b)로서 출력된다. 참조부호 (320)은 예측기이며, 화상 신호(311)에 근거하여 화상 신호를 예측하여 예측 화상 신호(321)를 출력한다. 참조부호 (312)는 예측 확률 계산기이며, 입력된 예측 화상 신호(331)에 대한 예측 확률을 계산하여 확률값(313)을 출력한다. 참조부호 (322)는 스위치이며, 확률값(313)에 대응하여 전환을 행한다.
이상과 같이 구성된, 본 실시예 39에 의한 화상 복호화 장치에 대하여 그 동작을 설명한다. 부호화 신호(303a∼303c)가 각각 복호화기(310, 316a, 316b)에 입력되어 복호화된다. 신호(303a)는 복호화되고, 복호화 화상 신호(311)는 출력 복호화 신호로 됨과 동시에, 예측 확률 계산기(312) 및 예측기(320)에도 입력된다.
예측기(320)는 복호화한 화상 신호(311)로부터 우선도가 낮은 화상 신호(321)의 화소값을 예측한다. 예측 확률 계산기(312)는, 예측한 화상 신호(321)의 예측 확률을 계산하여, 각 화소가 복호화기(316a) 또는 복호화기(316b) 중 어느 것에서 복호화되어야 할지를 판단한다. 또한, 예측 확률 계산기(312)는 외부로부터 입력된 우선 순위(309)를 참조하여, 우선 순위가 낮은 부호화 신호가 전송 또는 기록되어 있는지 여부를 판정한다. 전송 또는 기록되어 있지 않다고 판정하면, 부호화되어 있지 않은 화소의 화소값은 복호화 신호(323)로서 예측한 화상 신호(321)를 출력하도록 스위치(322)를 전환하도록 제어한다. 또한, 복호화된 화소에 대해서는, 스위치(322)에 의해 화상 신호(311, 317a, 317b) 중 어느 하나가 선택되어, 장치가 출력하는 복호화 신호(323)로 된다.
이와 같이, 본 실시예 39에 의한 화상 복호화 장치에서는, 복호화기(310, 316a, 316b)와, 예측 확률 계산기(312) 및 예측기(320)를 구비한 것에 의해, 예측 확률과 우선 순위에 대응한 복호화를 행하기 때문에, 실시예 38에 의한 화상 부호화 장치에서 부호화된 부호화 신호를 적절히 복호화하는 것이 가능하다.
(실시예 40)
본 발명의 실시예 40에 의한 화상 부호화 프로그램 기록 매체 및 화상 복호화 프로그램 기록 매체는, 컴퓨터 등에 있어서, 실시예 1 내지 실시예 39의 화상 부호화 장치, 또는 화상 복호화 장치를 실현하는 것이다.
도 50은 프로그램을 기록하는 기록 매체의 일례인 플로피 디스크를 나타내는 것이며, 도 51은 기록된 화상 부호화 프로그램의 처리 순서를 나타내는 플로우차트, 도 52는 화상 복호화 프로그램의 처리 순서를 나타내는 플로우차트이다.
도 50에 도시하는 플로피 디스크에 기록된, 도 51에 도시하는 화상 부호화 프로그램은, 퍼스널 컴퓨터나 워크 스테이션 등에 있어서 실행시킴으로써, 실시예 2에 의한 화상 부호화 장치를 실현한다.
마찬가지로, 도 50에 도시하는 플로피 디스크에 기록된, 도 52에 도시하는 화상 복호화 프로그램은, 퍼스널 컴퓨터나 워크 스테이션 등에 있어서 실행시킴으로써, 실시예 3의 화상 복호화 장치를 실현한다. 이 경우, 동일 실시예에 있어서, 도 6을 이용하여 설명한 바와 같은, 변화 화소 복호화 처리후에 스위치에 의한 선택을 하는 유형으로 된다.
이와 같이, 본 실시예 40에 의한 프로그램 기록 매체는, 화상 부호화 프로그램, 또는 화상 복호화 프로그램을 기록한 것으로 함으로써, 일반적인 퍼스널 컴퓨터 등의 컴퓨터 시스템에 있어서, 본 발명의 화상 부호화 장치, 또는 화상 복호화 장치를 실현하는 것이 가능해진다.
또, 본 실시예 40에서는, 실시예 2의 화상 부호화 장치와, 실시예 3의 화상 복호화 장치를 실현하는 프로그램을 기록한 것으로 하였지만, 다른 실시예에 의한 장치도 마찬가지로 실현이 가능하다.
또한, 본 실시예 40에서는, 기록 매체로서 플로피 디스크를 나타내었지만, IC 카드, CD-ROM, 광디스크, 카셋트 테이프 등의, 프로그램을 기록할 수 있는 매체이면 마찬가지로 실시하는 것이 가능하다.
이와 같이, 본 발명에 따르면 종래 기술에 의한 MMR 부호화와 달리, 손실이 없는(lossless) 가역 부호화에 있어서도, 시각적으로 중요하지 않은 화질 열화를 허용함으로써 압축율을 대폭 향상시키는 것이 가능해진다.
또한, 본 발명에 따르면, 종래 기술에 의한 MMR이 화면내, 및 수평 방향의 상관 관계만을 이용한 부호화인데 비해, 화면간 상관이나 수직 방향의 상관까지 이용하여 부호화할 수 있기 때문에, 부호화 효율의 향상을 도모하는 것이 가능해진다.
또한, 본 발명에 따르면, 종래의 기술에 의한 MMR이나 MMMR에서는 불가능했던, 일부의 비트 스트림을 복호화함으로써 계층적으로 화상을 재생할 수 있는 부호화 데이터를, 부호화 효율을 저하시키는 일 없이 실현할 수 있어서, 효과적인 계층적 화상 재생을 가능하게 하는 부호화 방법을 제공한다.
또한, 본 발명에 따르면, 형상 정보와 화소값 정보로 이루어지는 화상을 움직임 보상에 의해 부호화하는 경우, 각각에 대한 움직임 벡터를 이용하기 때문에, 종래의 기술에 의한 부호화와 같이, 동일한 움직임 벡터를 이용하여 움직임 보상을 함으로써, 적절한 부호화를 할 수 없게 되는 경우를 피할 수 있다. 또한, 이들의 움직임 상관 관계를 이용함으로써, 부호화 효율의 향상을 도모하는 것이 가능해진다.
또한, 본 발명에 따르면, 형상 정보와 화소값 정보로 이루어지는 화상에 대하여, 화면내 부호화와 화면간 부호화를 적응적으로 전환하여 부호화하는 경우, 각각의 정보의 성질에 따라, 이러한 전환을 하는 것이 가능해져서, 적절하고 효율적인 부호화가 가능해진다. 마찬가지로, 각각의 정보의 성질에 따라, 움직임 벡터의 수를 적응적으로 변경하거나, 혹은 양자화 단계의 변경 유무를 적응적으로 전환하는 것도 가능하게 된다.
이상과 같이 본 발명은, 화상 신호를 효율적으로 부호화하는 것이 가능한 화상 부호화 장치, 화상 부호화 방법 및 화상 부호화 프로그램 기록 매체를 제공하는 것이며, 또한 상기 효율적으로 부호화된 부호화 신호를 적절히 복호화하는 것이 가능한 화상 복호화 장치, 화상 복호화 방법 및 화상 복호화 프로그램 기록 매체를 제공한다.

Claims (107)

  1. 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과,
    부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과,
    상기 검출 변화 화소와, 상기 예측 변화 화소로부터 양자의 차분을 계산하여 차분값 D를 출력하는 차분값 계산 수단과,
    미리 설정된 허용치와, 상기 차분값 D에 근거하여 정해지는 범위내의 값으로서, 또한 부호화하였을 때의 부호 길이가 최소로 되는 값인 D'를 선택하여, 이것을 수정 차분값으로서 출력하는 반올림 수단과,
    상기 수정 차분값 D'와, 상기 예측한 변화 화소로부터 2치 화상 신호를 복호화하는 복호화 수단과,
    상기 수정 차분값 D'를 부호화하는 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  2. 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과,
    해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과,
    상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 수단과,
    참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과,
    상기 검출 변화 화소와 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 수단과,
    상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 수단과,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 수단이 출력하는 부호화 모드를 부호화하는 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  3. 2차원 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과,
    해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과,
    상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 수단과,
    해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과,
    상기 검출 변화 화소와 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 수단과,
    상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 수단과,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 수단이 출력하는 부호화 모드를 부호화하는 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  4. 다치(多値) 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 장치에 있어서,
    상기 화소값이 소정치 이상으로 변화하는 화소를 검출하고, 상기 검출한 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 수단과,
    부호화 및 복호화 완료 화소의 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과,
    상기 검출 변화 화소와 상기 예측 화소의 차분을 계산하고, 상기 계산한 차분을 차분값 D로서 출력하는 차분값 계산 수단과,
    상기 차분값 D와, 상기 검출 변화 화소의 화소값을 부호화하는 부호화 수단과,
    상기 차분값 D와 상기 변화 화소의 화소값으로부터 다치 화상 신호를 복호화하는 복호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  5. 화상을 합성할 때의 비율을 나타내는 투과도 신호와 화소값 신호로 이루어지는 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 장치에 있어서,
    상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 수단과,
    상기 참조 화상의 화소값 신호를 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여 보상 화소값 신호를 출력하는 제 1 움직임 보상 수단과,
    상기 입력 신호의 화소값 신호와 상기 보상 화소값 신호로부터 양자의 차분을 계산하여 제 1 차분값을 출력하는 제 1 차분값 계산 수단과,
    상기 제 1 차분값을 부호화하는 제 1 부호화 수단과,
    상기 입력 신호의 투과도 신호와 상기 참조 화상의 투과도 신호를 비교하여 투과도 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 수단과,
    상기 참조 화상의 투과도 신호를 상기 투과도 신호의 움직임 벡터를 이용하여 움직임 보상하여 보상 투과도 신호를 출력하는 제 2 움직임 보상 수단과,
    상기 입력 신호의 투과도 신호와 상기 보상 투과도 신호로부터 양자의 차분값을 계산하여 제 2 차분값을 출력하는 제 2 차분값 계산 수단과,
    상기 제 2 차분값을 부호화하는 제 2 부호화 수단과,
    상기 화소값 신호의 움직임 벡터와 상기 투과도 신호의 움직임 벡터를 부호화하는 제 3 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  6. 제 5 항에 있어서,
    상기 제 2 움직임 벡터 검출 수단은,
    상기 제 1 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 투과도 신호와 상기 참조 화상의 투과도 신호를 비교하여 투과도 신호의 움직임 벡터를 검출하는 것인 것을 특징으로 하는 화상 부호화 장치.
  7. 제 5 항에 있어서,
    상기 제 1 움직임 벡터 검출 수단은,
    상기 제 2 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 것인 것을 특징으로 하는 화상 부호화 장치.
  8. 제 5 항에 있어서,
    상기 제 3 부호화 수단은,
    상기 화소값 신호의 움직임 벡터와, 상기 투과도 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것인 것을 특징으로 하는 화상 부호화 장치.
  9. 제 5 항에 있어서,
    상기 제 3 부호화 수단은,
    상기 투과도 신호의 움직임 벡터와, 상기 투과도 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것인 것을 특징으로 하는 화상 부호화 장치.
  10. 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 장치에 있어서,
    상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 수단과,
    상기 참조 화상의 화소값 신호를 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 화소값 신호를 출력하는 제 1 움직임 보상 수단과,
    상기 입력 신호의 화소값 신호와 상기 보상 화소값 신호로부터 양자의 차분을 계산하여 제 1 차분값을 출력하는 제 1 차분값 계산 수단과,
    상기 제 1 차분값을 부호화하는 제 1 부호화 수단과,
    상기 입력 신호의 형상 신호와 상기 참조 화상의 형상 신호를 비교하여 형상 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 수단과,
    상기 참조 화상의 형상 신호를 상기 형상 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 형상 신호를 출력하는 제 2 움직임 보상 수단과,
    상기 입력 신호의 형상 신호와 상기 보상 형상 신호로부터 양자의 차분값을 계산하여 제 2 차분값을 출력하는 제 2 차분값 계산 수단과,
    상기 제 2 차분값을 부호화하는 제 2 부호화 수단과,
    상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터를 부호화하는 제 3 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  11. 제 10 항에 있어서,
    상기 제 2 움직임 벡터 검출 수단은,
    상기 제 1 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 형상 신호와 상기 참조 화상의 형상 신호를 비교하여 형상 신호의 움직임 벡터를 검출하는 것을 특징으로 하는 화상 부호화 장치.
  12. 제 10 항에 있어서,
    상기 제 1 움직임 벡터 검출 수단은,
    상기 제 2 움직임 벡터 검출 수단에 의해 검출한 움직임 벡터의 근방에 있어서, 상기 입력 신호의 화소값 신호와 상기 참조 화상의 화소값 신호를 비교하여 화소값 신호의 움직임 벡터를 검출하는 것을 특징으로 하는 화상 부호화 장치.
  13. 제 10 항에 있어서,
    상기 제 3 부호화 수단은,
    상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것을 특징으로 하는 화상 부호화 장치.
  14. 제 10 항에 있어서,
    상기 제 3 부호화 수단은,
    상기 형상 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터와 상기 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것을 특징으로 하는 화상 부호화 장치.
  15. 제 10 항에 있어서,
    상기 입력 신호의 형상 신호가 화소값이 모두 유의한 것을 나타내는 것이고, 또한 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호가, 화소값이 모두 유의한 것을 나타내는 것인 경우,
    또는 상기 입력 신호의 형상 신호가 화소값이 모두 유의하지 않은 것을 나타내는 것이고, 또한 상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호가, 화소값이 모두 유의하지 않은 것을 나타내는 것인 경우,
    상기 제 2 벡터 검출 수단은 형상 신호의 움직임 벡터의 검출을 하지 않고,
    상기 제 1 벡터 검출 수단에 있어서 검출한 화소값 신호의 움직임 벡터를 상기 형상 신호의 움직임 벡터로 하는 것을 특징으로 하는 화상 부호화 장치.
  16. 제 10 항에 있어서,
    상기 제 1 움직임 벡터 검출 수단에 의해 검출한 화소값 신호의 움직임 벡터를 이용하여 참조 화상의 형상 신호를 움직임 보상한 보상 형상 신호를, 상기 입력 신호의 형상 신호와 비교하여, 비교 결과의 차가 미리 설정된 허용치를 하회하는 경우에,
    상기 제 1 벡터 검출 수단은 화소값 신호의 움직임 벡터의 검출을 하지 않고,
    상기 제 2 벡터 검출 수단에 있어서 검출한 형상 신호의 움직임 벡터를 상기 화소값 신호의 움직임 벡터로 하는 것을 특징으로 하는 화상 부호화 장치.
  17. 제 10 항에 있어서,
    상기 제 3 부호화 수단은,
    직전에 부호화한 입력 신호에 있어서, 상기 입력 신호의 형상 신호의 움직임 벡터가 부호화되어 있던 경우, 상기 직전에 부호화한 형상 신호의 움직임 벡터와, 입력 신호로부터 검출한 형상 신호의 움직임 벡터와의 차분값을 부호화하는 것을 특징으로 하는 화상 부호화 장치.
  18. 제 10 항에 있어서,
    상기 제 3 부호화 수단은,
    직전에 부호화한 입력 신호에 있어서, 상기 입력 신호의 화소값 신호의 움직임 벡터가 부호화되어 있었던 경우, 상기 직전에 부호화한 화소값 신호의 움직임 벡터와, 입력 신호로부터 검출한 화소값 신호의 움직임 벡터와의 차분값을 부호화하는 것을 특징으로 하는 화상 부호화 장치.
  19. 제 10 항 내지 제 18 항 중 어느 한 항에 있어서,
    상기 입력 신호가 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 것인 경우에,
    상기 투과도 정보를 상기 형상 신호로 하고, 상기 화상 정보를 상기 화소값 신호로 하는 것을 특징으로 하는 화상 부호화 장치.
  20. 제 10 항 내지 제 18 항 중 어느 한 항에 있어서,
    상기 입력 신호가 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 것인 경우에,
    상기 투과도 정보를, 형상만을 나타내는 2치 신호와, 그 밖의 신호인 나머지 형상 신호로 분리하고,
    상기 분리한 2치 신호를 상기 형상 신호로 하고,
    상기 분리한 나머지 형상 신호와 상기 화상 정보를 상기 화소값 신호로 하는 것을 특징으로 하는 화상 부호화 장치.
  21. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보 중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로 통합하여, 블럭화된 정보로서 출력하는 블럭화 수단과,
    상기 블럭화 수단에 의해 블럭화된 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 수단과,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 2 부호화 수단을 포함하며,
    상기 제 1 부호화 수단 출력과, 상기 제 2 부호화 수단 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 장치.
  22. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보 중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로 통합하여, 블럭화된 정보로서 출력하는 블럭화 수단과,
    상기 블럭화 수단에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보의 각각에 대하여 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 수단과,
    상기 제 1 부호화 수단에 있어서 선택된 부호화 모드 중 어느 하나의 부호화 모드에 있어서, 상기 블럭화 수단에 의해 블럭화된 상기 화소값 정보를 부호화하는 제 2 부호화 수단과,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 3 부호화 수단을 포함하며,
    상기 제 1 부호화 수단 출력, 상기 제 2 부호화 수단 출력 및 상기 제 3 부호화 수단 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 장치.
  23. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성의 비율을 나타내는 투과도 정보 중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 장치에 있어서,
    상기 입력 화상 신호의 각 화소를, 상기 형상 정보 또는 상기 투과도 정보와, 상기 화소값 정보와의 대응 관계에 근거하여, 대응하는 화소를 1그룹으로 하여 블럭화해서, 블럭화된 정보로서 출력하는 블럭화 수단과,
    상기 블럭화 수단에 의해 블럭화된 상기 화소값 정보에 대하여 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 부호화하는 제 1 부호화 수단과,
    상기 제 1 부호화 수단에 있어서 선택된 부호화 모드에 있어서, 상기 블럭화 수단에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보를 부호화하는 제 2 부호화 수단과,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 수단을 포함하며,
    상기 제 1 부호화 수단 출력, 상기 제 2 부호화 수단 출력 및 상기 제 3 부호화 수단 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 장치.
  24. 제 23 항에 있어서,
    상기 소정의 부호화 모드는 화면내(畵面內) 부호화 및 화면간(畵面間) 부호화인 것을 특징으로 하는 화상 부호화 장치.
  25. 제 23 항에 있어서,
    상기 제 2 부호화 수단은,
    상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드가 화면내 부호화이었을 경우에, 화면내 부호화를 선택하는 것을 특징으로 하는 화상 부호화 장치.
  26. 제 23 항에 있어서,
    상기 소정의 부호화 모드는, 상기 블럭마다의 움직임 벡터의 개수인 것을 특징으로 하는 화상 부호화 장치.
  27. 제 23 항에 있어서,
    상기 제 2 부호화 수단은,
    상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드인 움직임 벡터의 개수를 상기 부호화 모드로서 선택하는 것을 특징으로 하는 화상 부호화 장치.
  28. 제 23 항에 있어서,
    상기 소정의 부호화 모드는, 양자화 단계 변경 있음 및 양자화 단계 변경 없음인 것을 특징으로 하는 화상 부호화 장치.
  29. 제 23 항에 있어서,
    상기 제 2 부호화 수단은,
    상기 제 1 부호화 수단에 있어서, 상기 선택한 부호화 모드가 양자화 단계 변경 없음인 경우에, 양자화 단계 변경 없음을 선택하는 것을 특징으로 하는 화상 부호화 장치.
  30. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 장치에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 1 변화 화소를 출력하는 제 1 변화 화소 검출 수단과,
    부호화 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 수단과,
    부호화 및 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 수단과,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 따라서 상기 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과,
    상기 제 1 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 수단과,
    상기 변화 화소 차분값을 부호화하여 부호화 신호로 하는 예측 오차 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  31. 제 30 항에 있어서,
    상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은,
    상기 제 2 변화 화소 및 상기 제 3 변화 화소의 화소값을 상기 제 1 변화 화소의 화소값과 동일한 것으로 하는 것을 특징으로 하는 화상 부호화 장치.
  32. 제 30 항에 있어서,
    상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은,
    상기 주사하는 소정의 방향을, 상기 제 1 변화 화소 검출 수단이 상기 주사하는 소정의 방향과 동일한 방향으로 하는 것을 특징으로 하는 화상 부호화 장치.
  33. 제 30 항에 있어서,
    상기 제 2 변화 화소를 이용하여 예측한 변화 화소와의 차에 의해, 상기 제 3 변화 화소가 부호화되어 있는 것을 특징으로 하는 화상 부호화 장치.
  34. 제 30 항에 있어서,
    제 2 변화 화소, 제 3 변화 화소 및 제 1 변화 화소가 다른 주사선에 있는 것을 특징으로 하는 화상 부호화 장치.
  35. 제 30 항에 있어서,
    상기 변화 화소 예측 수단은,
    상기 제 2 변화 화소가 제 m 주사선의 x 번째 화소에 있고, 상기 제 3 변화 화소가 제 n 주사선의 y 번째 화소에 있을 때,
    상기 제 1 변화 화소에 대하여, 제 k 주사선의 y-(x-y)*(n-k)/(m-n) 번째 화소인 것으로 예측하는 것을 특징으로 하는 화상 부호화 장치.
  36. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 장치에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 수단과,
    부호화 및 복호화 완료 화소로부터 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과,
    상기 검출 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 수단과,
    상기 변화 화소 차분값의 값이 소정치 미만인 경우에, 상기 변화 화소 차분값을 부호화하여, 차분값 부호화 신호를 출력하는 예측 오차 부호화 수단과,
    상기 변화 화소 차분값의 값이 소정치 이상인 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 예측 오차 부호화 수단이 부호화할 수 있는 화소 위치에 위치하지 않는 화소의 수를 산출하고, 상기 산출한 화소수를 부호화하여, 화소수 부호화 신호를 출력하는 화소수 부호화 수단을 포함하며,
    상기 예측 오차 부호화 수단과 상기 화소수 부호화 수단은, 상기 차분값 부호화 신호와 상기 화소수 부호화 신호가 일의(一意)에 식별이 가능한 부호화를 행하는 것을 특징으로 하는 화상 부호화 장치.
  37. 제 36 항에 있어서,
    상기 예측 오차 부호화 수단 및 상기 화소수 부호화 수단은, 상기 변화 화소 차분값과 비교하는 상기 소정치를 해당 주사선의 화소수를 이용하여 설정하는 것을 특징으로 하는 화상 부호화 장치.
  38. 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 입력으로 하여, 상기 형상 신호를 부호화하는 화상 부호화 장치에 있어서,
    상기 입력한 형상 신호로부터, 상기 물체를 나타내는 화소를 포함하는 직사각형 영역인 유의 영역을 추출하고, 상기 추출한 유의 영역의 범위인 유의 영역 범위를 출력하는 유의 영역 추출 수단과,
    상기 형상 신호를 복수의 화소로 이루어지는 블럭으로 분할하는 블럭화 수단과,
    상기 블럭화 수단이 출력하는 각 블럭마다, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정한 경우는, 적어도 해당 블럭의 상기 유의 영역을 부호화하여 형상 부호화 신호를 출력하는 형상 부호화 수단을 포함하며,
    상기 유의 영역 범위와 상기 형상 부호화 신호를 부호화 신호로 하는 것을 특징으로 하는 화상 부호화 장치.
  39. 제 38 항에 있어서,
    상기 형상 부호화 수단은,
    상기 블럭화 수단에 의해 구성된 각 블럭중에서, 상기 유의 영역을 포함하는 최소의 직사각형 영역을 추출하고, 상기 추출한 직사각형 영역의 내부만을 부호화하는 것을 특징으로 하는 화상 부호화 장치.
  40. 복수의 화소로 이루어지는 2차원 화상 신호를 입력으로 하여 상기 2차원 화상 신호를 부호화하는 화상 부호화 장치에 있어서,
    상기 화상 신호를 적어도 2개의 화상 신호로 분리하고, 상기 분리한 화상 신호를 2개 이상의 부분 화상 신호로서 출력하는 화상 신호 분리 수단과,
    상기 부분 화상 신호 중 적어도 1개를 대상 부분 화상 신호로서 선택하고, 상기 선택한 대상 부분 화상 신호를 부호화하여 제 1 부호화 신호를 출력하는 제 1 화상 신호 부호화 수단과,
    상기 제 1 부호화 신호를 복호화한 화상 신호에 근거하여, 상기 부분 화상 신호 중 상기 대상 부분 화상 신호를 제외한 대상외 부분 화상 신호를 예측하고, 상기 예측이 적중할 확률을 계산하고, 상기 계산한 예측 확률을 출력하는 예측 확률 계산 수단과,
    상기 예측 확률 계산 수단에 의해 계산한 예측 확률에 따라, 복호화의 우선도를 결정하고, 상기 결정한 우선도에 따른 부호화 방법을 이용하여 상기 대상외 부분 화상 신호를 부호화하는 제 2 화상 신호 부호화 수단을 포함한 것을 특징으로 하는 화상 부호화 장치.
  41. 제 40 항에 있어서,
    상기 제 2 화상 신호 부호화 수단은,
    상기 예측 확률이 작은 화소가 우선적으로 복호화되도록, 상기 복호화의 우선도를 결정하는 것을 특징으로 하는 화상 부호화 장치.
  42. 제 40 항에 있어서,
    상기 예측 확률 계산 수단은,
    근방의 화소값이 동일한 값인 경우에 상기 적중할 확률을 크게 하고, 근방의 화소값이 상이한 값인 경우에 상기 적중할 확률을 작게 하는 것을 특징으로 하는 화상 부호화 장치.
  43. 부호화 신호를 입력하여, 복호화하는 화상 복호화 장치에 있어서,
    상기 부호화 신호를 복호화하여, 부호화 모드와 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서 출력하고, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 수단과,
    해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과,
    참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과,
    상기 모드 신호가 해당 프레임 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 참조 프레임 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 수단을 포함하며,
    상기 가산 수단의 출력을 변화 화소로 하는 것을 특징으로 하는 화상 복호화 장치.
  44. 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서,
    상기 부호화 신호를 복호화하여 부호화 모드와 차분값을 취득하며, 상기 취득한 부호화 모드를 모드 신호로서 출력하고, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 수단과,
    해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값의 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 수단과,
    해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 수단과,
    상기 모드 신호가 수평 방향 주사의 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 수직 방향 주사의 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 수단을 포함하며,
    상기 가산 수단의 출력을 변화 화소로 하는 것을 특징으로 하는 화상 복호화 장치.
  45. 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서,
    상기 부호화 신호를 복호화하여 차분값과 변화 화소의 화소값을 취득하며, 상기 취득한 차분값을 복호 차분값으로서 출력하고, 상기 취득한 변화 화소의 화소값을 복호 화소값으로서 출력하는 복호화 수단과,
    복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력하는 부호화 신호의 변화 화소를 예측하고, 상기 예측한 화소를 예측 화소로서 출력하는 예측 수단과,
    상기 복호 차분값과 상기 예측 화소를 가산하고, 상기 가산한 결과를 수정 차분값으로서 출력하는 가산 수단과,
    상기 수정 차분값과, 상기 복호 화소값으로부터 다치 화상 신호를 복호화 처리에 의해 취득하는 화상 복호화 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  46. 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서,
    상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 수단과,
    상기 부호화 신호로부터 투과도 신호의 차분값을 복호화하여, 복호 투과도 차분값으로서 출력하는 제 2 복호화 수단과,
    상기 부호화 신호로부터 화소값 신호의 움직임 벡터와 투과도 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 투과도 움직임 벡터를 출력하는 제 3 복호화 수단과,
    후술하는 참조 화상의 화소값 신호를 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 수단과,
    상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 수단과,
    후술하는 참조 화상의 투과도 신호를 상기 복호 투과도 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 투과도 신호로서 출력하는 제 2 움직임 보상 수단과,
    상기 복호 투과도 차분값과 보상 투과도 신호를 가산하고, 상기 가산한 결과를 복호화한 투과도 신호로서 출력함과 동시에, 참조 화상의 투과도 신호로서 출력하는 제 2 가산 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  47. 제 46 항에 있어서,
    상기 제 3 복호화 수단은, 화소값 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 투과도 움직임 벡터로 하는 것을 특징으로 하는 화상 복호화 장치.
  48. 부호화 신호를 입력하여, 복호화하는 화상 복호화 장치에 있어서,
    상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 수단과,
    상기 부호화 신호로부터 형상 신호의 차분값을 복호화하여, 복호 형상 차분값으로서 출력하는 제 2 복호화 수단과,
    상기 부호화 신호로부터 화소값 신호의 움직임 벡터와 형상 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 형상 움직임 벡터를 출력하는 제 3 복호화 수단과,
    후술하는 참조 화상의 화소값 신호를 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 수단과,
    상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 수단과,
    후술하는 참조 화상의 형상 신호를 상기 복호 형상 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 형상 신호로서 출력하는 제 2 움직임 보상 수단과,
    상기 복호 형상 차분값과 보상 형상 신호를 가산하고, 상기 가산한 결과를 복호화한 형상 신호로서 출력함과 동시에, 참조 화상의 형상 신호로서 출력하는 제 2 가산 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  49. 제 48 항에 있어서,
    상기 제 3 복호화 수단은, 화소값 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 화소값 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 형상 움직임 벡터로 하는 것을 특징으로 하는 화상 복호화 장치.
  50. 제 48 항에 있어서,
    상기 제 3 복호화 수단은, 형상 신호의 움직임 벡터와 움직임 벡터의 차분값을 복호화하여 복호 형상 움직임 벡터와 복호 움직임 벡터 차분값을 취득하고, 상기 복호 형상 움직임 벡터와 복호 움직임 벡터 차분값을 가산하여, 상기 복호 화소값 움직임 벡터로 하는 것을 특징으로 하는 화상 복호화 장치.
  51. 제 48 항에 있어서,
    상기 제 3 복호화 수단은,
    상기 입력 신호가, 직전에 부호화한 형상 신호의 움직임 벡터와, 입력 신호로부터 검출한 형상 신호의 움직임 벡터와의 차분값을 부호화한 것인 경우,
    상기 차분값을 복호화하고, 상기 복호화한 차분값을 직전에 복호화한 형상 신호의 움직임 벡터와 가산하여, 상기 복호 형상 움직임 벡터로 하는 것을 특징으로 하는 화상 부호화 장치.
  52. 제 48 항에 있어서,
    상기 입력 신호가, 직전에 부호화한 화소값 신호의 움직임 벡터와, 입력 신호로부터 검출한 화소값 신호의 움직임 벡터와의 차분값을 부호화한 것인 경우,
    상기 차분값을 복호화하고, 상기 복호화한 차분값을 직전에 복호화한 화소값 신호의 움직임 벡터와 가산하여, 상기 복호 화소값 움직임 벡터로 하는 것을 특징으로 하는 화상 부호화 장치.
  53. 제 48 항 내지 제 52 항 중 어느 한 항에 있어서,
    상기 입력 신호가, 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 화상 신호를 부호화한 부호화 신호인 경우에,
    상기 복호화한 형상 신호를 상기 투과도 정보로 하고, 상기 복호화한 화소값 신호를 상기 화상 정보로 하는 것을 특징으로 하는 화상 복호화 장치.
  54. 제 48 항 내지 제 52 항 중 어느 한 항에 있어서,
    상기 입력 신호가, 복수의 화상을 합성하기 위한 합성의 비율을 나타내는 정보를 포함하는 투과도 정보와 화상 정보로 구성되는 화상 신호를, 상기 투과도 정보를, 형상만을 나타내는 2치 신호와 그 밖의 신호인 나머지 형상 신호로 분리하여, 상기 분리한 2치 신호를 형상 신호로 하고, 상기 분리한 나머지 형상 신호와 상기 화상 정보를 화소값 신호로 하여 부호화한 부호화 신호인 경우에,
    상기 복호화한 형상 신호를 상기 투과도 정보의 2치 신호로 하고, 상기 복호화한 화소값 신호를 상기 화상 정보 및 상기 투과도 정보의 나머지 형상 신호로 하는 것을 특징으로 하는 화상 복호화 장치.
  55. 부호화 신호를 입력하여 복호화하는 화상 복호화 장치에 있어서,
    상기 입력한 부호화 신호를 복호화하여, 형상 정보, 투과도 정보 및 화소값 정보의 각각의 부호화 모드를 나타내는 모드 식별 정보를 취득하는 제 1 복호화 수단과,
    상기 취득한 모드 식별 정보에 대응하여, 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 복호화하는 제 2 복호화 수단과,
    상기 제 2 복호화 수단이 출력하는 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 통합하여 복호 화상 신호로 하는 역(逆)블럭화 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  56. 제 55 항에 있어서,
    상기 모드 식별 정보는, 부호화 모드로서 화면내 부호화 및 화면간 부호화를 나타내는 것을 특징으로 하는 화상 부호화 장치.
  57. 제 55 항에 있어서,
    상기 모드 식별 정보는, 부호화 모드로서 블럭마다의 움직임 벡터의 개수를 나타내는 것을 특징으로 하는 화상 부호화 장치.
  58. 제 55 항에 있어서,
    상기 모드 식별 정보는, 부호화 모드로서 양자화 단계 변경 있음 및 양자화 단계 변경 없음을 나타내는 것을 특징으로 하는 화상 부호화 장치.
  59. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서,
    복호화가 완료된 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 수단과,
    복호화가 완료된 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 수단과,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 따라서, 후술하는 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과,
    상기 입력한 부호화 신호를 복호화하여 예측 오차를 취득하고, 상기 취득한 예측 오차를 출력하는 예측 오차 복호화 수단과,
    상기 예측 변화 화소와, 상기 예측 오차를 가산하여 제 1 변화 화소로서 출력하는 제 1 변화 화소 복호화 수단과,
    직전에 복호화한 변화 화소와 상기 제 1 변화 화소 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  60. 제 59 항에 있어서,
    상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은,
    상기 제 2 변화 화소 및 상기 제 3 변화 화소의 화소값을 상기 제 1 변화 화소의 화소값과 동일한 것으로 하는 것을 특징으로 하는 화상 복호화 장치.
  61. 제 59 항에 있어서,
    상기 제 2 변화 화소 검출 수단 및 상기 제 3 변화 화소 검출 수단은,
    상기 주사하는 소정의 방향을 상기 제 1 변화 화소 검출 수단이 상기 주사하는 소정의 방향과 동일한 방향으로 하는 것을 특징으로 하는 화상 복호화 장치.
  62. 제 59 항에 있어서,
    상기 제 2 변화 화소를 이용하여 예측한 변화 화소와의 차에 의해, 상기 제 3 변화 화소를 복호화하는 것을 특징으로 하는 화상 복호화 장치.
  63. 제 59 항에 있어서,
    제 2 변화 화소, 제 3 변화 화소 및 제 1 변화 화소가 서로 다른 주사선에 있는 것을 특징으로 하는 화상 복호화 장치.
  64. 제 59 항에 있어서,
    상기 변화 화소 예측 수단은,
    상기 제 2 변화 화소가 제 m 주사선의 x번째 화소에 있고, 상기 제 3 변화 화소가 제 n 주사선의 y 번째 화소에 있을 때,
    상기 제 1 변화 화소에 대하여, 제 k 주사선의 y-(x-y)*(n-k)/(m-n) 번째 화소인 것으로 예측하는 것을 특징으로 하는 화상 복호화 장치.
  65. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서,
    복호화가 완료된 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 수단과,
    상기 검출 변화 화소에 근거하여 해당 주사선의 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 수단과,
    상기 입력하는 부호화 신호를 복호화하고, 차분값 부호화 신호인지, 또는 화소수 부호화 신호인지를 판정하여 식별 신호를 출력하는 모드 복호화 수단과,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우에, 상기 차분값 부호화 신호를 복호화하여 복호 예측 오차를 출력하는 예측 오차 복호화 수단과,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우에, 상기 예측 변화 화소와 상기 복호 예측 오차를 가산하고, 상기 가산한 결과를 제 1 복호 변화 화소로서 출력하는 제 1 변화 화소 복호화 수단과,
    상기 식별 신호가 화소수 부호화 신호를 나타내는 경우에, 직전에 부호화한 변화 화소로부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 복호 예측 오차의 화소 위치에 위치하지 않는 화소의 수를 상기 화소수 부호화 신호로부터 복호화하고, 상기 복호화한 화소의 수에 근거하여 변화 화소의 위치를 취득하고, 상기 취득한 결과를 제 2 복호 변화 화소로서 출력하는 제 2 변화 화소 복호화 수단과,
    상기 식별 신호에 대응하여, 상기 제 1 복호 변화 화소 또는 상기 제 2 복호 변화 화소를 선택하여 출력하는 변화 화소 선택 수단과,
    직전에 복호화한 변화 화소와 상기 제 1 변화 화소 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 상기 화소값을 복호화하는 화소값 복호화 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  66. 제 65 항에 있어서,
    상기 변화 화소 선택 수단은, 해당 주사선의 화소수에 따라 상기 선택을 하는 것을 특징으로 하는 화상 복호화 장치.
  67. 부호화 신호를 입력해서 복호화하여, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 출력하는 화상 복호화 장치에 있어서,
    상기 부호화 신호를 복호화하여, 상기 물체를 나타내는 화소가 존재하는 영역을 직사각형 영역으로 하여 취득하고, 상기 취득한 영역을 유의 영역으로서 출력하는 유의 영역 복호화 수단과,
    복수의 화소로 이루어지는 블럭의 각각에 대하여, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정하는 경우에는, 해당 블럭 중 적어도 상기 유의 영역을 복호화하고, 상기 복호화한 결과를 복호 블럭 형상 신호로서 출력하는 형상 복호화 수단과,
    상기 복호 블럭 형상 신호를 통합하여, 2차원의 형상 신호를 구성하고, 상기 구성한 2차원의 형상 신호를 복호화 신호로서 출력하는 역블럭화 수단을 포함한 것을 특징으로 하는 화상 복호화 장치.
  68. 제 67 항에 있어서,
    상기 형상 복호화 수단은,
    각 블럭마다, 블럭 중에서 상기 유의 영역을 포함하는 최소의 직사각형 영역을 추출하고, 상기 추출한 직사각형 영역의 내부만을 복호화하는 것을 특징으로 하는 화상 복호화 장치.
  69. 부호화 신호를 입력하여, 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 장치에 있어서,
    상기 부호화 신호를 복호화하여 제 1 복호화 신호를 출력하는 제 1 화상 신호 복호화 수단과,
    상기 제 1 화상 신호 복호화 수단에 의해 복호화한 화상 신호에 근거하여, 상기 제 1 화상 신호 복호화 수단에서 복호화되지 않은 화상 신호를 예측하여 출력하는 화상 예측 수단과,
    상기 예측한 화상 신호의 예측이 적중할 확률을 계산하여 출력하는 예측 확률 계산 수단과,
    상기 예측 확률 계산 수단에서 계산한 예측 확률에 따른 우선도에 의해 상기 입력된 부호화 신호를 복호화하는 제 2 화상 신호 복호화 수단과,
    상기 제 1 화상 신호 복호화 수단 출력과 상기 제 2 화상 신호 부호화 수단 출력을 통합하고, 또한 상기 제 1 복호화 수단 및 상기 제 2 복호화 수단 중 어느 것에 의해서도 복호화되지 않는 화상 신호를, 상기 화상 예측 수단이 예측한 화상 신호로 치환하여, 복호 화상 신호로서 출력하는 복호 신호 통합 수단을 포함한 화상 복호화 장치.
  70. 제 69 항에 있어서,
    상기 제 2 화상 신호 복호화 수단은,
    예측이 적중할 확률이 작은 화소에 대하여, 우선적으로 복호화하는 것을 특징으로 하는 화상 복호화 장치.
  71. 제 69 항에 있어서,
    상기 예측 확률 계산 수단은,
    근방의 화소값이 동일한 값일 경우에, 상기 적중할 확률을 크게 하고, 근방의 화소값이 상이한 값일 경우에, 상기 적중할 확률을 작게 하는 것을 특징으로 하는 화상 복호화 장치.
  72. 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 방법에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와,
    해당 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와,
    참조 프레임에 있어서의 부호화 및 복호화 완료 화소의, 화소값이 변화하는 화소에 근거하여 움직임 보상과 더불어 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 검출 변화 화소와 상기 제 2 예측 화소와의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와,
    상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택해서, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 포함한 것을 특징으로 하는 화상 부호화 방법.
  73. 2차원 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 방법에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와,
    상기 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료 화소의 화소값의 변화 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    상기 검출 변화 화소와 상기 제 1 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와,
    상기 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 검출 변화 화소와, 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와,
    상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중의 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 포함한 것을 특징으로 하는 화상 부호화 방법.
  74. 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와, 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 방법에 있어서,
    상기 입력 신호의 화소값 신호와, 상기 참조 화상의 화소값 신호를 비교하여, 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 단계와,
    상기 참조 화상의 화소값 신호를, 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 화소값 신호를 출력하는 제 1 움직임 보상 단계와,
    상기 입력 신호의 화소값 신호와, 상기 보상 화소값 신호로부터 양자의 차분을 계산하여, 제 1 차분값을 출력하는 제 1 차분값 계산 단계와,
    상기 제 1 차분값을 부호화하는 제 1 부호화 단계와,
    상기 입력 신호의 형상 신호와, 상기 참조 화상의 형상 신호를 비교하여, 형상 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 단계와,
    상기 참조 화상의 형상 신호를, 상기 형상 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 형상 신호를 출력하는 제 2 움직임 보상 단계와,
    상기 입력 신호의 형상 신호와, 상기 보상 형상 신호로부터 양자의 차분값을 계산하여, 제 2 차분값을 출력하는 제 2 차분값 계산 단계와,
    상기 제 2 차분값을 부호화하는 제 2 부호화 단계와,
    상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터를 부호화하는 제 3 부호화 단계를 포함한 것을 특징으로 하는 화상 부호화 방법.
  75. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를 종합하여 부호화하는 제 2 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력과, 상기 제 2 부호화 단계 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 방법.
  76. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와,
    상기 제 1 부호화 단계에 있어서 선택된 부호화 모드 중 어느 하나의 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보를 부호화하는 제 2 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 방법.
  77. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 방법에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 부호화하는 제 1 부호화 단계와,
    상기 제 1 부호화 단계에 있어서 선택된 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보를 부호화하는 제 2 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 방법.
  78. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 방법에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 1 변화 화소를 출력하는 제 1 변화 화소 검출 단계와,
    부호화 복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와,
    부호화 및 복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여 상기 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 제 1 변화 화소와 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와,
    상기 변화 화소 차분값을 부호화하여 부호화 신호로 하는 예측 오차 부호화 단계를 포함한 것을 특징으로 하는 화상 부호화 방법.
  79. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 방법에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 단계와,
    부호화 및 복호화 완료 화소로부터 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 검출 변화 화소와 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와,
    상기 변화 화소 차분값의 값이 소정치 미만인 경우에, 상기 변화 화소 차분값을 부호화하여, 차분값 부호화 신호를 출력하는 예측 오차 부호화 단계와,
    상기 변화 화소 차분값의 값이 소정치 이상인 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 예측 오차 부호화 단계가 부호화할 수 있는 화소 위치에 위치하지 않는 화소의 수를 산출하고, 상기 산출한 화소수를 부호화하여, 화소수 부호화 신호를 출력하는 화소수 부호화 단계를 포함하며,
    상기 예측 오차 부호화 단계와, 상기 화소수 부호화 단계는, 상기 차분값 부호화 신호와, 상기 화소수 부호화 신호가 일의에 식별이 가능한 부호화를 행하는 것을 특징으로 하는 화상 부호화 방법.
  80. 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 입력으로 하여 상기 형상 신호를 부호화하는 화상 부호화 방법에 있어서,
    상기 입력한 형상 신호로부터, 상기 물체를 나타내는 화소를 포함하는 직사각형 영역인 유의 영역을 추출하고, 상기 추출한 유의 영역의 범위인 유의 영역 범위를 출력하는 유의 영역 추출 단계와,
    상기 형상 신호를 복수의 화소로 이루어지는 블럭으로 분할하는 블럭화 단계와,
    상기 블럭화 단계가 출력하는 각 블럭마다, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정한 경우에는, 적어도 해당 블럭의 상기 유의 영역을 부호화하여 형상 부호화 신호를 출력하는 형상 부호화 단계를 포함하며,
    상기 유의 영역 범위와, 상기 형상 부호화 신호를 부호화 신호로 하는 것을 특징으로 하는 화상 부호화 방법.
  81. 복수의 화소로 이루어지는 2차원 화상 신호를 입력으로 하여 상기 2차원 화상 신호를 부호화하는 화상 부호화 방법에 있어서,
    상기 화상 신호를 적어도 2개의 화상 신호로 분리하고, 상기 분리한 화상 신호를 2개 이상의 부분 화상 신호로서 출력하는 화상 신호 분리 단계와,
    상기 부분 화상 신호 중 적어도 1개를 대상 부분 화상 신호로서 선택하고, 상기 선택한 대상 부분 화상 신호를 부호화하여 제 1 부호화 신호를 출력하는 제 1 화상 신호 부호화 단계와,
    상기 제 1 부호화 신호를 복호화한 화상 신호에 근거하여, 상기 부분 화상 신호 중 상기 대상 부분 화상 신호를 제외한 대상외 부분 화상 신호를 예측하고, 상기 예측이 적중할 확률을 계산하고, 상기 계산한 예측 확률을 출력하는 예측 확률 계산 단계와,
    상기 예측 확률 계산 단계에서 계산한 예측 확률에 따라, 복호화의 우선도를 결정하고, 상기 결정한 우선도에 따른 부호화 방법을 이용하여, 상기 대상외 부분 화상 신호를 부호화하는 제 2 화상 신호 부호화 단계를 포함한 것을 특징으로 하는 화상 부호화 방법.
  82. 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서,
    상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와,
    해당 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    참조 프레임에 있어서의 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 모드 신호가 해당 프레임 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 참조 프레임 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 포함하며,
    상기 가산 단계의 출력을 변화 화소로 하는 것을 특징으로 하는 화상 복호화 방법.
  83. 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서,
    상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와,
    해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 모드 신호가 수평 방향 주사의 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 수직 방향 주사의 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 포함하며,
    상기 가산 단계의 출력을 변화 화소로 하는 것을 특징으로 하는 화상 복호화 방법.
  84. 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서,
    상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 단계와,
    상기 부호화 신호로부터 형상 신호의 차분값을 복호화하여, 복호 형상 차분값으로서 출력하는 제 2 복호화 단계와,
    상기 부호화 신호로부터 화소값 신호의 움직임 벡터와, 형상 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와 복호 형상 움직임 벡터를 출력하는 제 3 복호화 단계와,
    후술하는 참조 화상의 화소값 신호를, 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 단계와,
    상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 단계와,
    후술하는 참조 화상의 형상 신호를, 상기 복호 형상 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 형상 신호로서 출력하는 제 2 움직임 보상 단계와,
    상기 복호 형상 차분값과 보상 형상 신호를 가산하고, 상기 가산한 결과를 복호화한 형상 신호로서 출력함과 동시에, 참조 화상의 형상 신호로서 출력하는 제 2 가산 단계를 포함한 것을 특징으로 하는 화상 복호화 방법.
  85. 부호화 신호를 입력하여 복호화하는 화상 복호화 방법에 있어서,
    상기 입력한 부호화 신호를 복호화하여, 형상 정보, 투과도 정보 및 화소값 정보의 각각의 부호화 모드를 나타내는 모드 식별 정보를 취득하는 제 1 복호화 단계와,
    상기 취득한 모드 식별 정보에 대응하여, 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 복호화하는 제 2 복호화 단계와,
    상기 제 2 복호화 단계가 출력하는 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 통합하여 복호 화상 신호로 하는 역블럭화 단계를 포함한 것을 특징으로 하는 화상 복호화 방법.
  86. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서,
    복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와,
    복호화 완료 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여, 후술하는 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 입력한 부호화 신호를 복호화하여 예측 오차를 취득하고, 상기 취득한 예측 오차를 출력하는 예측 오차 복호화 단계와,
    상기 예측 변화 화소와, 상기 예측 오차를 가산하여 제 1 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와,
    직전에 복호화한 변화 화소와 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값의 변화 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 단계를 포함한 것을 특징으로 하는 화상 복호화 방법.
  87. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서,
    복호화 완료의 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 단계와,
    상기 검출 변화 화소에 근거하여 해당 주사선의 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 입력하는 부호화 신호를 복호화하여, 차분값 부호화 신호인지, 또는 화소수 부호화 신호인지를 판정하여, 식별 신호를 출력하는 모드 복호화 단계와,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 차분값 부호화 신호를 복호화하여 복호 예측 오차를 출력하는 예측 오차 복호화 단계와,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 예측 변화 화소와 상기 복호 예측 오차를 가산하고, 상기 가산한 결과를 제 1 복호 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와,
    상기 식별 신호가 화소수 부호화 신호를 나타내는 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 복호 예측 오차의 화소 위치에 위치하지 않는 화소의 수를, 상기 화소수 부호화 신호로부터 복호화하고, 상기 복호화한 화소의 수에 근거하여 변화 화소의 위치를 취득하고, 상기 취득한 결과를 제 2 복호 변화 화소로서 출력하는 제 2 변화 화소 복호화 단계와,
    상기 식별 신호에 대응하여, 상기 제 1 복호 변화 화소 또는 상기 제 2 복호 변화 화소를 선택하여 출력하는 변화 화소 선택 단계와,
    직전에 복호화한 변화 화소와 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값의 변화 화소가 없는 것으로 하여 해당 화소값을 복호화하는 화소값 복호화 단계를 포함한 것을 특징으로 하는 화상 복호화 방법.
  88. 부호화 신호를 입력하여 복호화해서, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 출력하는 화상 복호화 방법에 있어서,
    상기 부호화 신호를 복호화하여, 상기 물체를 나타내는 화소가 존재하는 영역을 직사각형 영역으로서 취득하고, 상기 취득한 영역을 유의 영역으로서 출력하는 유의 영역 복호화 단계와,
    복수의 화소로 이루어지는 블럭의 각각에 관하여, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정하는 경우에는, 해당 블럭중 적어도 상기 유의 영역을 복호화하고, 상기 복호화한 결과를 복호 블럭 형상 신호로서 출력하는 형상 복호화 단계와,
    상기 복호 블럭 형상 신호를 통합하여, 2차원의 형상 신호를 구성하고, 상기 구성한 2차원의 형상 신호를 복호화 신호로서 출력하는 역블럭화 단계를 포함한 것을 특징으로 하는 화상 복호화 방법.
  89. 부호화 신호를 입력하여, 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 방법에 있어서,
    상기 부호화 신호를 복호화하여 제 1 복호화 신호를 출력하는 제 1 화상 신호 복호화 단계와,
    상기 제 1 화상 신호 복호화 단계에서 복호화한 화상 신호에 근거하여, 상기 제 1 화상 신호 복호화 단계에서 복호화되지 않는 화상 신호를 예측하여 출력하는 화상 예측 단계와,
    상기 예측한 화상 신호의 예측이 적중할 확률을 계산하여 출력하는 예측 확률 계산 단계와,
    상기 예측 확률 계산 단계에서 계산한 예측 확률에 따른 우선도로 상기 입력된 부호화 신호를 복호화하는 제 2 화상 신호 복호화 단계와,
    상기 제 1 화상 신호 복호화 단계 출력과 상기 제 2 화상 신호 부호화 단계 출력을 통합하고, 또한 상기 제 1 복호화 단계 및 상기 제 2 복호화 단계 중 어느 것에 의해서도 복호화되지 않은 화상 신호를, 상기 화상 예측 단계가 예측한 화상 신호로 치환하여, 복호 화상 신호로서 출력하는 복호 신호 통합 단계를 포함한 화상 복호화 방법.
  90. 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와,
    해당 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    상기 검출 변화 화소와 상기 제 1 예측 화소와의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와,
    참조 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 검출 변화 화소와 상기 제 2 예측 화소와의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와,
    상기 제 1 차분값 D와 상기 제 2 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 포함한 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  91. 2차원 2치 화상 신호를 입력 신호로 하고, 상기 입력 신호의 화소값이 변화하는 화소를 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 화소값이 변화하는 화소를 검출하고, 상기 검출한 변화 화소를 검출 변화 화소로서 출력하는 변화 화소 검출 단계와,
    해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    상기 검출 변화 화소와 상기 제 1 예측 화소와의 차분을 계산하고, 상기 계산한 차분을 제 1 차분값 D로서 출력하는 제 1 차분값 계산 단계와,
    해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 검출 변화 화소와, 상기 제 2 예측 화소의 차분을 계산하고, 상기 계산한 차분을 제 2 차분값 D"로서 출력하는 제 2 차분값 계산 단계와,
    상기 제 1 차분값 D와 제 2 상기 차분값 D"에 대하여, 각각을 부호화한 경우의 부호 길이를 계산하고, 그 계산 결과를 비교하여 부호 길이가 짧은 쪽을 선택하고, 상기 선택에 대응하여 「제 1」 또는 「제 2」 중 어느 하나를 부호화 모드로서 출력하는 모드 선택 단계와,
    상기 선택한 제 1 차분값 D, 또는 제 2 차분값 D"와, 상기 모드 선택 단계가 출력하는 부호화 모드를 부호화하는 부호화 단계를 포함한 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  92. 물체의 형상 및 각 화소의 화소값이 유의한지 여부를 나타내는 형상 신호와, 화소값 신호로 이루어지는, 블럭화된 형상 부가 화상 신호를 입력 신호로 하고, 참조 화상을 참조하여 상기 입력 신호를 부호화하는 부호화 방법에 있어서,
    상기 입력 신호의 화소값 신호와, 상기 참조 화상의 화소값 신호를 비교하여, 화소값 신호의 움직임 벡터를 검출하는 제 1 움직임 벡터 검출 단계와,
    상기 참조 화상의 화소값 신호를, 상기 화소값 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 화소값 신호를 출력하는 제 1 움직임 보상 단계와,
    상기 입력 신호의 화소값 신호와, 상기 보상 화소값 신호로부터 양자의 차분을 계산하여, 제 1 차분값을 출력하는 제 1 차분값 계산 단계와,
    상기 제 1 차분값을 부호화하는 제 1 부호화 단계와,
    상기 입력 신호의 형상 신호와, 상기 참조 화상의 형상 신호를 비교하여, 형상 신호의 움직임 벡터를 검출하는 제 2 움직임 벡터 검출 단계와,
    상기 참조 화상의 형상 신호를, 상기 형상 신호의 움직임 벡터를 이용하여 움직임 보상하여, 보상 형상 신호를 출력하는 제 2 움직임 보상 단계와,
    상기 입력 신호의 형상 신호와, 상기 보상 형상 신호로부터, 양자의 차분값을 계산하여, 제 2 차분값을 출력하는 제 2 차분값 계산 단계와,
    상기 제 2 차분값을 부호화하는 제 2 부호화 단계와,
    상기 화소값 신호의 움직임 벡터와, 상기 형상 신호의 움직임 벡터를 부호화하는 제 3 부호화 단계를 포함한 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  93. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 2 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력과, 상기 제 2 부호화 단계 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 프로그램을 기록한 기록 매체.
  94. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보의 각각에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 각각을 부호화하는 제 1 부호화 단계와,
    상기 제 1 부호화 단계에 있어서 선택된 부호화 모드 중 어느 하나의 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보를 부호화하는 제 2 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  95. 물체의 각 화소의 화소값이 유의한지 여부를 나타내는 형상 정보와, 물체의 화소마다의 합성 비율을 나타내는 투과도 정보중 적어도 한쪽과, 화소값 정보로 구성되는 화상 신호를 입력 화상 신호로 하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 입력 화상 신호에 대하여, 공간 및 시간적으로 일치하는 화소를 1개의 그룹으로서 통합하여, 블럭화된 정보로서 출력하는 블럭화 단계와,
    상기 블럭화 단계에 의해 블럭화된 상기 화소값 정보에 대하여, 소정의 부호화 모드 중에서 부호화 모드를 선택하고, 상기 선택한 부호화 모드에 있어서 부호화하는 제 1 부호화 단계와,
    상기 제 1 부호화 단계에서 선택된 부호화 모드에 있어서, 상기 블럭화 단계에 의해 블럭화된 상기 형상 정보 및 상기 투과도 정보를 부호화하는 제 2 부호화 단계와,
    상기 형상 정보, 상기 투과도 정보 및 상기 화소값 정보의 각각에 관한, 상기 선택한 모드를 나타내는 모드 식별 정보를, 종합하여 부호화하는 제 3 부호화 단계를 포함하며,
    상기 제 1 부호화 단계 출력, 상기 제 2 부호화 단계 출력 및 상기 제 3 부호화 단계 출력을 부호화 출력으로 하는 것을 특징으로 하는 화상 부호화 프로그램을 기록한 기록 매체.
  96. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 1 변화 화소를 출력하는 제 1 변화 화소 검출 단계와,
    부호화 복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와,
    부호화 및 복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여 상기 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 제 1 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와,
    상기 변화 화소 차분값을 부호화하여 부호화 신호로 하는 예측 오차 부호화 단계를 포함한 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  97. 복수의 화소로 이루어지는 2차원 화상 신호를 입력하여 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출단계와,
    부호화 및 복호화 완료의 화소로부터 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 검출 변화 화소와, 상기 예측 변화 화소와의 차를 계산하고, 상기 계산한 변화 화소 차분값을 출력하는 예측 오차 계산 단계와,
    상기 변화 화소 차분값의 값이 소정치 미만인 경우에, 상기 변화 화소 차분값을 부호화하여, 차분값 부호화 신호를 출력하는 예측 오차 부호화 단계와,
    상기 변화 화소 차분값의 값이 소정치 이상인 경우에, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 예측 오차 부호화단계가 부호화할 수 있는 화소 위치에 위치하지 않는 화소의 수를 산출하고, 상기 산출한 화소수를 부호화하여, 화소수 부호화 신호를 출력하는 화소수 부호화 단계를 포함하며,
    상기 예측 오차 부호화 단계와, 상기 화소수 부호화 단계는, 상기 차분값 부호화 신호와, 상기 화소수 부호화 신호가 일의에 식별 가능한 부호화를 행하는 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  98. 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 입력으로 하여, 상기 형상 신호를 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 입력한 형상 신호로부터, 상기 물체를 나타내는 화소를 포함하는 직사각형 영역인 유의 영역을 추출하고, 상기 추출한 유의 영역의 범위인 유의 영역 범위를 출력하는 유의 영역 추출 단계와,
    상기 형상 신호를 복수의 화소로 이루어지는 블럭으로 분할하는 블럭화 단계와,
    상기 블럭화 단계가 출력하는 각 블럭마다, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정한 경우에는, 적어도 해당 블럭의 상기 유의 영역을 부호화하여, 형상 부호화 신호를 출력하는 형상 부호화 단계를 포함하며,
    상기 유의 영역 범위와, 상기 형상 부호화 신호를 부호화 신호로 하는 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  99. 복수의 화소로 이루어지는 2차원 화상 신호를 입력으로 하여 상기 2차원 화상 신호를 부호화하는 화상 부호화 프로그램을 기록한 기록 매체에 있어서,
    상기 화상 신호를 적어도 2개의 화상 신호로 분리하고, 상기 분리한 화상 신호를 2개 이상의 부분 화상 신호로서 출력하는 화상 신호 분리 단계와,
    상기 부분 화상 신호 중 적어도 1개를 대상 부분 화상 신호로서 선택하고, 상기 선택한 대상 부분 화상 신호를 부호화하여, 제 1 부호화 신호를 출력하는 제 1 화상 신호 부호화 단계와,
    상기 제 1 부호화 신호를 복호화한 화상 신호에 근거하여, 상기 부분 화상 신호 중 상기 대상 부분 화상 신호를 제외한 대상외 부분 화상 신호를 예측하고, 상기 예측이 적중할 확률을 계산하고, 상기 계산한 예측 확률을 출력하는 예측 확률 계산 단계와,
    상기 예측 확률 계산 단계에서 계산한 예측 확률에 근거하여, 복호화의 우선도를 결정하고, 상기 결정한 우선도에 따른 부호화 방법을 이용하여, 상기 대상외 부분 화상 신호를 부호화하는 제 2 화상 신호 부호화 단계를 포함한 화상 부호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  100. 부호화 신호를 입력하여, 복호화하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와,
    해당 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    참조 프레임에 있어서의 부호화 및 복호화 완료의 화소의, 화소값이 변화하는 화소에 근거하여, 움직임 보상을 수반하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 모드 신호가 해당 프레임 예측을 나타내는 경우에는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 참조 프레임 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 포함하며,
    상기 가산 단계의 출력을 변화 화소로 하는 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  101. 부호화 신호를 입력하여, 복호화하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 부호화 신호를 복호화하여, 부호화 모드와, 차분값을 취득하고, 상기 취득한 부호화 모드를 모드 신호로서, 상기 취득한 차분값을 복호 차분값으로서 출력하는 복호화 단계와,
    해당 화상 신호를 수평 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 1 예측 화소로서 출력하는 제 1 예측 단계와,
    해당 화상 신호를 수직 방향으로 주사함으로써, 부호화 및 복호화 완료의 화소의 화소값이 변화하는 화소에 근거하여, 상기 입력 신호의 변화 화소를 예측하고, 상기 예측한 화소를 제 2 예측 화소로서 출력하는 제 2 예측 단계와,
    상기 모드 신호가 수평 방향 주사의 예측을 나타내는 경우는, 상기 제 1 예측 화소에 상기 복호 차분값을 가산하고,
    상기 모드 신호가 수직 방향 주사의 예측을 나타내는 경우에는, 상기 제 2 예측 화소에 상기 복호 차분값을 가산하는 가산 단계를 포함하며,
    상기 가산 단계의 출력을 변화 화소로 하는 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  102. 부호화 신호를 입력하여, 복호화하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 부호화 신호로부터 화소값 신호의 차분값을 복호화하여, 복호 화소값 차분값으로서 출력하는 제 1 복호화 단계와,
    상기 부호화 신호로부터 형상 신호의 차분값을 복호화하여, 복호 형상 차분값으로서 출력하는 제 2 복호화 단계와,
    상기 부호화 신호로부터 화소값 신호의 움직임 벡터와, 형상 신호의 움직임 벡터를 복호화하여, 복호 화소값 움직임 벡터와, 복호 형상 움직임 벡터를 출력하는 제 3 복호화 단계와,
    후술하는 참조 화상의 화소값 신호를, 상기 복호 화소값 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 화소값 신호로서 출력하는 제 1 움직임 보상 단계와,
    상기 복호 화소값 차분값과 보상 화소값 신호를 가산하고, 상기 가산한 결과를 복호화한 화소값 신호로서 출력함과 동시에, 참조 화상의 화소값 신호로서 출력하는 제 1 가산 단계와,
    후술하는 참조 화상의 형상 신호를, 상기 복호 형상 움직임 벡터를 이용하여 움직임 보상하고, 상기 움직임 보상한 결과를 보상 형상 신호로서 출력하는 제 2 움직임 보상 단계와,
    상기 복호 형상 차분값과 보상 형상 신호를 가산하고, 상기 가산한 결과를 복호화한 형상 신호로서 출력함과 동시에, 참조 화상의 형상 신호로서 출력하는 제 2 가산 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  103. 부호화 신호를 입력하여, 복호화하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 입력한 부호화 신호를 복호화하여, 형상 정보, 투과도 정보 및 화소값 정보의 각각의 부호화 모드를 나타내는 모드 식별 정보를 취득하는 제 1 복호화 단계와,
    상기 취득한 모드 식별 정보에 대응하여, 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 복호화하는 제 2 복호화 단계와,
    상기 제 2 복호화 단계가 출력하는 블럭화된 형상 정보, 투과도 정보 및 화소값 정보를 통합하여 복호 화상 신호로 하는 역블럭화 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  104. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 2 변화 화소를 출력하는 제 2 변화 화소 검출 단계와,
    복호화 완료의 화소에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 제 3 변화 화소를 출력하는 제 3 변화 화소 검출 단계와,
    상기 제 2 변화 화소와 상기 제 3 변화 화소에 근거하여, 후술하는 제 1 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 입력한 부호화 신호를 복호화하여, 예측 오차를 취득하고, 상기 취득한 예측 오차를 출력하는 예측 오차 복호화 단계와,
    상기 예측 변화 화소와, 상기 예측 오차를 가산하여 제 1 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와,
    직전에 복호화한 변화 화소와, 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  105. 부호화 신호를 입력으로 하여 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    복호화 완료의 2차원 화상 신호에 대하여, 소정의 방향으로 주사함으로써 화소값이 변화하는 화소를 검출하고, 상기 검출한 검출 변화 화소를 출력하는 변화 화소 검출 단계와,
    상기 검출 변화 화소에 근거하여 해당 주사선의 변화 화소를 예측하고, 상기 예측한 예측 변화 화소를 출력하는 변화 화소 예측 단계와,
    상기 입력하는 부호화 신호를 복호화하고, 차분값 부호화 신호인지, 또는 화소수 부호화 신호인지를 판정하여, 식별 신호를 출력하는 모드 복호화 단계와,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 차분값 부호화 신호를 복호화하여 복호 예측 오차를 출력하는 예측 오차 복호화 단계와,
    상기 식별 신호가 차분값 부호화 신호를 나타내는 경우, 상기 예측 변화 화소와 상기 복호 예측 오차를 가산하고, 상기 가산한 결과를 제 1 복호 변화 화소로서 출력하는 제 1 변화 화소 복호화 단계와,
    상기 식별 신호가 화소수 부호화 신호를 나타내는 경우, 직전에 부호화한 변화 화소에서부터 상기 검출 변화 화소까지 위치하는 화소로서, 상기 복호 예측 오차의 화소 위치에 위치하지 않는 화소의 수를, 상기 화소수 부호화 신호로부터 복호화하고, 상기 복호화한 화소의 수에 근거하여 변화 화소의 위치를 취득하여, 상기 취득한 결과를 제 2 복호 변화 화소로서 출력하는 제 2 변화 화소 복호화 단계와,
    상기 식별 신호에 대응하여, 상기 제 1 복호 변화 화소, 또는 상기 제 2 복호 변화 화소를 선택하여 출력하는 변화 화소 선택 단계와,
    직전에 복호화한 변화 화소와, 상기 제 1 변화 화소와의 사이의 화소에 대해서는, 화소값이 변화하는 화소가 없는 것으로 하여, 해당 화소값을 복호화하는 화소값 복호화 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  106. 부호화 신호를 입력하여 복호화하여, 물체를 나타내는 화소가 존재하는 영역을 나타내는 2차원의 형상 신호를 출력하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 부호화 신호를 복호화하여, 상기 물체를 나타내는 화소가 존재하는 영역을 직사각형 영역으로서 취득하고, 상기 취득한 영역을 유의 영역으로서 출력하는 유의 영역 복호화 단계와,
    복수의 화소로 이루어지는 블럭의 각각에 관하여, 상기 유의 영역을 포함하는지 여부를 판정하여, 상기 유의 영역을 포함한다고 판정할 수 있는 경우에는, 해당 블럭중 적어도 상기 유의 영역을 복호화하고, 상기 복호화한 결과를 복호 블럭 형상 신호로서 출력하는 형상 복호화 단계와,
    상기 복호 블럭 형상 신호를 통합하여, 2차원의 형상 신호를 구성하고,
    상기 구성한 2차원의 형상 신호를 복호화 신호로서 출력하는 역블럭화 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
  107. 부호화 신호를 입력하여, 복수의 화소로 이루어지는 2차원 화상 신호를 복호화하여 출력하는 화상 복호화 프로그램을 기록한 기록 매체에 있어서,
    상기 부호화 신호를 복호화하여 제 1 복호화 신호를 출력하는 제 1 화상 신호 복호화 단계와,
    상기 제 1 화상 신호 복호화 단계에서 복호화한 화상 신호에 근거하여, 상기제 1 화상 신호 복호화 단계에서 복호화되지 않는 화상 신호를 예측하여 출력하는 화상 예측 단계와,
    상기 예측한 화상 신호의 예측이 적중할 확률을 계산하여 출력하는 예측 확률 계산 단계와,
    상기 예측 확률 계산 단계에서 계산한 예측 확률에 따른 우선도로 상기 입력된 부호화 신호를 복호화하는 제 2 화상 신호 복호화 단계와,
    상기 제 1 화상 신호 복호화 단계 출력과 상기 제 2 화상 신호 부호화 단계 출력을 통합하고, 또한 상기 제 1 복호화 단계 및 상기 제 2 복호화 단계 중 어느 것에 의해서도 복호화되지 않는 화상 신호를, 상기 화상 예측 단계의 예측한 화상 신호로 치환하여, 복호 화상 신호로서 출력하는 복호 신호 통합 단계를 포함한 화상 복호화 프로그램을 기록한 것을 특징으로 하는 기록 매체.
KR1019980700360A 1996-05-17 1997-05-15 화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상복호화 방법, 화상 부호화 프로그램기록 매체, 및 화상 복호화프로그램 기록 매체 KR100266345B1 (ko)

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
JP96-122972 1996-05-17
JP12297296 1996-05-17
JP19872096 1996-07-29
JP96-198720 1996-07-29
JP20336396 1996-08-01
JP96-203363 1996-08-01
JP96-210955 1996-08-09
JP21095596 1996-08-09

Publications (2)

Publication Number Publication Date
KR19990029056A KR19990029056A (ko) 1999-04-15
KR100266345B1 true KR100266345B1 (ko) 2000-09-15

Family

ID=27470900

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019980700360A KR100266345B1 (ko) 1996-05-17 1997-05-15 화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상복호화 방법, 화상 부호화 프로그램기록 매체, 및 화상 복호화프로그램 기록 매체

Country Status (13)

Country Link
US (6) US6188796B1 (ko)
EP (6) EP1120975A3 (ko)
JP (1) JP3214705B2 (ko)
KR (1) KR100266345B1 (ko)
CN (6) CN1177485C (ko)
BR (1) BR9702270A (ko)
CA (1) CA2227062C (ko)
DE (5) DE69724672T2 (ko)
ES (5) ES2191177T3 (ko)
ID (1) ID17349A (ko)
MY (1) MY123882A (ko)
TW (1) TW337630B (ko)
WO (1) WO1997044956A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130138274A (ko) * 2010-11-02 2013-12-18 아이-씨이에스 (이노베이티브 컴프레션 엔지니어링 솔루션스) 이미지, 오디오 및/또는 비디오 파일의 디지털 값을 압축하는 방법

Families Citing this family (80)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3612918B2 (ja) * 1996-11-08 2005-01-26 松下電器産業株式会社 画像符号化装置および画像復号化装置
JP3191922B2 (ja) * 1997-07-10 2001-07-23 松下電器産業株式会社 画像復号化方法
JP3132456B2 (ja) * 1998-03-05 2001-02-05 日本電気株式会社 階層的画像符号化方式、及び階層的画像復号方式
US7630570B1 (en) 1998-05-06 2009-12-08 At&T Intellectual Property Ii, L.P. Method and apparatus to prioritize video information during coding and decoding
EP1109409A3 (en) * 1999-12-17 2011-11-30 Canon Kabushiki Kaisha Digital signal coding with division into tiles
JP3957937B2 (ja) * 1999-12-21 2007-08-15 キヤノン株式会社 画像処理装置及び方法並びに記憶媒体
CN1215720C (zh) * 2001-02-06 2005-08-17 皇家菲利浦电子有限公司 适用于任意形状目标结构的预处理方法
JP2002330439A (ja) * 2001-04-27 2002-11-15 Matsushita Electric Ind Co Ltd 画像情報の伝送装置、画像情報の伝送システム及び画像情報の伝送方法
US7120277B2 (en) * 2001-05-17 2006-10-10 Koninklijke Philips Electronics N.V. Segmentation unit for and method of determining a second segment and image processing apparatus
JP2002374422A (ja) * 2001-06-18 2002-12-26 Fuji Xerox Co Ltd 画像符号化装置および方法
EP2302929B1 (en) * 2001-11-27 2015-03-25 Samsung Electronics Co., Ltd. Coding and decoding of a bitstream with a coordinate interpolator
EP1475970B1 (en) * 2002-02-01 2007-04-04 Matsushita Electric Industrial Co., Ltd. Moving picture coding method and moving picture decoding method
KR101006412B1 (ko) * 2002-03-25 2011-01-06 인터디지탈 테크날러지 코포레이션 통신 신호 수신 방법
FI114679B (fi) * 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
US7088776B2 (en) 2002-07-15 2006-08-08 Apple Computer, Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding
JP4724351B2 (ja) * 2002-07-15 2011-07-13 三菱電機株式会社 画像符号化装置、画像符号化方法、画像復号装置、画像復号方法、および通信装置
KR100865034B1 (ko) 2002-07-18 2008-10-23 엘지전자 주식회사 모션 벡터 예측 방법
US8254461B2 (en) 2002-07-24 2012-08-28 Apple Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding with reduced requirements for division operations
US6728315B2 (en) 2002-07-24 2004-04-27 Apple Computer, Inc. Method and apparatus for variable accuracy inter-picture timing specification for digital video encoding with reduced requirements for division operations
US7809204B2 (en) * 2002-10-18 2010-10-05 Samsung Electronics Co., Ltd. Method and apparatus for encoding and decoding key value data of coordinate interpolator
KR100961312B1 (ko) * 2002-11-20 2010-06-04 파나소닉 주식회사 동화상 복호화 방법 및 장치
KR100522595B1 (ko) * 2002-11-29 2005-10-19 삼성전자주식회사 엠펙 비디오 복호화방법 및 엠펙 비디오 복호화기
US7580460B2 (en) * 2003-03-28 2009-08-25 Sony Corporation Video encoder with multiple outputs having different attributes
US7599438B2 (en) * 2003-09-07 2009-10-06 Microsoft Corporation Motion vector block pattern coding and decoding
JP2005184419A (ja) * 2003-12-19 2005-07-07 Hitachi Ltd 映像信号符号化装置および映像信号記録装置
JP2006323870A (ja) * 2006-07-26 2006-11-30 Sharp Corp 画像減色装置、画像符号化装置、画像復号装置、画像減色方法、画像符号化方法および画像復号方法
JP4785678B2 (ja) * 2006-09-01 2011-10-05 キヤノン株式会社 画像符号化装置および画像符号化方法
DE102007005866B4 (de) * 2007-02-06 2021-11-04 Intel Deutschland Gmbh Anordnung, Verfahren und Computerprogramm-Produkt zum Anzeigen einer Folge von digitalen Bildern
KR101375662B1 (ko) * 2007-08-06 2014-03-18 삼성전자주식회사 이미지 데이터 압축 방법 및 장치
WO2009037726A1 (ja) * 2007-09-18 2009-03-26 Fujitsu Limited 動画像符号化装置および動画像復号装置
JP5286805B2 (ja) * 2008-01-31 2013-09-11 沖電気工業株式会社 動きベクトル検出装置及び方法、動画像符号化装置及び方法、並びに、動画像復号化装置及び方法
KR101517768B1 (ko) * 2008-07-02 2015-05-06 삼성전자주식회사 영상의 부호화 방법 및 장치, 그 복호화 방법 및 장치
TWI463878B (zh) * 2009-02-19 2014-12-01 Sony Corp Image processing apparatus and method
AU2013201883B2 (en) * 2009-08-13 2014-08-21 Samsung Electronics Co., Ltd Method and apparatus for encoding and decoding image by using large transformation unit
KR101474756B1 (ko) 2009-08-13 2014-12-19 삼성전자주식회사 큰 크기의 변환 단위를 이용한 영상 부호화, 복호화 방법 및 장치
CN104935934B (zh) * 2009-10-21 2018-04-03 Sk电信有限公司 视频编码装置
CN103609119A (zh) * 2010-02-23 2014-02-26 日本电信电话株式会社 运动向量推断方法、多视点视频编码方法、多视点视频解码方法、运动向量推断装置、多视点视频编码装置、多视点视频解码装置、运动向量推断程序、多视点视频编码程序及多视点视频解码程序
JP2012124673A (ja) * 2010-12-07 2012-06-28 Sony Corp 画像処理装置、画像処理方法、およびプログラム
CN102075740A (zh) * 2010-12-21 2011-05-25 佛山市顺德区必达电子科技有限公司 图片抓拍并传输的方法
EP2754131B1 (en) 2011-09-08 2022-10-26 Nautilus, Inc. System and method for visualizing synthetic objects withinreal-world video clip
CN107071415B (zh) * 2011-10-17 2020-07-07 株式会社东芝 编码设备、解码设备、编码方法和解码方法
JP5760953B2 (ja) * 2011-10-31 2015-08-12 富士通株式会社 動画像復号装置、動画像符号化装置、動画像復号方法、及び動画像符号化方法
JP5411385B1 (ja) * 2013-08-12 2014-02-12 株式会社 ディー・エヌ・エー ゲームを提供するサーバ及び方法
CA2949478A1 (en) 2014-05-30 2015-12-03 Paofit Technology Pte Ltd Systems and methods for motion-vector-aided video interpolation using real-time smooth video playback speed variation
EP3177024B1 (en) * 2014-07-30 2020-02-26 Sk Planet Co., Ltd. Apparatus for cloud streaming service
EP3018905A1 (en) * 2014-11-04 2016-05-11 Thomson Licensing Method and apparatus for selectively generating intra-/inter-frame prediction values of pixels of a frame of a sequence of image frames
US9704298B2 (en) 2015-06-23 2017-07-11 Paofit Holdings Pte Ltd. Systems and methods for generating 360 degree mixed reality environments
CN108141932B (zh) 2015-09-30 2021-10-26 康宁股份有限公司 具有微波透射区域的微波模式搅拌器设备
US10897269B2 (en) 2017-09-14 2021-01-19 Apple Inc. Hierarchical point cloud compression
US11818401B2 (en) 2017-09-14 2023-11-14 Apple Inc. Point cloud geometry compression using octrees and binary arithmetic encoding with adaptive look-up tables
US10861196B2 (en) 2017-09-14 2020-12-08 Apple Inc. Point cloud compression
US11113845B2 (en) 2017-09-18 2021-09-07 Apple Inc. Point cloud compression using non-cubic projections and masks
US10909725B2 (en) 2017-09-18 2021-02-02 Apple Inc. Point cloud compression
US10699444B2 (en) 2017-11-22 2020-06-30 Apple Inc Point cloud occupancy map compression
US10607373B2 (en) 2017-11-22 2020-03-31 Apple Inc. Point cloud compression with closed-loop color conversion
US10939129B2 (en) 2018-04-10 2021-03-02 Apple Inc. Point cloud compression
US10909726B2 (en) 2018-04-10 2021-02-02 Apple Inc. Point cloud compression
US11010928B2 (en) 2018-04-10 2021-05-18 Apple Inc. Adaptive distance based point cloud compression
US10909727B2 (en) 2018-04-10 2021-02-02 Apple Inc. Hierarchical point cloud compression with smoothing
US11044478B2 (en) * 2018-07-02 2021-06-22 Apple Inc. Compression with multi-level encoding
US11017566B1 (en) 2018-07-02 2021-05-25 Apple Inc. Point cloud compression with adaptive filtering
US11202098B2 (en) 2018-07-05 2021-12-14 Apple Inc. Point cloud compression with multi-resolution video encoding
US11012713B2 (en) 2018-07-12 2021-05-18 Apple Inc. Bit stream structure for compressed point cloud data
US11386524B2 (en) 2018-09-28 2022-07-12 Apple Inc. Point cloud compression image padding
US11367224B2 (en) 2018-10-02 2022-06-21 Apple Inc. Occupancy map block-to-patch information compression
US11430155B2 (en) 2018-10-05 2022-08-30 Apple Inc. Quantized depths for projection point cloud compression
JP7286309B2 (ja) * 2018-12-18 2023-06-05 キヤノン株式会社 光電変換装置、光電変換システムおよび信号処理装置
US11057564B2 (en) 2019-03-28 2021-07-06 Apple Inc. Multiple layer flexure for supporting a moving image sensor
US11562507B2 (en) 2019-09-27 2023-01-24 Apple Inc. Point cloud compression using video encoding with time consistent patches
US11627314B2 (en) 2019-09-27 2023-04-11 Apple Inc. Video-based point cloud compression with non-normative smoothing
US11538196B2 (en) 2019-10-02 2022-12-27 Apple Inc. Predictive coding for point cloud compression
US11895307B2 (en) 2019-10-04 2024-02-06 Apple Inc. Block-based predictive coding for point cloud compression
US11798196B2 (en) 2020-01-08 2023-10-24 Apple Inc. Video-based point cloud compression with predicted patches
US11475605B2 (en) 2020-01-09 2022-10-18 Apple Inc. Geometry encoding of duplicate points
US11664816B2 (en) 2020-04-22 2023-05-30 Apple Inc. Lossy compression techniques
CN115516769A (zh) * 2020-04-22 2022-12-23 苹果公司 有损压缩技术
US11615557B2 (en) 2020-06-24 2023-03-28 Apple Inc. Point cloud compression using octrees with slicing
US11620768B2 (en) 2020-06-24 2023-04-04 Apple Inc. Point cloud geometry compression using octrees with multiple scan orders
CN114078108B (zh) * 2020-08-11 2023-12-22 北京阅影科技有限公司 图像中异常区域的处理方法、装置和图像分割方法、装置
US11948338B1 (en) 2021-03-29 2024-04-02 Apple Inc. 3D volumetric content encoding using 2D videos and simplified 3D meshes

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5816665B2 (ja) * 1975-10-30 1983-04-01 ケイディディ株式会社 フアクシミリシンゴウノフゴウカホウシキ
JPS61102872A (ja) 1984-10-24 1986-05-21 インタ−ナショナル ビジネス マシ−ンズ コ−ポレ−ション 2レベル・イメ−ジ・デ−タの処理方法
JPH01209876A (ja) 1988-02-18 1989-08-23 Nippon Telegr & Teleph Corp <Ntt> フレーム間符号化方式
US5426513A (en) * 1989-06-16 1995-06-20 Harris Corporation Prioritized image transmission system and method
JP2892701B2 (ja) 1989-08-31 1999-05-17 松下電器産業株式会社 動画像信号の符号化装置
JPH0411460A (ja) 1990-04-27 1992-01-16 Tokyo Electric Co Ltd 画像データ圧縮装置
JP2859936B2 (ja) 1990-07-04 1999-02-24 株式会社リコー 画情報処理装置
JPH04334188A (ja) * 1991-05-08 1992-11-20 Nec Corp 動画像信号の符号化方式
JPH0530362A (ja) 1991-07-19 1993-02-05 Fujitsu Ltd 2値画像データ圧縮方式
US5539466A (en) * 1991-07-30 1996-07-23 Sony Corporation Efficient coding apparatus for picture signal and decoding apparatus therefor
DE4136636A1 (de) * 1991-11-07 1993-07-01 Bosch Gmbh Robert Einrichtung zur codierung von bildsignalen
US5706417A (en) * 1992-05-27 1998-01-06 Massachusetts Institute Of Technology Layered representation for image coding
KR0134505B1 (ko) 1992-09-09 1998-04-23 배순훈 적응적 움직임 검출기능을 가진 영상 부호화기
US5638498A (en) * 1992-11-10 1997-06-10 Adobe Systems Incorporated Method and apparatus for reducing storage requirements for display data
US5467134A (en) 1992-12-22 1995-11-14 Microsoft Corporation Method and system for compressing video data
JP2933457B2 (ja) 1993-02-18 1999-08-16 日本電気株式会社 ウェーブレット変換符号化方法
JPH0738896A (ja) 1993-06-28 1995-02-07 Nippon Telegr & Teleph Corp <Ntt> 動画像領域分割符号化装置
JPH07107462A (ja) 1993-09-29 1995-04-21 Oki Electric Ind Co Ltd 動画像符号化方法
KR970003799B1 (ko) * 1993-12-29 1997-03-21 양승택 영상 프레임차를 이용한 영상신호 전송장치
JPH07212760A (ja) 1994-01-14 1995-08-11 Nippon Telegr & Teleph Corp <Ntt> 動画像の動き補償予測符号化方法
US6052414A (en) 1994-03-30 2000-04-18 Samsung Electronics, Co. Ltd. Moving picture coding method and apparatus for low bit rate systems using dynamic motion estimation
KR100287209B1 (ko) 1994-03-30 2001-04-16 윤종용 동적움직임평가에 의한 저전송률 동영상부호화방법 및 장치
JP3654664B2 (ja) 1994-08-23 2005-06-02 シャープ株式会社 画像符号化装置及び画像復号装置
KR100287211B1 (ko) * 1994-08-30 2001-04-16 윤종용 양방향 움직임 추정방법 및 장치
JPH0896140A (ja) 1994-09-28 1996-04-12 Hitachi Software Eng Co Ltd 画像データの圧縮方法
US5608458A (en) * 1994-10-13 1997-03-04 Lucent Technologies Inc. Method and apparatus for a region-based approach to coding a sequence of video images
US5768438A (en) * 1994-10-19 1998-06-16 Matsushita Electric Industrial Co., Ltd. Image encoding/decoding device
JP3120664B2 (ja) * 1994-10-19 2000-12-25 松下電器産業株式会社 画像符号化装置、画像復号化装置
EP1271957B1 (en) * 1994-12-20 2006-05-24 Matsushita Electric Industrial Co., Ltd. Object-based digital image predictive coding and transfer method and apparatus, and decoding apparatus
US5886743A (en) * 1994-12-28 1999-03-23 Hyundai Electronics Industries Co. Ltd. Object-by information coding apparatus and method thereof for MPEG-4 picture instrument
KR100235343B1 (ko) * 1994-12-29 1999-12-15 전주범 영역분할 기법을 이용한 동영상신호 부호화기의 움직임 벡터 측정장치
JP3086396B2 (ja) * 1995-03-10 2000-09-11 シャープ株式会社 画像符号化装置及び画像復号装置
KR0171120B1 (ko) * 1995-04-29 1999-03-20 배순훈 특징점 기반 움직임 보상을 이용한 비디오 신호 부호화에서의 움직임 영역 설정방법 및 장치
US6023301A (en) * 1995-07-14 2000-02-08 Sharp Kabushiki Kaisha Video coding device and video decoding device
US5764807A (en) * 1995-09-14 1998-06-09 Primacomp, Inc. Data compression using set partitioning in hierarchical trees
KR100235064B1 (ko) * 1996-05-23 1999-12-15 전주범 재배열된 블록 기반 부호화 기법을 이용하여 비디오 신호의 물체영역을 부호화하기 위한 장치
US5978034A (en) * 1997-02-20 1999-11-02 Sony Corporation Moving picture encoding method and apparatus, moving picture decoding method and apparatus and recording medium

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130138274A (ko) * 2010-11-02 2013-12-18 아이-씨이에스 (이노베이티브 컴프레션 엔지니어링 솔루션스) 이미지, 오디오 및/또는 비디오 파일의 디지털 값을 압축하는 방법
KR101706743B1 (ko) 2010-11-02 2017-02-14 꼴랭, 쟝-끌로드 이미지, 오디오 및/또는 비디오 파일의 디지털 값을 압축하는 방법

Also Published As

Publication number Publication date
DE69718749T2 (de) 2003-10-16
EP0840510A1 (en) 1998-05-06
CA2227062A1 (en) 1997-11-27
CN1348314A (zh) 2002-05-08
US20020041715A1 (en) 2002-04-11
CN1165179C (zh) 2004-09-01
DE69724673T2 (de) 2004-07-15
KR19990029056A (ko) 1999-04-15
EP1120971A3 (en) 2001-08-08
CN1193619C (zh) 2005-03-16
ES2206359T3 (es) 2004-05-16
US6445826B1 (en) 2002-09-03
EP1120972B1 (en) 2003-09-03
ES2190995T3 (es) 2003-09-01
CN1348313A (zh) 2002-05-08
EP1120975A3 (en) 2005-05-04
DE69718749D1 (de) 2003-03-06
JP3214705B2 (ja) 2001-10-02
WO1997044956A1 (en) 1997-11-27
US6597814B2 (en) 2003-07-22
US6560372B1 (en) 2003-05-06
EP1120971B1 (en) 2003-09-03
DE69718834D1 (de) 2003-03-06
US6188796B1 (en) 2001-02-13
CN1097397C (zh) 2002-12-25
ES2206358T3 (es) 2004-05-16
DE69718834T2 (de) 2003-11-13
CA2227062C (en) 2002-08-13
CN1361632A (zh) 2002-07-31
EP0840510B1 (en) 2003-01-29
DE69724672T2 (de) 2004-07-15
EP1120969A3 (en) 2001-08-08
CN1344114A (zh) 2002-04-10
CN1177485C (zh) 2004-11-24
EP1120969A2 (en) 2001-08-01
EP1120970A3 (en) 2001-08-08
TW337630B (en) 1998-08-01
EP1120972A2 (en) 2001-08-01
DE69718951D1 (de) 2003-03-13
DE69724673D1 (de) 2003-10-09
EP1120970B1 (en) 2003-01-29
US20010016006A1 (en) 2001-08-23
DE69724672D1 (de) 2003-10-09
EP1120970A2 (en) 2001-08-01
EP1120975A2 (en) 2001-08-01
DE69718951T2 (de) 2003-10-02
EP1120969B1 (en) 2003-02-05
EP0840510A4 (en) 2001-08-08
US20010001019A1 (en) 2001-05-10
EP1120972A3 (en) 2001-08-08
EP1120971A2 (en) 2001-08-01
US6661928B2 (en) 2003-12-09
ES2191177T3 (es) 2003-09-01
MY123882A (en) 2006-06-30
ES2192548T3 (es) 2003-10-16
BR9702270A (pt) 1999-07-20
CN1344113A (zh) 2002-04-10
CN1165180C (zh) 2004-09-01
US6516095B1 (en) 2003-02-04
ID17349A (id) 1997-12-24
CN1217546C (zh) 2005-08-31
CN1196856A (zh) 1998-10-21

Similar Documents

Publication Publication Date Title
KR100266345B1 (ko) 화상 부호화 장치, 화상 복호화 장치, 화상 부호화 방법, 화상복호화 방법, 화상 부호화 프로그램기록 매체, 및 화상 복호화프로그램 기록 매체
EP0731614B1 (en) Video coding/decoding apparatus
US8170357B2 (en) Apparatus and method for generating coded block pattern for alpha channel image and alpha channel image encoding/decoding apparatus and method using the same
CA3159686C (en) Image encoding device, image decoding device, image encoding method, and image decoding method
US6542642B2 (en) Image coding process and motion detecting process using bidirectional prediction
US6674910B1 (en) Apparatus and method for image-compression encoding and decoding using adaptive transform
KR20080068678A (ko) 동화상 부호화 장치 및 동화상 복호 장치
JPH0591498A (ja) 帯域分割動画像符号化装置
JP3400428B2 (ja) 画像伝送方法
JP3214847B2 (ja) 画像復号化装置
JP3214848B2 (ja) 画像復号化装置
JP3214846B2 (ja) 画像復号化装置
JP2005073291A (ja) 動き補償装置
JP2001197506A (ja) 画像符号化装置及び画像復号化装置
JP2012070249A (ja) 画像符号化方法、画像復号方法、画像符号化装置、画像復号装置、及びプログラム
JPH0799645A (ja) 動きベクトル検出回路
JPH08181997A (ja) 画像符号化装置及び画像復号化装置

Legal Events

Date Code Title Description
A201 Request for examination
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130603

Year of fee payment: 14

FPAY Annual fee payment

Payment date: 20140603

Year of fee payment: 15

FPAY Annual fee payment

Payment date: 20150518

Year of fee payment: 16

FPAY Annual fee payment

Payment date: 20160517

Year of fee payment: 17