KR970002967B1 - 영역 분류패턴을 이용한 움직임벡터 검출장치 - Google Patents

영역 분류패턴을 이용한 움직임벡터 검출장치 Download PDF

Info

Publication number
KR970002967B1
KR970002967B1 KR1019930005967A KR930005967A KR970002967B1 KR 970002967 B1 KR970002967 B1 KR 970002967B1 KR 1019930005967 A KR1019930005967 A KR 1019930005967A KR 930005967 A KR930005967 A KR 930005967A KR 970002967 B1 KR970002967 B1 KR 970002967B1
Authority
KR
South Korea
Prior art keywords
motion vector
pattern
codeword
motion
divided
Prior art date
Application number
KR1019930005967A
Other languages
English (en)
Other versions
KR940025369A (ko
Inventor
정해묵
Original Assignee
대우전자 주식회사
배순훈
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 대우전자 주식회사, 배순훈 filed Critical 대우전자 주식회사
Priority to KR1019930005967A priority Critical patent/KR970002967B1/ko
Priority to JP7235094A priority patent/JPH07135662A/ja
Publication of KR940025369A publication Critical patent/KR940025369A/ko
Priority to US08/770,367 priority patent/US5825423A/en
Application granted granted Critical
Publication of KR970002967B1 publication Critical patent/KR970002967B1/ko

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0012Biomedical image inspection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/44Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/50Tuning indicators; Automatic tuning control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/56Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Health & Medical Sciences (AREA)
  • Radiology & Medical Imaging (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Medical Informatics (AREA)
  • General Health & Medical Sciences (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

내용없음

Description

영역 분류패턴을 이용한 움직임벡터 검출장치
본 발명은 디지틀 영상처리 장치의 움직임 검출에 관한 것으로서, 특히 영역분류 패턴을 이용하여 물체에 맞는 움직임벡터를 검출하는 움직임벡터 검출장치에 관한 것이다.
영상 신호의 디지틀 전송에 있어서 전송 대역폭을 줄이기 위한 많은 데이터 압축 방식들이 연구되어 왔다. 이러한 데이터 압축 방식중 프레임내(intraframe) 부호화 방식은 공간 영역에서 중복성을 줄이는 방법이고, 프레임간(intedrame) 부호화 방식은 시간 영역에서의 중복성을 줄여 전송 데이터량을 압축하는 방식이다.
최근들어, 반도체 기술의 발달로 프레임간 부호화 방식의 하드웨어 구현이 용이해지면서 이 방면에 많은 연구가 진행되고 있으며, 프레임간 부호화중에서 물체의 운동에 기이한 변화를 보상하여 예측하는 방식이 많은 데이터량을 압축시킬 수 있는 것으로 알려져 있다. 이렇게 물체의 이동을 보상하여 부호화하는 방식을 움직임 보상 부호화 방식(이하 MCC라 함)이라 한다.
이방식은 이전 프레임과 현재 프레임을 비교하여 물체의 움직임에 관한 정보를 추출해 내고, 이 정보를 이용하여 현재 프레임을 적절하게 예측함으로써 예측 오차를 감소시켜 결과적으로 데이터를 압축시킨다. 이러한 MCC방식을 행하는 방법에서는 현재 프레임의 소정구획(예를들면, 16×16 화소구획)과 이전 프레임의 탐색영역(예를들면, 32×32 구획)내에 존재하는 다수의 부호구획중 가장 유사한 구획을 검출하여, 현재의 프레임이 해당 구획과 검출된 유사구획간의 위치(변위차)를 움직임 벡터로서 검출하여 전송하는 한편, 현재 프레임의 구획과 검출된 이전 프레임의 유사구획과의 차분을 전송한다. 그리고, 수신측의 부호화기에서는 움직임벡터 및 차분신호를 이용하여 현재 프레임의 구획을 복원한다.
여기에서, 움직임벡터 검출은 움직임 영상신호에서 현재 프레임의 화소(또는 화소들의 구획)들이 이전 프레임에 비해 어느 방향으로 얼마나 움직였는지를 추정하여 구한다. 움직임의 추정은 프레임간 신호 처리에서 많이 사용되며, 움직임 추정을 위한 기본적인 알고리즘으로는 구획 맞추기 알고리즘, 화소 순환 알고리즘 등이 있으며, 본 발명은 구획 맞추기 알고리즘을 이용한 움직임벡터 검출의 개선에 관련된다.
본 발명의 목적은 MX×MY 단위의 움직임 추정을 위한 거대구획을 다수의 SX×SY 단위 세부구획으로 분할하고, 이 분할된 각 세부구획에 대하여 다수의 코드워드들을 갖는 코드북에 의거하는 영역분류 패턴을 이용하여 움직임벡터를 추정할 수 있는 영역 분류패턴을 이용한 움직임벡터 검출장치를 제공하는 데 그 목적이 있다.
상기 목적을 달성하기 위하여 본 발명은, 시간적으로 연속하는 현재 영상신호와 복원된 이전 영상신호를 이용하여 소정크기로 구획화된 구획간의 매칭 알고리즘과 다수의 코드워드 패턴을 갖는 코드북을 이용하여 상기 두 영상신호간의 움직임 정도를 검출하는 장치에 있어서, 상기 현재 영상신호에 대해 움직임벡터를 추정하고자 하는 다수의 MX×MY 거대구획을 설정하는 현재 프레임 구획 출력수단; 상기 이전 영상신호에 대해 상기 분할된 각 MX×MY 거대구획에 각각 대응하는 PX×PY 탐색영역을 설정하여 각 MX×MY 거대구획에 대응하는 다수의 MX×MY 분할구획을 순차적으로 발생하는 탐색영역 출력수단; 상기 다수의 MX×MY 분할구획에 각각에 대해 각 분할구획별로 분할하고, 상기 분할된 다수의 각 MX×MY 분할구획과 이에 대응하는 상기 하나의 MX×MY 거대구획과의 위치관계에 대한 정보로서 각각 하나의 움직임벡터를 산출하는 이동 및 구획화 수단; 상기 분할된 다수의 각 MX×MY 분할구획과 이에 대응하는 상기 하나의 MX×MY 거대구획을 각각 감산하여 MX×MY 구획단위의 다수의 에러신호를 각각 발생하는 비교수단; 상기 발생된 각각의 에러신호를 다수의 SX×SY 세부구획으로 균일하게 각각 분할하는 구획화 수단; 상기 분할된 각 SX×SY 세부구획에 각각 대응하며, 세부구획 단위의 움직임 정도 및 움직임 패턴에 따라 소정수의 부류로 분류하여 각 부류당 동일한 움직임벡터가 할당되는 다수의 코드워드 패턴들을 저장하기 위한 코드북 메모리; 상기 코드북 메모리로 부터의 각 코드워드 패턴과 상기 분할된 다수의 각 SX×SY 세부구획에 대해 기설정된 임계값에 근거한 움직임 정도에 의거하여 상기 각 SX×SY 세부구획의 픽셀오차값을 각각 분류하여 적어도 하나의 분류픽셀 패턴을 생성하고, 상기 MX×MY 구획단위의 각 에러신호 내의 생성된 분류픽셀 패턴에 대한 평균 절대오차값을 각각 산출하며, 상기 산출된 다수의 움직임벡터중 상기 적어도 한의 분류픽셀 패턴에 대응하는 적어도 하나의 움직임벡터를 포함하는 상기 MX×MY 구획단위의 각 에러신호에 대한 움직임벡터 그룹을 각각 취합하는 다수의 경로를 갖는 신호처리 수단; 및 상기 산출된 다수의 절대오차값을 비교하여 최소의 평균 절대오차값을 검출하고, 상기 다수의 신호처리 경로중 상기 최소 평균 절대오차값을 산출한 경로에 상응하는 경로인식용 코드워드 인덱스 정보를 발생하며, 상기 취합된 다수의 움직임벡터 그룹중 상기 최소 평균 절대오차값을 산출한 경로에서 취합된 움직임벡터 그룹을 상기 하나의 MX×MY 거대구획의 최종 움직임벡터로서 출력하는 멀티플렉서로 이루어진 영역 분류패턴을 이용한 움직임벡터 검출장치를 제공한다.
제1도는 하나의 전체 프레임(또는 필드)의 구성을 도시한 도면.
제2도는 움직임벡터의 할당 패턴을 나타내는 여러 가지 코드워드의 일예를 도시한 도면.
제3도는 디지틀 영상처리 장치에서 채용되는 움직임 검출장치를 포함하는 전형적인 부호기의 블럭도.
제4도는 본 발명의 바람직한 실시예에 대응하는 제3도에 도시된 움직임 벡터 검출부의 상세 블럭도.
제5도는 제4도에 도시된 코드워드 선택의 상세 블럭도.
* 도면의 주요부분에 대한 부호의 설명
9 : 감산기 10 : 차이영상 부호화부
12 : 움직임 보상부 14 : 차이영상 복호화부
16 : 움직임벡터 검출부 18 : 프레임 메모리
20 : 가산기 22 : 움직임벡터 부호화부
24 : 코드워드 선택기 26 : 코드북 메모리
100 : 탐색영역 출력부 102 : 현재 프레임 구획 출력부
104,106 : 이동 및 구획화부 108,110 : 비교부
112,114 : 구획화부 116,138 : 코드워드 처리부
118 : 코드워드 패턴 분류기 122,124 : 세부구획 선택부
126,128 : AE 계산부 130,140 : 최소치 검출부
132,142 : 멀티플렉서 136 : 움직임벡터 취합부.
이하, 본 발명의 바람직한 실시예에 대하여 첨부된 도면을 참조하여 상세히 설명한다.
제1도는 하나의 전체 프레임(또는 필드)의 구성을 도시한 것으로, 동도의 (가)에 도시된 바와 같이, 프레임(또는 필드)은 다수의 MX×MY 거대구획(예를들면, 16×16 화소 구획)으로 구성되며, 또한 동도의 (나)에 도시된 바와같이 각 거대구획은 다수의 SX×SY 세부구획(예를들면, 4×4 화소 구획)으로 구성된다. 본 발명에 따르면, 이 거대구획(MX×MY)에 속하는 각 세부구획(SX×SY)들은 몇개의 분류로 나누어서 각 부류당 움직임벡터를 할당하는데, 그 할당 패턴이 바로 코드워드가 된다.
제2도는 본 발명에 따라 할당되는 움직임벡터의 패턴을 나타내는 여러가지 코드워드의 일예를 나타낸다. 동도면에 도시된 바와 같이, 코드워드 패턴 #A는 움직임벡터 패턴이 #0와 #1로 이루어짐을 알 수 있고, 코드워드 패턴 #E는 움직임벡터 패턴이 #1, #0, #2로서 3개로 이루이짐을 알 수 있다.
제3도는 본 발명이 바람직한 실시예에 따른 영역분류 패턴을 이용한 움직임검출장치를 이용하는데 적합한 전형적인 영상 부호기의 블록도를 나타낸다.
동도면에 도시된 바와같이, 전형적인 영상 부호기는 현재 영상신호와 이 현재 영상신호 및 복원된 이전영상신호간의 움직임 추정, 보상을 통해 얻어진 예측신호를 감산하여 차이신호를 발생시키는 감산기(9)와, DCT, 양자화 등의 기법을 통해 차이 영상신호를 부호화하는 부호화부(10)와, 움직임 추정 및 보상을 위해 부호화된 차이 영상신호를 복원하는 차이영상 복호화부(14)와, 복원된 차이 영상신호와 움직임 추정, 보상을 통해 얻어진 예측신호를 가산하여 재구성된 이전 영상신호를 발생하는 가산기(20)와, 재구성된 이전 영상신호를 저장하기 위한 프레임 메모리(18)와, 입력측의 현재 영상신호와 재구성된 이전 영상신호간의 움직임을 검출하는 움직임벡터 검출부(16)와, 검출된 움직임벡터에 의거하여 이전 영상신호에 대한 움직임 보상을 수행하여 예측신호를 발생하며 발생된 예측신호를 감산기(9) 및 가산기(20)에 제공하는 움직임 보상부(12)와, 검출된 움직임벡터를 부호화하는 움직임벡터 부호화부(22)로 구성된다.
다음에, 상술한 바와같은 구성을 갖는 전형적인 영상 부호기에서 입력 영상을 부호화하는 과정에 대하여 설명한다.
먼저, 입력 영상신호는 감산기(9) 및 움직임벡터 검출부(16)으로 제공되고, 감산기(9)에 입력된 현재 영상신호는 움직임 보상부(12)로부터 제공되는 예측신호와의 감산되며, 그 감산결과로서 얻어지는 현재 영상신호와 예측신호간의 차이신호는 다음단의 차이영상 부호화부(10)를 통해 부호화, 즉 DCT, 양자화 등의 기법을 통해 소정의 비트 레이트로 부호화된다.
다음에, 차이영상 부호화부(10)로부터 출력되는 소정의 비트.레이트로 부호화된 영상신호는 수신측으로의 전송을 위해 도시 생략된 채널 부호화부로 전달되고 또한 움직임 추정, 보상을 위해 차이영상 복화화부(14)로 제공된다. 이때, 차이 영상 복호화부(14)로 입력된 부호화된 영상신호는 차이영상 부호화부(10)에서의 역과정(즉, 역양자화 및 IDCT 등)을 통해 부호화 이전의 원신호로 복원되며, 이와같이 복원된 영상신호는 가산기(20)의 일측 입력으로 제공된다.
한편, 복원된 영상신호를 일측 입력으로 하는 가산기(20)의 타측 입력에는 움직임 보상부(12)로 부터의 예측신호가 입력되는데, 여기에서 이들 신호, 즉 복원된 영상신호와 예측신호가 가산되므로써 재구성된 하나의 이전 영상신호가 생성되며, 이와같이 생성된 재구성된 이전 영상신호는 다음단의 프레임 메모리(18)에 저장되며, 프레임 메모리(18)에 저장된 재구성된 이전 영상신호는 움직임벡터 검출부(16) 및 움직임 보상부(12)로 각각 제공된다.
다른한편, 움직임벡터 검출부(16)는 실질적으로 본 발명에 관련되는 부분인 것으로, 본 발명에 따라 영역 분류 패턴을 이용하여 움직임벡터를 검출, 측 라인 L2를 통해 입력측으로부터 제공되는 현재 영상신호와 라인 L4를 통해 프레임 메모리(18)로부터 제공되는 재구성된 이전 영상신호에 의거하여 소정의 블록단위로 움직임벡터를 검출(패턴에 따라 선택된 코드워드 인덱스 포함)하고, 여기에서 검출된 움직임벡터들은 움직임 보상부(12) 및 움직임벡터 부호화부(22)로 제공되는데, 이러한 움직임벡터 검출부(16)의 구체적인 동작과정에 대해서는 제4도 및 제5도를 참조하여 후에 상세하게 기술될 것이다.
다음에, 움직임 보상부(12)에서는 상기한 움직임벡터 검출부(16)로부터 제공되는 움직임벡터에 의거하여 움직임 보상을 수행, 즉 프레임 메모리(18)로 부터의 이전 영상신호와 움직임벡터들을 이용해 예측신호를 발생하며, 여기에서 발생되는 예측신호는 차이신호 및 재구성된 이전 영상신호의 생성을 위해 전술한 감산기(9) 및 가산기(20)로 각각 제공된다.
또한, 움직임벡터 부호화부(22)에서는 본 발명에 따라 검출된 최종 움직임벡터(거대구획당 하나 및/또는 세 개의 움직임벡터)를 부호화하여 전송하며, 이와함께 각 거대구획 단위로 검출되는 코드워드 인덱스 정보(거대구획이 처리된 경로를 의미하는 정보로서 후술되는 제5도의 코드워드 처리부중의 어느 하나를 의미하는 정보)를 부호화하여 전송한다.
제4도는 제3도에 도시된 움직임벡터 검출부(16)의 상세블록도이다. 동도면에 도시된 바와같이, 움직임벡터 검출부(16)는 크게 코드워드 선택기(24) 및 코드북 메모리(26)로 구성된다.
제4도를 참조하면, 코드북 메모리(26)에는 MX×MY 단위의 각 거대구획(예를들면, 16×16 구획)내에 속하는 SX×SY 단위의 각 세부구획(예를들면, 4×4 구획)들을 움직임 정도 및 움직임 패턴에 따라 소정수의 부류로 분류하여 각 부류당 동일한 움직임벡터가 할당된 코드워드 패턴들이 저장된다.
또한, 코드워드 선택기(24)는 상기한 코드북 메모리(26)에 저장된 코드워드 패턴에 따라 현재 영상신호와 이전 영상신호간을 비교하여 움직임벡터를 검출하고, 또한 그 패턴에 따른 코드워드 인덱스를 선택하는 것으로, 이러한 코드워드 선택기(24)에서의 동작과정에 대해서는 그의 세부적인 구성을 도시한 제5도를 참조하여 이하에 상세하게 설명한다.
제5도는 제4도에 도시된 코드워드 선택기의 일실시예로서 그 상세 블록도이다.
제5도를 참조하면, 현재 프레임 구획 출력부(102)는 라인 L2를 통해 입력되는 현재 프레임의 좌상측에서부터 소정의 구획(MX×MY)을 순차적으로 설정한 후, 설정된 각 구획의 데이터를 다수의 비교부(108,1l0)로 각각 출력한다. 여기에서, 비교부의 개수는 움직임을 검출하고자 하는 현재 프레임의 하나의 거대구획(예를들면, 16×16 구획)에 대응하여 설정되는 탐색영역(예를들면, 32×32)의 크기에 따라 결정될 것이다.
또한, 탐색영역 출력부(100)는 라인 L4를 통해 도면 3의 프레임 메모리(18)에서 제공되는 재구성된 이전 프레임에 대하여 현재 프레임의 MX×MY 단위의 거대구획에 대응하는 소정범위의 탐색영역(예를들면, 32×32)을 설정하며, 여기에서 설정되는 재구성된 이전 프레임의 탐색영역을 나타내는 데이터는 다음단의 연결된 다수의 이동 및 구획화부(l04,106)로 각각 제공된다.
다음에, 각각의 이동 및 구획화부(104,106)는 상기한 탐색영역 출력부(100)의 탐색엉역(예를들면, 32×32)을 현재 프레임 구획 출력부(102)의 MX×MY 거대구획에 대응하는 구획(MX×MY)들로 분할하며, 분할된 각 구획들은 대응하는 각 비교부(108,110)로 제공된다. 또한, 이동 및 구획화부(104,106) 각각은 이전 프레임의 각 분할구획과 현재 프레임의 거대구획과의 위치관계에 대한 정보로서 각각 하나의 움직임벡터를 계산하여 라인 L6 및 L8상에 각각 발생한다. 여기에서, 위치관계에 의거한 각 분할구획과 현재 프레임의 하나의 거대구획간의 각각의 움직임벡터는, 예를들면 현재 프레임의 거대구획을 중심으로하여 하나의 탐색영역이 설정될 때 상,하 및 좌상으로의 픽셀단위 이동순서에 따른 순번에 의해 계산할 수 있을 것이다.
한편, 각 비교부(108,110)에서는 현재 프레임 구획 출력부(102)로부터 제공되는 하나의 거대구획과 다수의 이동 및 구획화부들(104,106)로부터 제공되는 각각의 분할구획들을 각각 비교하여 비교오차값을 발생, 즉 비교부(108,110) 각각은 거대구획과 각 분할구획간의 감산을 통해 각각의 오차 구획신호(MX×MY의 거대구획)를 발생하어 서로 대응하는 각 구획화부(112,114)로 각각 제공한다.
다음에, 각 구획화부(112),(114)는 상기한 대응하는 각 비교부(108,110)로부터 제공되는 각각의 오차 구획신호(MX×MY의 거대구획)를 다수의 SX×SY 세부구획(예를들면, 4×4)으로 구획화, 즉 분할한다.
한편, 다수의 구획화부(112,114)의 각 출력에는 여러 가지 형태의 코드워드 할당 패턴에 대응할 수 있도록 다수의 코드워드 처리부(116,138)가 병렬로 연결되는데, 일예로서 제2도에 도시된 바와같은 코드워드 할당 패턴을 갖는다고 가정할 때, 적어도 세 개, 즉 0과 1로 구성된 코드워드 패턴(제2도의 표A,#B)에 대응하는 오차구획 데이터를 처리하는 코드워드 처리부, 0,1 및 2로 구성된 코드워드패턴(제2도의 #C,#D,#E)에 대응하는 오차구획 데이터를 처리하는 코드워드 처리부 및 0만으로 구성된 코드워드 패턴에 대응하는 오차구획 데이터를 처리하는 코드워드 처리부 및 0만으로 구성된 코드워드 패턴에 대응하는 오차구획 데이터를 처리하는 코드워드 처리부가 구비될 것이다.
이때, 각 코드워드 처리부에 구비되는 각 코드워드 패턴 분류기(예를들면, 코드워드 #A 처리부(116)내의 118)는 제4도의 코드북 메모리(26)로부터 제공되는 대응하는 코드워드 패턴들(제2도의 #A와 같이 코드워드 패턴이 0과 1로 구성될 때, 0의 개수 및 0의 위치에 따른 여러 가지 종류의 코드워드 패턴들)을 제공받아 각 패턴에 상응하는 구획 선택신호를 발생하며, 여기에서 발생된 각각의 구획 선택 신호는 세부구획 선택부(예를들면, 제5도의 122,124)에 제공된다.
또한, 각 코드워드 처리부(116 또는 138)는 코드워드의 할당 패턴에 따라 하나 내지 세 개의 패턴 데이터 처리 경로, 즉 세 개의 패턴 선택부를 포함하는 데, 각 패턴 선택부에서의 데이터 처리과정은 실질적으로 거의 동일하다. 따라서, 본 실시예에서는 이해의 증진과 설명의 편의를 위해 일예로서 제5도에 도시된 바와같이 0과 1로 구성된 코드워드 패턴에 대응하는 픽셀 데이터를 처리하는, 즉 두 개의 패턴 선택부(120,121)를 갖는 경우에 대하여 설명하고자 한다.
또한, 제5도에 도시된 바와같이, 0의 패턴을 처리하는 패턴 선택부(120)와 1의 패턴을 처리하는 패턴 선택부(120)의 구성 및 실질적인 처리동작이 동일하므로 본 실시예에서는 0의 패턴을 처리하는 패턴 선택부(120)의 처리동작을 일예로서 설명하고자 한다.
먼저, 일예로서 각 구획화부(112,114)에서 출력되는 다수의 차이 세부구획들이, 일예로서 제2도에 도시된 바와같이, #0와 #1로 구성되는 코드워드 패턴 #A 또는 #B에 대응가능한 세부구획들이라 가정할 때, 각 세부구획 선택부(122,124)에서는 라인 Ll0을 통해 코드워드 패턴 분류기(118)로부터 각각 제공되는 구획 선택신호에 의거하여 각 세부구획들에 대하여 0의 해당하는 오차픽셀값들만을 선택, 즉 세부구획에 대응하는 코드워드 패턴이 제2도의 #A와 같을 때 각 구획화부(112,114)에서 각각 입력되는 각 세부구획의 오차픽셀들중 코드워드 패턴의 0부분에 대응하는 부분의 픽셀값(오차픽셀값)만을 각각 선택(제2도 A의 코드워드 패턴을 좌상단에서부터 일련번호를 부여할 때 각 세부구획 선택부(122,124)에서는 1,2 및 5번의 픽셀값만을 선택)하며, 이때 선택된 각 오차 픽셀값들은 대응하는 각 AE(Absolute Error) 계산부(126,128)로 각각 제공된다.
이때, 코드워드 할당 패턴의 일예를 도시한 제2도에 있어서, 세부구획내의 각 픽셀에 대응하는 0,1,2는 각 픽셀의 움직임정도에 따라 구분되는 것으로, 0은 움직임이 거의 없는 경우를, 1은 작은 움직임을, 2는 큰 움직임을 갖는 픽셀을 의미한다. 이러한 값들의 설정은, 예를들면 서로 대응하는 픽셀(현재 프레임의 한 픽셀과 이에 대응하는 위치에 존재하는 이전 프레임의 대응 픽셀)간의 차값에 소정의 임계구간을 두고 그 차값이 임계구간 이하일때를 0으로, 대응하는 픽셀간의 차값이 임계구간내에 포함될 때를 1로, 대응하는 픽셀간의 차값이 임계구간 이상일때를 2로 표현할 수 있을 것이다.
다음에, AE계산부(126,128) 각각은, 대응하는 각 세부구획 선택부(122,124)에서 제공되는 선택된 세부구획의 특정 패턴에 대한 픽셀값들의 절대오차를 계산하며, 이들 각 AE계산부(126,128)에서 각각 계산된 각 세부구획들에 대한 각각의 절대오차값들은 최소치 검출부(130)로 제공된다.
한편, 최소치 검출부(130)에서는 상기한 각 AE계산부(126,128)로부터 제공되는 다수의 AE 증에서 최소치를 갖는 AE 값을 검출하여 평균 AE계산부(134)로 제공하며, 또한 검출된 최소의 AE 값에 대응하는 거대구획의 움직임벡터가 선택될 수 있도록 그에 상응하는 선택신호를 발생하여 멀티플렉서(132)에 제공한다.
따라서, 멀티플렉서(132)에서는 라인 L6,L8을 통해 전술한 다수의 각 이동 및 구획화부(104,106)에서 각각 입력되는 다수의 움직임벡터중 최소치 검출부(130)로 부터의 선택신호에 대응하는 하나의 움직임벡터를 선택하여 움직임벡터 취합부(136)로 제공한다. 이때, 여기에서 선택되는 하나의 움직임벡터는 세부구획 단위에 대응하는 코드워드 패턴중 0부분에 대응하는 픽셀들에 가장 적합한 움직임벡터가 될 것이다.
이와동시에, 이해의 증진과 설명의 편의를 위해 제5도에서의 도시는 생략되었으나, 1로 구성된 코드워드 패턴에 대응하는 픽셀 데이터를 처리하는 패턴 선택부(121)에서 검출된 코드워드 패턴중 1부분에 대응하는 픽셀들에 대한 최소의 AE 값 및 그에 상응하여 선택된 하나의 움직임벡터 또한 평균 AE계산부(134) 및 움직임벡터 취합부(136)로 각각 제공될 것이다.
한편, 평균 MAE계산부(134)에서는 각 벡터 패턴에 대응하는 최소치 AE 값들(0의 패턴에 대응하는 구획의 최소치 AE 및 1의 패턴에 대응하는 구획의 최소치 AE)에 의거하여 해당 패턴(예를들면, 0과 1의 코드워드 패턴에 대응하는 구획)에 대응하는 평균 AE 값을 계산하여 최소치 검출부(140)로 제공한다.
또한, 움직임벡터 취합부(136)에서는 세부구획 단위에 대응하는 코드워드 패턴들에 대응하는 픽셀들에 가장 적합한 하나 및/또는 세 개의 움직임벡터(즉, 코드워드 패턴중 0에 대응하는 세부구획에 대한 하나의 움직임벡터와 1에 대응하는 세부구획에 대한 다른 하나의 움직임벡터)를 취합하여 출력측의 멀티플렉서(142)에 제공한다.
다른한편, 최소치 검출부(140)는 다수의 각 코드워드 처리부(116,138)내의 각평균 AE계산부로부터 각각 제공되는 각 패턴(#A∼#의 최대값)들의 평균 AE를 입력으로하여 최소의 코드워드 패턴을 검출, 즉 평균 AE 값에 의거하여 그에 상응하는 코드워드 인덱스를 발생하여 제3도의 움직임벡터 부호화부(22)로 출력한다. 즉, 다수의 코드워드 처리부들중 평균 AE 값이 최소인 코드워드 처리부를 결정하여 그에 따른 인덱스 정보, 예를들면 검출된 최소 평균 AE 값이 다수의 코드워드 처리부중 몇번째 코드워드 처리부에서 출력된 값인가를 의미하는 인데스 정보를 발생한다.
또한, 최소치 검출부(140)에서는 검출된 최소 평균 AE 값에 대응하는 거대구획의 움직임벡터(하나 및/또는 세 개의 움직임벡터)가 선택될 수 있도록 그에 상응하는 선택신호를 발생하여 멀티 플렉서(132)에 제공하는 데, 멀티플렉서(142)는 이러한 다수의 각 움직임벡터 취합부에서 제공되는 다수의 움직임벡터 그룹(하나 및/또는 세 개로 된 움직임벡터 그룹)중 상기한 최소치 검출부(140)로부터의 선택신호에 대응하는 하나의 움직임벡터 그룹(하나 및/또는 세 개의 움직임벡터)을 선택하여 제3도의 움직임벡터 부호화부(22)로 출력한다.
즉, 본 발명에 따르면, 다수의 각 코드워드 처리부(116,138)에서는 다수의 분할된 세부구획(SX,SY)들을 포함하는 하나의 거대구획(MX,MY)에 대해 각 경우의 패턴에 대응하는 평균 AE 값을 각각 산출하고, 각 경우의 패턴에 가장 적합한 하나 및/또는 세 개의 움직임벡터를 각각 선택하는 데, 최소치 검출부(140)에서는 다수의 평균 AE 값들중 최소 평균 AE 값을 검출하고 이 검출된 최소 평균 AE 값에 의거하여 그에 상응하는 코드워드 인덱스를 발생하며, 멀티플렉서(142)에서는 검출된 최소 평균 AE 값에 대응하는 거대구획 단위의 움직임벡터(하나 및/또는 세 개의 움직임벡터)를 선택한다.
따라서, 수신측의 영상 복호기에서는 이러한 인덱스 정보 및 움직임벡터에 의거하여 송신측 영상 부호기에서의 처리경로를 통해 데이터 복원을 위한 일련의 신호처리 과정을 수행하게 될 것이다.
이상 설명한 바와같이, 본 발명에 따른 코드워드 패턴을 이용한 움직임벡터 검출장치는 물체의 움직임 배경을 기준으로 하나의 구획(거대구획)을 몇 개의 영역(세부구획)으로 나누어 대응하는 패턴 코드북을 이용하여 움직임벡터를 검출함으로써 각 물체에 가장 적합한 움직임벡터를 검출할 수 있다.

Claims (2)

  1. 시간적으로 연속하는 현재 영상신호와 복원된 이전 영상신호를 이용하여 소정크기로 구획화된 구획간의 매칭 알고리즘과 다수의 코드워드 패턴을 갖는 코드북을 이용하여 상기 두 영상신호간의 움직임 정도를 검출하는 장치에있어서, 상기 현재 영상신호에 대해 움직임벡터를 추정하고자 하는 다수의 MX×MY 거대구획을 설정하는 현재 프레임 구획 출력수단; 상기 이전 영상신호에 대해 상기 분할된 각 MX×MY 거대구획에 각각 대응하는 PX×PY 탐색영역을 설정하여 각 MX×MY 거대구획에 대응하는 다수의 MX×MY 분할구획을 순차적으로 발생하는 탐색영역 출력수단; 상기 다수의 MX×MY 분할구획에 각각에 대해 각 분할구획별로 분할하고, 상기 분할된 다수의 각 MX×MY 분할구획과 이에 대응하는 상기 하나의 MX×MY 거대구획과의 위치관계에 대한 정보로서 각각 하나의 움직임벡터를 산출하는 이동 및 구획화 수단; 상기 분할된 다수의 각 MX×MY 분할구획과 이에 대응하는 상기 하나의 MX×MY 거대구획을 각각 감산하여 MX×MY 구획단위의 다수의 에러신호를 각각 발생하는 비교수단; 상기 발생된 각각의 에러신호를 다수의 SX×SY 세부구획으로 균일하게 각각 분할하는 구획화 수단; 상기 분할된 각 SX×SY 세부구획에 각각 대응하며, 세부구획 단위의 움직임 정도 및 움직임 패턴에 따라 소정수의 부류로 분류하여 각 부류당 동일한 움직임벡터가 할당되는 다수의 코드워드 패턴들을 저장하기 위한 코드북 메모리; 상기 코드북 메모리로 부터의 각 코드워드 패턴과 상기 분할된 다수의 각 SX×SY 세부구획에 대해 기설정된 임계값에 근거한 움직임 정도에 의거하여 상기 각 SX×SY 세부구획의 픽셀오차값을 각각 분류하여 적어도 하나의 분류픽셀 패턴을 생성하고, 상기 MX×MY 구획단위의 긱 에러신호내의 생성된 분류픽셀 패턴에 대한 평균 절대오차값을 각각 산출하며, 상기 산출된 다수의 움직임벡터를 포함하는 상기 MX×MY 구획단위의 각 에러신호에 대한 움직임벡터 그룹을 각각 취합하는 다수의 경로를 갖는 신호처리 수단; 및 상기 산출된 다수의 평균 절대오차값을 비교하여 최소의 평균 절대오차값을 검출하고, 상기 다수의 신호처리 경로중 상기 최소 평균 절대오차값을 산출한 경로에 상응하는 경로인식용 코드워드 인덱스 정보를 발생하며, 상기 취합된 다수의 움직임벡터 그룹중 상기 최소 평균 절대오차값을 산출한 경로에서 취합된 움직임벡터 그룹을 상기 하나의 MX×MY 거대구획의 최종 움직임벡터로서 출력하는 멀티플렉서로 이루어진 영역 분류패턴을 이용한 움직임벡터 검출장치.
  2. 제1항에 있어서, 상기 각 신호처리 경로는; 상기 코드북 메모리로부터 제공되는 코드워드 패턴들을 제공받아 각 패턴에 상응하는 구획 선택신호를 각각 발생하는 코드워드 패턴 분류수단; 상기 각 MX×MY 구획 에러신호내의 상기 분할된 각 SX×SY 세부구획에서 움직임 정도에 근거하여 각각 분류된 동일 분류 픽셀내 픽셀들의 절대오차값을 각각 계산하고, 계산된 다수의 각 동일 분류픽셀의 절대오차값중 최소치를 각각 검출하며, 상기 산출된 다수의 움직임벡터중 상기 검출된 최소치 절대오차값에 대응하는 하나의 움직임벡터를 각각 선택하는 복수의 패턴 선택수단; 상기 각각 검출된 복수의 최소치 절대오차에 대한 하나의 평균 절대오차값을 산출하는 평균 절대오차 산출수단; 상기 산출된 각 최소치 절대값에 의거하여 상기 산출된 다수의 움직임벡터중 하나를 각각 선택하는 멀티플렉서 수단; 및 상기 멀티플렉서 수단을 통해 선택된 적어도 하나의 움직임벡터를 취합하여 하나의 움직임벡터 그룹을 생성하는 움직임벡터 취합수단으로 구성된 것을 영역 분류패턴을 이용한 움직임벡터 검출장치.
KR1019930005967A 1993-04-09 1993-04-09 영역 분류패턴을 이용한 움직임벡터 검출장치 KR970002967B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1019930005967A KR970002967B1 (ko) 1993-04-09 1993-04-09 영역 분류패턴을 이용한 움직임벡터 검출장치
JP7235094A JPH07135662A (ja) 1993-04-09 1994-04-11 動き物体パタンを用いた動きベクトル検出装置
US08/770,367 US5825423A (en) 1993-04-09 1996-11-27 Apparatus for detecting motion vectors using moving object patterns

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1019930005967A KR970002967B1 (ko) 1993-04-09 1993-04-09 영역 분류패턴을 이용한 움직임벡터 검출장치

Publications (2)

Publication Number Publication Date
KR940025369A KR940025369A (ko) 1994-11-19
KR970002967B1 true KR970002967B1 (ko) 1997-03-13

Family

ID=19353708

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1019930005967A KR970002967B1 (ko) 1993-04-09 1993-04-09 영역 분류패턴을 이용한 움직임벡터 검출장치

Country Status (3)

Country Link
US (1) US5825423A (ko)
JP (1) JPH07135662A (ko)
KR (1) KR970002967B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100921821B1 (ko) * 2007-12-07 2009-10-16 영남대학교 산학협력단 특성 공간 궤적 데이터베이스 구축 방법 및 이를 이용한다중 각도 표적 식별 방법

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6091460A (en) * 1994-03-31 2000-07-18 Mitsubishi Denki Kabushiki Kaisha Video signal encoding method and system
FR2743247B1 (fr) * 1995-12-29 1998-01-23 Thomson Multimedia Sa Dispositif d'estimation de mouvement par appariement de blocs
JPH10210473A (ja) * 1997-01-16 1998-08-07 Toshiba Corp 動きベクトル検出装置
JPH10327415A (ja) * 1997-05-22 1998-12-08 Mitsubishi Electric Corp 動きベクトル検出装置
WO1999019840A1 (en) * 1997-10-15 1999-04-22 Electric Planet, Inc. A system and method for generating an animatable character
US6987545B1 (en) 1998-03-26 2006-01-17 Micron Technology, Inc. Apparatus for assisting video compression in a computer system
US7298425B2 (en) * 1998-03-26 2007-11-20 Micron Technology, Inc. Method for assisting video compression in a computer system
US6463164B1 (en) * 1998-08-20 2002-10-08 Lucent Technologies Inc. Motion vector estimation based on statistical features of an image frame
EP2819411B1 (en) * 2001-09-14 2018-08-29 NTT DoCoMo, Inc. Coding method and decoding method
CN101448162B (zh) 2001-12-17 2013-01-02 微软公司 处理视频图像的方法
KR100491530B1 (ko) * 2002-05-03 2005-05-27 엘지전자 주식회사 모션 벡터 결정 방법
US7038676B2 (en) * 2002-06-11 2006-05-02 Sony Computer Entertainmant Inc. System and method for data compression
EP1395061A1 (en) * 2002-08-27 2004-03-03 Mitsubishi Electric Information Technology Centre Europe B.V. Method and apparatus for compensation of erroneous motion vectors in video data
US10554985B2 (en) 2003-07-18 2020-02-04 Microsoft Technology Licensing, Llc DC coefficient signaling at small quantization step sizes
FR2870071B1 (fr) * 2004-05-05 2006-12-08 Centre Nat Rech Scient Cnrse Procede de traitement de donnees d'images, par reduction de bruit d'image, et camera integrant des moyens de mise en oeuvre de ce procede
US7895218B2 (en) * 2004-11-09 2011-02-22 Veveo, Inc. Method and system for performing searches for television content using reduced text input
US20060222074A1 (en) * 2005-04-01 2006-10-05 Bo Zhang Method and system for motion estimation in a video encoder
US9172973B2 (en) * 2005-04-01 2015-10-27 Broadcom Corporation Method and system for motion estimation in a video encoder
US7756348B2 (en) * 2006-10-30 2010-07-13 Hewlett-Packard Development Company, L.P. Method for decomposing a video sequence frame
KR100791391B1 (ko) * 2007-01-30 2008-01-07 삼성전자주식회사 노이즈 저감 방법 및 장치
US8487932B1 (en) * 2010-08-30 2013-07-16 Disney Enterprises, Inc. Drawing figures in computer-based drawing applications
US8427483B1 (en) 2010-08-30 2013-04-23 Disney Enterprises. Inc. Drawing figures in computer-based drawing applications
CN104104961B (zh) * 2013-04-10 2018-09-21 华为技术有限公司 一种视频编码方法、解码方法和装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2191656B (en) * 1985-12-24 1989-10-18 British Broadcasting Corp Method of coding a video signal for transmission in a restricted bandwidth
DE3853555T2 (de) * 1987-06-09 1995-08-17 Sony Corp Verarbeitung des Bewegungsvektors in digitalen Fernsehbildern.
GB2223141A (en) * 1988-09-21 1990-03-28 Sony Corp Slow motion video signal generator with motion compensated interpolation
GB2231747B (en) * 1989-04-27 1993-07-07 Sony Corp Motion dependent video signal processing
GB2231743B (en) * 1989-04-27 1993-10-20 Sony Corp Motion dependent video signal processing
JPH0385884A (ja) * 1989-08-29 1991-04-11 Sony Corp 画像の動き検出回路
JPH0453389A (ja) * 1990-06-21 1992-02-20 Graphics Commun Technol:Kk 動ベクトル検出装置
US5200820A (en) * 1991-04-26 1993-04-06 Bell Communications Research, Inc. Block-matching motion estimator for video coder

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100921821B1 (ko) * 2007-12-07 2009-10-16 영남대학교 산학협력단 특성 공간 궤적 데이터베이스 구축 방법 및 이를 이용한다중 각도 표적 식별 방법

Also Published As

Publication number Publication date
US5825423A (en) 1998-10-20
KR940025369A (ko) 1994-11-19
JPH07135662A (ja) 1995-05-23

Similar Documents

Publication Publication Date Title
KR970002967B1 (ko) 영역 분류패턴을 이용한 움직임벡터 검출장치
KR960015395B1 (ko) 움직임벡터 검출장치
KR960010198B1 (ko) 동영상 부호화기의 움직임 추정방법 및 장치
KR0178231B1 (ko) 계층적인 움직임 추정 기법을 이용하는 움직임 벡터 검출 방법 및 장치
KR100430328B1 (ko) 비디오데이터엔코더및디코더
KR100464995B1 (ko) 운동의존예측을이용하여비디오정보를압축하는방법및장치
KR950009699B1 (ko) 움직임벡터 검출방법 및 장치
KR100291493B1 (ko) 비디오 신호압축용 이동벡터 처리장치
CN105684409A (zh) 在视频和图像编码和解码中使用散列值来表示各块
KR20000076522A (ko) 직교 변환 영역의 블록 매칭을 사용한 모션 추정
JPH09179987A (ja) 動きベクトル検出方法及び動きベクトル検出装置
JPH08307874A (ja) 映像信号符号化装置
EP0734175B1 (en) Hierarchical motion vector estimation using multiple block sizes
KR19990030024A (ko) 적응적 비월주사 모양정보 부호화/복호화 장치 및 방법
KR100286818B1 (ko) 실시간 영상압축을 위한 고속 움직임 예측방법
JP4957780B2 (ja) 動き補償予測符号化装置、動き補償予測符号化方法及びプログラム
JPH08265764A (ja) 映像信号符号化装置
KR970003107B1 (ko) 단계적인 영역분할을 통한 움직임벡터 검출방법 및 장치
JP2608909B2 (ja) 動画像の予測符号化方式
JP3941900B2 (ja) 動きベクトル検出装置
KR100207391B1 (ko) 적응적인 벡터 양자화를 이용한 영상 부호화 시스템 및 그의 움직임 정보 검출 방법
JP4438949B2 (ja) 動き補償予測符号化装置、動き補償予測符号化方法及びプログラム
KR0128875B1 (ko) 큰 움직임을 갖는 영상의 움직임 벡터 추정 방법
JP2537244B2 (ja) 動き補償動ベクトルの符号化方式
Jamil et al. Block matching algorithm (BMA) of the hybrid adaptive rood pattern search (ARPS) based on its motion speed

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
G160 Decision to publish patent application
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20110302

Year of fee payment: 15

LAPS Lapse due to unpaid annual fee