KR20040098422A - 움직임 벡터 탐색 방법 - Google Patents

움직임 벡터 탐색 방법 Download PDF

Info

Publication number
KR20040098422A
KR20040098422A KR1020030030778A KR20030030778A KR20040098422A KR 20040098422 A KR20040098422 A KR 20040098422A KR 1020030030778 A KR1020030030778 A KR 1020030030778A KR 20030030778 A KR20030030778 A KR 20030030778A KR 20040098422 A KR20040098422 A KR 20040098422A
Authority
KR
South Korea
Prior art keywords
motion vector
unit pixel
unit
pixel
pixels
Prior art date
Application number
KR1020030030778A
Other languages
English (en)
Inventor
이영렬
Original Assignee
이영렬
학교법인 대양학원
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이영렬, 학교법인 대양학원 filed Critical 이영렬
Priority to KR1020030030778A priority Critical patent/KR20040098422A/ko
Publication of KR20040098422A publication Critical patent/KR20040098422A/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/53—Multi-resolution motion estimation; Hierarchical motion estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/533—Motion estimation using multistep search, e.g. 2D-log search or one-at-a-time search [OTS]

Abstract

계층적 SEA를 적용하여 1/4 단위 화소의 움직임 벡터까지 탐색함에 있어서, 정수 단위 화소와 1/2 단위 화소의 사이에 존재하는 일부 1/4 단위 화소에 대해서만 움직임 벡터를 탐색한다. 일부 1/4 단위 화소는 바람직하게는 정수 단위 화소에서 가까운 3개의 1/4 단위 화소이다. 한편, 1/2 단위 화소에 대한 움직임 벡터를 탐색하여 결정하는 단계에서 1/2 단위 화소들에 대한 SAD가 기준 정수 단위 화소에 대한 SAD보다 높은 경우에는, 기준 정수 단위 화소 주변의 8개의 1/4 단위 화소에 대하여 움직임 벡터를 탐색하여 결정한다.

Description

움직임 벡터 탐색 방법 {Motion vector search method}
본 발명은 동영상의 움직임 보상 압축시의 움직임 벡터 탐색 방법에 관한 것으로써, 특히 정수 단위 화소와 1/4 단위 화소로 움직임 예측을 수행함에 있어서 1/4 단위 화소의 일부에 대해서만 움직임 벡터를 탐색함으로써 고속으로 움직임 벡터를 탐색하는 고속 움직임 벡터 탐색 방법에 관한 것이다.
종래의 대부분의 영상 압축 표준은 블록기반으로 움직임 예측 및 움직임 보상을 한다. 그러나, 움직임 예측은 동영상 부호화에서 시간적 중복성을 이용하여 비트율을 감소시키는데 큰 역할을 하지만 상당히 많은 연산이 필요하다.
부호기에서의 연산 시간을 감소시키기 위해 제안된 움직임 예측 알고리즘으로는 3단계 탐색(Three-Step Search), 2차원 로그 탐색(2-D logarithm Search), OTS 탐색(One-At-a-Time Search), 뉴 다이아몬드 탐색(New Diamond Search) 등이 잘 알려져 있다. 이러한 탐색 알고리즘들은 탐색하는 위치의 수를 감소시킴으로써 전체 영역 탐색의 3%~5%정도의 계산량만을 사용하여 정수 단위 화소의 움직임 벡터를 찾아낸다. 그러나, 이러한 알고리즘은 국부적 최소점(local minmium)에 빠지기 쉬울 뿐 아니라, 신호대 잡음비(Peak Signal to Noise Ratio; PSNR)도 전체 영역 탐색을 했을 때만큼 좋은 결과를 나타내지 못한다는 문제점이 있다.
이러한 문제점을 해결하기 위한 고속 움직임 예측 기법에는 계층적(Hierarchical) 연속 제거 기법(Successive Elimination Algorithm; SEA)이 있는데, 이 계층적 SEA는 현재 프레임에서의 특정 블록의 화소값과 이전 프레임에서의 후보 블록의 화소값의 차이의 절대값의 합(차분 절대치 합(Sum of Absolute Differences; SAD))은 두 블록들의 화소값의 절대값의 합의 차이보다 항상 크거나 같다는 부등식을 이용하여 불필요한 후보 블록들을 제거함으로써 전체 영역 탐색 알고리즘과 동일한 탐색성능을 유지하면서도 계산량은 전체 영역 탐색 알고리즘의 13% 정도만 소요할 정도로 고속 전체 영역 탐색을 가능하게 하는 고속 움직임 예측 기법이다.
또한, 종래에는 현재 영상 프레임의 블록으로 참조 영상 프레임의 후보 블록을 탐색하는 방법으로써 나선형 전체 영역 탐색(spiral full search) 알고리즘과 고속 전체 영역 탐색(fast full search) 알고리즘이 알려져 있는데, 나선형 전체 영역 탐색 알고리즘은 주위의 블록으로부터 중앙-예측하여 얻은 움직임 벡터를 중심으로 나선형 순서로 ±16 화소 영역으로 움직임 예측을 수행하는 것을 특징으로 하며, 고속 전체 영역 탐색 알고리즘은 하나의 매크로 블록에서 ±16 화소 영역으로 16개의 4×4 블록의 SAD 계산을 수행하고, 그 SAD 값을 이용하여 계층적으로 더 큰 블록들의 SAD 값을 만들어서 움직임 예측을 수행하는 것을 특징으로 한다. 참조영상 프레임으로는 현재 영상 프레임과 상관관계가 큰 이전 영상 프레임을 선택하는 것이 좋다.
한편, 동영상 압축·복원 기술인 ITU-T 권고 H.264 기술은 가변 블록 기반으로 움직임 예측 및 보상을 하는 부분과 1/4 단위 화소까지 보간하는 부분에서 대부분의 연산이 소요되는데, 특히 1/4 단위 화소까지 움직임 벡터를 탐색하는 부분에서 많은 시간을 소요하게 된다.
따라서, 본 발명의 목적은, 탐색된 정수단위의 움직임 벡터로부터 그 주위 8개의 위치에서 가장 좋은 1/2 단위 화소의 움직임 벡터를 구한 뒤, 1/4 단위 화소의 움직임 벡터 탐색시에는 주위의 일부 1/4 화소만을 탐색함으로써 화질에는 거의 영향이 없이 계산량을 현저히 감소시킨 움직임 벡터 탐색 방법을 제공하는 것이다.
도 1은 본 발명에 따른 1/4 단위 화소의 보간법에 대한 설명도이다.
본 발명에서는 정수 단위 화소에서의 움직임 벡터를 탐색하여 결정한 다음에, 결정된 정수 단위 화소의 움직임 벡터에 대응하는 기준 정수 단위 화소 주변의 1/2 단위 화소에 대한 움직임 벡터를 탐색하여 결정한다. 1/2 단위 화소의 움직임 벡터가 결정된 경우에는, 결정된 1/2 단위 화소의 움직임 벡터에 대응하는 기준 1/2 단위 화소 주변의 1/4 단위 화소 중에서 기준 정수 단위 화소와 기준 1/2 단위 화소의 사이에 존재하는 일부의 1/4 단위 화소에 대해서만 움직임 벡터를 탐색하여 결정한다. 이때, 상기 일부 1/4 화소는 다른 1/4 화소보다는 기준 정수 단위 화소로부터 가까운 거리에 있는 3개의 1/4 단위 화소인 것이 바람직하다.
한편, 1/2 단위 화소들에 대한 SAD가 상기 기준 정수 단위 화소에 대한 SAD보다 높은 경우에는 상기 기준 정수 단위 화소를 1/2 단위 화소에 대한 움직임 벡터로 결정하고, 기준 정수 단위 화소 주변의 8개의 1/4 단위 화소에 대하여 움직임 벡터를 탐색하여 결정하는 것이 바람직하다.
이하, 첨부된 도면을 참조하여 본 발명의 실시예를 설명한다.
도 1의 (a)에서 영문 대문자로 표시된 화소는 정수 단위 화소를 나타내고, 영문 소문자로 표시된 화소는 1/2 단위 화소를 나타내며, 숫자로 표시된 화소는 1/4 단위 화소를 나타낸다.
정수 단위 화소의 움직임 벡터 검색에서 정수 단위 화소의 움직임 벡터에 대응하는 화소인 기준 정수 단위 화소로 A 화소가 결정되었다면, 다음으로 A 화소 주위의 b, c, d, e, f, g, h, i의 8개의 1/2 단위 화소에서 최소의 SAD를 가진 화소, 즉 1/2 단위 화소의 움직임 벡터에 대응하는 기준 1/2 단위 화소를 찾게 된다.
종래에는 1/4 단위 화소의 움직임 벡터를 찾기 위하여 기준 1/2 단위 화소 주위의 8개의 1/4 단위 화소에 대해서 SAD 값을 계산하였으나, 본 발명에서는 기준 1/2 단위 화소 주위의 8개의 1/4 단위 화소 중에서 기준 정수 단위 화소로부터 가까운 거리에 있는 3개의 1/4 단위 화소에 대해서만 SAD 값을 계산한다.
예를 들어, 기준 1/2 단위 화소의 위치가 b라고 가정하면 1, 2, 3의 화소만을 탐색하고, 그 위치가 h라면 4, 5, 6의 화소만을 탐색한다.
이렇게 1/2 단위 화소 주위의 전체 화소를 탐색하지 않고 일부 화소만을 탐색하는 이유는 최적의 1/4 단위 화소가 발견될 가능성은 최적의 정수 단위 화소와 최적의 1/2 단위 화소의 중간일 확률이 높기 때문이며, 후술하는 바와 같이 실제로도 1/2 단위 화소의 3개의 화소만을 탐색하여도 다른 방법들에 비해 속도는 향상되면서 율-왜곡은 오히려 향상되었다.
한편, 이상은 1/2 단위 화소의 최소 SAD가 기준 정수 단위 화소의 SAD보다 작은 경우를 설명한 것이고, 1/2 단위 화소의 최소 SAD가 기준 정수 단위 화소의 SAD 보다 큰 경우에는 움직임 벡터를 1/2 단위 화소의 움직임 벡터로 결정할 수 없으며, 기준 정수 단위 화소의 움직임 벡터로 결정할 수밖에 없다.
예를 들어, 만약 A 화소 주위의 8개의 1/2 단위 화소의 최소 SAD가 A 화소의 SAD보다 큰 경우에는 1/2 단위 화소의 움직임 벡터는 다시 A 화소에 대한 움직임 벡터로 결정되는 것이다. 이 경우 1/4 단위 화소의 움직임 벡터의 탐색은 A 화소 주변의 3, 4, 5, 6, 7, 8, 9, 10의 8개의 1/4 단위 화소에 대해 움직임 벡터를 탐색하여야 한다.
한편, 1/2 단위 화소와 1/4 단위 화소를 결정하는 방법에 대해서는 H.264에 정의되어 있는데, 도 1의 (b)에서 영문 대문자는 정수 단위 화소이고 영문 소문자는 1/2 단위 화소라고 한다면 6 탭 유한 임펄스 응답(6 tap Finite Impulse Response) 필터에 의해 1/2 단위 화소가 결정된다. 예를 들어 필터 가중치가 (1/32, -5/32, 5/8, 5/8, -5/32, 1/32)라고 한다면, 1/2 단위 화소인 b는 b=round((E-5F+20G+20H-5I+J)/32)로 결정된다. 나머지 1/2 단위 화소도 동일한 방식으로 결정할 수 있다. 또한, G와 b 사이에 a라는 1/4 단위 화소를 가정한다면a=round((G+b)/2)와 같이 결정할 수 있다.
이상과 같이 본 발명에 따르면, 정수 단위 화소와 1/2 단위 화소의 사이에 존재하는 일부 1/4 단위 화소에 대해서만 움직임 벡터를 탐색함으로써 계산속도가 현저히 향상되는 효과가 있다.

Claims (3)

  1. 정수 단위 화소에서의 움직임 벡터를 탐색하여 결정하는 단계와,
    상기 결정된 정수 단위 화소의 움직임 벡터에 대응하는 기준 정수 단위 화소 주변의 1/2 단위 화소에 대한 움직임 벡터를 탐색하여 결정하는 단계와,
    상기 1/2 단위 화소의 움직임 벡터가 결정된 경우에는, 상기 결정된 1/2 단위 화소의 움직임 벡터에 대응하는 기준 1/2 단위 화소 주변의 1/4 단위 화소 중에서 상기 기준 정수 단위 화소와 상기 기준 1/2 단위 화소의 사이에 존재하는 일부 1/4 단위 화소에 대해서만 움직임 벡터를 탐색하여 결정하는 단계를 포함하는 움직임 벡터 탐색 방법.
  2. 제 1 항에 있어서, 상기 일부 1/4 화소는 다른 1/4 화소보다는 상기 기준 정수 단위 화소로부터 가까운 거리에 있는 3개의 1/4 단위 화소인 것을 특징으로 하는 움직임 벡터 탐색 방법.
  3. 제 1 항에 있어서, 1/2 단위 화소에 대한 움직임 벡터를 탐색하여 결정하는 단계에서 상기 1/2 단위 화소들에 대한 SAD가 상기 기준 정수 단위 화소에 대한 SAD보다 높은 경우에는 상기 기준 정수 단위 화소를 1/2 단위 화소에 대한 움직임 벡터로 결정하고,
    상기 기준 정수 단위 화소가 1/2 단위 화소에 대한 움직임 벡터로 결정된 경우에는 상기 기준 정수 단위 화소 주변의 8개의 1/4 단위 화소에 대하여 움직임 벡터를 탐색하여 결정하는 것을 특징으로 하는 움직임 벡터 탐색 방법.
KR1020030030778A 2003-05-15 2003-05-15 움직임 벡터 탐색 방법 KR20040098422A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020030030778A KR20040098422A (ko) 2003-05-15 2003-05-15 움직임 벡터 탐색 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020030030778A KR20040098422A (ko) 2003-05-15 2003-05-15 움직임 벡터 탐색 방법

Publications (1)

Publication Number Publication Date
KR20040098422A true KR20040098422A (ko) 2004-11-20

Family

ID=37376318

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020030030778A KR20040098422A (ko) 2003-05-15 2003-05-15 움직임 벡터 탐색 방법

Country Status (1)

Country Link
KR (1) KR20040098422A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011111954A2 (ko) * 2010-03-08 2011-09-15 에스케이텔레콤 주식회사 움직임 벡터 해상도 조합을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011111954A2 (ko) * 2010-03-08 2011-09-15 에스케이텔레콤 주식회사 움직임 벡터 해상도 조합을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
WO2011111954A3 (ko) * 2010-03-08 2012-01-05 에스케이텔레콤 주식회사 움직임 벡터 해상도 조합을 이용한 움직임 벡터 부호화/복호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
US9491480B2 (en) 2010-03-08 2016-11-08 Sk Telecom Co., Ltd. Motion vector encoding/decoding method and apparatus using a motion vector resolution combination, and image encoding/decoding method and apparatus using same

Similar Documents

Publication Publication Date Title
JP5044568B2 (ja) 予測誘導間引き探索を使用する動き推定
JP3801886B2 (ja) ハイブリッド型高速動き推定方法
KR100498951B1 (ko) 동영상 압축 부호화를 위한 움직임 예측 방법과 그기록매체
KR100530223B1 (ko) 프레임 레이트 변환시의 프레임 보간 방법 및 그 장치
Yaakob et al. A comparison of different block matching algorithms for motion estimation
KR20010082934A (ko) 움직임 추정 방법 및 장치
KR20010083717A (ko) 움직임 추정 방법 및 장치
WO2004091222A1 (en) Method and apparatus for determining search range for adaptive motion vector for use in video encoder
US20040252766A1 (en) Motion vector search method and apparatus
RU2487489C2 (ru) Способ поиска векторов перемещений в динамических изображениях
Bachu et al. Adaptive order search and tangent-weighted trade-off for motion estimation in H. 264
KR20040106202A (ko) 움직임 벡터 탐색 방법 및 그 장치
Aoun et al. Multiresolution motion estimation and compensation for video coding
Patel et al. Review and comparative study of Motion estimation techniques to reduce complexity in video compression
KR20040098422A (ko) 움직임 벡터 탐색 방법
US11528485B2 (en) Encoding apparatus and program
KR20040035390A (ko) 비디오 영상 압축 시스템에서의 적응적 패턴을 이용한움직임 예측 장치 및 방법
Soongsathitanon et al. Fast search algorithms for video coding using orthogonal logarithmic search algorithm
CN113891089A (zh) 一种运动信息候选列表的构建方法、装置及其设备
KR100859073B1 (ko) 움직임 추정 방법
Hamid et al. A new orthogonal-diamond search algorithm for motion estimation
Mishra et al. Comparative study of motion estimation techniques in video
KR20100060102A (ko) 완전 탐색 기반의 적응적 탐색 영역을 이용한 움직임 추정 방법
Liu et al. Adaptive multi-resolution motion estimation using texture-based search strategies
Lin et al. A fast and adaptive search algorithm based on rood pattern and gradient descent

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
NORF Unpaid initial registration fee