KR20170113947A - 글로벌 움직임 보상 방법 및 장치 - Google Patents

글로벌 움직임 보상 방법 및 장치 Download PDF

Info

Publication number
KR20170113947A
KR20170113947A KR1020160038075A KR20160038075A KR20170113947A KR 20170113947 A KR20170113947 A KR 20170113947A KR 1020160038075 A KR1020160038075 A KR 1020160038075A KR 20160038075 A KR20160038075 A KR 20160038075A KR 20170113947 A KR20170113947 A KR 20170113947A
Authority
KR
South Korea
Prior art keywords
motion compensation
global motion
region
information
bitstream
Prior art date
Application number
KR1020160038075A
Other languages
English (en)
Inventor
류호찬
심동규
안용조
Original Assignee
광운대학교 산학협력단
디지털인사이트 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 광운대학교 산학협력단, 디지털인사이트 주식회사 filed Critical 광운대학교 산학협력단
Priority to KR1020160038075A priority Critical patent/KR20170113947A/ko
Priority to CN202310522574.4A priority patent/CN116506604A/zh
Priority to CN202310522570.6A priority patent/CN116506603A/zh
Priority to CN202310522560.2A priority patent/CN116506602A/zh
Priority to US16/084,105 priority patent/US10694184B2/en
Priority to CN202310522559.XA priority patent/CN116506601A/zh
Priority to CN202310522554.7A priority patent/CN116506600A/zh
Priority to CN201780028323.3A priority patent/CN109155857B/zh
Priority to PCT/KR2017/002578 priority patent/WO2017155334A1/ko
Publication of KR20170113947A publication Critical patent/KR20170113947A/ko
Priority to US16/881,786 priority patent/US11438591B2/en
Priority to US17/872,577 priority patent/US11838509B2/en
Priority to US18/381,715 priority patent/US20240048704A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/537—Motion estimation other than block-based
    • H04N19/543—Motion estimation other than block-based using regions

Abstract

본 발명은 비디오 압축 기술 중 움직임 보상 기술에 있어, 영상에서 광범위한 영역에 대하여 한번에 움직임 보상을 수행하는 방법 및 장치에 관한 것이다.

Description

글로벌 움직임 보상 방법 및 장치{METHOD AND APPARATUS FOR GLOBAL MOTION COMPENSATION}
본 발명은 영상 부호화 및 복호화 기술에 관한 것으로, 더욱 상세하게는 영상의 광범위한 영역에 대한 글로벌 움직임 보상을 하는 방법 및 장치에 관한 것이다.
고해상도 비디오에 대한 시장의 수요가 증가하고 있으며, 이에 따라 고해상도 영상을 효율적으로 압축할 수 있는 기술이 필요하다. 이러한 시장의 요구에 따라 ISO/IEC의 MPEG (Moving Picture Expert Group)과 ITU-T의 VCEG (Video Coding Expert Group)이 공동으로 JCT-VC (Joint Collaborative Team on Video Coding)를 결성하여, HEVC (High Efficiency Video Coding) 비디오 압축 표준을 2013년 1월에 개발을 완료했으며, 차세대 압축 표준에 대한 연구 및 개발을 활발히 진행해오고 있다.
비디오 압축 기술에서 움직임 보상은 부호화기로부터 전달받은 움직임 정보를 이용하여 복호화기에서 예측 블록을 생성하고, 잔차 신호(residual signal)와 합산을 통해 복원 영상을 생성하는 방법이다. 움직임 보상을 위해 부호화기에서 복호화기로 전달되는 정보는 블록 분할 정보, 움직임 정보, 잔차 신호 정보가 있다.상기 복호화기로 전달되는 정보들의 양이 줄어든다면 부호화 성능은 향상된다.
본 발명의 일부 실시예는 영상의 광범위한 영역에 대한 글로벌 움직임 보상을 수행하는 방법 및 장치를 제공하는 것을 그 목적으로 한다.
다만 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.
상기 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치 및 방법은 비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계, 상기 결정된 글로벌 움직임 보상을 위한 정보를 이용하여 글로벌 움직임 보상 영역을 결정하는 단계, 상기 결정된 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계를 포함한다.
상기 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치 및 방법은 비트스트림으로부터 글로벌 움직임 보상의 사용 여부를 나타내는 플래그를 추출하는 단계, 상기 추출된 플래그가 글로벌 움직임 보상의 사용을 의미하는 경우, 비트스트림으로부터 글로벌 움직임 보상 영역 결정 및 결정된 글로벌 움직임 영역별 움직임 보상 수행을 위한 정보를 추출하는 단계를 포함한다.
상기 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치 및 방법은 비트스트림으로부터 글로벌 움직임 보상 사용의 여부를 나타내는 플래그를 추출하는 단계, 상기 추출된 플래그가 글로벌 움직임 보상을 사용하지 않음을 의미하는 경우, 코딩 블록 단위 움직임 보상을 수행하는 단계를 포함한다.
상기 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치 및 방법은 비트스트림으로부터 획득된 움직임 보상 영역 결정 정보를 이용하여 글로벌 움직임 보상을 수행할 영역을 결정하는 단계, 상기 결정된 움직임 보상을 수행할 영역별 움직임 보상을 수행하는 단계를 포함한다.
상기 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 영상 복호화 장치 및 방법은 비트스트림으로부터 획득된 움직임 보상 영역별 수행 정보를 이용하여 글로벌 움직임 보상 영역별로 글로벌 움직임 보상을 수행하는 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계를 포함한다.
본 발명은 부호화 효율 향상을 위하여 기존의 비디오 압축 기술에서 사용하는 움직임 보상 과정에서 광범위한 영역에 대한 글로벌 움직임 보상을 수행하는 방법 및 장치를 제공하는 것을 그 목적으로 한다.
본 발명의 일실시예에 따르면, 광범위한 영역에 대한 움직임 보상을 한번에 수행하고, 글로벌 움직임 보상 영역에 대한 정보를 효율적으로 복호화기로 전달하여 부호화 성능을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행하는 복호화 장치를 도시한다.
도 2는 본 발명의 일 실시예에 따른 영상의 글로벌 움직임 보상을 수행하는 방법을 도시한 도면이다.
도 3은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행하는 방법의 순서를 나타내는 블록도를 도시한다.
도 4는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 복호화기로 전달되는 정보 중, 글로벌 움직임 보상 영역이 결정된 영역의 내부 또는 외부인지를 나타내는 정보를 이용하여 글로벌 움직임 보상 영역을 최종적으로 결정하는 방법을 도시한 도면이다.
도 5는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 다양한 형태의 글로벌 움직임 보상 영역을 도시한 도면이다.
도 6은 본 발명의 일 실시예에 글로벌 움직임 보상을 수행할 때, 코딩 유닛 단위의 경계에 맞추어 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
도 7은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 글로벌 움직임 보상 영역의 위치를 결정하는 방법을 도시한 도면이다.
도 8은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 격자로 분리된 구역을 병합하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
도 9는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 영상을 수직 또는 수평방향으로 반복적으로 분할하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
도 10은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 복호화기로 전달되는 부가정보 중 와핑 파라미터 (Warping parameter)를 이용하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
도 11은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 글로벌 움직임 보상 영역을 회전(rotation) 또는 스케일링(scaling)하는 방법을 도시한 도면이다.
도 12는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 프레임율 (Frame rate)을 증가시키기 위해 프레임율 변환(Frame Rate Up Conversion, FRUC) 방법을 사용하는 경우를 도시한 도면이다.
하기는 본 명세서에 첨부된 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서 전체에서, 어떤 부분이 다른 부분과 '연결'되어 있다고 할 때, 이는 직접적으로 연결되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 전기적으로 연결되어 있는 경우도 포함한다.
또한, 본 명세서 전체에서 어떤 부분이 어떤 구성요소를 '포함'한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.
본 명세서 전체에서 사용되는 정도의 용어 ~(하는) 단계 또는 ~의 단계는 ~를 위한 단계를 의미하지 않는다.
또한, 제1, 제2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
덧붙여, 본 발명의 실시예에 나타나는 구성부들은 서로 다른 특징적인 기능들을 나타내기 위해 독립적으로 도시되는 것으로, 각 구성부들이 분리된 하드웨어나 하나의 소프트웨어 구성단위로 이루어짐을 의미하지 않는다. 즉, 각 구성부는 설명의 편의상 각각의 구성부로 나열하여 기술되고, 각 구성부 중 적어도 두 개의 구성부가 합쳐져 하나의 구성부로 이루어지거나, 하나의 구성부가 복수 개의 구성부로 나뉘어져 기능을 수행할 수 있다.이러한 각 구성부의 통합된 실시예 및 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리 범위에 포함된다.
먼저, 본 출원에서 사용되는 용어를 간략히 설명하면 다음과 같다.
이하에서 후술할 복호화 장치(Video Decoding Apparatus)는 개인용 컴퓨터(PC, Personal Computer), 노트북 컴퓨터, 휴대형 멀티미디어 플레이어(PMP, Portable Multimedia Player), 무선 통신 단말기(Wireless Communication Terminal), 스마트 폰(Smart Phone), TV 응용 서버와 서비스 서버 등 서버 단말기에 포함된 장치일 수 있으며, 각종 기기 등과 같은 사용자 단말기, 유무선 통신망과 통신을 수행하기 위한 통신 모뎀 등의 통신 장치, 영상을 복호화하거나 복호화를 위해 화면 간 또는 화면 내 예측하기 위한 각종 프로그램과 데이터를 저장하기 위한 메모리, 프로그램을 실행하여 연산 및 제어하기 위한 마이크로프로세서 등을 구비하는 다양한 장치를 의미할 수 있다.
또한, 부호화기에 의해 비트스트림(bitstream)으로 부호화된 영상은 실시간 또는 비실시간으로 인터넷, 근거리 무선 통신망, 무선랜망, 와이브로망, 이동통신망 등의 유무선 통신망 등을 통하거나 케이블, 범용 직렬 버스(USB, Universal Serial Bus) 등과 같은 다양한 통신 인터페이스를 통해 영상 복호화 장치로 전송되어 복호화되어 영상으로 복원되고 재생될 수 있다.
통상적으로 동영상은 일련의 픽쳐(Picture)들로 구성될 수 있으며, 각 픽쳐들은 블록(Block)과 같은 코딩 유닛(coding unit)으로 분할될 수 있다. 또한, 이하에 기재된 픽쳐라는 용어는 영상(Image), 프레임(Frame) 등과 같은 동등한 의미를 갖는 다른 용어로 대치되어 사용될 수 있음을 본 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자라면 이해할 수 있을 것이다.
글로벌 움직임 보상이란 광범위한 영역에 대한 움직임 보상을 한번에 수행하는 방법을 의미하며, 글로벌 움직임 보상을 수행하는 방법을 글로벌 움직임 보상 방법, 글로벌 움직임 보상이 수행되는 영역을 글로벌 움직임 보상 영역이라 일컫는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시 예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행하는 복호화 장치를 도시한다.
글로벌 움직임 보상을 수행하는 복호화 장치는 엔트로피 복호화부(110), 역양자화부(120), 역변환부(130), 화면 간 예측부(140), 화면 내 예측부(150), 인루프 필터부(160), 복원 영상 저장부(170) 중 적어도 하나를 포함할 수 있다.
엔트로피 복호화부(110)는 입력된 비트스트림(100)을 복호화하여 신택스 요소(syntax elements) 및 양자화된 계수 등과 같은 복호화 정보를 출력한다. 출력되는 정보에는 글로벌 움직임 보상을 위한 정보가 포함될 수 있다.
역양자화부(120) 및 역변환부(130)는 양자화 계수를 수신하여 역양자화 및 역변환을 차례대로 수행하고, 잔차 신호(residual signal)를 출력한다.
화면 간 예측 부(140)는 비트스트림으로부터 추출된 움직임 벡터와 복원 영상 저장부(170)에 저장되어 있는 복원 영상을 이용하여 움직임 보상을 수행하여 예측 신호를 생성한다. 화면 간 예측 부(140)는 글로벌 움직임 보상을 위한 정보(190)를 이용하여 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계를 포함한다.
화면 내 예측부(150)는 복호화되는 현재 블록과 인접하는 기 복호화된 주변 블록의 화소 값을 이용하여 공간적 예측을 수행하여 예측 신호를 생성한다.
화면 간 예측부(140)와 화면 내 예측부(150)로부터 출력된 예측 신호는 잔차 신호와 합산되며, 합산을 통해 생성된 복원된 영상은 인루프 필터부(160)로 전달된다.
인루프 필터부(160)에서 필터링이 적용된 복원 픽쳐는 복원 영상 저장부(170)에 저장되며, 화면 간 예측부(140)에서 참조 픽쳐로 사용될 수 있다.
도 2는 본 발명의 일 실시예에 따른 영상의 글로벌 움직임 보상을 수행하는 방법을 도시한 도면이다.
영상(200)에서 광범위한 영역(210)에 대한 글로벌 움직임 보상을 한번에 수행할 수 있다. 영상을 복원하는 과정에서 글로벌 움직임 보상 영역(210)을 결정하고, 결정된 글로벌 움직임 보상 영역(210)에 대한 움직임 보상을 한번에 수행한다. 글로벌 움직임 보상 영역(210)은 복호화기로 전달되는 부가 정보에 의해 결정될 수 있다.
도 3은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행하는 방법의 순서를 나타내는 블록도를 도시한다.
먼저, 비트스트림으로부터 글로벌 움직임 보상 정보를 추출(310)한다. 그리고 추출된 정보를 이용하여 글로벌 움직임 보상 영역을 결정(320)한다. 결정된 움직임 보상 영역 정보를 이용하여, 영상에서 글로벌 움직임 보상을 수행하는 영역이면 글로벌 움직임 보상을 수행(330)하여 복원 영상을 생성(350)한다. 글로벌 움직임 보상을 수행하는 영역이 아니면 블록단위 복호화를 수행(340)하여 복원 영상을 생성(350)한다.
도 4는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 복호화기로 전달되는 정보 중, 글로벌 움직임 보상 영역이 결정된 영역의 내부 또는 외부인지를 나타내는 정보를 이용하여 글로벌 움직임 보상 영역을 최종적으로 결정하는 방법을 도시한 도면이다.
복호화기로 전달되는 정보에 포함된 글로벌 움직임 보상 영역 결정 정보를 이용하여 영상에서 글로벌 움직임 보상 영역을 결정할 수 있으며, 결정된 글로벌 움직임 보상 영역의 내부 또는 외부를 나타내는 정보에 의해 글로벌 움직임 보상 영역이 최종적으로 결정될 수 있다. 글로벌 움직임 보상 영역의 내부 또는 외부를 나타내는 정보는 플래그 형태로 전송될 수 있다.
도 4에서 최종 글로벌 움직임 보상 영역 결정 플래그가 0인 경우, 영상에서 최종 글로벌 움직임 보상 영역은 410과 같이 결정된 움직임 보상 영역의 내부(420)가 되며, 최종 글로벌 움직임 보상 영역 결정 플래그가 1인 경우, 영상의 최종 글로벌 움직임 보상 영역은 430과 같이 결정된 움직임 보상 영역의 외부(440)가 될 수 있다.
도 5는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 다양한 형태의 글로벌 움직임 보상 영역을 도시한 도면이다.
글로벌 움직임 보상 영역은 510, 520, 530 등과 같이 임의의 모양으로 사용할 수 있으며, 한 영상 내에서 다수의 글로벌 움직임 보상 영역(510, 520, 530)을 사용할 수 있다.
한 영상 내에서 다수의 글로벌 움직임 보상 영역을 사용하는 경우, 움직임 보상 영역은 움직임 보상 영역별로 전송된 독립적인 정보를 이용하여 결정되거나, 다른 움직임 보상 영역의 정보를 참조하여 결정될 수 있다.
도 6은 본 발명의 일 실시예에 글로벌 움직임 보상을 수행할 때, 코딩 유닛단위의 경계에 맞추어 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
글로벌 움직임 보상 영역은 복호화 블록 단위의 경계에 맞추어 610, 620의 표시된 영역과 같이 결정될 수 있다.
또한,글로벌 움직임 보상 영역은 610, 620의 분할된 블록과 같이 계층적으로 분할된 복호화 블록 단위로 이루어질 수 있다.
각 복호화 블록 단위마다 글로벌 움직임 보상 영역의 정보를 포함하거나, 글로벌 움직임 보상 영역 단위로 각 복호화 블록의 정보를 포함할 수 있다.
도 7은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 글로벌 움직임 보상 영역의 위치를 결정하는 방법을 도시한 도면이다.
글로벌 움직임 보상 영역의 위치를 결정하는 방법으로는 영역의 시작점(x, y)과 끝점(x`, y`)의 좌표를 이용하여 결정하는 방법(710)과 영역의 시작점(x, y)의 좌표와 가로(Width)와 세로(Height) 길이를 이용하여 결정하는 방법(720)이 있을 수 있다.
도 8은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 격자로 분리된 구역을 병합하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
글로벌 움직임 보상 영역을 결정하는 방법으로는 영상을 여러 개의 구역의 격자로 분리한 후, 분리된 각 영역을 다른 영역과 병합하여 글로벌 움직임 보상 영역으로 결정하는 방법이 있을 수 있다. 블록 810, 블록 820, 블록 830, 블록 840, 블록 850들은 화살표가 가리키는 방향의 블록과 병합되어 글로벌 움직임 보상 영역이 된다. 블록 850은 블록 840을 참조하여 병합되고, 블록 840은 블록 830을 참조하여 병합, 블록 830은 블록 820을 참조하여 병합, 블록 820은 블록 810을 참조하여 병합되어 글로벌 움직임 보상 영역을 구성한다.
도 9는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 영상을 수직 또는 수평 방향으로 반복적으로 분할하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
글로벌 움직임 보상 영역은 영상을 수직 또는 수평 방향으로 반복적으로 분할하여 결정할 수 있다.
도 9와 같이 영상은 수평경계 910으로 먼저 분할된 후, 수직경계 920으로 분할될 수 있다. 수평경계 910으로 분할된 영역 910-2는 더 이상 분할되지 않는 영역이며, 수직경계 920으로 분할된 영역 920-1도 더 이상 분할되지 않는 영역이다. 반복하여 수평경계 950, 수직경계 970, 수직경계 990으로 분할될 수 있으며, 수평경계 950으로 분할된 영역 950-1과 수직경계 970으로 분할된 영역 970-1은 더 이상 분할되지 않는 영역이다.
부호화기에서는 분할되는 경계의 정보를 전송할 수 있으며, 복호화기는 전송받은 경계들의 정보를 이용하여 글로벌 움직임 보상 영역을 결정할 수 있다.
도 10은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 복호화기로 전달되는 부가 정보 중 와핑 파라미터 (Warping parameter)를 이용하여 글로벌 움직임 보상 영역을 결정하는 방법을 도시한 도면이다.
시간적으로 다른 시점의 두 영상에서 물체(1010)가 와핑(Warping)된 경우(1020), 부호화기는 복호화기로 와핑 파라미터(Warping parameter)를 전송할 수 있으며, 복호화기에서는 전송된 와핑 파라미터를 이용하여 움직임 보상 영역을 결정할 수 있다.
도 11은 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때,글로벌 움직임 보상 영역을 회전(rotation) 또는 스케일링(scaling)하는 방법을 도시한 도면이다.
시간적으로 다른 시점의 두 영상에서 물체(1110)가 스케일링되거나(1120) 회전된 경우(1130), 부호화기는 복호화기로 스케일링 정보 또는 회전된 영역에 대한 정보를 전달할 수 있으며, 복호화기는 전송된 정보를 이용하여 움직임 보상 영역을 결정할 수 있다.
도 12는 본 발명의 일 실시예에 따른 글로벌 움직임 보상을 수행할 때, 프레임율 (Frame rate)을 증가시키기 위해 프레임율 변환(Frame Rate Up Conversion, FRUC) 방법을 사용하는 경우를 도시한 도면이다.
글로벌 움직임 보상을 수행하는 영상에서 프레임율 변환(FRUC)방법을 수행할 때,블록 단위의 움직임 추정을 통해 두 프레임 사이의 새로운 프레임을 합성할 뿐만 아니라, 글로벌 움직임 보상 영역 단위의 움직임 추정을 통해 새로운 프레임을 합성할 수 있다.
도 12에서 이전 영상(T-1)과 이후 영상(T) 사이의 영상(T - 1/2)을 생성할 때,이전 영상의 블록(1210)과 이후 영상의 블록(1230)을 이용하여 합성된 블록(1220)을 생성하거나,이전 영상의 글로벌 움직임 영역(1240)과 이후 영상의 글로벌 움직임 영역(1260)을 이용하여 합성된 글로벌 움직임 영역(1250)을 생성할 수 있다.

Claims (10)

  1. 비디오 복호화 방법에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계;
    상기 획득한 글로벌 움직임 보상을 위한 정보를 이용하여 글로벌 움직임 보상 영역을 결정하는 단계;및
    상기 결정된 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계를 포함하는 비디오 복호화방법.
  2. 제 1항에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계는
    비트스트림으로부터 글로벌 움직임 보상 사용 여부를 플래그 형태로 추출하는 단계;
    상기 추출된 글로벌 움직임 보상 사용 여부 정보가 글로벌 움직임 보상 사용을 의미하는 경우, 비트스트림으로부터 글로벌 움직임 보상 영역결정 및 결정된 글로벌 움직임 영역별 움직임 보상 수행을 위한 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 비디오 복호화 방법.
  3. 제 1항에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계는
    비트스트림으로부터 글로벌 움직임 보상 사용 여부를 플래그 형태로 추출하는 단계;
    상기 추출된 글로벌 움직임 보상 사용 여부 정보가 글로벌 움직임 보상을 사용하지 않음을 의미하는 경우, 코딩 블록 단위 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 방법.
  4. 제 1항에 있어서,
    상기 획득한 글로벌 움직임 보상을 위한 정보를 이용하여 글로벌 움직임 보상 영역을 결정하는 단계는
    비트스트림으로부터 획득된 움직임 보상 영역결정 정보를 이용하여 글로벌 움직임 보상을 수행할 영역을 결정하는 단계;및
    상기 결정된 움직임 보상을 수행할 영역별 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 방법.
  5. 제 1항에 있어서,
    상기 결정된 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계는
    비트스트림으로부터 획득된 움직임 보상 영역별 수행 정보를 이용하여 글로벌 움직임 보상 영역별로 글로벌 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 방법.
  6. 비디오 복호화장치에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계;
    상기 획득한 글로벌 움직임 보상을 위한 정보를 이용하여 글로벌 움직임 보상 영역을 결정하는 단계;및
    상기 결정된 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계를 포함하는 비디오 복호화장치.
  7. 제 6항에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계는
    비트스트림으로부터 글로벌 움직임 보상 사용 여부를 플래그 형태로 추출하는 단계;
    상기 추출된 글로벌 움직임 보상 사용 여부 정보가 글로벌 움직임 보상 사용을 의미하는 경우, 비트스트림으로부터 글로벌 움직임 보상 영역 결정 및 결정된 글로벌 움직임 영역별 움직임 보상 수행을 위한 정보를 추출하는 단계를 포함하는 것을 특징으로 하는 비디오 복호화 장치.
  8. 제 6항에 있어서,
    비트스트림으로부터 글로벌 움직임 보상을 위한 정보를 획득하는 단계는
    비트스트림으로부터 글로벌 움직임 보상 사용 여부를 플래그 형태로 추출하는 단계;
    상기 추출된 글로벌 움직임 보상 사용 여부 정보가 글로벌 움직임 보상을 사용하지 않음을 의미하는 경우, 코딩 블록 단위 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 장치.
  9. 제 6항에 있어서,
    상기 획득한 글로벌 움직임 보상을 위한 정보를 이용하여 글로벌 움직임 보상 영역을 결정하는 단계는
    비트스트림으로부터 획득된 움직임 보상 영역결정 정보를 이용하여 글로벌 움직임 보상을 수행할 영역을 결정하는 단계;및
    상기 결정된 움직임 보상을 수행할 영역별 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 장치.
  10. 제6항에 있어서,
    상기 결정된 글로벌 움직임 보상 영역에 대하여 글로벌 움직임 보상을 수행하는 단계는
    비트스트림으로부터 획득된 움직임 보상 영역별 수행 정보를 이용하여 글로벌 움직임 보상 영역별로 글로벌 움직임 보상을 수행하는 것을 특징으로 하는 비디오 복호화 장치.
KR1020160038075A 2016-03-11 2016-03-30 글로벌 움직임 보상 방법 및 장치 KR20170113947A (ko)

Priority Applications (12)

Application Number Priority Date Filing Date Title
KR1020160038075A KR20170113947A (ko) 2016-03-30 2016-03-30 글로벌 움직임 보상 방법 및 장치
CN202310522559.XA CN116506601A (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
CN202310522570.6A CN116506603A (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
CN202310522560.2A CN116506602A (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
US16/084,105 US10694184B2 (en) 2016-03-11 2017-03-09 Video coding method and apparatus
CN202310522574.4A CN116506604A (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
CN202310522554.7A CN116506600A (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
CN201780028323.3A CN109155857B (zh) 2016-03-11 2017-03-09 视频编码方法以及装置
PCT/KR2017/002578 WO2017155334A1 (ko) 2016-03-11 2017-03-09 비디오 코딩 방법 및 장치
US16/881,786 US11438591B2 (en) 2016-03-11 2020-05-22 Video coding method and apparatus
US17/872,577 US11838509B2 (en) 2016-03-11 2022-07-25 Video coding method and apparatus
US18/381,715 US20240048704A1 (en) 2016-03-11 2023-10-19 Video coding method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020160038075A KR20170113947A (ko) 2016-03-30 2016-03-30 글로벌 움직임 보상 방법 및 장치

Publications (1)

Publication Number Publication Date
KR20170113947A true KR20170113947A (ko) 2017-10-13

Family

ID=60139362

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020160038075A KR20170113947A (ko) 2016-03-11 2016-03-30 글로벌 움직임 보상 방법 및 장치

Country Status (1)

Country Link
KR (1) KR20170113947A (ko)

Similar Documents

Publication Publication Date Title
US9781481B2 (en) Apparatus and method for generating/recovering motion information based on predictive motion vector index encoding, and apparatus and method for image encoding/decoding using same
US9344732B2 (en) Image encoding and decoding apparatus and method
TWI521949B (zh) Image predictive coding apparatus, method and program, image predictive decoding apparatus, method and program, and coding decoding system and method
KR20240024140A (ko) 스킵 모드를 이용한 영상 복호화 방법 및 이러한 방법을 사용하는 장치
KR102554364B1 (ko) 영상의 부호화/복호화 방법 및 장치
US20130230104A1 (en) Method and apparatus for encoding/decoding images using the effective selection of an intra-prediction mode group
KR101506446B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
KR20180039324A (ko) 정방형 또는 직방형 블록의 화면 내 예측모드 정보 추출 방법 및 장치
KR20170125154A (ko) 곡선 화면 내 예측을 사용하는 비디오 복호화 방법 및 장치
KR20180021942A (ko) 보안 카메라용 영상 코덱에서 블록 분할 정보 전송 방법 및 장치
KR20170113947A (ko) 글로벌 움직임 보상 방법 및 장치
KR20170133026A (ko) 정방형 또는 직방형 블록 분할을 사용하는 비디오 복호화 방법 및 장치
KR101479137B1 (ko) 예측 움직임벡터 색인부호화에 기반한 움직임정보 생성/복원 장치 및 방법, 및 그것을 이용한 영상 부호화/복호화 장치 및 방법
US11711540B2 (en) Method for encoding video using effective differential motion vector transmission method in omnidirectional camera, and method and device
KR102646642B1 (ko) 확장된 Intra Block Copy 방법을 통한 비디오 복호화 방법 및 장치
KR20180041833A (ko) 화면 내 예측에 대한 참조 모드 리스트를 사용하는 비디오 코딩 방법 및 장치
KR101699832B1 (ko) 예측 움직임벡터 색인부호화에 기반한 움직임정보 생성/복원 장치 및 방법, 및 그것을 이용한 영상 부호화/복호화 장치 및 방법
KR101567986B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
KR101567961B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
KR101567982B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
KR101527153B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
KR101676381B1 (ko) 예측 움직임벡터 색인부호화에 기반한 움직임정보 생성/복원 장치 및 방법, 및 그것을 이용한 영상 부호화/복호화 장치 및 방법
KR101483688B1 (ko) 움직임정보 병합을 이용한 부호움직임정보생성/움직임정보복원 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치
CN114208182A (zh) 用于基于去块滤波对图像进行编码的方法及其设备
KR20170126817A (ko) 고속 영상 부호화 방법 및 장치