KR101986586B1 - 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 - Google Patents
영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 Download PDFInfo
- Publication number
- KR101986586B1 KR101986586B1 KR1020180116551A KR20180116551A KR101986586B1 KR 101986586 B1 KR101986586 B1 KR 101986586B1 KR 1020180116551 A KR1020180116551 A KR 1020180116551A KR 20180116551 A KR20180116551 A KR 20180116551A KR 101986586 B1 KR101986586 B1 KR 101986586B1
- Authority
- KR
- South Korea
- Prior art keywords
- block
- prediction unit
- prediction
- filter
- length
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 238000005192 partition Methods 0.000 claims description 12
- 230000002123 temporal effect Effects 0.000 claims 1
- 238000000638 solvent extraction Methods 0.000 abstract description 17
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 20
- 230000008569 process Effects 0.000 description 12
- 238000013139 quantization Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 230000001131 transforming effect Effects 0.000 description 5
- 238000001914 filtration Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000003044 adaptive effect Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- 239000000470 constituent Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000014509 gene expression Effects 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
- H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
- H04N19/198—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters including smoothing of a sequence of encoding parameters, e.g. by averaging, by choice of the maximum, minimum or median value
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
- H04N19/45—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder performing compensation of the inverse transform mismatch, e.g. Inverse Discrete Cosine Transform [IDCT] mismatch
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
- H04N19/51—Motion estimation or motion compensation
- H04N19/513—Processing of motion vectors
- H04N19/517—Processing of motion vectors by encoding
- H04N19/52—Processing of motion vectors by encoding by predictive encoding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
- H04N19/82—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/129—Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/136—Incoming video signal characteristics or properties
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/184—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being bits, e.g. of the compressed video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
- H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Discrete Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
본 발명은 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치를 개시하고 있다. 영상 복호화 방법은 수신된 비트 스트림을 엔트로피 복호화하여 잔여값을 역양자화 및 역변환하여 잔여값을 복원하는 단계; 비대칭 파티션 분할 방식을 적용하여 적어도 2개로 분할된 예측 유닛 - 상기 분할된 예측 유닛은 제 1 분할 예측 유닛 및 제 2 분할 예측 유닛을 포함함 - 에 대해 인터 예측을 수행하여 최종 예측 유닛을 생성하는 단계; 및 상기 최종 예측 유닛에 상기 잔여값을 더하여 영상을 복원하는 단계를 포함하되, 상기 최종 예측 유닛 생성 단계는 상기 제 2 분할 예측 유닛에 속하는 픽셀들이 인터폴레이션에 포함되지 않도록, 상기 제 1 분할 예측 유닛의 수평 또는 수직 방향으로의 길이에 따라 가변적인 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
Description
본 발명은 영상 처리에 관한 것으로서, 보다 상세하게는 인터 예측 방법 및 장치에 관한 것이다.
최근 다양한 분야에서 HD(High Definition) 영상 및 UHD(Ultra High Definition) 영상과 같은 고해상도, 고품질의 영상에 대한 수요가 증가하고 있다.
고해상도, 고품질의 영상을 제공하기 위해서는 영상 데이터의 데이터량이 증가한다. 따라서, 기존의 영상 데이터 처리 방식과 비교할 때 고해상도, 고품질의 영상을 제공하기 위한 영상 데이터의 전송 비용과 저장 비용은 증가하게 된다. 영상 데이터가 고해상도, 고품질화 됨에 따라 발생하는 이러한 문제들을 해결하기 위해서는 고효율의 영상 압축 기술들이 활용될 수 있다.
영상 데이터를 압축하는 기술로서 현재 픽쳐에 포함된 픽셀 값을 다른 픽처로부터 예측하는 인터 예측(Inter Prediction) 방법, 현재 픽쳐 픽셀 값을 현재 픽쳐의 다른 픽셀의 정보를 이용해서 예측하는 인트라 예측(Intra Prediction) 방법, 발생 빈도 혹은 출현 빈도가 높은 신호일수록 짧은 부호를 할당해서 부호화/복호화를 수행하는 엔트로피 부호화/복호화 방법 등 다양한 기술이 이용되고 있다.
본 발명의 목적은 영상 부호화 성능을 향상시킬 수 있는 영상 부호화 방법 및 장치를 제공함에 있다.
본 발명의 다른 목적은 영상 복호화 성능을 향상시킬 수 있는 영상 복호화 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 목적은 영상 부호화 성능을 향상시킬 수 있는 인터 부호화 방법 및 장치를 제공함에 있다.
상기한 목적을 달성하기 위한 본 발명의 영상의 복호화 방법은 수신된 비트 스트림을 엔트로피 복호화하여 잔여값을 역양자화 및 역변환하여 잔여값을 복원하는 단계; 비대칭 파티션 분할 방식을 적용하여 적어도 2개로 분할된 예측 유닛 - 상기 분할된 예측 유닛은 제 1 분할 예측 유닛 및 제 2 분할 예측 유닛을 포함함 - 에 대해 인터 예측을 수행하여 최종 예측 유닛을 생성하는 단계; 및 상기 최종 예측 유닛에 상기 잔여값을 더하여 영상을 복원하는 단계를 포함하되, 상기 최종 예측 유닛 생성 단계는 상기 제 2 분할 예측 유닛에 속하는 픽셀들이 인터폴레이션에 포함되지 않도록, 상기 제 1 분할 예측 유닛의 수평 또는 수직 방향으로의 길이에 따라 가변적인 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 제 1 분할 예측 유닛 및 상기 제 2 분할 예측 유닛은 수평 또는 수직 방향으로의 길이에 따라 서로 다른 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 제 1 분할 예측 유닛이 수평 방향으로 비대칭이고 수평 방향으로 길이가 짧게 분할되었을 경우, 상기 제 1 분할 예측 유닛에 대해 수직 방향의 필터 탭 길이보다 짧은 수평 방향 필터 탭을 사용하여 수평 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 제 1 분할 예측 유닛이 수직 방향으로 비대칭이고 수직 방향으로 길이가 짧게 분할되었을 경우, 상기 제 1 분할 예측 유닛에 대해 수평 방향의 필터 탭 길이보다 짧은 수직 방향 필터 탭을 사용하여 수직 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 제 1 분할 예측 유닛이 수평 방향으로 비대칭이고 수평 방향으로 길이가 짧게 분할되었을 경우, 수평 방향으로 길이가 길게 분할된 상기 제 2 분할 예측 유닛보다 수평 방향으로 짧은 길이를 갖는 필터 탭을 사용하여 수평 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 제 1 분할 예측 유닛이 수직 방향으로 비대칭이고 수직 방향으로 길이가 짧게 분할되었을 경우, 수직 방향으로 길이가 길게 분할된 상기 제 2 분할 예측 유닛보다 수평 방향으로 짧은 길이를 갖는 필터 탭을 사용하여 수직 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
64×64 크기의 예측 유닛에 대해, 상기 분할된 예측 유닛의 형태가 2N×nU 또는 2N×nD -N은 자연수이고, 2N×nU는 수직방향으로 비대칭 분할될 때, 상측으로 넓이가 작게 분할된 형태이고, 2N×nD는 하측으로 넓이가 작게 분할된 형태를 의미함 - 인 경우, 상기 제 1 분할 예측 유닛은 수직 방향으로 4 탭 필터를, 상기 제 2 분할 예측 유닛은 수직 방향으로 6 탭 필터를 사용하여 수직 방향 인터폴레이션이 수행되고, 상기 분할된 예측 유닛의 형태가 nL×2N 또는 nR×2N -N은 자연수이고, nL×2N는 수평방향으로 비대칭 분할될 때, 좌측으로 넓이가 작게 분할된 형태이고, nR×2N은 우측으로 넓이가 작게 분할된 형태를 의미함 - 인 경우, 상기 제 1 분할 예측 유닛은 수평 방향으로 4 탭 필터를, 상기 제 2 분할 예측 유닛은 수평 방향으로 6 탭 필터를 사용하여 수평 방향 인터폴레이션이 수행될 수 있다.
상기 제 1 및 제 2 분할 예측 유닛의 비대칭 방향에서의 필터 탭의 길이의 합이 상기 비대칭 방향이 아닌 방향에서의 필터 탭 길이보다 길 수 있다.
상기 수신된 비트 스트림은, 복호화하고자 하는 대상 블록에 대응되는 예측 모드 및 상기 복호화 대상 블록에 대응되는 예측 유닛의 형태에 관한 정보를 포함할 수 있다.
상기 수신된 비트 스트림은, 상기 복호화 대상 블록에 대응되는 예측 유닛의 인터폴레이션 필터 탭의 길이에 관한 정보를 더 포함할 수 있다.
상기 최종 예측 유닛 생성 단계는 상기 비트 스트림으로부터 상기 분할된 예측 유닛이 어느 방향으로 비대칭적으로 분할되었는지에 대한 정보를 획득하는 단계; 상기 획득된 분할 관련 정보를 기반으로 상기 분할된 예측 유닛이 비대칭인 방향에서 길이가 긴 쪽인지 판단하는 단계; 상기 판단 결과를 기반으로 인터폴레이션에 사용될 필터 탭의 길이를 결정하는 단계; 및 상기 결정된 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 영상의 복호화 장치는 수신된 비트 스트림을 엔트로피 복호화하여 잔여값을 역양자화 및 역변환하여 잔여값을 복원하는 잔여값 복원부; 비대칭 파티션 분할 방식을 적용하여 적어도 2개로 분할된 예측 유닛 - 상기 분할된 예측 유닛은 제 1 분할 예측 유닛 및 제 2 분할 예측 유닛을 포함함 - 에 대해 인터 예측을 수행하여 최종 예측 유닛을 생성하는 최종 예측 유닛 생성부; 및 상기 최종 예측 유닛에 상기 잔여값을 더하여 영상을 복원하는 영상 복원부를 포함하되, 상기 최종 예측 유닛 생성부는 상기 제 2 분할 예측 유닛에 속하는 픽셀들이 인터폴레이션에 포함되지 않도록, 상기 제 1 분할 예측 유닛의 수평 또는 수직 방향으로의 길이에 따라 가변적인 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 영상의 부호화 방법은 입력 영상을 예측 부호화하기 위해 상기 입력 영상을 비대칭 파티션 분할 방식을 적용하여 분할된 예측 유닛 - 상기 분할된 예측 유닛은 제 1 분할 예측 유닛 및 제 2 분할 예측 유닛을 포함함 - 에 인터 예측을 수행하는 단계; 및 상기 인터 예측에 의해 생성된 예측 유닛과 현재 예측 유닛 간의 차이인 잔여값(residue)을 변환 및 양자화하여 엔트로피 부호화하는 단계를 포함하되, 상기 인터 예측 수행 단계는 상기 제 2 분할 예측 유닛에 속하는 픽셀들이 인터폴레이션에 포함되지 않도록, 상기 제 1 분할 예측 유닛의 수평 또는 수직 방향으로의 길이에 따라 가변적인 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 인터 예측 수행 단계는 상기 제 1 분할 예측 유닛 및 상기 제 2 분할 예측 유닛은 수평 또는 수직 방향으로의 길이에 따라 서로 다른 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 인터 예측 수행 단계는 상기 제 1 분할 예측 유닛이 수평 방향으로 비대칭이고 수평 방향으로 길이가 짧게 분할되었을 경우, 상기 제 1 분할 예측 유닛에 대해 수직 방향의 필터 탭 길이보다 짧은 수평 방향 필터 탭을 사용하여 수평 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 인터 예측 수행 단계는 상기 제 1 분할 예측 유닛이 수평 방향으로 비대칭이고 수평 방향으로 길이가 짧게 분할되었을 경우, 수평 방향으로 길이가 길게 분할된 상기 제 2 분할 예측 유닛보다 수평 방향으로 짧은 길이를 갖는 필터 탭을 사용하여 수평 방향 인터폴레이션을 수행하는 단계를 포함할 수 있다.
상기 제 1 및 제 2 분할 예측 유닛의 비대칭 방향에서의 필터 탭의 길이의 합이 상기 비대칭 방향이 아닌 방향에서의 필터 탭 길이보다 길 수 있다.
상기 인터 예측 수행 단계는 상기 분할된 예측 유닛이 어느 방향으로 비대칭적으로 분할되었는지에 대한 정보를 획득하는 단계; 상기 획득된 정보를 기반으로 상기 분할된 예측 유닛이 비대칭인 방향에서 길이가 긴 쪽인지 판단하는 단계; 상기 판단 결과를 기반으로 인터폴레이션에 사용될 필터 탭의 길이를 결정하는 단계; 및 상기 결정된 필터 탭을 사용하여 인터폴레이션을 수행하는 단계를 포함할 수 있다.
엔트로피 부호화를 통해 생성된 비트 스트림은 부호화하고자 하는 대상 블록에 대응되는 예측 유닛의 인터폴레이션 필터 탭의 길이에 관한 정보를 포함할 수 있다.
상기한 목적을 달성하기 위한 본 발명의 영상의 부호화 장치는 입력 영상을 예측 부호화하기 위해 상기 입력 영상을 비대칭 파티션 분할 방식을 적용하여 분할된 예측 유닛 - 상기 분할된 예측 유닛은 제 1 분할 예측 유닛 및 제 2 분할 예측 유닛을 포함함 - 에 인터 예측을 수행하는 인터 예측부; 및 상기 인터 예측에 의해 생성된 예측 유닛과 현재 예측 유닛 간의 차이인 잔여값(residue)을 변환 및 양자화하여 엔트로피 부호화하는 엔트로피 부호화부를 포함하되, 상기 인터 예측부는 상기 제 2 분할 예측 유닛에 속하는 픽셀들이 인터폴레이션에 포함되지 않도록, 상기 제 1 분할 예측 유닛의 수평 또는 수직 방향으로의 길이에 따라 가변적인 길이를 갖는 필터 탭을 사용하여 인터폴레이션을 수행할 수 있다.
본 발명에 따른 영상 부호화 방법 및 장치에 의하면, 영상 부호화 성능이 향상될 수 있다.
본 발명에 따른 영상 복호화 방법 및 장치에 의하면, 영상 복호화 성능이 향상될 수 있다.
본 발명에 따른 인터 예측 부호화 방법 및 장치에 의하면, 영상 부호화/복호화 성능이 향상될 수 있다.
도 1은 본 발명이 적용되는 비디오 부호화기의 일 실시예에 따른 구성을 나타내는 블록도,
도 2는 비디오 복호화기의 일 실시예에 따른 구성을 나타내는 블록도,
도 3은 인터(inter) 예측에서의 인터폴레이션의 실시예를 개략적으로 나타내는 도면,
도 4는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 5는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 6은 본 발명의 일 실시예에 따른 영상 부호화 장치에서 비대칭적으로 분할된 예측 유닛에 대해 인터 예측을 수행하는 과정을 개략적으로 나타낸 흐름도,
도 7은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 8은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 9는 본 발명의 실시예에 따른 영상 부호화 방법을 개략적으로 나타내는 흐름도,
도 10은 본 발명의 실시예에 따른 영상 복호화 방법을 개략적으로 나타내는 흐름도이다.
도 2는 비디오 복호화기의 일 실시예에 따른 구성을 나타내는 블록도,
도 3은 인터(inter) 예측에서의 인터폴레이션의 실시예를 개략적으로 나타내는 도면,
도 4는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 5는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 6은 본 발명의 일 실시예에 따른 영상 부호화 장치에서 비대칭적으로 분할된 예측 유닛에 대해 인터 예측을 수행하는 과정을 개략적으로 나타낸 흐름도,
도 7은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 8은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면,
도 9는 본 발명의 실시예에 따른 영상 부호화 방법을 개략적으로 나타내는 흐름도,
도 10은 본 발명의 실시예에 따른 영상 복호화 방법을 개략적으로 나타내는 흐름도이다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다.
그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제 1, 제 2 등의 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되어서는 안 된다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다. 예를 들어, 본 발명의 권리 범위를 벗어나지 않으면서 제 1 구성요소는 제 2 구성요소로 명명될 수 있고, 유사하게 제 2 구성요소도 제 1 구성요소로 명명될 수 있다. 및/또는 이라는 용어는 복수의 관련된 기재된 항목들의 조합 또는 복수의 관련된 기재된 항목들 중의 어느 항목을 포함한다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
본 출원에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명을 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 출원에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 본 발명을 설명함에 있어 전체적인 이해를 용이하게 하기 위하여 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다.
도 1은 본 발명이 적용되는 비디오 부호화기의 일 실시예에 따른 구성을 나타내는 블록도이다. 도 1을 참조하면, 상기 비디오 부호화기는 픽쳐 분할부(110), 인터 예측부(120), 인트라 예측부(125), 변환부(130), 양자화부(135), 역양자화부(140), 역변환부(145), 필터부(150), 메모리(155), 재정렬부(160) 및 엔트로피 부호화부(165)를 포함할 수 있다.
픽쳐 분할부(110)는 입력된 현재 픽쳐를 하나 이상의 부호화 단위로 분할할 수 있다. 부호화 유닛(Coding Unit: CU, 이하 'CU'라 함)은 비디오 부호화기에서 부호화가 수행되는 하나의 단위로서, 쿼드 트리 구조(Quad Tree Structure)를 기초로 깊이(depth) 정보를 가지고 계층적으로 분할될 수 있다. CU는 8×8, 16×16, 32×32, 64×64 등 다양한 크기를 가질 수 있다. 가장 큰 크기의 CU는 LCU(Largest Coding Unit)로 불릴 수 있으며, 가장 작은 크기의 CU는 SCU(Smallest Coding Unit)로 불릴 수 있다.
또한 픽쳐 분할부(110)는 CU를 분할하여 예측 유닛(Prediction Unit: PU, 이하 'PU'라 함)과 변환 유닛(Transdorm Unit: TU, 이하 'TU'라 함)을 생성할 수 있다. PU는 CU보다 작거나 같은 블록일 수 있고, 반드시 정방형일 필요는 없으며, 직사각형 형태의 블록일 수도 있다.
통상 인트라 예측은 2N*2N 또는 N*N 크기의 블록 단위로 수행될 수 있다. 여기서 N은 자연수로서 픽셀의 수를 나타내며, 2N*2N 및 N*N은 PU의 크기(및/또는 분할 모드)를 나타낼 수 있다. 그러나, SDIP(Short Distance Intra Prediction: 단거리 인트라 예측) 방법에서는, 인트라 예측의 효율을 높이기 위해 2N*2N의 예측 유닛 외에 이를 더 세분화한 예측 유닛 크기로서 hN*2N/2N*hN이 사용될 수 있다(여기서 h=1/2임). hN*2N/2N*hN의 크기의 예측 단위가 사용되는 경우, 블록 내의 경계면의 방향성이 보다 잘 반영될 수 있으며, 따라서 결과적으로 예측 오차 신호의 에너지가 감소되어 부호화에 필요한 비트량이 절감되어 부호화 효율이 증가할 수 있다.
또한, 인터 예측은 2N*2N, 2N*N, N*2N 또는 N*N 크기의 블록 단위로 수행될 수 있다. 여기서 N은 자연수로서 픽셀의 수를 나타내며, 2N*2N, 2N*N, N*2N 및 N*N은 PU의 크기(및/또는 분할 모드)를 나타낼 수 있다. 또한, 인터 예측에서는 인터 예측의 효율을 높이기 위해 2N*2N, 2N*N, N*2N 또는 N*N의 예측 유닛 외에 2NxnU, 2NxnD, nLx2N 또는 nRx2N의 예측 유닛 단위로 예측이 수행될 수도 있다. 여기서, 2NxnU, 2NxnD, nLx2N 및 nRx2N는 PU의 크기(및/또는 분할 모드)를 나타낼 수 있다. 2NxnU 및 2NxnD의 분할 모드에서는 PU의 크기가 2Nx(1/2)N 또는 2Nx(3/2)N일 수 있고, nLx2N 및 nRx2N의 분할 모드에서는 PU의 크기가 (1/2)Nx2N 또는 (3/2)Nx2N일 수 있다.
인터 예측(Inter Prediction) 모드에 있는 경우, 인터 예측부(120)는 움직임 추정(ME: Motion Estimation) 및 움직임 보상(MC: Motion Compensation)을 수행할 수 있다. 인터 예측부(120)는 현재 픽쳐의 이전 픽쳐 또는 이후 픽쳐 중 적어도 하나의 픽쳐 정보를 기초로 예측 블록을 생성할 수 있다.
인터 예측부(120)는 분할된 예측 대상 블록 및 메모리부(155)에 저장된 적어도 하나의 참조 블록을 기반으로 움직임 추정을 수행할 수 있다. 인터 예측부(120)는 움직임 추정의 결과로서 움직임 벡터(MV: Motion Vector), 참조 블록 인덱스 및 예측 모드 등을 포함한 움직임 정보(motion information)를 생성할 수 있다.
또한 인터 예측부(120)는 상기 움직임 정보 및 참조 블록을 이용하여 움직임 보상을 수행할 수 있다. 이 때, 인터 예측부(120)는 상기 참조 블록으로부터 입력 블록에 대응하는 예측 블록을 생성하여 출력할 수 있다.
인트라 예측(Intra Prediction) 모드의 경우, 인트라 예측부(125)는 현재 픽쳐 내의 픽셀 정보를 기초로 예측 블록을 생성할 수 있다. 인트라 예측 모드의 경우, 인트라 예측부(125)는 예측 대상 블록과 이전에 변환 및 양자화된 후 복원된 복원 블록을 기반으로 현재 블록에 대한 예측을 수행할 수 있다. 상기 복원 블록은 필터부(150)를 거치기 전의 복원된 영상일 수 있다.
상술한 바와 같이 인터 모드 또는 인트라 모드에서는 예측 대상 블록에 대한 예측이 수행되고 예측 블록이 생성될 수 있다. 이 때, 예측 대상 블록 및 생성된 예측 블록의 차분에 의해 잔차 블록이 생성될 수 있다.
변환부(130)는 TU 별로 잔차 블록에 대해 변환을 수행하여 변환 계수를 생성할 수 있다. TU는 최대 크기와 최소 크기의 범위 내에서 트리 구조(tree structure)를 가질 수 있다. TU 별로 현재 블록이 하위 블록(sub-block)으로 나누어지는지는 지시자(flag)를 통해 지시될 수 있다. 변환부(130)는 DCT(Discrete Cosine Transform) 및/또는 DST(Discrete Sine Transform) 등을 기반으로 변환을 수행할 수 있다.
양자화부(135)는 변환부(130)에서 변환된 값들을 양자화할 수 있다. 블록에 따라 또는 영상의 중요도에 따라 양자화 계수는 변할 수 있다. 양자화된 변환 계수 값은 재정렬부(160) 및 역양자화부(140)에 제공될 수 있다.
재정렬부(160)는, 엔트로피 부호화의 효율을 높이기 위해, 스캔(scan)을 통하여 상기 양자화된 2차원 블록 형태의 변환 계수를 1차원 벡터 형태의 변환 계수로 정렬할 수 있다. 이때, 재정렬부(160)는 확률적 통계를 기초로 스캔 순서를 달리 하여 엔트로피 부호화 효율을 높일 수 있다.
엔트로피 부호화부(165)는 재정렬부(160)에서 얻어진 값들을 엔트로피 부호화할 수 있다. 엔트로피 부호화 과정에서는 발생 빈도가 높은 구문 요소 값에 더 적은 비트수의 코드워드가 할당될 수 있고, 발생 빈도가 낮은 구문 요소 값에 더 많은 비트수의 코드워드가 할당될 수 있다. 따라서, 부호화 대상 심볼들에 대한 비트열의 크기가 감소되어 영상 부호화 압축 성능이 높아질 수 있다. 엔트로피 부호화를 위해서는 지수 골룸(exponential golomb), CAVLC(Context-Adaptive Variable Length Coding) 및/또는 CABAC(Context-Adaptive Binary Arithmetic Coding) 등과 같은 부호화 방법이 사용될 수 있다. 부호화된 정보들은 압축된 비트 스트림을 형성하여 네트워크 추상 계층(NAL: Network Abstraction Layer)을 통해 전송되거나 저장될 수 있다.
역양자화부(140)는 양자화부(135)에서 양자화된 변환 계수를 역양자화할 수 있고, 역변환부(145)는 역양자화된 변환 계수를 역변환해서 복원된 잔차 블록을 생성할 수 있다. 복원된 잔차 블록은 인터 예측부(120) 또는 인트라 예측부(125)에서 생성된 예측 블록과 합쳐져 복원 블록이 생성될 수 있다. 복원 블록은 인트라 예측부(125) 및 필터부(150)에 제공될 수 있다.
필터부(150)는 복원된 잔차 블록에 디블록킹 필터(Deblocking Filter), SAO(Sample Adaptive Offset) 및/또는 ALF(Adaptive Loop Filter) 등을 적용할 수 있다. 디블록킹 필터는 부호화 및 복호화 과정에서 발생하는 블록 경계 사이의 왜곡을 제거하기 위해, 복원 블록을 필터링할 수 있다. SAO는 디블록킹 필터가 적용된 잔차 블록에 대하여, 픽셀 단위로 원본 영상과의 오프셋 차이를 복원해주는 루프 필터 처리 과정이다. SAO를 통해서 적용되는 오프셋으로는 밴드 오프셋(Band Offset), 에지 오프셋(Edge Offset) 등이 있을 수 있다. 밴드 오프셋은 픽셀을 세기(intensity)에 따른 32개의 밴드로 구분하고, 32 개 밴드를 가장 자리의 16개 밴드와 중심부 16개 밴드의 두 밴드 그룹으로 나누어 오프셋을 적용할 수 있다. ALF는 예측 대상 블록과 최종 복원 블록 사이의 에러를 최소화하기 위해 필터링을 수행할 수 있다. ALF는 디블록킹 필터를 통해 필터링된 복원 블록과 현재의 예측 대상 블록을 비교한 값을 기초로 필터링을 수행할 수 있으며, ALF의 필터 계수 정보는 슬라이스 헤더(slice header)에 실려 부호화기로부터 복호화기로 전송될 수 있다.
메모리(155)는 필터부(150)를 거친 최종 복원 블록을 저장할 수 있고, 저장된 최종 복원 블록은 인터 예측을 수행하는 인터 예측부(120)에 제공될 수 있다.
도 2는 비디오 복호화기의 일 실시예에 따른 구성을 나타내는 블록도이다. 도 2를 참조하면, 비디오 복호화기는 엔트로피 복호화부(210), 재정렬부(215), 역양자화부(220), 역변환부(225), 인터 예측부(230), 인트라 예측부(235), 필터부(240) 및 메모리(245)를 포함할 수 있다.
엔트로피 복호화부(210)는 NAL로부터 압축된 비트 스트림을 수신할 수 있다. 엔트로피 복호화부(210)는 수신된 비트 스트림을 엔트로피 복호화할 수 있고, 예측 모드, 움직임 벡터 정보 등이 비트 스트림에 포함되는 경우 이를 함께 엔트로피 복호화할 수 있다. 엔트로피 복호화 방법이 적용되는 경우, 발생 빈도가 높은 구문 요소 값에 더 적은 비트수의 코드워드가 할당될 수 있고, 발생 빈도가 낮은 구문 요소 값에 더 많은 비트수의 코드워드가 할당될 수 있다. 따라서, 부호화 대상 심볼들에 대한 비트열의 크기가 감소되어 영상 복호화 성능이 높아질 수 있다.
엔트로피 복호화된 변환 계수 또는 잔차 신호는 재정렬부(215)에 제공될 수 있다. 재정렬부(215)는 복호화된 변환 계수 또는 잔차 신호를 역스캔(inverse scan)하여 2차원 블록 형태의 변환 계수를 생성할 수 있다.
역양자화부(220)는 재정렬된 변환 계수를 역양자화할 수 있다. 역변환부(225)는 역양자화된 변환 계수를 역변환하여 잔차 블록을 생성할 수 있다.
잔차 블록은 인터 예측부(230) 또는 인트라 예측부(235)에서 생성된 예측 블록과 합쳐져 복원 블록이 생성될 수 있다. 복원 블록은 인트라 예측부(235) 및 필터부(240)에 제공될 수 있다. 인터 예측부(230) 및 인트라 예측부(235)의 동작은 각각 비디오 부호화기에서의 인터 예측부(120) 및 인트라 예측부(125)의 동작과 동일하거나 유사하므로, 여기서는 생략하기로 한다.
필터부(240)는 복원 블록에 디블록킹 필터, SAO 및/또는 ALF 등을 적용할 수 있다. 디블록킹 필터는 부호화 및 복호화 과정에서 발생하는 블록 경계 사이의 왜곡을 제거하기 위해, 복원 블록을 필터링할 수 있다. SAO는 디블록킹 필터링된 복원 블록에 픽셀 단위로 적용되어 원본 영상과의 차이를 줄일 수 있다. 또한, ALF는 예측 대상 블록과 최종 복원 블록 사이의 에러를 최소화하기 위해 SAO 과정이 수행된 복원 블록에 필터링을 수행할 수 있다.
메모리(245)는 필터부(240)를 통해 얻어진 최종 복원 블록을 저장할 수 있고, 저장된 최종 복원 블록은 인터 예측을 수행하는 인터 예측부(230)에 제공될 수 있다.
이하, 블록은 영상 부호화 및 복호화의 단위를 의미할 수 있다. 따라서, 본 명세서에서 블록은 경우에 따라 부호화 유닛(CU: Coding Unit), 예측 유닛(PU: Prediction Unit), 변환 유닛(TU: Transform Unit) 등을 의미할 수도 있다. 또한, 본 명세서에서 부호화/복호화 대상 블록은, 변환/역변환이 수행되는 경우의 변환/역변환 대상 블록 및 예측이 수행되는 경우의 예측 대상 블록 등을 모두 포함하는 의미로 사용될 수 있다.
도 3은 인터(inter) 예측에서의 인터폴레이션의 실시예를 개략적으로 나타내는 도면이다. 도 3에 도시된 바와 같이, 부호화 장치(및/또는 복호화 장치)가 인터 예측에 대한 모션 정보를 이용하여 예측 유닛의 신호를 생성하는 경우에, 8 탭(tap) 인터폴레이션 필터를 사용할 수 있다.
도 3을 참조하면, 각 위치 별로 수평 방향 또는 수직 방향으로 인터폴레이션이 수행되어 픽셀 값(픽셀 값은 휘도 및 색차 값을 포함함)을 예측할 수 있다. 전술한 바와 같이, 8 탭 인터폴레이션 필터를 사용한다는 것은 예측 유닛이 임의의 4×4 블록(현재 블록(310)을 나타냄)인 경우, 상기 4×4 블록에 대해 수평 방향으로 좌우로, 또는 수직 방향으로 상하로, 8개의 픽셀 값을 적절히 인터폴레이션하여 현재 블록(310)의 픽셀 값을 예측하는 것을 의미한다. 도면에서는 8 탭 필터를 사용한 경우만을 예시하고 있으나, 반드시 8 탭 필터로만 국한되지 않는다.
본 발명의 실시예에 따르면, 수평 방향으로 8 탭 인터폴레이션을 수행한 후, 수직 방향으로 8 탭 인터폴레이션을 사용할 수 있다. 먼저, 각각의 4×4 블록의 좌측 최상단 픽셀에 대한 픽셀 값은 알고 있다고 가정하였을 때, 상기 좌측 최상단의 우측에 바로 인접한 픽셀(a0,0)의 픽셀 값은 좌측으로 3 개의 4×4 블록의 좌측 최상단 픽셀의 픽셀 값과 우측으로 4개의 4×4 블록의 좌측 최상단 픽셀의 픽셀 값을 인터폴레이션하여 예측할 수 있다. 이를 수학식으로 표현하면 다음과 같다.
여기서, shift1 = BitDepthY(Y 컴포넌트의 비트 깊이) - 8 을 나타낸다. 이런 방식으로 현재 블록(310) 내의 다른 픽셀에 대한 픽셀 값을 인터폴레이션을 통해 예측할 수 있다. 이를 수학식으로 표현하면 다음과 같다.
여기서, shift2 = 8을 의미한다. 수학식 2에 도시된 바와 같이, 현재 블록(310)의 좌측 최상단 픽셀을 제외한 나머지 3개의 상단 픽셀 및 3개의 좌측 픽셀은 수직 또는 수평 방향으로 인접한 4×4 블록의 좌측 좌상단 픽셀의 픽셀 값을 기반으로 수평 방향 또는 수직 방향 인터폴레이션을 수행하여 예측할 수 있고, 나머지 픽셀은 수직 또는 수평 방향으로 인접한 7 개의 4×4 블록의 상단 픽셀의 픽셀 값을 기반으로 수직 또는 수평 방향 인터폴레이션을 수행하여 예측할 수 있다. 상기한 수학식 1 또는 2의 방법을 통해 현재 예측하고자 하는 예측 유닛의 픽셀 값을 산출할 수 있고, 예측 유닛과 관련된 예측 신호를 생성할 수 있다.
도 4는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할(AMP: Asymmetric Motion Partition(비대칭적 모션 파티션))이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면이다.
도 4를 참조하면, 예측 유닛이 비대칭적 파티션 분할되었고, 비대칭적 파티션 분할에서 길이가 짧은 쪽으로 8 탭과 같은 긴 필터 탭을 사용하는 경우, 다른 파티션에 속하는 픽셀들도 같이 인터폴레이션을 수행해야 하는데, 파티션이 서로 다른 경우 상관도도 약해지기 때문에, 인터폴레이션의 효율이 낮아질 확률이 높아지게 된다. 즉, 블록(412)과 블록(414)는 상관도(correlation)가 약하기 때문에 같이 인터폴레이션을 수행하면 효율이 낮아진다. 블록(422)과 블록(424)도 마찬가지이다.
본 발명의 일 실시예에 따르면, 예측 유닛이 비대칭적 파티션 분할되었고, 비대칭적 파티션 분할에 의해 길이가 짧은 예측 유닛에 대해 비대칭인 방향으로 인터폴레이션을 수행할 때는 종래보다 작은 필터 탭을 사용할 수 있다. 예컨대, 비대칭적 파티션 분할에 의해 길이가 짧은 예측 유닛에 대한 인터폴레이션은 8 탭보다 작은 필터 탭을 사용하여 수행될 수 있다. 인터 모드에서 예측 유닛의 형태는 2N*2N, 2N*N, N*2N, N*N, 2NxnU, 2NxnD, nLx2N 또는 nRx2N이 될 수 있다. 2N*2N, 2N*N, N*2N, N*N과 같이 대칭적 파티션 분할된 예측 유닛에 대해서는 8 탭 필터를 사용하여 인터폴레이션을 수행할 수 있다.
도 4의 좌측 도면을 참조하면, 예측 유닛의 형태가 2N×nU 블록(410)인 경우, 상기 2N×nU 블록(410)은 수직 방향으로 비대칭적 파티션 분할되며, 상부 블록(412)의 길이가 짧게 분할된 블록을 의미한다. 상기 블록(410)은 상부 블록(412)과 하부 블록(414)을 포함할 수 있고, 상부 블록(412)과 하부 블록(414)의 수직 방향 길이는 16 대 48일 수 있다. 또한, 도 4의 우측 도면을 참조하면, 예측 유닛의 형태가 2N×nD 블록(420)인 경우, 2N×nD 블록(420)은 수직 방향으로 비대칭적 파티션 분할되며, 하부 블록(424)의 길이가 짧게 분할된 블록을 의미한다. 상기 블록(420)은 상부 블록(422)과 하부 블록(424)을 포함할 수 있고, 상부 블록(422)과 하부 블록(424)의 수직 방향 길이는 48 대 16일 수 있다. 이렇게 수직 방향으로 비대칭적으로 분할된 경우, 2N×nU 블록(410)의 상부 블록(412)과 2N×nD 블록(420)의 하부 블록(424)은 수직 방향으로는 수평 방향보다 작은 탭을 사용하여 인터폴레이션될 수 있다. 예컨대, 수평 방향 탭을 8 탭 필터를 사용한 경우, 수직 방향으로는 8 탭보다 작은 수를 사용할 수 있다.
도 5는 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면이다.
도 5의 좌측 도면을 참조하면, 예측 유닛의 형태가 nL×2N 블록(510)인 경우, nL×2N 블록(510)은 수평 방향으로 비대칭적 파티션 분할되며, 좌측 블록(512)의 길이가 짧게 분할된 블록을 의미한다. 상기 블록(510)은 상부 블록(512)과 하부 블록(514)을 포함할 수 있고, 좌측 블록(512)과 우측 블록(514)의 수직 방향 길이는 64로 일정하나 수평 방향 길이는 16 대 48일 수 있다. 또한, 도 5의 우측 도면을 참조하면, 예측 유닛의 형태가 nR×2N 블록(520)인 경우, nR×2N 블록(520)은 수평 방향으로 비대칭적 파티션 분할되며, 우측 블록(524)의 길이가 짧게 분할된 블록을 의미한다. 상기 블록(520)은 좌측 블록(522)과 우측 블록(524)을 포함할 수 있고, 좌측 블록(522)과 우측 블록(524)의 수평 방향 길이는 48 대 16일 수 있다. 이렇게 수평 방향으로 비대칭적으로 분할된 경우, nL×2N 블록(510)의 좌측 블록(512)과 nR×2N 블록(520)의 우측 블록(524)은 수평 방향으로는 수직 방향보다 작은 탭을 사용하여 인터폴레이션될 수 있다. 즉, 수평 방향으로 8 탭보다 작은 길이의 필터 탭을 사용할 수 있다.
도 4 및 도 5의 실시예는 64×64 블록 사이즈에 대한 실시예를 도시하고 있으나, 64×64 블록 사이즈 이외의 다른 크기 또는 형태의 블록에 대해서도 적용할 수 있다.
도 6은 본 발명의 일 실시예에 따른 영상 부호화 장치에서 비대칭적으로 분할된 예측 유닛에 대해 인터 예측을 수행하는 과정을 개략적으로 나타낸 흐름도이다. 도 6에 도시된 바와 같이, 본 발명의 일 실시예에 따른 인터 예측 수행 과정은 분할 관련 정보 획득 단계(S610), 비대칭 방향에서의 길이 판단 단계(S620), 필터 탭의 길이 결정 단계(S630) 및 인터폴레이션 수행 단계(S640)를 포함할 수 있다.
도 6을 참조하면, 분할 관련 정보 획득 단계(S610)에서, 비대칭적 파티션 분할된 블록의 분할과 관련된 정보를 획득한다. 부호화 과정에 있어서, 상기 분할 관련 정보는 모션 예측을 통한 현재 예측 유닛에 대한 모션 정보에 포함되어 있을 수 있다. 모션 정보는 예측 유닛에 대한 모션 벡터, 참조 픽처 인덱스, 예측 방향 인덱스, 예측 모드, 예측 유닛의 형태 관련 정보를 포함할 수 있다.
또한, 본 발명의 실시예에 따르면, 부호화 과정에서 부호화 대상 블록에 대응되는 예측 유닛의 인터폴레이션 필터 탭의 길이 관련 정보를 포함하여 비트 스트림을 생성할 수 있기 때문에, 복호화기는 수신된 비트 스트림으로부터 복호화 대상 블록에 대응되는 예측 유닛의 인터폴레이션 필터 탭의 길이 관련 정보를 획득할 수 있다. 이러한 경우, 길이 판단 단계(S620) 및 필터 탭 길이 결정 단계(S630)를 생략할 수 있다. 비트 스트림에 필터 탭 길이 관련 정보가 포함되어 있지 않는 경우, 예측 유닛의 형태 관련 정보를 획득하여 길이 판단 단계(S620) 및 필터 탭 길이 결정 단계(S630)를 거쳐 필터 탭 길이를 결정할 수 있다.
비대칭 방향에서의 길이 판단 단계(S620)에서, 획득된 분할 관련 정보를 기반으로 부호화 장치(및/또는 복호화 장치)는 부호화(및/또는 복호화)하고자 하는 대상 블록과 대응되는 예측 유닛이 비대칭 방향(수직 또는 수평 방향 중 어느 하나)에서의 길이를 판단한다. 즉, 수평 방향으로 비대칭적 파티션 분할된 블록에 대해서는 상대적으로 길이가 긴 블록인지 길이가 짧은 블록인지 판단한다.
그리고는, 필터 탭의 길이 결정 단계(S630)에서, 상기 길이 관련 판단 결과를 기반으로 상기 부호화(또는 복호화)하고자 하는 대상 블록과 대응되는 예측 유닛의 인터폴레이션을 수행한 필터 탭의 길이를 결정한다. 필터 탭의 길이는 전술한 바와 같이, 비대칭 방향에서의 파티션 길이를 기반으로 결정된다. 예컨대, 수직 방향으로 짧은 길이를 갖는 비대칭 파티션 분할된 블록은 수평 방향보다 짧은 필터 탭 길이를 갖고, 수평 방향으로 짧은 길이를 갖는 비대칭 파티션 분할된 블록은 수직 방향보다 짧은 필터 탭 길이를 갖도록 필터 탭의 길이를 결정할 수 있다.
인터폴레이션 수행 단계(S640)에서, 부호화 장치(및/또는 복호화 장치)는 필터 탭의 길이 결정 단계(S630)에서 결정된 필터 탭 길이를 기반으로 인터폴레이션을 수행한다.
본 발명의 실시예에 따르면, 부호화 과정에서는 상기 결정된 필터 탭 길이를 기반으로 인터폴레이션을 수행 후, 필터 탭 길이 관련 정보를 포함하여 비트 스트림을 생성할 수 있다.
도 7은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수직 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면이다.
도 7을 참조하면, 비대칭적 파티션 분할된 각 파티션 타입에서 파티션의 넓이가 넓은 쪽에 대해서는 넓이가 작은 파티션에서 탭 수보다 긴 필터 탭 길이를 갖도록 하여 인터폴레이션을 수행할 수 있다. 또한, 적어도 두 개의 파티션 분할된 블록의 비대칭 방향에서의 필터 탭의 길이의 합은 비대칭 방향이 아닌 방향의 필터 탭의 길이보다 클 수 있다.
도 7의 좌측 도면을 참조하면, 2N×nU 블록은 수직 방향으로 비대칭적 파티션 분할되며, 상부 블록(710)의 길이가 짧게 분할된 블록이다. 상기 2N×nU 블록의 상부 블록(710)은 하부 블록(720)보다 수직 방향으로 짧은 길이를 갖고, 16 대 48의 길이를 가질 수 있다. 이러한 경우, 넓이가 넓은 하부 블록(720)은 넓이가 좁은 상부 블록(710)보다 긴 길이의 필터 탭이 사용될 수 있다. 또한, 비대칭 방향인 수직 방향에 대한 필터 탭의 길이의 합, 즉, 상부 블록(710)의 수직 방향 필터 탭의 길이 및 하부 블록(720)의 수직 방향 필터 탭의 길이의 합은 상부 및 하부 블록(710, 720)의 수평 방향 필터 탭을 길이보다 클 수 있다.
예컨대, 상부 블록(710)에서는 수직 방향으로 4 탭 필터를 사용하여 인터폴레이션을 수행할 수 있고, 하부 블록(720)에서는 수직 방향으로 6 탭 필터를 사용하여 인터폴레이션을 수행할 수 있다. 즉, 4 탭 필터와 6 탭 필터의 필터 탭 길이의 합은 10으로 수평 방향 필터 탭의 길이인 8보다 클 수 있다.
도 7의 우측 도면을 참조하면, 동일한 방식으로 2N×nD 블록에 대해서도 적용할 수 있고, 이 경우, 상부 블록(710)에서는 수직 방향으로 6 탭 필터를 사용하여 인터폴레이션을 수행할 수 있고, 하부 블록(720)에서는 수직 방향으로 4 탭 필터를 사용하여 인터폴레이션을 수행할 수 있다.
도 8은 본 발명의 일 실시예에 따른 영상 부호화 장치에서의 수평 방향으로 비대칭적 파티션 분할이 사용된 경우, 분할된 예측 유닛의 수직 또는 수평 방향으로의 길이에 적합한 인터폴레이션 필터 탭을 사용하는 일 실시예를 개략적으로 나타낸 도면이다.
도 8의 좌측 도면을 참조하면, nL×2N 블록은 수평 방향으로 비대칭적 파티션 분할되며, 좌측 블록(810)의 길이가 짧게 분할된 블록이다. 상기 nL×2N 블록의 좌측 블록(810)은 우측 블록(820)보다 수평 방향으로 짧은 길이를 갖고, 16 대 48의 길이를 가질 수 있다. 이러한 경우, 넓이가 넓은 우측 블록(820)은 넓이가 좁은 상부 블록(810)보다 긴 길이의 필터 탭이 사용될 수 있다. 또한, 비대칭 방향인 수평 방향에 대한 필터 탭의 길이의 합, 즉, 좌측 블록(810)의 수평 방향 필터 탭의 길이 및 우측 블록(820)의 수평 방향 필터 탭의 길이의 합은 좌측 및 우측 블록(810, 820)의 수직 방향 필터 탭을 길이보다 클 수 있다.
예컨대, 좌측 블록(810)에서는 수평 방향으로 4 탭 필터를 사용하여 인터폴레이션을 수행할 수 있고, 우측 블록(820)에서는 수평 방향으로 6 탭 필터를 사용하여 인터폴레이션을 수행할 수 있다.
도 8의 우측 도면을 참조하면, 동일한 방식으로 nR×2N 블록에 대해서도 적용할 수 있고, 이 경우, 좌측 블록(830)에서는 수평 방향으로 6 탭 필터를 사용하여 인터폴레이션을 수행할 수 있고, 우측 블록(840)에서는 수직 방향으로 4 탭 필터를 사용하여 인터폴레이션을 수행할 수 있다.
표 1은 각각의 비대칭적 블록의 수직 및 수평 인터폴레이션 필터 탭 수를 나타낸 표이다.
도 9는 본 발명의 실시예에 따른 영상 부호화 방법을 개략적으로 나타내는 흐름도이다.
도 9를 참조하면, 부호화기는 현재 인터 예측 유닛의 모션 예측값을 산출할 수 있다(S910). 현재 예측 유닛의 모션 정보는 그대로 보내지 않고, 압축 효율을 높이기 위해 시공간적으로 인접한 블록들로부터 얻은 예측값과의 차이를 보낸다. 부호화기는 모션 예측 값을 구하기 위해 현재 인터 예측 유닛에 대해 병합(Merge) 후보 리스트와 AMVP(Adaptive Motion Vector Prediction) 후보 리스트를 작성할 수 있다.
부호화기는 상기 모션 정보를 이용하여 예측 유닛을 생성한다(S920). 특히, 비대칭적 파티션 분할된 예측 유닛에 대해서는 파티션의 길이가 짧은 방향에 작은 탭 길이를 사용하여 인터폴레이션을 수행할 수 있다. 비대칭적으로 파티션 분할된 예측 유닛에 대한 인터폴레이션 방법의 구체적인 실시예는 상술한 바 있으므로, 여기서는 생략하기로 한다.
부호화기는 현재 블록의 모션 정보를 부호화한다(S930). 병합 모드의 경우, 병합 후보들 중, 현재 예측 유닛과 같은 모션 정보를 가진 후보가 존재하면, 현재 예측 유닛을 병합 모드로 선언하고, 병합 모드를 사용했음을 알리는 플래그와 병합 후보들 중 어느 후보를 사용했는지 알리는 병합 인덱스를 보낸다. AMVP 모드의 경우, AMVP 후보들 중 현재 부호화할 예측 유닛의 모션 벡처 정보와 비교하여 코스트 함수가 최소화되는 후보를 결정하고, 상기 결정된 후보의 모션 정보와의 차이값과 상기 AMVP 후보를 이용하여 모션 보상 후, 잔여 신호를 획득한다.
이후, 부호화기는 현재 블록에 대응되는 잔차 블록을 생성할 수 있다(S940). 상술한 바와 같이, 부호화기는 현재 블록에 대해 인터 예측 및/또는 인트라 예측을 수행함으로써, 현재 블록에 대응되는 예측 블록을 생성할 수 있다. 이 때, 부호화기는 현재 블록의 픽셀 값과 예측 블록의 픽셀 값을 픽셀 단위로 차분하여 잔차(residual) 신호, 즉 잔차 블록을 생성할 수 있다.
다시 도 9를 참조하면, 부호화기는 잔차 신호, 즉 잔차 블록에 대해 변환을 수행할 수 있다(S950). 부호화기는 변환 커널(kernel)을 적용하여 잔차 신호를 변환 부호화할 수 있으며, 변환 부호화 커널의 크기는 2*2, 4*4, 8*8, 16*16, 32*32 또는 64*64일 수 있다. 일 실시예로 n*n 블록에 대한 변환 계수 C는 다음과 같이 계산될 수 있다.
[수학식 3]
C(n,n)=T(n,n) x B(n,n) x T(n,n)T
여기서, C(n,n)은 n*n 크기의 변환 계수에 대한 행렬이고, T(n,n)은 n*n 크기의 변환 커널 행렬이고, B(n,n)은 n*n 크기의 잔차 블록에 대한 행렬이다.
변환 과정에 의해 변환 계수가 생성되면, 부호화기는 생성된 변환 계수에 대한 양자화를 수행할 수 있다.
잔차 블록과 변환 계수 중 어떤 것이 전송되는 지는 RDO를 통해 결정될 수 있다. 예측이 잘 된 경우에는 변환 부호화 없이 잔차 블록, 즉 잔차 신호가 그대로 전송될 수 있다. 부호화기는 변환 부호화 전/후의 비용 함수(cost function)를 비교할 수 있으며, 비용이 최소화되는 방법을 선택할 수 있다. 이 때, 부호화기는 현재 블록에 대해 전송하는 신호의 타입(잔차 신호 또는 변환 계수)에 대한 정보를 복호화 장치로 전송할 수 있다.
다시 도 9를 참조하면, 부호화기는 변환 계수에 대한 스캐닝을 수행할 수 있다(S960).
스캐닝이 수행되면, 부호화기는 스캐닝된 변환 계수 및 보조 정보(예를 들어, 현재 블록의 인터 예측 모드 정보)에 대한 엔트로피 부호화를 수행할 수 있다(S1970). 부호화된 정보들은 압축된 비트 스트림을 형성하여 네트워크 추상 계층(NAL: Network Abstraction Layer)을 통해 전송되거나 저장될 수 있다.
도 9의 실시예에서, 부호화 방법은 일련의 단계로서 흐름도를 기초로 설명되고 있으나, 본 발명은 이에 한정되는 것은 아니다. 도 9의 실시예에서 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 병렬적으로 발생할 수도 있다. 또한, 흐름도에 나타내어진 단계들에 다른 단계가 포함될 수도 있으며, 도 9의 흐름도에서 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수도 있다.
도 10은 본 발명의 실시예에 따른 영상 복호화 방법을 개략적으로 나타내는 흐름도이다.
도 10을 참조하면, 복호화기는 부호화기로부터 수신된 비트스트림에 대해 엔트로피 복호화를 수행할 수 있다(S1010). 일례로, 복호화기는 VLC(variable length coding) 테이블 및/또는 CABAC을 기반으로 현재 블록의 예측 모드 및 잔차 신호를 도출할 수 있다. 복호화기는 현재 블록에 대해 수신된 신호가 잔차 신호인지 아니면 변환 계수인지에 관한 정보를 얻을 수 있고, 현재 블록에 대해 잔차 신호나 1차원 벡터 형태의 변환 계수를 얻을 수 있다. 수신된 비트스트림에 복호화에 필요한 보조 정보(side information)가 포함되는 경우, 이들이 함께 엔트로피 복호화될 수도 있다.
다시 도 10을 참조하면, 복호화기는 엔트로피 복호화된 잔차 신호나 변환 계수에 대해 역스캐닝을 수행함으로써, 2차원 블록을 생성할 수 있다(S1020). 이 때, 잔차 신호의 경우 잔차 블록이 생성되고, 변환 계수의 경우 2차원 블록 형태의 변환 계수가 생성될 수 있다. 변환 계수가 생성된 경우 복호화기는 생성된 변환 계수에 대해 역양자화를 수행할 수 있다(S1030).
복호화기는 역양자화된 변환 계수에 대해 역변환을 수행함으로써 잔차 블록을 생성할 수 있다(S1040). 역변환 과정은 다음 수학식 4에 의해 나타내어질 수 있다.
[수학식 4]
B(n,n)=T(n,n) x C(n,n) x T(n,n)T
잔차 블록이 생성되면, 복호화기는 생성된 잔차 블록을 기반으로 인터 예측을 수행할 수 있다(S1050). 병합 모드와 AMVP 모드 중 어느 하나의 모드를 통해 인터 예측을 수행하여 모션 정보를 획득한다.
복호화기는 획득된 모션 정보를 이용하여 예측 유닛을 생성할 수 있다. 특히, 비대칭적 파티션 분할된 예측 유닛에 대해서는 파티션의 길이가 짧은 방향에 작은 탭 길이를 사용하여 인터폴레이션을 수행할 수 있다. 비대칭적으로 파티션 분할된 예측 유닛에 대한 인터폴레이션 방법의 구체적인 실시예는 상술한 바 있으므로, 여기서는 생략하기로 한다.
그리고는, 복호화기는 잔차 블록과 이전 프레임의 신호를 더하여 복원 블록을 생성하여 영상을 재생할 수 있다(S1070). 상술한 바와 같이, 복호화기는 복호화 대상 블록에 대해 인터 예측 및/또는 인트라 예측을 수행함으로써, 복호화 대상 블록에 대응되는 예측 블록을 생성할 수 있다. 이 때, 복호화기는 예측 블록의 픽셀값과 잔차 블록의 픽셀값을 픽셀 단위로 더하여 복원 블록을 생성할 수 있다.
도 10의 실시예에서, 복호화 방법은 일련의 단계로서 흐름도를 기초로 설명되고 있으나, 본 발명은 이에 한정되는 것은 아니다. 도 10의 실시예에서 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 병렬적으로 발생할 수도 있다. 또한, 흐름도에 나타내어진 단계들에 다른 단계가 포함될 수도 있으며, 도 10의 흐름도에서 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수도 있다.
상술한 실시예들에서, 방법들은 일련의 단계 또는 블록으로써 흐름도 또는 순서도를 기초로 설명되고 있으나, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 병렬적으로 발생할 수 있다. 또한, 당업자라면 순서도에 나타낸 단계들이 배타적이지 않고, 다른 단계가 포함되거나 순서도 또는 흐름도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.
이상 도면 및 실시예를 참조하여 설명하였지만, 본 발명의 보호범위가 상기 도면 또는 실시예에 의해 한정되는 것을 의미하지는 않으며 해당 기술 분야의 숙련된 당업자는 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.
Claims (6)
- 예측 블록의 참조 픽쳐 인덱스를 이용하여 상기 예측 블록의 참조 픽쳐를 선택하는 단계;
상기 예측 블록의 모션 벡터를 이용하여 상기 참조 픽쳐 내 참조 블록을 특정하는 단계;
상기 참조 블록 내의 참조 샘플들을 획득하는 단계; 및
상기 참조 샘플들을 이용하여 상기 예측 블록의 예측 샘플을 획득하는 단계를 포함하되,
상기 참조 샘플들을 획득하는 단계는,
수평 방향의 보간 필터 및 제1 쉬프트 값을 이용하는 쉬프트 연산에 기초하여 제1 서브 샘플을 유도하는 단계, 여기서, 상기 제1 서브 샘플은 1/2 위치 샘플이고, 상기 수평 방향의 보간 필터는 상기 참조 픽처 내의 정수 위치 샘플에 적용됨; 및
수직 방향의 보간 필터 및 제2 쉬프트 값을 이용하는 쉬프트 연산에 기초하여 제2 서브 샘플을 유도하는 단계, 여기서, 상기 제2 서브 샘플은 2개의 1/4 위치 샘플들 중 하나이고, 상기 2개의 1/4 위치 샘플들은 상기 제1 서브 샘플의 아래쪽에 수직으로 정렬되어 있으며, 상기 제1 서브 샘플을 상기 수직 방향의 보간 필터에 적용하여 상기 제2 서브 샘플은 유도됨;를 포함하고,
상기 2개의 1/4 위치 샘플들 각각의 유도에 이용되는 각각의 수직 방향의 보간 필터의 계수들은 서로 상이하며,
상기 제1 쉬프트 값은 휘도 컴포넌트의 비트 깊이에 기초하여 결정되는 변수인 반면에, 상기 제2 쉬프트 값은 고정된 값이며,
상기 수평 방향의 보간 필터는 8탭 필터인 것을 특징으로 하는 비디오 신호 디코딩 방법. - 제1항에 있어서,
상기 예측 블록에 대한 병합(Merge) 후보 리스트를 생성하는 단계, 여기서, 상기 병합 후보 리스트는 복수 개의 병합 후보들을 포함함; 및
상기 복수 개의 병합 후보들 중 선택된 머지 후보에 기초하여 상기 예측 블록의 참조 픽쳐 인덱스 및 모션 벡터를 획득하는 단계를 더 포함하는 것을 특징으로 하는 비디오 신호 디코딩 방법. - 제2항에 있어서, 상기 복수 개의 병합 후보들은 상기 예측 블록의 공간적 이웃 블록 및 시간적 이웃 블록을 포함하는 것을 특징으로 하는 비디오 신호 디코딩 방법.
- 제1항에 있어서, 상기 예측 블록은 비대칭 파티션으로 부호화된 코딩 블록의 파티션인 것을 특징으로 하는 비디오 신호 디코딩 방법.
- 제2항에 있어서, 상기 복수 개의 병합 후보들 중 하나를 알리는 병합 인덱스에 기초하여 상기 복수 개의 병합 후보들 중 하나의 병합 후보를 선택하는 것을 특징으로 하는 비디오 신호 디코딩 방법.
- 제2항에 있어서,
병합 모드의 사용 여부를 알리는 플래그를 획득하는 단계; 및
상기 플래그가 병합 모드의 사용을 알리는 경우, 상기 예측 블록에 대한 병합(Merge) 후보 리스트를 생성하는 것을 특징으로 하는 비디오 신호 디코딩 방법.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020110116130 | 2011-11-08 | ||
KR20110116130 | 2011-11-08 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020140148212A Division KR101905159B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20180109814A KR20180109814A (ko) | 2018-10-08 |
KR101986586B1 true KR101986586B1 (ko) | 2019-06-10 |
Family
ID=48661122
Family Applications (10)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120123519A KR101569725B1 (ko) | 2011-11-08 | 2012-11-02 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148212A KR101905159B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148210A KR101550719B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148209A KR101550718B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148208A KR101550717B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148211A KR101550720B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116551A KR101986586B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116553A KR101986588B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116552A KR101986587B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116554A KR101986589B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
Family Applications Before (6)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120123519A KR101569725B1 (ko) | 2011-11-08 | 2012-11-02 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148212A KR101905159B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148210A KR101550719B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148209A KR101550718B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148208A KR101550717B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020140148211A KR101550720B1 (ko) | 2011-11-08 | 2014-10-29 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020180116553A KR101986588B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116552A KR101986587B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
KR1020180116554A KR101986589B1 (ko) | 2011-11-08 | 2018-09-28 | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 |
Country Status (11)
Country | Link |
---|---|
US (6) | US9432683B2 (ko) |
KR (10) | KR101569725B1 (ko) |
CN (10) | CN107071434A (ko) |
AU (6) | AU2012336598A1 (ko) |
BR (1) | BR112014012594A8 (ko) |
CA (1) | CA2855027C (ko) |
GB (5) | GB2561515B (ko) |
MX (6) | MX2014005606A (ko) |
PL (1) | PL231918B1 (ko) |
RU (6) | RU2610296C2 (ko) |
WO (1) | WO2013069932A1 (ko) |
Families Citing this family (39)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120035096A (ko) * | 2010-10-04 | 2012-04-13 | 한국전자통신연구원 | 쿼드 트리 변환 구조에서 부가 정보의 시그널링 방법 및 장치 |
WO2014000664A1 (en) * | 2012-06-28 | 2014-01-03 | Mediatek Inc. | Method and apparatus of disparity vector derivation in 3d video coding |
CN110545421B (zh) | 2012-10-12 | 2022-11-22 | 韩国电子通信研究院 | 图像编码/解码方法和使用其的装置 |
US9426465B2 (en) | 2013-08-20 | 2016-08-23 | Qualcomm Incorporated | Sub-PU level advanced residual prediction |
KR102250088B1 (ko) * | 2013-10-24 | 2021-05-10 | 삼성전자주식회사 | 비디오 스트림을 복호화하는 방법 및 장치 |
CN104768012B (zh) * | 2014-01-03 | 2018-04-20 | 华为技术有限公司 | 非对称运动分割方式编码的方法和编码设备 |
CN104918050B (zh) * | 2014-03-16 | 2019-11-08 | 上海天荷电子信息有限公司 | 使用动态排列重组的参考像素样值集的图像编解码方法 |
WO2017036370A1 (en) * | 2015-09-03 | 2017-03-09 | Mediatek Inc. | Method and apparatus of neural network based processing in video coding |
US10511839B2 (en) * | 2015-09-23 | 2019-12-17 | Lg Electronics Inc. | Image encoding/decoding method and device for same |
KR101752848B1 (ko) * | 2015-12-30 | 2017-06-30 | 씨제이포디플렉스 주식회사 | 영상 움직임 검출을 이용한 모션 제어 시스템 및 방법 |
CA3227652A1 (en) * | 2016-10-04 | 2018-04-12 | Kt Corporation | Method and apparatus for processing video signal |
US11284076B2 (en) * | 2017-03-22 | 2022-03-22 | Electronics And Telecommunications Research Institute | Block form-based prediction method and device |
KR20180111378A (ko) * | 2017-03-31 | 2018-10-11 | 주식회사 칩스앤미디어 | 병렬 처리를 위한 움직임 정보를 처리하는 영상 처리 방법, 그를 이용한 영상 복호화, 부호화 방법 및 그 장치 |
EP3606072A4 (en) | 2017-03-31 | 2020-07-22 | Panasonic Intellectual Property Corporation of America | IMAGE CODING DEVICE, IMAGE DECODING DEVICE, IMAGE CODING METHOD AND IMAGE DECODING METHOD |
US10728548B2 (en) * | 2017-04-04 | 2020-07-28 | Futurewei Technologies, Inc. | Processing reference samples used for intra-prediction of a picture block |
CN110622511B (zh) * | 2017-04-13 | 2022-04-15 | Lg 电子株式会社 | 图像编码/解码方法及其设备 |
CN115550651A (zh) * | 2017-07-31 | 2022-12-30 | 韩国电子通信研究院 | 对图像编码和解码的方法及存储比特流的计算机可读介质 |
EP3685577A4 (en) * | 2017-10-12 | 2021-07-28 | MediaTek Inc. | METHOD AND DEVICE OF A NEURAL NETWORK FOR VIDEO ENCODING |
CN111279698B (zh) * | 2017-10-27 | 2022-08-19 | 华为技术有限公司 | 图像编码的非对称划分装置和方法 |
US11825117B2 (en) * | 2018-01-15 | 2023-11-21 | Samsung Electronics Co., Ltd. | Encoding method and apparatus therefor, and decoding method and apparatus therefor |
CN110198440B (zh) * | 2018-03-29 | 2022-11-18 | 腾讯科技(深圳)有限公司 | 编码预测信息的确定及视频编码的方法、装置及可读介质 |
CN111971958B (zh) * | 2018-04-18 | 2023-01-13 | 华为技术有限公司 | 视频编码中的块分割方法和设备 |
KR20210016581A (ko) | 2018-06-05 | 2021-02-16 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | Ibc 및 atmvp 간의 상호 작용 |
WO2019244117A1 (en) | 2018-06-21 | 2019-12-26 | Beijing Bytedance Network Technology Co., Ltd. | Unified constrains for the merge affine mode and the non-merge affine mode |
KR102701593B1 (ko) | 2018-06-21 | 2024-08-30 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 칼라 컴포넌트 간의 서브 블록 mv 상속 |
HUE063986T2 (hu) * | 2018-09-16 | 2024-02-28 | Huawei Tech Co Ltd | Eljárás és berendezés predikcióhoz |
CN117768651A (zh) | 2018-09-24 | 2024-03-26 | 北京字节跳动网络技术有限公司 | 处理视频数据的方法、装置、介质、以及比特流存储方法 |
EP3861723A4 (en) | 2018-11-10 | 2022-04-20 | Beijing Bytedance Network Technology Co., Ltd. | ROUNDS IN PAIRS OF MEDIUM CANDIDATE BILLS |
US10778977B2 (en) * | 2018-12-05 | 2020-09-15 | Qualcomm Incorporated | Triangle motion information for video coding |
CN118632017A (zh) | 2018-12-21 | 2024-09-10 | 株式会社 Xris | 视频信号编码/解码方法及其装置 |
WO2020141849A1 (ko) * | 2019-01-01 | 2020-07-09 | 엘지전자 주식회사 | 화면간 예측을 사용하여 비디오 신호를 처리하기 위한 방법 및 장치 |
US11477448B2 (en) | 2019-01-25 | 2022-10-18 | Hfi Innovation Inc. | Method and apparatus for non-linear adaptive loop filtering in video coding |
JP2020150338A (ja) * | 2019-03-11 | 2020-09-17 | キヤノン株式会社 | 画像復号装置、画像復号方法、及びプログラム |
JP2020150340A (ja) * | 2019-03-11 | 2020-09-17 | キヤノン株式会社 | 画像符号化装置、画像符号化方法、及びプログラム |
JP7267785B2 (ja) | 2019-03-11 | 2023-05-02 | キヤノン株式会社 | 画像復号装置、画像復号方法、及びプログラム |
TWI739386B (zh) | 2019-04-11 | 2021-09-11 | 聯發科技股份有限公司 | 具有適應性參數集之適應性迴路濾波器 |
CN113767623B (zh) * | 2019-04-16 | 2024-04-02 | 北京字节跳动网络技术有限公司 | 用于视频编解码的自适应环路滤波 |
CN111684799B (zh) * | 2019-06-25 | 2023-07-25 | 北京大学 | 视频处理方法和装置 |
CN110557592B (zh) * | 2019-09-16 | 2021-12-17 | 瑞芯微电子股份有限公司 | 一种hdmi多媒体数据质量评测方法、装置和系统 |
Family Cites Families (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
SG152047A1 (en) * | 2002-01-18 | 2009-05-29 | Toshiba Kk | Video encoding method and apparatus and video decoding method and apparatus |
JP4120301B2 (ja) * | 2002-04-25 | 2008-07-16 | ソニー株式会社 | 画像処理装置およびその方法 |
KR20050018948A (ko) * | 2002-07-09 | 2005-02-28 | 노키아 코포레이션 | 비디오 부호화에서 보간 필터 유형을 선택하기 위한 방법및 장치 |
MXPA05000335A (es) | 2002-07-09 | 2005-03-31 | Nokia Corp | Metodo y sistema para seleccionar tipo de filtro de interpolacion en codificacion de video. |
JP4183993B2 (ja) * | 2002-07-16 | 2008-11-19 | シャープ株式会社 | フィルタ装置 |
WO2006108654A2 (en) * | 2005-04-13 | 2006-10-19 | Universität Hannover | Method and apparatus for enhanced video coding |
WO2006112272A1 (ja) * | 2005-04-13 | 2006-10-26 | Ntt Docomo, Inc. | 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、および動画像復号プログラム |
US9014280B2 (en) * | 2006-10-13 | 2015-04-21 | Qualcomm Incorporated | Video coding with adaptive filtering for motion compensated prediction |
CN101399991B (zh) * | 2007-09-26 | 2010-11-10 | 华为技术有限公司 | 一种视频解码的方法和装置 |
CN101453646B (zh) * | 2007-12-04 | 2012-02-22 | 华为技术有限公司 | 图像插值方法、装置及插值系数的获取方法 |
KR101279573B1 (ko) | 2008-10-31 | 2013-06-27 | 에스케이텔레콤 주식회사 | 움직임 벡터 부호화 방법 및 장치와 그를 이용한 영상 부호화/복호화 방법 및 장치 |
JP2011082725A (ja) | 2009-10-06 | 2011-04-21 | Nippon Telegr & Teleph Corp <Ntt> | 映像符号化方法,映像符号化装置,映像復号方法,映像復号装置,映像符号化・復号方法,およびプログラム |
KR20110060105A (ko) * | 2009-11-30 | 2011-06-08 | 엘지전자 주식회사 | 인트라 예측을 이용한 비디오 신호 처리 방법 및 장치 |
KR20110061468A (ko) | 2009-12-01 | 2011-06-09 | (주)휴맥스 | 고해상도 영상의 부호화/복호화 방법 및 이를 수행하는 장치 |
CN104811717B (zh) | 2009-12-01 | 2018-09-14 | 数码士有限公司 | 用于编码/解码高分辨率图像的方法和设备 |
KR20110071047A (ko) * | 2009-12-20 | 2011-06-28 | 엘지전자 주식회사 | 비디오 신호 디코딩 방법 및 장치 |
CN105472394B (zh) | 2010-01-15 | 2018-11-30 | 三星电子株式会社 | 用于预测编码的使用可变分区的视频编码的方法和设备以及用于预测编码的使用可变分区的视频解码的方法和设备 |
CN103039073B (zh) | 2010-06-07 | 2016-09-14 | 数码士有限公司 | 编码/解码高分辨率图像的方法和执行该方法的装置 |
EP2942957A1 (en) | 2010-07-02 | 2015-11-11 | HUMAX Holdings Co., Ltd. | Apparatus for decoding images for intra-prediction |
KR101719448B1 (ko) * | 2010-09-27 | 2017-03-23 | 엘지전자 주식회사 | 블록 분할 방법 및 복호화 장치 |
US20120134425A1 (en) * | 2010-11-29 | 2012-05-31 | Faouzi Kossentini | Method and System for Adaptive Interpolation in Digital Video Coding |
EP2664144A1 (en) * | 2011-01-14 | 2013-11-20 | Motorola Mobility LLC | Temporal block merge mode |
RU2595262C2 (ru) * | 2011-06-28 | 2016-08-27 | Самсунг Электроникс Ко., Лтд. | Способ для интерполяции изображений с использованием асимметричного интерполяционного фильтра и устройство для этого |
US9055304B2 (en) * | 2011-07-01 | 2015-06-09 | Qualcomm Incorporated | Reduced resolution pixel interpolation |
US9462298B2 (en) * | 2011-10-21 | 2016-10-04 | Qualcomm Incorporated | Loop filtering around slice boundaries or tile boundaries in video coding |
-
2012
- 2012-11-02 CN CN201611001846.2A patent/CN107071434A/zh active Pending
- 2012-11-02 MX MX2014005606A patent/MX2014005606A/es active IP Right Grant
- 2012-11-02 CN CN201611001847.7A patent/CN107071435A/zh active Pending
- 2012-11-02 RU RU2014119544A patent/RU2610296C2/ru active
- 2012-11-02 PL PL409213A patent/PL231918B1/pl unknown
- 2012-11-02 CN CN201711228064.7A patent/CN107835412A/zh active Pending
- 2012-11-02 MX MX2016014331A patent/MX364027B/es unknown
- 2012-11-02 KR KR1020120123519A patent/KR101569725B1/ko active IP Right Grant
- 2012-11-02 AU AU2012336598A patent/AU2012336598A1/en not_active Abandoned
- 2012-11-02 GB GB1812009.7A patent/GB2561515B/en active Active
- 2012-11-02 CN CN201410641451.3A patent/CN104378632B/zh active Active
- 2012-11-02 CN CN201611019017.7A patent/CN107071436A/zh active Pending
- 2012-11-02 MX MX2016014332A patent/MX367994B/es unknown
- 2012-11-02 CA CA2855027A patent/CA2855027C/en active Active
- 2012-11-02 GB GB1812008.9A patent/GB2561514B/en active Active
- 2012-11-02 RU RU2017100994A patent/RU2718230C2/ru active
- 2012-11-02 WO PCT/KR2012/009180 patent/WO2013069932A1/ko active Application Filing
- 2012-11-02 CN CN201280066253.8A patent/CN104067613B/zh active Active
- 2012-11-02 MX MX2016014328A patent/MX359052B/es unknown
- 2012-11-02 CN CN201711226201.3A patent/CN107920249A/zh active Pending
- 2012-11-02 CN CN201711229291.1A patent/CN107959852A/zh active Pending
- 2012-11-02 GB GB1721828.0A patent/GB2560083B/en active Active
- 2012-11-02 GB GB1812007.1A patent/GB2561782B/en active Active
- 2012-11-02 RU RU2017100988A patent/RU2647704C1/ru active
- 2012-11-02 RU RU2017100985A patent/RU2643573C1/ru active
- 2012-11-02 RU RU2017100984A patent/RU2647705C1/ru active
- 2012-11-02 GB GB1408808.2A patent/GB2510759B/en active Active
- 2012-11-02 US US14/357,056 patent/US9432683B2/en active Active
- 2012-11-02 MX MX2016007503A patent/MX349891B/es unknown
- 2012-11-02 CN CN201711225474.6A patent/CN107835411A/zh active Pending
- 2012-11-02 CN CN201711229109.2A patent/CN107835413A/zh active Pending
- 2012-11-02 RU RU2017100991A patent/RU2647703C1/ru active
- 2012-11-02 BR BR112014012594A patent/BR112014012594A8/pt not_active Application Discontinuation
-
2014
- 2014-05-08 MX MX2015014594A patent/MX339846B/es unknown
- 2014-10-29 KR KR1020140148212A patent/KR101905159B1/ko active Application Filing
- 2014-10-29 KR KR1020140148210A patent/KR101550719B1/ko active IP Right Grant
- 2014-10-29 KR KR1020140148209A patent/KR101550718B1/ko active IP Right Grant
- 2014-10-29 KR KR1020140148208A patent/KR101550717B1/ko active IP Right Grant
- 2014-10-29 KR KR1020140148211A patent/KR101550720B1/ko active IP Right Grant
-
2015
- 2015-01-26 US US14/605,999 patent/US9432684B2/en active Active
-
2016
- 2016-03-29 AU AU2016201932A patent/AU2016201932B2/en active Active
- 2016-07-25 US US15/218,403 patent/US9497477B1/en active Active
- 2016-10-13 US US15/292,478 patent/US9578338B1/en active Active
- 2016-10-13 US US15/292,424 patent/US9554140B1/en active Active
- 2016-11-03 AU AU2016253619A patent/AU2016253619B2/en active Active
- 2016-11-03 AU AU2016253620A patent/AU2016253620B2/en active Active
- 2016-11-03 AU AU2016253621A patent/AU2016253621B2/en active Active
- 2016-12-29 US US15/393,826 patent/US9729893B2/en active Active
-
2018
- 2018-04-04 AU AU2018202366A patent/AU2018202366B2/en active Active
- 2018-09-28 KR KR1020180116551A patent/KR101986586B1/ko active IP Right Grant
- 2018-09-28 KR KR1020180116553A patent/KR101986588B1/ko active IP Right Grant
- 2018-09-28 KR KR1020180116552A patent/KR101986587B1/ko active IP Right Grant
- 2018-09-28 KR KR1020180116554A patent/KR101986589B1/ko active IP Right Grant
Non-Patent Citations (1)
Title |
---|
Benjamin Bross "WD4: Working Draft 4 of High-Efficiency Video Coding", JCTVC-F803, version 7, 2011.10.28.* |
Also Published As
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101986586B1 (ko) | 영상의 부호화 방법 및 장치, 및 복호화 방법 및 장치 | |
US11849121B2 (en) | Inter-prediction method and image decoding device | |
US20210266559A1 (en) | Inter-prediction method and image decoding device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |