WO2017026681A1 - 비디오 코딩 시스템에서 인터 예측 방법 및 장치 - Google Patents

비디오 코딩 시스템에서 인터 예측 방법 및 장치 Download PDF

Info

Publication number
WO2017026681A1
WO2017026681A1 PCT/KR2016/007734 KR2016007734W WO2017026681A1 WO 2017026681 A1 WO2017026681 A1 WO 2017026681A1 KR 2016007734 W KR2016007734 W KR 2016007734W WO 2017026681 A1 WO2017026681 A1 WO 2017026681A1
Authority
WO
WIPO (PCT)
Prior art keywords
sample
coordinates
motion vector
current block
motion
Prior art date
Application number
PCT/KR2016/007734
Other languages
English (en)
French (fr)
Inventor
장형문
손은용
구문모
박승욱
전용준
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to CN202210527374.3A priority Critical patent/CN114866769A/zh
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to CN202210527381.3A priority patent/CN114866770A/zh
Priority to KR1020187004403A priority patent/KR20180028514A/ko
Priority to CN201680055123.2A priority patent/CN108141582B/zh
Priority to CN202210527386.6A priority patent/CN114866771A/zh
Priority to US15/751,077 priority patent/US10582215B2/en
Priority to CN202210527005.4A priority patent/CN114866768A/zh
Priority to EP16835322.5A priority patent/EP3334158A4/en
Publication of WO2017026681A1 publication Critical patent/WO2017026681A1/ko
Priority to US16/773,958 priority patent/US11122290B2/en
Priority to US17/348,204 priority patent/US11503334B2/en
Priority to US17/957,916 priority patent/US11902569B2/en
Priority to US18/400,309 priority patent/US20240187641A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/56—Motion estimation with initialisation of the vector search, e.g. estimating a good candidate to initiate a search
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/66—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving data partitioning, i.e. separation of data into packets or partitions according to importance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Definitions

  • the present invention relates to video coding techniques, and more particularly, to an inter prediction method and apparatus in a video coding system.
  • the demand for high resolution and high quality images such as high definition (HD) images and ultra high definition (UHD) images is increasing in various fields.
  • the higher the resolution and the higher quality of the image data the more information or bit rate is transmitted than the existing image data. Therefore, the image data can be transmitted by using a medium such as a conventional wired / wireless broadband line or by using a conventional storage medium. In the case of storage, the transmission cost and the storage cost are increased.
  • a high efficiency image compression technique is required to effectively transmit, store, and reproduce high resolution, high quality image information.
  • An object of the present invention is to provide a method and apparatus for improving video coding efficiency.
  • Another technical problem of the present invention is to provide a method and apparatus for performing sample-based motion vector based inter prediction.
  • Another technical problem of the present invention is to provide a method and apparatus for deriving a sample unit motion vector based on motion vectors of control points of a current block.
  • Another technical problem of the present invention is to provide a method and apparatus for deriving a motion vector for a control point based on samples of neighboring blocks.
  • Another technical problem of the present invention is to provide a method and apparatus for deriving a motion vector for control points of a current block that is a non-square block based on samples of a neighboring block.
  • Another technical problem of the present invention is to provide a method and apparatus for deriving a motion vector for a control point of a current block based on a motion vector for a control point of a neighboring block already decoded.
  • a video decoding method performed by a decoding apparatus includes deriving control points (CPs) for a current block, obtaining motion vectors for the CPs, and calculating a sample unit motion vector in the current block based on the obtained motion vectors. Deriving, Deriving a prediction sample for the current block based on the sample unit motion vector.
  • CPs control points
  • a decoding apparatus for performing video decoding.
  • the decoding apparatus obtains a decoding unit for obtaining prediction mode information about a current block from a bitstream, control points (CPs) for a current block, obtains motion vectors for the CPs, Deriving a sample unit motion vector in the current block based on the motion vectors, a prediction unit for deriving a prediction sample for the current block based on the sample unit motion vector, and generating a reconstructed sample based on the prediction sample It is characterized by including an adder.
  • CPs control points
  • a video encoding method performed by an encoding apparatus includes deriving control points (CPs) for a current block, obtaining motion vectors for the CPs, and calculating a sample unit motion vector in the current block based on the obtained motion vectors. Deriving, generating a prediction sample for the current block based on the sample unit motion vector, and encoding and outputting prediction mode information for the current block.
  • CPs control points
  • an encoding apparatus for performing video encoding.
  • the encoding apparatus determines a prediction mode for the current block, derives control points (CPs) for the current block, obtains motion vectors for the CPs, and based on the obtained motion vectors
  • the present invention it is possible to efficiently derive the motion vector for the samples of the current block based on the motion vectors of the control points for the current block.
  • the motion vectors of the control points for the current block can be derived based on the motion vectors of the control points of the neighboring block which are already decoded without additionally transmitting the information about the motion vectors of the control points for the current block. .
  • This may eliminate or reduce the amount of data for the motion vectors of the control points and improve the overall coding efficiency.
  • the present invention not only the image in the current block is shifted in plane but also the rotation, zoom-in, zoom-out, or flat-shape transformed case can effectively perform inter prediction through sample motion vectors. This can eliminate or reduce the amount of data for the residual signal for the current block and improve the overall coding efficiency.
  • FIG. 1 is a block diagram schematically illustrating a video encoding apparatus according to an embodiment of the present invention.
  • FIG. 2 is a block diagram schematically illustrating a video decoding apparatus according to an embodiment of the present invention.
  • 3 exemplarily shows how a prediction block is generated in inter prediction using a translational motion model.
  • FIG. 4 exemplarily illustrates a prediction block generated in inter prediction using an affine motion model.
  • FIG. 5 exemplarily illustrates a state in which a prediction block is generated and a motion vector in inter prediction using an affine motion model.
  • FIG. 6 exemplarily shows CPs of a PU partitioned from a CU based on partitioning type 2N ⁇ 2N.
  • FIG. 10 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type 2N ⁇ 2N is applied.
  • 11 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type 2N ⁇ N is applied.
  • FIG. 12 exemplarily shows a configuration configured by limiting two prediction candidates of CPs of a PU to which a partitioning type 2N ⁇ N is applied.
  • FIG. 13 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type Nx2N is applied.
  • FIG. 16 exemplarily shows a configuration configured by limiting two prediction candidates of CPs of asymmetric PUs.
  • FIG. 17 exemplarily illustrates a PU including a CP for which motion information coding is required and a CP not required.
  • FIG. 18 exemplarily illustrates a PU including CPs for which motion information coding is not required.
  • FIG. 19 schematically shows a video encoding method by an encoding device according to the present invention.
  • FIG. 20 schematically illustrates a video decoding method by a decoding apparatus according to the present invention.
  • each of the components in the drawings described in the present invention are shown independently for the convenience of description of the different characteristic functions in the video encoding apparatus / decoding apparatus, each component is a separate hardware or separate software It does not mean that it is implemented.
  • two or more of each configuration may be combined to form one configuration, or one configuration may be divided into a plurality of configurations.
  • Embodiments in which each configuration is integrated and / or separated are also included in the present invention without departing from the spirit of the present invention.
  • FIG. 1 is a block diagram schematically illustrating a video encoding apparatus according to an embodiment of the present invention.
  • the encoding apparatus 100 may include a picture divider 105, a predictor 110, a transformer 115, a quantizer 120, a reordering unit 125, an entropy encoding unit 130, An inverse quantization unit 135, an inverse transform unit 140, a filter unit 145, and a memory 150 are provided.
  • the picture dividing unit 105 may divide the input picture into at least one processing unit block.
  • the block as the processing unit may be a prediction unit (PU), a transform unit (TU), or a coding unit (CU).
  • a picture may be composed of a plurality of coding tree units (CTUs), and each CTU may be split into CUs in a quad-tree structure.
  • a CU may be divided into quad tree structures with CUs of a lower depth.
  • PU and TU may be obtained from a CU.
  • a PU may be partitioned from a CU into a symmetrical or asymmetrical square structure.
  • the TU may also be divided into quad tree structures from the CU.
  • the CTU may correspond to a coding tree block (CTB), the CU may correspond to a coding block (CB), the PU may correspond to a prediction block (PB), and the TU may correspond to a transform block (TB).
  • CTB coding tree block
  • the predictor 110 includes an inter predictor for performing inter prediction and an intra predictor for performing intra prediction, as described below.
  • the prediction unit 110 performs prediction on the processing unit of the picture in the picture division unit 105 to generate a prediction block including a prediction sample (or a prediction sample array).
  • the processing unit of the picture in the prediction unit 110 may be a CU, a TU, or a PU.
  • the prediction unit 110 may determine whether the prediction performed on the processing unit is inter prediction or intra prediction, and determine specific contents (eg, prediction mode, etc.) of each prediction method.
  • the processing unit in which the prediction is performed and the processing unit in which the details of the prediction method and the prediction method are determined may be different.
  • the method of prediction and the prediction mode may be determined in units of PUs, and the prediction may be performed in units of TUs.
  • a prediction block may be generated by performing prediction based on information of at least one picture of a previous picture and / or a subsequent picture of the current picture.
  • a prediction block may be generated by performing prediction based on pixel information in a current picture.
  • a skip mode, a merge mode, an advanced motion vector prediction (AMVP), and the like can be used.
  • a reference picture may be selected for a PU and a reference block corresponding to the PU may be selected.
  • the reference block may be selected in units of integer pixels (or samples) or fractional pixels (or samples).
  • a predictive block is generated in which a residual signal with the PU is minimized and the size of the motion vector is also minimized.
  • a pixel, a pel, and a sample may be mixed with each other.
  • the prediction block may be generated in integer pixel units, or may be generated in sub-pixel units such as 1/2 pixel unit or 1/4 pixel unit.
  • the motion vector may also be expressed in units of integer pixels or less.
  • Information such as an index of a reference picture selected through inter prediction, a motion vector difference (MVD), a motion vector predictor (MVD), and a residual signal may be entropy encoded and transmitted to a decoding apparatus.
  • the prediction block may be a reconstruction block, the residual may not be generated, transformed, quantized, or transmitted.
  • a prediction mode When performing intra prediction, a prediction mode may be determined in units of PUs, and prediction may be performed in units of PUs. In addition, a prediction mode may be determined in units of PUs, and intra prediction may be performed in units of TUs.
  • the prediction mode may have, for example, 33 directional prediction modes and at least two non-directional modes.
  • the non-directional mode may include a DC prediction mode and a planner mode (Planar mode).
  • a prediction block may be generated after applying a filter to a reference sample.
  • whether to apply the filter to the reference sample may be determined according to the intra prediction mode and / or the size of the current block.
  • the residual value (the residual block or the residual signal) between the generated prediction block and the original block is input to the converter 115.
  • the prediction mode information, the motion vector information, etc. used for the prediction are encoded by the entropy encoding unit 130 together with the residual value and transmitted to the decoding apparatus.
  • the transform unit 115 performs transform on the residual block in units of transform blocks and generates transform coefficients.
  • the transform block is a rectangular block of samples to which the same transform is applied.
  • the transform block can be a transform unit (TU) and can have a quad tree structure.
  • the transformer 115 may perform the transformation according to the prediction mode applied to the residual block and the size of the block.
  • the residual block is transformed using a discrete sine transform (DST), otherwise the residual block is transformed into a DCT (Discrete). Can be transformed using Cosine Transform.
  • DST discrete sine transform
  • DCT Discrete
  • the transform unit 115 may generate a transform block of transform coefficients by the transform.
  • the quantization unit 120 may generate quantized transform coefficients by quantizing the residual values transformed by the transform unit 115, that is, the transform coefficients.
  • the value calculated by the quantization unit 120 is provided to the inverse quantization unit 135 and the reordering unit 125.
  • the reordering unit 125 rearranges the quantized transform coefficients provided from the quantization unit 120. By rearranging the quantized transform coefficients, the encoding efficiency of the entropy encoding unit 130 may be increased.
  • the reordering unit 125 may rearrange the quantized transform coefficients in the form of a 2D block into a 1D vector form through a coefficient scanning method.
  • the entropy encoding unit 130 entropy-codes a symbol according to a probability distribution based on the quantized transform values rearranged by the reordering unit 125 or the encoding parameter value calculated in the coding process, thereby performing a bitstream. You can output The entropy encoding method receives a symbol having various values and expresses it as a decodable column while removing statistical redundancy.
  • the symbol means a syntax element, a coding parameter, a value of a residual signal, etc., to be encoded / decoded.
  • An encoding parameter is a parameter necessary for encoding and decoding, and may include information that may be inferred in the encoding or decoding process as well as information encoded by an encoding device and transmitted to the decoding device, such as a syntax element. It means the information you need when you do.
  • the encoding parameter may be, for example, a value such as an intra / inter prediction mode, a moving / motion vector, a reference image index, a coding block pattern, a residual signal presence, a transform coefficient, a quantized transform coefficient, a quantization parameter, a block size, block partitioning information, or the like. May include statistics.
  • the residual signal may mean a difference between the original signal and the prediction signal, and a signal in which the difference between the original signal and the prediction signal is transformed or a signal in which the difference between the original signal and the prediction signal is converted and quantized It may mean.
  • the residual signal may be referred to as a residual block in the block unit, and the residual sample in the sample unit.
  • Encoding methods such as exponential golomb, context-adaptive variable length coding (CAVLC), and context-adaptive binary arithmetic coding (CABAC) may be used for entropy encoding.
  • the entropy encoding unit 130 may store a table for performing entropy encoding, such as a variable length coding (VLC) table, and the entropy encoding unit 130 may store the variable length coding. Entropy encoding can be performed using the (VLC) table.
  • the entropy encoding unit 130 derives the binarization method of the target symbol and the probability model of the target symbol / bin, and then uses the derived binarization method or the probability model to entropy. You can also perform encoding.
  • the entropy encoding unit 130 may apply a constant change to a parameter set or syntax to be transmitted.
  • the inverse quantizer 135 inversely quantizes the quantized values (quantized transform coefficients) in the quantizer 120, and the inverse transformer 140 inversely transforms the inverse quantized values in the inverse quantizer 135.
  • the residual value (or the residual sample or the residual sample array) generated by the inverse quantizer 135 and the inverse transform unit 140 and the prediction block predicted by the predictor 110 are added together to reconstruct the sample (or the reconstructed sample array).
  • a reconstructed block including a may be generated.
  • a reconstructed block is generated by adding a residual block and a prediction block through an adder.
  • the adder may be viewed as a separate unit (restore block generation unit) for generating a reconstruction block.
  • the filter unit 145 may apply a deblocking filter, an adaptive loop filter (ALF), and a sample adaptive offset (SAO) to the reconstructed picture.
  • ALF adaptive loop filter
  • SAO sample adaptive offset
  • the deblocking filter may remove distortion generated at the boundary between blocks in the reconstructed picture.
  • the adaptive loop filter may perform filtering based on a value obtained by comparing the reconstructed image with the original image after the block is filtered through the deblocking filter. ALF may be performed only when high efficiency is applied.
  • the SAO restores the offset difference from the original image on a pixel-by-pixel basis for the residual block to which the deblocking filter is applied, and is applied in the form of a band offset and an edge offset.
  • the memory 150 may store the reconstructed block or the picture calculated by the filter unit 145.
  • the reconstructed block or picture stored in the memory 150 may be provided to the predictor 110 that performs inter prediction.
  • the video decoding apparatus 200 includes an entropy decoding unit 210, a reordering unit 215, an inverse quantization unit 220, an inverse transform unit 225, a prediction unit 230, and a filter unit 235.
  • Memory 240 may be included.
  • the input bitstream may be decoded according to a procedure in which image information is processed in the video encoding apparatus.
  • the entropy decoding unit 210 may entropy decode the input bitstream according to a probability distribution to generate symbols including symbols in the form of quantized coefficients.
  • the entropy decoding method is a method of generating each symbol by receiving a binary string.
  • the entropy decoding method is similar to the entropy encoding method described above.
  • VLC variable length coding
  • 'VLC' variable length coding
  • CABAC CABAC
  • the CABAC entropy decoding method receives a bin corresponding to each syntax element in a bitstream, and decodes syntax element information and decoding information of neighboring and decoding target blocks or information of symbols / bins decoded in a previous step.
  • the context model may be determined using the context model, the probability of occurrence of a bin may be predicted according to the determined context model, and arithmetic decoding of the bin may be performed to generate a symbol corresponding to the value of each syntax element. have.
  • the CABAC entropy decoding method may update the context model by using the information of the decoded symbol / bin for the context model of the next symbol / bean after determining the context model.
  • Information for generating the prediction block among the information decoded by the entropy decoding unit 210 is provided to the predictor 230, and a residual value where entropy decoding is performed by the entropy decoding unit 210, that is, a quantized transform coefficient It may be input to the reordering unit 215.
  • the reordering unit 215 may reorder the information of the bitstream entropy decoded by the entropy decoding unit 210, that is, the quantized transform coefficients, based on the reordering method in the encoding apparatus.
  • the reordering unit 215 may reorder the coefficients expressed in the form of a one-dimensional vector by restoring the coefficients in the form of a two-dimensional block.
  • the reordering unit 215 scans the coefficients based on the prediction mode applied to the current block (transform block) and the size of the transform block to generate an array of coefficients (quantized transform coefficients) in the form of a two-dimensional block. Can be.
  • the inverse quantization unit 220 may perform inverse quantization based on the quantization parameter provided by the encoding apparatus and the coefficient values of the rearranged block.
  • the inverse transform unit 225 may perform inverse DCT and / or inverse DST on the DCT and the DST performed by the transform unit of the encoding apparatus with respect to the quantization result performed by the video encoding apparatus.
  • the inverse transformation may be performed based on a transmission unit determined by the encoding apparatus or a division unit of an image.
  • the DCT and / or DST in the encoding unit of the encoding apparatus may be selectively performed according to a plurality of pieces of information, such as a prediction method, a size and a prediction direction of the current block, and the inverse transform unit 225 of the decoding apparatus is configured in the transformation unit of the encoding apparatus.
  • Inverse transformation may be performed based on the performed transformation information.
  • the prediction unit 230 may include prediction samples (or prediction sample arrays) based on prediction block generation related information provided by the entropy decoding unit 210 and previously decoded block and / or picture information provided by the memory 240.
  • a prediction block can be generated.
  • intra prediction for generating a prediction block based on pixel information in the current picture may be performed.
  • inter prediction on the current PU may be performed based on information included in at least one of a previous picture or a subsequent picture of the current picture.
  • motion information required for inter prediction of the current PU provided by the video encoding apparatus for example, a motion vector, a reference picture index, and the like, may be derived by checking a skip flag, a merge flag, and the like received from the encoding apparatus.
  • a prediction block may be generated such that a residual signal with a current block is minimized and a motion vector size is also minimized.
  • the motion information derivation scheme may vary depending on the prediction mode of the current block.
  • Prediction modes applied for inter prediction may include an advanced motion vector prediction (AMVP) mode, a merge mode, and the like.
  • AMVP advanced motion vector prediction
  • the encoding apparatus and the decoding apparatus may generate a merge candidate list by using the motion vector of the reconstructed spatial neighboring block and / or the motion vector corresponding to the Col block, which is a temporal neighboring block.
  • the motion vector of the candidate block selected from the merge candidate list is used as the motion vector of the current block.
  • the encoding apparatus may transmit, to the decoding apparatus, a merge index indicating a candidate block having an optimal motion vector selected from candidate blocks included in the merge candidate list. In this case, the decoding apparatus may derive the motion vector of the current block by using the merge index.
  • the encoding device and the decoding device use a motion vector corresponding to a motion vector of a reconstructed spatial neighboring block and / or a Col block, which is a temporal neighboring block, and a motion vector.
  • a predictor candidate list may be generated. That is, the motion vector of the reconstructed spatial neighboring block and / or the Col vector, which is a temporal neighboring block, may be used as a motion vector candidate.
  • the encoding apparatus may transmit the predicted motion vector index indicating the optimal motion vector selected from the motion vector candidates included in the list to the decoding apparatus. In this case, the decoding apparatus may select the predicted motion vector of the current block from the motion vector candidates included in the motion vector candidate list using the motion vector index.
  • the encoding apparatus may obtain a motion vector difference MVD between the motion vector MV of the current block and the motion vector predictor MVP, and may encode the same and transmit the encoded motion vector to the decoding device. That is, MVD may be obtained by subtracting MVP from MV of the current block.
  • the decoding apparatus may decode the received motion vector difference and derive the motion vector of the current block through the addition of the decoded motion vector difference and the motion vector predictor.
  • the encoding apparatus may also transmit a reference picture index or the like indicating the reference picture to the decoding apparatus.
  • the prediction unit 230 of the decoding apparatus may predict the motion vector of the current block using the motion information of the neighboring block, and may derive the motion vector for the current block using the residual received from the encoding apparatus.
  • the decoding apparatus may generate a prediction sample (or a prediction sample array) for the current block based on the derived motion vector and the reference picture index information received from the encoding apparatus.
  • the decoding apparatus may generate a reconstructed sample (or reconstructed sample array) by adding a predictive sample (or a predictive sample array) and a residual sample (residual sample array) obtained from transform coefficients transmitted from the encoding apparatus. Based on this, a reconstruction block and a reconstruction picture may be generated.
  • the motion information of the reconstructed neighboring block and / or the motion information of the call block may be used to derive the motion information of the current block.
  • the encoding apparatus does not transmit syntax information such as residual to the decoding apparatus other than information indicating which block motion information to use as the motion information of the current block.
  • the reconstruction block may be generated using the prediction block generated by the predictor 230 and the residual block provided by the inverse transform unit 225.
  • the reconstructed block is generated by combining the prediction block and the residual block in the adder.
  • the adder may be viewed as a separate unit (restore block generation unit) for generating a reconstruction block.
  • the reconstruction block includes a reconstruction sample (or reconstruction sample array) as described above
  • the prediction block includes a prediction sample (or a prediction sample array)
  • the residual block is a residual sample (or a residual sample). Array).
  • a reconstructed sample (or reconstructed sample array) may be expressed as the sum of the corresponding predictive sample (or predictive sample array) and the residual sample (residual sample array).
  • the residual is not transmitted for the block to which the skip mode is applied, and the prediction block may be a reconstruction block.
  • the reconstructed block and / or picture may be provided to the filter unit 235.
  • the filter unit 235 may apply deblocking filtering, sample adaptive offset (SAO), and / or ALF to the reconstructed block and / or picture.
  • SAO sample adaptive offset
  • the memory 240 may store the reconstructed picture or block to use as a reference picture or reference block and provide the reconstructed picture to the output unit.
  • Components directly related to the decoding of an image for example, an entropy decoding unit 210, a reordering unit 215, an inverse quantization unit 220, an inverse transform unit 225, a prediction unit 230, and a filter unit ( 235) and the like may be distinguished from other components by a decoder or a decoder.
  • the decoding apparatus 200 may further include a parsing unit (not shown) for parsing information related to the encoded image included in the bitstream.
  • the parsing unit may include the entropy decoding unit 210 or may be included in the entropy decoding unit 210. Such a parser may also be implemented as one component of the decoder.
  • the inter prediction on the current block may be performed in consideration of the movement of the target object or the image between the pictures.
  • the existing inter prediction method was performed based on a method (translational motion model) that compensates for translational motion.
  • the translational motion model may be referred to as a block matching method by performing inter prediction by deriving a reference block matching the current block based on one motion vector. That is, in the method applied to the existing inter prediction, the translational motion model, all samples in the prediction unit (PU) have the same motion information.
  • 3 exemplarily shows how a prediction block is generated in inter prediction using a translational motion model.
  • prediction and compensation are performed in a limited form.
  • prediction is performed in a reference picture using a motion vector MV x in the x-axis direction and a motion vector MV y in the y-axis direction as motion parameters for one motion vector in PU units.
  • An area of the same shape and size as the block is designated as a predictive reference block, and samples within the reference block are used as predictive samples for the predictive block.
  • prediction efficiency is inferior to deformation such as enlargement, reduction, and rotation of an image.
  • a process in which the same motion information is transmitted and derived in a conventional PU unit may be modified so that samples in the PU may have different motion information.
  • the prediction model according to the present invention may be referred to as a 2D affine transform method or an affine motion model. Inter prediction using the affine motion model may be as shown in FIG. 4.
  • the current block may correspond to the PU.
  • x and y represent x and y coordinates of respective samples in the current block, respectively.
  • x 'and y' represent x-coordinates and y-coordinates of the corresponding samples in the reference picture corresponding to x and y, respectively.
  • the region including the samples of the sample position indicated by (x ', y') may be called a reference block or a reference region.
  • the reference block may correspond to an area including an image modified according to the size transformation such as the above-described rotation deformation, shape deformation, zoom-in or zoom-out with respect to the image in the current block. Therefore, the size and shape of the reference block may be different from the size and shape of the current block.
  • a specific method of deriving a different or unique motion vector for each sample in the current block shown in FIG. 4 can be seen through FIG. 5.
  • FIG. 5 exemplarily illustrates a state in which a prediction block is generated and a motion vector in inter prediction using an affine motion model.
  • a formula for deriving a motion vector when the affine motion model is applied may be seen.
  • the motion vector may be derived based on the following equation.
  • v x is the x component of the sample unit motion vector of the (x, y) coordinate sample in the current block
  • v y is the y component of the sample unit motion vector of the (x, y) coordinate sample in the current block. That is, (v x , v y ) becomes the sample unit motion vector for the (x, y) coordinate sample.
  • a, b, c, d, e and f are equations for deriving a sample unit motion vector (motion information) of (x, y) coordinates from control points (CP) of the current block.
  • the CP may be expressed as a control pixel.
  • the parameters may be derived from motion information of CPs of each PU transmitted in PU units.
  • the equation for deriving the sample unit motion vector derived from the motion information of the CPs described above may be applied to each PU sample, and the position of the prediction sample in the reference image according to the relative positions of the x and y axes of each PU sample. Can be derived.
  • the sample unit motion vector may be derived differently according to the size of the PU, asymmetrical or symmetrical, partition ID, etc. according to a partitioning type applied to a coding unit (CU). Specific embodiments thereof are shown through FIGS. 6 to 16 to be described later.
  • FIG. 6 exemplarily shows CPs of a PU partitioned from a CU based on partitioning type 2N ⁇ 2N.
  • the parameters of the equation for deriving the sample unit motion vector may be derived with different values based on the motion vectors of CPs of the current block.
  • the CP may be three.
  • the CPs may use motion information of CPs of different positions according to the shape of the PU.
  • a method of a PU partitioned from a CU based on a partitioning type 2N ⁇ 2N for an equation for deriving the sample unit motion vector may be seen.
  • the motion vector of the upper left sample in the PU may be referred to as v0.
  • the motion vectors of each CP may be set to v1 and v2 using samples of neighboring blocks adjacent to the PU as CPs.
  • the width and height of the PU is S, and the coordinate of the top-left sample position of the PU is (xp, yp)
  • the coordinate of CP0 among the CPs is (xp, yp)
  • the coordinate of CP1 may be (xp + S, yp)
  • the coordinate of CP2 may be (xp, yp + S).
  • the motion vector of CP0 may be v0
  • the motion vector of CP1 may be v1
  • the motion vector of CP2 may be v2.
  • the sample unit motion vector may be derived using the motion vectors of the CPs.
  • the sample unit motion vector may be derived based on the following equation.
  • v x , v y respectively represent x and y components of the motion vector for the sample of the (x, y) coordinates in the current block
  • v x0 and v y0 are the x of the motion vector v0 for the CP0, respectively.
  • Component and y component, and v x1 and v y1 represent the x component and the y component of the motion vector v1 for the CP1, respectively
  • v x2 and v y2 represent the x and y components of the motion vector v2 for the CP2, respectively.
  • each of the samples in the PU partitioned from the CU based on the partitioning type 2N ⁇ 2N may be derived based on the relative position in the PU.
  • FIG. 7 exemplarily shows CPs of PUs partitioned from a CU based on partitioning type N ⁇ 2N.
  • a process of deriving motion vectors of PUs partitioned from a CU based on partitioning type N ⁇ 2N can be seen.
  • an equation for deriving a sample unit motion vector in the PU may be derived.
  • a width value suitable for the shape of the PU may be used.
  • Three CPs may be derived to derive the sample unit motion vector, and the positions of the CPs may be adjusted as shown in FIG. 7.
  • the coordinate of CP0 among the CPs is (xp yp)
  • the coordinate of CP1 is (xp + S / 2, yp)
  • the coordinate of CP2 can be (xp, yp + S).
  • the sample unit motion vector may be derived based on the following equation.
  • Equation 3 shows an equation for deriving a sample unit motion vector considering that the width of the PU is S / 2. According to the equation for deriving the sample unit motion vector as shown in Equation 3, each of the samples in the PU partitioned from the CU based on the partitioning type Nx2N may be derived based on the relative position in the PU.
  • FIG. 8 exemplarily shows CPs of PUs partitioned from a CU based on partitioning type 2N ⁇ N.
  • three CPs may be derived to derive the sample unit motion vector, and the heights are adjusted to S / 2 according to the shape of the PU shown in FIG. 8 by adjusting the positions of the CPs as shown in FIG. 8. Can be.
  • the width and height of the PU are S and S / 2, respectively, and the coordinate of the top-left sample position of the PU is (xp, yp), the coordinate of CP0 among the CPs is (xp yp), the coordinates of CP1 may be (xp + S, yp), and the coordinates of CP2 may be (xp, yp + S / 2).
  • the sample unit motion vector may be derived based on the following equation.
  • Equation 4 shows an equation for deriving a sample unit motion vector considering that the height of the PU is S / 2. According to the equation for deriving the sample unit motion vector as shown in Equation 4, each of the samples in the PU partitioned from the CU based on the partitioning type 2N ⁇ N may be derived based on the relative position in the PU.
  • the asymmetric PUs may be PUs partitioned from a CU based on partition type nLx2N, nRx2N, 2NxnU or 2NxnD.
  • the width and height of the asymmetric PUs may be referred to as W and H, respectively.
  • the equation for deriving the sample unit motion vector in the PU may be derived as follows.
  • Three CPs for each PU may be derived to derive the sample unit motion vector, and the coordinates of the CPs may be adjusted based on the width and height according to the shape of the PU as shown in FIG. 9. That is, when the width and height of the PU are W and H, and the coordinate of the top-left sample position of each PU is (xp, yp), the coordinate of CP0 among the CPs is (xp, yp).
  • the coordinate of CP1 may be set to (xp + W, yp), and the coordinate of CP2 may be set to (xp, yp + H).
  • the sample unit motion vector in the PU may be derived based on the following equation.
  • Equation 5 shows equations for deriving a sample unit motion vector in consideration of width and height of asymmetric PUs.
  • motion information prediction candidates for at least one CP are determined based on motion information of neighboring blocks or neighboring samples of a PU in order to reduce motion information of CPs transmitted, for example, three CPs. Can be selected.
  • the motion information prediction candidate may be called a motion information candidate or a motion vector candidate.
  • FIG. 10 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type 2N ⁇ 2N is applied.
  • a method of configuring motion information prediction candidates of the CPs may be seen.
  • prediction candidates for the motion information of the three CPs motion information of neighboring blocks (or neighboring samples) adjacent to each CP may be used.
  • motion information of neighboring samples adjacent to each CP may be used as the motion information prediction candidate of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of neighboring blocks (or neighboring samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 is (xp, yp-1)
  • the motion vector of the sample of coordinates, A2 may represent the motion vector of the sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + S, yp-1) coordinates
  • B1 is (xp + S-1, yp-1) may represent a motion vector of a sample of coordinates.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • C0 and C1 are two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) already decoded, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • C0 is a motion vector of a sample of (xp-1, yp + S) coordinates
  • C1 is (xp- 1, yp + S-1) may represent a motion vector of a sample of coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • the motion information of the prediction candidate position may be derived based on the motion vector of the sample of the corresponding position when the affine motion model is applied to the neighboring block including the sample of the position, and the surrounding including the sample of the position.
  • the block When the affine motion model is not applied to the block, the block may be derived based on the motion vector of the neighboring block including the sample of the corresponding position.
  • FIGS. 10 to 16 the motion vector of the sample of the (xp-1, yp-1) coordinates is based on the motion vector.
  • the number of prediction candidates for each CP in the figure may be for distinguishing the prediction candidates, or may indicate the priority of the prediction candidates.
  • A0 may have a higher priority A1 and A1 may have a higher priority than A2.
  • A2 may have a higher priority than A2.
  • FIG. 11 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type 2N ⁇ N is applied.
  • a method of configuring motion information prediction candidates of the CPs may be seen.
  • the prediction candidate for the motion vector of the CPs may be configured in consideration of the shape of the PU that is not square, and the prediction candidate for the motion vector of the CPs may be configured in consideration of the decoding processing order of the PU. can do.
  • motion information of neighboring blocks (or neighboring samples) adjacent to each CP may be used as prediction candidates for the motion information of the three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a motion information prediction candidate of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of neighboring blocks (or neighboring samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • the A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one of the motion vectors A0, A1, and A2 may be used as the prediction candidate for v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the width and height of the PU are S and S / 2, respectively, and the coordinates of the upper left sample position of the PU are (xp, yp)
  • the B0 is a motion vector of a sample of (xp + S, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + S-1, yp-1) coordinates.
  • at least one motion vector of B0 and B1 may be used as a prediction candidate of v1.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are S and S / 2, respectively, and the coordinates of the upper left sample position of the PU are (xp, yp)
  • the C0 is the motion of the sample of (xp-1, yp + S / 2) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is ( The motion vector of the sample of xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • at least one of the motion vectors A3, A4, and A5 may be further used as a prediction candidate of v0.
  • motion information of neighboring blocks (or neighboring samples) already decoded may be further included as a prediction candidate.
  • at least one of motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + S, yc) coordinates
  • B3 is ( A motion vector of a sample of xc + S, yc-1) coordinates
  • B4 may represent a motion vector of a sample of (xc + S-1, yc-1) coordinates.
  • at least one motion vector of the B2, the B3, and the B4 may be further used as a prediction candidate of the v1.
  • each of the PUs included in the CU may use the same prediction candidates among the PUs in the CU as prediction candidates for motion vectors of the CPs regardless of the partition ID.
  • the motion vector v0 of CP0 of each PU three pieces of motion information of the motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that are already decoded may be used as a prediction candidate,
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A1 is (xc, yc-1)
  • the motion vector of the sample of coordinates, A2 may represent the motion vector of the sample of (xc-1, yc) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information are B0 and B1, respectively. It can be represented as.
  • B0 is a motion vector of a sample of (xc + S, yc-1) coordinates
  • B1 is (xc + S-1, yc-1) may represent a motion vector of the sample.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • two pieces of motion information of the already decoded neighboring blocks (or neighboring samples) may be used as prediction candidates, and the two pieces of motion information may be C0 and C1, respectively. It can be represented as. If the width and height of the CU is S and the coordinate of the upper left sample position of the CU is (xc, yc), C0 is a motion vector of a sample of (xc-1, yc + S) coordinates, and C1 is (xc ⁇ 1, yc + S-1) may represent a motion vector of a sample of coordinates. In this case, at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • a method of configuring a prediction candidate for motion vectors of CPs of a PU to which the 2N ⁇ N partitioning type is applied may be configured by limiting the number of prediction candidates to a predetermined number.
  • FIG. 12 exemplarily shows a configuration configured by limiting two prediction candidates of CPs of a PU to which a partitioning type 2N ⁇ N is applied.
  • a list including two samples as prediction candidates for each CP of the PU can be seen.
  • the motion vector v0 of CP0 two pieces of motion information of the motion information of the already decoded neighboring block (or neighboring sample) can be used as a prediction candidate, and the two pieces of motion information are A0 and A1, respectively. Can be represented.
  • the A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • A0 and A1 may be used as prediction candidates for the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the width and height of the PU are S and S / 2, respectively, and the coordinates of the upper left sample position of the PU are (xp, yp)
  • the B0 is a motion vector of a sample of (xp + S, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + S-1, yp-1) coordinates.
  • the B0 and the B1 may be used as prediction candidates of the v1.
  • two pieces of motion information of motion information of neighboring blocks (or neighboring samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the C0 is the motion of the sample of (xp-1, yp + S / 2) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates. In this case, C0 and C1 may be used as prediction candidates for v2.
  • FIG. 13 exemplarily shows a motion information prediction candidate of CPs of a PU to which a partitioning type Nx2N is applied.
  • a method of configuring motion information prediction candidates of the CPs may be seen.
  • the prediction candidate for the motion vector of the CPs may be configured in consideration of the shape of the PU being not square, and the prediction candidate for the motion vector of the CPs may be configured in consideration of the decoding processing order of the PU. can do.
  • coded motion information of neighboring blocks (or neighboring samples) adjacent to each CP may be used as prediction candidates for motion information of three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a motion information prediction candidate of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • the A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • the B0 is a sample movement of (xp + S / 2, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates. In this case, at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • the motion vector B2 of the sample of (xp + S / 2 + 1, yp-1) coordinates and the sample of the coordinate of (xp + S / 2 + 2, yp-1) coordinates may be further included as a prediction candidate of v1.
  • two pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • C0 is a motion vector of a sample of (xp-1, yp + S) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the neighboring block that is, the neighboring block or the neighboring sample of the current CU
  • at least one of motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 Is a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • at least one of the motion vectors A3, A4, and A5 may be further used as a prediction candidate of v0.
  • the motion information of the neighboring block (or neighboring sample) already decoded may be further included as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + S) coordinates
  • C3 is a motion vector of a sample of (xc, yc + S) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + S-1) coordinates.
  • at least one motion vector of the C2, the C3, and the C4 may be further used as a prediction candidate of the v2.
  • each of the PUs included in the CU may use the same prediction candidates among the PUs in the CU as prediction candidates for motion vectors of the CPs regardless of the partition ID.
  • the motion vector v0 of CP0 of each PU three pieces of motion information of the motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) already decoded may be used as the prediction candidate.
  • Three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A1 is (xc, yc-1)
  • the motion vector of the sample of coordinates, A2 may represent the motion vector of the sample of (xc-1, yc) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information are B0 and B1, respectively. It can be represented as.
  • B0 is a motion vector of a sample of (xc + S, yc-1) coordinates
  • B1 is (xc + S-1, yc-1) may represent a motion vector of the sample.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • two pieces of motion information of the already decoded neighboring blocks (or neighboring samples) may be used as prediction candidates, and the two pieces of motion information may be C0 and C1, respectively. It can be represented as. If the width and height of the CU is S and the coordinate of the upper left sample position of the CU is (xc, yc), C0 is a motion vector of a sample of (xc-1, yc + S) coordinates, and C1 is (xc ⁇ 1, yc + S-1) may represent a motion vector of a sample of coordinates. In this case, at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • a method of configuring a prediction candidate for motion vectors of CPs of a PU to which the Nx2N partitioning type is applied may be configured by limiting the number of prediction candidates to a predetermined number.
  • FIG. 14 exemplarily shows a configuration in which the prediction candidates of CPs of a PU to which a partitioning type Nx2N is applied are limited to two.
  • a list including two samples as prediction candidates for each CP of the PU can be seen.
  • the motion vector v0 of CP0 two pieces of motion information of the motion information of the already decoded neighboring block (or neighboring sample) can be used as a prediction candidate, and the two pieces of motion information are A0 and A1, respectively. Can be represented.
  • the A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • A0 and A1 may be used as prediction candidates for the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • the B0 is a sample movement of (xp + S / 2, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates. In this case, the B0 and the B1 may be used as prediction candidates of the v1.
  • two pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • C0 is a motion vector of a sample of (xp-1, yp + S) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates.
  • C0 and C1 may be used as prediction candidates for v2.
  • the asymmetric PUs may be PUs partitioned from a CU based on partition type nLx2N, nRx2N, 2NxnU or 2NxnD.
  • a method of configuring motion information prediction candidates of CPs of a PU to which a partitioning type nLx2N is applied may be seen.
  • a prediction candidate for a motion vector of CPs may be configured in consideration of a shape of a PU that is not square, and for a motion vector of CPs in consideration of a decoding processing order of a PU. Prediction candidates can be constructed.
  • coded motion information of neighboring blocks (or neighboring samples) adjacent to each CP may be used as a prediction candidate for motion information of three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a motion information prediction candidate of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of neighboring blocks (or neighboring samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • A0 is a motion vector of a sample having (xp-1, yp-1) coordinates
  • A1 is A motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 is It may represent a motion vector of a sample of (xp + W-1, yp-1) coordinates.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • C0 and C1 are two pieces of motion information of motion information of neighboring blocks (or neighboring samples) already decoded, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are W and H, respectively, and the coordinate of the upper left sample position of the PU is (xp, yp)
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 is It may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the two motion information may be represented as A3 and A4, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 May represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the motion vector of at least one of A3 and A4 may be further used as a prediction candidate of v0.
  • the motion information of the neighboring block (or neighboring sample) already decoded may be further included as a prediction candidate.
  • at least one of motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as C2 and C3, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 May represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • at least one motion vector of the C2 and the C3 may be further used as the prediction candidate of the v2.
  • a method of configuring a prediction candidate for motion information of CPs of a PU to which a partitioning type nRx2N is applied may be seen.
  • a prediction candidate for a motion vector of the CPs may be configured in consideration of a shape of a PU that is not square, and for a motion vector of the CPs in consideration of a decoding processing order of a PU. Prediction candidates can be constructed.
  • coded motion information of a block adjacent to each CP may be used as a motion information prediction candidate of three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a prediction candidate for the motion information of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • A0 is a motion vector of a sample having (xp-1, yp-1) coordinates
  • A1 is A motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 is It may represent a motion vector of a sample of (xp + W-1, yp-1) coordinates.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • C0 and C1 are two pieces of motion information of motion information of neighboring blocks (or neighboring samples) already decoded, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are W and H, respectively, and the coordinate of the upper left sample position of the PU is (xp, yp)
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 is It may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 Is a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • at least one of the motion vectors A3, A4, and A5 may be further used as a prediction candidate of v0.
  • the motion information of the neighboring block (or neighboring sample) already decoded may be further included as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 is a motion vector of a sample of (xc, yc + H) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • at least one motion vector of the C2, the C3, and the C4 may be further used as a prediction candidate of the v2.
  • a method of configuring motion information prediction candidates of the CPs of a PU to which a partitioning type 2NxnU is applied may be seen.
  • a prediction candidate for the motion vector of the CPs may be configured in consideration of the shape of the PU that is not square, and for the motion vector of the CPs in consideration of the decoding processing order of the PU. Prediction candidates can be constructed.
  • coded motion information of a block adjacent to each CP may be used as a motion information prediction candidate of the three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a prediction candidate for the motion information of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • A0 is a motion vector of a sample having (xp-1, yp-1) coordinates
  • A1 is A motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 is It may represent a motion vector of a sample of (xp + W-1, yp-1) coordinates.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • C0 and C1 are two pieces of motion information of motion information of neighboring blocks (or neighboring samples) already decoded, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are W and H, respectively, and the coordinate of the upper left sample position of the PU is (xp, yp)
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 is It may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the two motion information may be represented as A3 and A4, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 May represent a motion vector of a sample of (xc, yc-1) coordinates.
  • the motion vector of at least one of A3 and A4 may be further used as a prediction candidate of v0.
  • the motion information of the neighboring block (or neighboring sample) already decoded may be further included as a prediction candidate.
  • at least one of motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as B2 and B3, respectively.
  • B2 is a motion vector of a sample of (xc + S, yc-1) coordinates
  • B3 May represent a motion vector of a sample of (xc + S-1, yc-1) coordinates.
  • at least one motion vector of the B2 and the B3 may be further used as the prediction candidate of the v1.
  • a method of configuring motion information prediction candidates of the CPs of a PU to which a partitioning type 2NxnD is applied may be seen.
  • a prediction candidate for a motion vector of the CPs may be configured in consideration of a shape of a PU that is not square. Prediction candidates can be constructed.
  • coded motion information of neighboring blocks (or neighboring samples) adjacent to each CP may be used as a prediction candidate for the motion information of the three CPs.
  • motion information of neighboring samples adjacent to each CP may be used as a motion information prediction candidate of each CP.
  • the motion vector v0 of CP0 three pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the three pieces of motion information are A0, A1, It can be represented by A2.
  • A0 is a motion vector of a sample having (xp-1, yp-1) coordinates
  • A1 is A motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 is It may represent a motion vector of a sample of (xp + W-1, yp-1) coordinates.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • C0 and C1 are two pieces of motion information of motion information of neighboring blocks (or neighboring samples) already decoded, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are W and H, respectively, and the coordinate of the upper left sample position of the PU is (xp, yp)
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 is It may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • samples of neighboring blocks of the current CU may be further included as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the motion vector v0 of the CP0 may further include motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that is already decoded as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is ( The motion vector of the sample of xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • at least one of the motion vectors A3, A4, and A5 may be further used as a prediction candidate of v0.
  • the motion information of the neighboring block (or neighboring sample) already decoded may be further included as a prediction candidate.
  • at least one of motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + W, yc) coordinates
  • B3 is ( The motion vector of the sample of the coordinate of xc + W, yc-1)
  • B4 may represent the motion vector of the sample of the coordinate of (xc + W-1, yc-1).
  • at least one motion vector of the B2, the B3, and the B4 may be further used as a prediction candidate of the v1.
  • Each of the PUs included in the above-described CU of FIG. 15 may use the same prediction candidates between PUs in the CU as prediction candidates for motion vectors of CPs regardless of shape and partition ID.
  • the motion vector v0 of CP0 of each PU three pieces of motion information of the motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) that are already decoded may be used as a prediction candidate,
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A1 is A motion vector of the sample of (xc, yc-1) coordinates
  • A2 may represent a motion vector of the sample of (xc-1, yc) coordinates.
  • at least one motion vector among the A0, the A1, and the A2 may be used as a prediction candidate of the v0.
  • two pieces of motion information of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information are B0 and B1, respectively. It can be represented as.
  • B0 is a motion vector of a sample of (xc + W, yc-1) coordinates
  • B1 is (xc + W-1, yc-1) may represent a motion vector of the sample.
  • at least one motion vector of the B0 and the B1 may be used as a prediction candidate of the v1.
  • the motion vector v2 of CP2 of each PU two pieces of motion information of the already decoded neighboring blocks (or neighboring samples) may be used as prediction candidates, and the two pieces of motion information may be C0 and C1, respectively. It can be represented as.
  • C0 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C1 is (xc ⁇ 1, yc + H-1) may represent the motion vector of the sample.
  • at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • the number of prediction candidates may be limited to a predetermined number.
  • FIG. 16 exemplarily shows a configuration configured by limiting two prediction candidates of CPs of asymmetric PUs.
  • the asymmetric PUs may be PUs partitioned from a CU based on partition type nLx2N, nRx2N, 2NxnU or 2NxnD.
  • the configuration is limited to two prediction candidates of each CP of each PU.
  • the motion vector v0 of CP0 two pieces of motion information of the motion information of the already decoded neighboring block (or neighboring sample) can be used as a prediction candidate, and the two pieces of motion information are A0 and A1, respectively.
  • A0 is a motion vector of a sample having (xp-1, yp-1) coordinates
  • A1 is It may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • A0 and A1 may be used as prediction candidates for the v0.
  • two pieces of motion information among the pieces of motion information of neighboring blocks (or neighbor samples) already decoded may be used as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 is It may represent a motion vector of a sample of (xp + W-1, yp-1) coordinates.
  • the B0 and the B1 may be used as prediction candidates of the v1.
  • two pieces of motion information of the motion information of the neighboring block (or neighbor samples) already decoded may be used as a prediction candidate, and the two pieces of motion information may be represented by C0 and C1, respectively.
  • the width and height of the PU are W and H, respectively, and the coordinate of the upper left sample position of the PU is (xp, yp)
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 is It may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • C0 and C1 may be used as prediction candidates for v2.
  • the amount of data for motion information can be increased somewhat.
  • a method of reducing the amount of data may be used by using characteristics of the respective CPs located at the boundary of the current PU.
  • the encoding apparatus may not code motion information for the CP of the next PU separately, and the previous decoding process A coding method using only the above-described prediction candidates may be used only for CPs in which motion information does not exist at.
  • Whether the motion information is required for the PU may be determined by checking the decoding process of the motion information of the neighboring block of the current PU internally in the encoding device / decoding device. Therefore, additional syntax information may not be transmitted in determining whether the motion information is a required PU.
  • CPs of the current PU can be seen.
  • the upper left sample of the current PU may be referred to as CP0
  • the upper right adjacent sample of the current PU may be referred to as CP1
  • the lower left adjacent sample of the current PU may be referred to as CP2.
  • the encoding apparatus may code only motion information of the CP1 and transmit it through a bitstream.
  • the encoding apparatus may code the motion information without decoding additional motion information. That is, the decoding apparatus may derive the motion vectors of CPs of the current PU based on the motion vectors derived in the previous decoding process without receiving additional motion information.
  • the motion vector of CP1 of the corresponding block is used as the motion vector of CP0 of the current block. It is available.
  • the motion vector of CP2 of the corresponding block may be used as the motion vector of CP0 of the current block.
  • the motion vector of the lower right neighboring sample of the corresponding block derived based on CPs of the corresponding block may be used as the motion vector of CP0 of the current block.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP2 of the corresponding block may be used as the motion vector of CP1 of the current block.
  • the motion vector of the lower right neighboring sample of the corresponding block derived based on the CPs of the corresponding block is present. It can be used as a motion vector of CP1 of a block.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP1 of the corresponding block may be used as the motion vector of CP2 of the current block.
  • the motion vector of the right lower peripheral sample of the corresponding block derived based on the CPs of the corresponding block is present. It can be used as a motion vector of CP2 of a block.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • FIG. 19 schematically shows a video encoding method by an encoding device according to the present invention.
  • the method disclosed in FIG. 19 may be performed by the encoding apparatus disclosed in FIG. 1.
  • S1900 to S1930 of FIG. 19 may be performed by the prediction unit of the encoding apparatus
  • S1940 may be performed by the entropy encoding unit of the encoding apparatus.
  • the encoding apparatus derives control points (CPs) for the current block (S1900).
  • the encoding apparatus may determine whether to apply the affine motion model of the current block based on the RD cost.
  • the encoding apparatus may derive the CPs to apply the affine motion model.
  • the CP may be three.
  • the encoding apparatus coordinates (0, 0) of the upper left sample position of the current block.
  • three CPs may be derived as CP0 is a sample of (0, 0) coordinates, CP1 is a sample of (S, 0) coordinates, and CP2 is a sample of (0, S) coordinates.
  • the encoding apparatus may determine coordinates of the upper left sample position of the current block (0). , 0), CP0 is a sample of coordinates (0, 0), CP1 is a sample of (S / 2, 0) coordinates, CP2 is a sample of (0, S) coordinates, and three CPs are derived. can do.
  • the encoding apparatus may determine coordinates of the upper left sample position of the current block (0). , 0), CP0 is a sample of coordinates (0, 0), CP1 is a sample of (S, 0) coordinates, CP2 is a sample of (0, S / 2) coordinates, and three CPs are derived. can do.
  • the encoding apparatus is configured to determine the upper left sample position of the current block. Based on coordinates of (0, 0), CP0 is a sample of coordinates (0, 0), CP1 is a sample of (W, 0) coordinates, CP2 is a sample of (0, H) coordinates, and three CPs. Can be derived.
  • the encoding apparatus obtains motion vectors for the CPs (S1910).
  • the encoding apparatus may derive motion vectors for the CPs based on neighboring samples adjacent to the CPs. Samples adjacent to the CPs may be configured as prediction candidates.
  • the encoding apparatus may configure a prediction candidate for the motion vector of the CPs based on the coded motion information of the neighboring block (or sample) adjacent to each CP, and based on the optimal candidate among the configured prediction candidates We can get the motion vector.
  • the prediction candidate may be determined based on a partitioning type, a partition ID and a shape of the current block.
  • the encoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 is ( xp, yp-1)
  • the motion vector of the sample of coordinates, A2 may represent the motion vector of the sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus is based on the neighboring sample group 0 including the sample of the (xp-1, yp-1) coordinates, the sample of the (xp, yp-1) coordinates and the sample of the (xp-1, yp) coordinates.
  • a motion vector v 0 for CP 0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + S, yp-1) coordinates
  • B1 is ( xp + S-1, yp-1) may represent a motion vector of a sample of coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding apparatus obtains a motion vector v1 for CP1 based on the neighboring sample group 1 including the sample of the (xp + S, yp-1) coordinate and the sample of the (xp + S-1, yp-1) coordinate. Can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + S) coordinates
  • C1 is ( xp-1, yp + S-1) may represent a motion vector of a sample of coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • the encoding device may determine a motion vector for CP2 based on the neighboring sample group 2 including at least one of a sample of (xp-1, yp + S) coordinates and a sample of (xp-1, yp + S-1) coordinates.
  • v2 can be derived.
  • the encoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as prediction candidates.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • the width and height of the current block are S and S / 2, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of the (xp-1, yp-1) coordinate.
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus includes a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is the movement of the sample of (xp + S, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1. That is, the encoding device may determine a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + S, yp-1) coordinates and a sample of (xp + S-1, yp-1) coordinates.
  • v1 can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a sample of (xp-1, yp + S / 2) coordinates.
  • the motion vector of C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2. That is, the encoding apparatus CP2 based on the peripheral sample group 2 that includes at least one of a sample of (xp-1, yp + S / 2) coordinates and a sample of (xp-1, yp + S / 2-1) coordinates.
  • the motion vector v2 for.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is The motion vector of the sample of (xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • the encoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of the neighboring block of the current CU as a prediction candidate.
  • the encoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + S, yc) coordinates
  • B3 is A motion vector of a sample of (xc + S, yc-1) coordinates
  • B4 may represent a motion vector of a sample of (xc + S-1, yc-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the B2, the B3, and the B4 as a prediction candidate of the v1.
  • the encoding apparatus includes at least one of a sample of (xc + S, yc) coordinates, a sample of (xc + S, yc-1) coordinates, and a sample of (xc + S-1, yc-1) coordinates in the peripheral sample group1. It may further include one.
  • the encoding apparatus may configure a prediction candidate for a motion vector of CPs of the current block by limiting the number of prediction candidates to a predetermined number.
  • the encoding apparatus may use two pieces of motion information of the motion information of the neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented as A0 and A1, respectively.
  • the width and height of the current block are S and S / 2, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of the (xp-1, yp-1) coordinate.
  • a vector, A1 may represent a motion vector of a sample having a (xp, yp-1) coordinate.
  • the encoding apparatus may use A0 and A1 as prediction candidates for the v0. That is, the encoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the surrounding sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is the movement of the sample of (xp + S, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S-1, yp-1) coordinates.
  • the encoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the encoding apparatus may include a sample of (xp + S, yp-1) coordinates and a sample of (xp + S-1, yp-1) coordinates in the neighboring sample group 1, and the (xp + S, Availability of the sample of the coordinates yp-1) and the sample of the (xp + S-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a sample of (xp-1, yp + S / 2) coordinates.
  • the motion vector of C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates.
  • the encoding apparatus may use C0 and C1 as prediction candidates for the v2.
  • the encoding apparatus may include a sample of (xp-1, yp + S / 2) coordinates and a sample of (xp-1, yp + S / 2-1) coordinates in the neighboring sample group 2, and the (xp Availability of samples of -1, yp + S / 2) coordinates and samples of (xp-1, yp + S / 2-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the encoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as prediction candidates.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of (xp-1, yp-1) coordinates.
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0. That is, the encoding apparatus is based on the neighboring sample group 0 including the sample of the (xp-1, yp-1) coordinates, the sample of the (xp, yp-1) coordinates and the sample of the (xp-1, yp) coordinates.
  • a motion vector v 0 for CP 0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is a sample of (xp + S / 2, yp-1) coordinates.
  • the motion vector of B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • a sample of the motion vector B2 (xp + S / 2 + 2, yp-1) of the sample of the (xp + S / 2 + 1, yp-1) coordinate
  • At least one of the motion vector B3 of may further include a prediction candidate of v1. That is, the encoding apparatus is configured for CP1 based on the peripheral sample group 1 including the sample of the (xp + S / 2, yp-1) coordinate and the sample of the (xp + S / 2-1, yp-1) coordinate.
  • the motion vector v1 can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinate of the upper left sample position of the current block is (xp, yp)
  • the C0 is the movement of the sample of (xp-1, yp + S) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates. In this case, at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • the encoding apparatus obtains a motion vector v2 for CP2 based on the neighboring sample group 2 including the sample of the (xp-1, yp + S) coordinate and the sample of the (xp-1, yp + S-1) coordinate. Can be derived.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the encoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + S) coordinates
  • C3 may represent a motion vector of a sample of (xc, yc + S) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + S-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the C2, the C3, and the C4 as the prediction candidate of the v2.
  • the encoding apparatus includes at least one of samples of (xc-1, yc + S) coordinates, samples of (xc, yc + S) coordinates, and samples of (xc-1, yc + S-1) coordinates in the neighboring sample group 2. It may further include one.
  • the encoding apparatus may configure a prediction candidate for a motion vector of CPs of the current block by limiting the number of prediction candidates to a predetermined number.
  • the encoding apparatus may use two pieces of motion information among the motion information of the neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by A0 and A1, respectively.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of (xp-1, yp-1) coordinates.
  • a vector, A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • the encoding apparatus may use A0 and A1 as prediction candidates for the v0. That is, the encoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the surrounding sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is a sample of (xp + S / 2, yp-1) coordinates.
  • the motion vector of B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates.
  • the encoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the encoding apparatus may include a sample of (xp + S / 2, yp-1) coordinates and a sample of (xp + S / 2-1, yp-1) coordinates in the neighboring sample group 1, and ( Availability of samples of xp + S / 2, yp-1) coordinates and samples of (xp + S / 2-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order. .
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinate of the upper left sample position of the current block is (xp, yp)
  • the C0 is the movement of the sample of (xp-1, yp + S) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates. In this case, C0 and C1 may be used as prediction candidates for v2.
  • the encoding apparatus may include a sample of (xp-1, yp + S) coordinates and a sample of (xp-1, yp + S-1) coordinates in the neighboring sample group 2, and the (xp-1, yp) sample.
  • Availability of the sample of the coordinates + S) and the sample of the (xp-1, yp + S-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the encoding apparatus predicts three pieces of motion information among neighboring blocks (or neighboring samples) Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus includes a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding apparatus obtains a motion vector v1 for CP1 based on the surrounding sample group 1 including the sample of the (xp + W, yp-1) coordinates and the sample of the (xp + W-1, yp-1) coordinates. Can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • the encoding apparatus obtains a motion vector v2 for CP2 based on the peripheral sample group 2 including the sample of the (xp-1, yp + H) coordinate and the sample of the (xp-1, yp + H-1) coordinate. Can be derived.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as A3 and A4, respectively.
  • the A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the encoding apparatus may further use at least one motion vector of the A3 and the A4 as a prediction candidate of the v0. That is, the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as C2 and C3, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 may represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • the encoding apparatus may further use the motion vector of at least one of the C2 and the C3 as a prediction candidate of the v2. That is, the encoding apparatus may further include at least one of a sample of (xc-1, yc + H) coordinates and a sample of (xc-1, yc + H-1) coordinates in the neighboring sample group2.
  • the encoding apparatus predicts motion information of three pieces of motion information of neighboring blocks (or neighboring samples). Can be used as a candidate, the three pieces of motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus includes a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding apparatus obtains a motion vector v1 for CP1 based on the surrounding sample group 1 including the sample of the (xp + W, yp-1) coordinates and the sample of the (xp + W-1, yp-1) coordinates. Can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • the encoding apparatus obtains a motion vector v2 for CP2 based on the peripheral sample group 2 including the sample of the (xp-1, yp + H) coordinate and the sample of the (xp-1, yp + H-1) coordinate. Can be derived.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the encoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 may represent a motion vector of a sample of (xc, yc + H) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the C2, the C3, and the C4 as the prediction candidate of the v2.
  • the encoding apparatus includes at least one of samples of (xc-1, yc + H) coordinates, samples of (xc, yc + H) coordinates, and samples of (xc-1, yc + H-1) coordinates in the neighboring sample group 2. It may further include one.
  • the encoding apparatus predicts motion information of three pieces of motion information of neighboring blocks (or neighboring samples). Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus includes a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding device may generate a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates.
  • v1 can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • the encoding device may generate a motion vector for CP2 based on the neighboring sample group 2 including at least one of a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates.
  • v2 can be derived.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as A3 and A4, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the A3 and the A4 as a prediction candidate of the v0. That is, the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as B2 and B3, respectively.
  • B2 is a motion vector of a sample of (xc + W, yc-1) coordinates
  • B3 may represent a motion vector of a sample of (xc + W-1, yc-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the B2 and the B3 as the prediction candidate of the v1. That is, the encoding apparatus may further include at least one of a sample of (xc + W, yc-1) coordinates and a sample of (xc + W-1, yc-1) coordinates in the peripheral sample group1.
  • the encoding apparatus predicts motion information of three pieces of motion information of neighboring blocks (or neighboring samples). Can be used as a candidate, the three pieces of motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus includes a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding device may generate a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates.
  • v1 can be derived.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • the encoding device may generate a motion vector for CP2 based on the neighboring sample group 2 including at least one of a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates.
  • v2 can be derived.
  • the encoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the encoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is The motion vector of the sample of (xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • the encoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the encoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the peripheral sample group 0. can do.
  • the encoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + W, yc) coordinates
  • B3 is A motion vector of a sample of (xc + W, yc-1) coordinates
  • B4 may represent a motion vector of a sample of (xc + W-1, yc-1) coordinates.
  • the encoding apparatus may further use at least one motion vector of the B2, the B3, and the B4 as a prediction candidate of the v1.
  • the encoding apparatus includes at least one of a sample of (xc + W, yc) coordinates, a sample of (xc + W, yc-1) coordinates, and a sample of (xc + W-1, yc-1) coordinates in the peripheral sample group1. It may further include one.
  • the encoding apparatus may use the same prediction candidates between PUs in a CU as prediction candidates for motion vectors of CPs regardless of the shape and partition ID of the current block.
  • the encoding apparatus may use three pieces of motion information among motion information of neighboring blocks (that is, neighboring blocks or neighboring samples of the current CU) as prediction candidates.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A1 is A motion vector of the sample of (xc, yc-1) coordinates
  • A2 may represent a motion vector of the sample of (xc-1, yc) coordinates.
  • the encoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information are respectively represented by B0 and B0. It can be represented by B1.
  • B0 is a motion vector of a sample of (xc + W, yc-1) coordinates
  • B1 is (xc + W-1, yc-1) may represent a motion vector of the sample.
  • the encoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information are C0 and C1, respectively. It can be represented as.
  • C0 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C1 is (xc ⁇ 1, yc + H-1) may represent the motion vector of the sample.
  • the encoding apparatus may use at least one motion vector of C0 and C1 as a prediction candidate of v2.
  • a number of prediction candidates may be configured as a method of configuring a prediction candidate for motion vectors of CPs of a PU to which nLx2N, nRx2N, 2NxnU, or 2NxnD partitioning type is applied.
  • the encoding apparatus may limit the prediction candidate of each CP to two.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information are A0 and A1, respectively. Can be represented.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • the encoding apparatus may use A0 and A1 as prediction candidates for the v0.
  • the encoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the surrounding sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the encoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the encoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the encoding apparatus may include a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates in the neighboring sample group 1, and the (xp + W, Availability of the sample of the coordinates yp-1) and the sample of the (xp + W-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order.
  • the encoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the encoding apparatus may use C0 and C1 as prediction candidates for the v2.
  • the encoding apparatus may include a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates in the neighboring sample group 2, and the (xp-1, yp Availability of the sample of the + H) coordinates and the sample of the (xp-1, yp + H-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the encoding apparatus derives a sample unit motion vector in the current block based on the motion vectors for the CPs (S1920). According to the affine motion model, it may have a different motion vector according to each sample coordinate in the current block. Knowing the motion vector of CP0, the motion vector of CP1, and the motion vector of CP2, a motion vector according to the sample position in the current block can be derived. That is, according to the affine motion model, the motion vectors of the CPs, the motion vectors of CP0 (v x0 , v y0 ) based on the coordinates (x, y) of the target sample and the distance ratio between the three control points.
  • the motion vector (v x1 , v y1 ) of CP1 and the motion vector (v x2 , v y2 ) of CP2 may be used to derive a sample unit motion vector of the sample position.
  • the encoding apparatus may derive a sample unit motion vector of the sample position in the current block based on Equations 2 to 5 described above.
  • the encoding apparatus generates a prediction sample for the current block based on the sample unit motion vector (S1930).
  • the encoding apparatus may derive the reference region within the reference picture based on the sample unit motion vector, and generate the predictive sample of the current block based on the reconstructed sample in the reference region. If the prediction mode for the current block is not the skip mode, the encoding apparatus may generate a residual sample (or a residual signal) based on the original sample of the original picture and the prediction sample.
  • the encoding apparatus encodes and outputs prediction mode information on the current block (S1940).
  • the encoding apparatus may encode and output the information about the prediction mode and the derived motion vector for the current block in the form of a bitstream.
  • the encoding apparatus may not code the motion information for the CP of the current block separately.
  • the motion vector of CP1 of the corresponding block is decoded. Since it can be used as a motion vector of CP0 of the current block, motion information for CP0 may not be separately coded.
  • the motion vector of CP2 of the corresponding block may be used as the motion vector of CP0 of the current block. The motion information for may not be separately coded.
  • the motion vector of the lower right neighboring sample of the corresponding block derived based on CPs of the corresponding block may be used as the motion vector of CP0 of the current block. Therefore, the motion information for the CP0 may not be separately coded.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP2 of the corresponding block may be used as the motion vector of CP1 of the current block.
  • the motion information for CP0 may not be separately coded.
  • the motion vector of the lower right neighboring sample of the corresponding block derived based on the CPs of the corresponding block is present. Since it can be used as a motion vector of CP1 of a block, motion information for CP0 may not be separately coded.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP1 of the corresponding block can be used as the motion vector of CP2 of the current block.
  • the motion information for CP0 may not be separately coded.
  • the motion vector of the right lower peripheral sample of the corresponding block derived based on the CPs of the corresponding block is present. Since it can be used as a motion vector of CP2 of a block, motion information for CP0 may not be separately coded.
  • the bitstream may be transmitted to a decoding apparatus via a network or a storage medium.
  • the encoding apparatus may encode and output information about the residual sample for the current block.
  • the information about the residual sample may include transform coefficients regarding the residual sample.
  • FIG. 20 schematically illustrates a video decoding method by a decoding apparatus according to the present invention.
  • the method disclosed in FIG. 20 may be performed by the decoding apparatus disclosed in FIG. 2.
  • S2000 to S2030 of FIG. 20 may be performed by the prediction unit of the decoding apparatus.
  • the decoding apparatus derives control points (CPs) for the current block (S2000).
  • the decoding apparatus may receive information on inter prediction of the current block through a bitstream.
  • the decoding device may derive the CPs to apply the affine motion model.
  • the CP may be three.
  • the decoding apparatus may determine coordinates (0, 0) of the upper left sample position of the current block.
  • CP0 is a sample of (0, 0) coordinates
  • CP1 is a sample of (S, 0) coordinates
  • CP2 is a sample of (0, S) coordinates.
  • the decoding apparatus may determine coordinates of the upper left sample position of the current block (0, Based on 0), CP0 is a sample of (0, 0) coordinates, CP1 is a sample of (S / 2, 0) coordinates, and CP2 is a sample of (0, S) coordinates. Can be.
  • the decoding apparatus may determine coordinates of the upper left sample position of the current block (0, Based on 0), CP0 is a sample of (0, 0) coordinates, CP1 is a sample of (S, 0) coordinates, and CP2 is a sample of (0, S / 2) coordinates. Can be.
  • the decoding apparatus may determine the upper left sample position of the current block. Based on coordinates (0, 0), CP0 is a sample of (0, 0) coordinates, CP1 is a sample of (W, 0) coordinates, CP2 is a sample of (0, H) coordinates, and three CPs Can be derived.
  • the decoding apparatus obtains motion vectors for the CPs (S2010).
  • the decoding apparatus may derive the motion vector of the CPs based on the motion vector of the current block and the motion vector of the neighboring block of the current block.
  • the decoding apparatus may receive motion information of the CPs through a bitstream. If a motion vector for a CP having the same position as the CP of the current block is derived before the decoding of the current block, information about the CP of the current block may not be received.
  • the decoding apparatus may configure adjacent samples of each CP as a neighboring sample group and derive a motion vector of the CP based on the neighboring sample group.
  • the peripheral sample group may be determined based on the partition type, partition ID, and shape of the current block.
  • the decoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 is ( xp, yp-1)
  • the motion vector of the sample of coordinates, A2 may represent the motion vector of the sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus is based on the surrounding sample group 0 including the sample of the (xp-1, yp-1) coordinates, the sample of the (xp, yp-1) coordinates and the sample of the (xp-1, yp) coordinates.
  • a motion vector v 0 for CP 0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + S, yp-1) coordinates
  • B1 is ( xp + S-1, yp-1) may represent a motion vector of a sample of coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus obtains a motion vector v1 for CP1 based on the neighboring sample group 1 including the sample of the (xp + S, yp-1) coordinate and the sample of the (xp + S-1, yp-1) coordinate. Can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + S) coordinates
  • C1 is ( xp-1, yp + S-1) may represent a motion vector of a sample of coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • the decoding apparatus may include a motion vector for CP2 based on the peripheral sample group 2 including at least one of a sample of (xp-1, yp + S) coordinates and a sample of (xp-1, yp + S-1) coordinates.
  • v2 can be derived.
  • the decoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as prediction candidates.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • the width and height of the current block are S and S / 2, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of the (xp-1, yp-1) coordinate.
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0. That is, the decoding apparatus may include a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates, and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is the movement of the sample of (xp + S, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1. That is, the decoding apparatus may include a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + S, yp-1) coordinates and a sample of (xp + S-1, yp-1) coordinates.
  • v1 can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a sample of (xp-1, yp + S / 2) coordinates.
  • the motion vector of C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2. That is, the decoding apparatus CP2 based on the peripheral sample group 2 including at least one of a sample of the (xp-1, yp + S / 2) coordinate and a sample of the (xp-1, yp + S / 2-1) coordinate.
  • the motion vector v2 for.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is The motion vector of the sample of (xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + S, yc) coordinates
  • B3 is A motion vector of a sample of (xc + S, yc-1) coordinates
  • B4 may represent a motion vector of a sample of (xc + S-1, yc-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the B2, the B3, and the B4 as a prediction candidate of the v1.
  • the decoding apparatus includes at least one of samples of (xc + S, yc) coordinates, samples of (xc + S, yc-1) coordinates, and samples of (xc + S-1, yc-1) coordinates in the peripheral sample group1. It may further include one.
  • the decoding apparatus may configure the prediction candidates for a motion vector of CPs of the current block by limiting the number of prediction candidates to a predetermined number.
  • the decoding apparatus may use two pieces of motion information among the motion information of the neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented as A0 and A1, respectively.
  • the width and height of the current block are S and S / 2, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of the (xp-1, yp-1) coordinate.
  • a vector, A1 may represent a motion vector of a sample having a (xp, yp-1) coordinate.
  • the decoding apparatus may use A0 and A1 as prediction candidates for the v0. That is, the decoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the neighboring sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is the movement of the sample of (xp + S, yp-1) coordinates.
  • Vector, B1 may represent a motion vector of a sample of (xp + S-1, yp-1) coordinates.
  • the decoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the decoding apparatus may include a sample of the (xp + S, yp-1) coordinates and a sample of the (xp + S-1, yp-1) coordinates in the neighboring sample group 1, and the (xp + S, Availability of the sample of the coordinates yp-1) and the sample of the (xp + S-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a sample of (xp-1, yp + S / 2) coordinates.
  • the motion vector of C1 may represent a motion vector of a sample of (xp-1, yp + S / 2-1) coordinates.
  • the decoding apparatus may use C0 and C1 as prediction candidates for the v2.
  • the decoding apparatus may include a sample of (xp-1, yp + S / 2) coordinates and a sample of (xp-1, yp + S / 2-1) coordinates in the neighboring sample group 2, and the (xp Availability of samples of -1, yp + S / 2) coordinates and samples of (xp-1, yp + S / 2-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the decoding apparatus may use three pieces of motion information among motion information of neighboring blocks (or neighboring samples) as prediction candidates.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of (xp-1, yp-1) coordinates.
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0. That is, the decoding apparatus is based on the surrounding sample group 0 including the sample of the (xp-1, yp-1) coordinates, the sample of the (xp, yp-1) coordinates and the sample of the (xp-1, yp) coordinates.
  • a motion vector v 0 for CP 0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is a sample of (xp + S / 2, yp-1) coordinates.
  • the motion vector of B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • a sample of the motion vector B2 (xp + S / 2 + 2, yp-1) of the sample of the (xp + S / 2 + 1, yp-1) coordinate
  • At least one of the motion vector B3 of may further include a prediction candidate of v1. That is, the decoding apparatus may determine the CP1 based on the neighboring sample group 1 including the sample of the (xp + S / 2, yp-1) coordinate and the sample of the (xp + S / 2-1, yp-1) coordinate.
  • the motion vector v1 can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinate of the upper left sample position of the current block is (xp, yp)
  • the C0 is the movement of the sample of (xp-1, yp + S) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates. In this case, at least one motion vector of C0 and C1 may be used as a prediction candidate of v2.
  • the decoding apparatus may generate a motion vector v2 for CP2 based on the neighboring sample group 2 including the sample of the (xp-1, yp + S) coordinate and the sample of the (xp-1, yp + S-1) coordinate. Can be derived.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further use at least one of motion information of three neighboring samples as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + S) coordinates
  • C3 may represent a motion vector of a sample of (xc, yc + S) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + S-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the C2, the C3, and the C4 as the prediction candidate of the v2.
  • the decoding apparatus includes at least one of samples of (xc-1, yc + S) coordinates, samples of (xc, yc + S) coordinates, and samples of (xc-1, yc + S-1) coordinates in the neighboring sample group 2. It may further include one.
  • the decoding apparatus may configure the prediction candidates for a motion vector of CPs of the current block by limiting the number of prediction candidates to a predetermined number.
  • the decoding apparatus may use two pieces of motion information among the motion information of the neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented as A0 and A1, respectively.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinates of the upper left sample position of the current block are (xp, yp)
  • the A0 is the movement of the sample of (xp-1, yp-1) coordinates.
  • a vector, A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • the decoding apparatus may use A0 and A1 as prediction candidates for the v0. That is, the decoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the neighboring sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • the B0 is a sample of (xp + S / 2, yp-1) coordinates.
  • the motion vector of B1 may represent a motion vector of a sample of (xp + S / 2-1, yp-1) coordinates.
  • the decoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the decoding apparatus may include a sample of (xp + S / 2, yp-1) coordinates and a sample of (xp + S / 2-1, yp-1) coordinates in the neighboring sample group 1, wherein ( Availability of samples of xp + S / 2, yp-1) coordinates and samples of (xp + S / 2-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order. .
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • the width and height of the current block are S / 2 and S, respectively, and the coordinate of the upper left sample position of the current block is (xp, yp)
  • the C0 is the movement of the sample of (xp-1, yp + S) coordinates.
  • Vector, C1 may represent a motion vector of a sample of (xp-1, yp + S-1) coordinates. In this case, C0 and C1 may be used as prediction candidates for v2.
  • the decoding apparatus may include a sample of (xp-1, yp + S) coordinates and a sample of (xp-1, yp + S-1) coordinates in the neighboring sample group 2, and the (xp-1, yp) sample.
  • Availability of the sample of the coordinates + S) and the sample of the (xp-1, yp + S-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the decoding apparatus predicts three pieces of motion information among neighboring blocks (or neighboring samples). Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus may include a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates, and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus obtains a motion vector v1 for CP1 based on the neighboring sample group 1 including the sample of the (xp + W, yp-1) coordinate and the sample of the (xp + W-1, yp-1) coordinate. Can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • the decoding apparatus may determine a motion vector v2 for CP2 based on the neighboring sample group 2 including the sample of the (xp-1, yp + H) coordinate and the sample of the (xp-1, yp + H-1) coordinate. Can be derived.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as A3 and A4, respectively.
  • the A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of A3 and A4 as a prediction candidate of v0. That is, the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as C2 and C3, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 may represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the C2 and the C3 as the prediction candidate of the v2. That is, the decoding apparatus may further include at least one of a sample of (xc-1, yc + H) coordinates and a sample of (xc-1, yc + H-1) coordinates in the neighboring sample group2.
  • the decoding apparatus predicts three pieces of motion information among neighboring blocks (or neighboring samples). Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus may include a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates, and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus obtains a motion vector v1 for CP1 based on the neighboring sample group 1 including the sample of the (xp + W, yp-1) coordinate and the sample of the (xp + W-1, yp-1) coordinate. Can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • the decoding apparatus may determine a motion vector v2 for CP2 based on the neighboring sample group 2 including the sample of the (xp-1, yp + H) coordinate and the sample of the (xp-1, yp + H-1) coordinate. Can be derived.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v2 of the CP2.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates
  • A5 may represent a motion vector of a sample of (xc-1, yc) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as C2, C3, and C4, respectively.
  • C2 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C3 may represent a motion vector of a sample of (xc, yc + H) coordinates
  • C4 may represent a motion vector of a sample of (xc-1, yc + H-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the C2, the C3, and the C4 as the prediction candidate of the v2.
  • the decoding apparatus includes at least one of samples of (xc-1, yc + H) coordinates, samples of (xc, yc + H) coordinates, and samples of (xc-1, yc + H-1) coordinates in the neighboring sample group 2. It may further include one.
  • the decoding apparatus predicts motion information of three pieces of motion information of neighboring blocks (or neighboring samples). Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus may include a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates, and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus may include a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates.
  • v1 can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • the decoding apparatus may include a motion vector for CP2 based on a neighboring sample group 2 including at least one of a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates.
  • v2 can be derived.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as A3 and A4, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A4 may represent a motion vector of a sample of (xc, yc-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of A3 and A4 as a prediction candidate of v0. That is, the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of two neighboring samples may be further used as a prediction candidate, and the two motion information may be represented as B2 and B3, respectively.
  • B2 is a motion vector of a sample of (xc + W, yc-1) coordinates
  • B3 may represent a motion vector of a sample of (xc + W-1, yc-1) coordinates.
  • the decoding apparatus may further use at least one motion vector of the B2 and the B3 as the prediction candidate of the v1. That is, the decoding apparatus may further include at least one of samples of (xc + W, yc-1) coordinates and samples of (xc + W-1, yc-1) coordinates in the neighboring sample group1.
  • the decoding apparatus predicts three pieces of motion information among motion information of neighboring blocks (or neighboring samples). Can be used as a candidate, the three motion information can be represented by A0, A1, A2, respectively.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates
  • A2 may represent a motion vector of a sample of (xp-1, yp) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus may include a peripheral sample group 0 including at least one of a sample of (xp-1, yp-1) coordinates, a sample of (xp, yp-1) coordinates, and a sample of (xp-1, yp) coordinates. Based on this, a motion vector v0 for CP0 can be derived.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus may include a motion vector for CP1 based on the peripheral sample group 1 including at least one of a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates.
  • v1 can be derived.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • the decoding apparatus may include a motion vector for CP2 based on a neighboring sample group 2 including at least one of a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates.
  • v2 can be derived.
  • the decoding apparatus may further include samples of neighboring blocks of the current CU as prediction candidates for the motion vector v0 of the CP0 and the motion vector v1 of the CP1.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the decoding apparatus may further include motion information of the neighboring blocks (or neighboring samples) as a prediction candidate.
  • the motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as A3, A4, and A5, respectively.
  • A3 is a motion vector of a sample of (xc-1, yc) coordinates
  • A4 is The motion vector of the sample of (xc-1, yc-1) coordinates
  • A5 may represent the motion vector of the sample of (xc, yc-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the A3, the A4, and the A5 as the prediction candidate of the v0.
  • the decoding apparatus further includes at least one of samples of (xc-1, yc-1) coordinates, samples of (xc-1, yc) coordinates, and samples of (xc, yc-1) coordinates in the neighboring sample group 0. can do.
  • the decoding apparatus may further include motion information of neighboring blocks (or neighboring samples) as a prediction candidate.
  • motion information of three neighboring samples may be further used as a prediction candidate, and the three motion information may be represented as B2, B3, and B4, respectively.
  • B2 is a motion vector of a sample of (xc + W, yc) coordinates
  • B3 is A motion vector of a sample of (xc + W, yc-1) coordinates
  • B4 may represent a motion vector of a sample of (xc + W-1, yc-1) coordinates.
  • the decoding apparatus may further use the motion vector of at least one of the B2, the B3, and the B4 as a prediction candidate of the v1.
  • the decoding apparatus includes at least one of a sample of (xc + W, yc) coordinates, a sample of (xc + W, yc-1) coordinates, and a sample of (xc + W-1, yc-1) coordinates to the neighboring sample group 1. It may further include one.
  • the decoding apparatus may use the same prediction candidates between PUs in a CU as prediction candidates for motion vectors of CPs regardless of the shape and partition ID of the current block.
  • the decoding apparatus may use three pieces of motion information of the motion information of the neighboring block (that is, the neighboring block or the neighboring sample of the current CU) as a prediction candidate.
  • the three pieces of motion information may be represented by A0, A1, and A2, respectively.
  • A0 is a motion vector of a sample of (xc-1, yc-1) coordinates
  • A1 is A motion vector of the sample of (xc, yc-1) coordinates
  • A2 may represent a motion vector of the sample of (xc-1, yc) coordinates.
  • the decoding apparatus may use the motion vector of at least one of A0, A1, and A2 as a prediction candidate of v0.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information are respectively represented by B0 and B0. It can be represented by B1.
  • B0 is a motion vector of a sample of (xc + W, yc-1) coordinates
  • B1 is (xc + W-1, yc-1) may represent a motion vector of the sample.
  • the decoding apparatus may use at least one motion vector of the B0 and the B1 as a prediction candidate of the v1.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be C0 and C0. It may be represented by C1.
  • C0 is a motion vector of a sample of (xc-1, yc + H) coordinates
  • C1 is (xc ⁇ 1, yc + H-1) may represent the motion vector of the sample.
  • the decoding apparatus may use the motion vector of at least one of C0 and C1 as a prediction candidate of v2.
  • a method of configuring a prediction candidate for motion vectors of CPs of a PU to which nLx2N, nRx2N, 2NxnU, or 2NxnD partitioning type is applied may be configured by limiting the number of prediction candidates to a certain number.
  • the decoding apparatus may configure two prediction candidates of each CP. For example, in the case of the motion vector v0 of CP0, the decoding apparatus may use two pieces of motion information of the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information are A0 and A1, respectively. Can be represented.
  • A0 is a motion vector of a sample of (xp-1, yp-1) coordinates
  • A1 may represent a motion vector of a sample of (xp, yp-1) coordinates.
  • the decoding apparatus may use A0 and A1 as prediction candidates for the v0.
  • the decoding apparatus may include a sample of (xp-1, yp-1) coordinates and a sample of (xp, yp-1) coordinates in the neighboring sample group 0, and the (xp-1, yp-1) Availability of samples of coordinates and samples of (xp, yp-1) coordinates may be sequentially determined according to a first predefined order.
  • the decoding apparatus may use two pieces of motion information among the motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by B0 and B1, respectively. have.
  • B0 is a motion vector of a sample of (xp + W, yp-1) coordinates
  • B1 may represent a motion vector of a sample having (xp + W-1, yp-1) coordinates.
  • the decoding apparatus may use the B0 and the B1 as prediction candidates of the v1.
  • the decoding apparatus may include a sample of (xp + W, yp-1) coordinates and a sample of (xp + W-1, yp-1) coordinates in the neighboring sample group 1, and the (xp + W, Availability of the sample of the coordinates yp-1) and the sample of the (xp + W-1, yp-1) coordinates may be sequentially determined according to a second predefined priority order.
  • the decoding apparatus may use two pieces of motion information among the pieces of motion information of neighboring blocks (or neighboring samples) as prediction candidates, and the two pieces of motion information may be represented by C0 and C1, respectively. have.
  • C0 is a motion vector of a sample of (xp-1, yp + H) coordinates
  • C1 may represent a motion vector of a sample of (xp-1, yp + H-1) coordinates.
  • the decoding apparatus may use C0 and C1 as prediction candidates for the v2.
  • the decoding apparatus may include a sample of (xp-1, yp + H) coordinates and a sample of (xp-1, yp + H-1) coordinates in the neighboring sample group 2, and the (xp-1, yp) sample.
  • Availability of the sample of the + H) coordinates and the sample of the (xp-1, yp + H-1) coordinates may be sequentially determined according to a predefined third priority order.
  • the decoding apparatus may derive the motion vectors of CPs of the current PU based on the motion vectors derived in the previous decoding process without receiving additional motion information.
  • the motion of CP0 of the current block when the uppermost block among the left neighboring blocks adjacent to the left boundary of the current block is decoded based on the affine motion model, the motion of CP0 of the current block based on the motion vector of CP1 of the corresponding block. Can be derived as a vector.
  • the motion vector of CP0 of the current block when the leftmost block among the upper neighboring blocks adjacent to the upper boundary of the current block is decoded based on the affine motion model, the motion vector of CP0 of the current block may be derived based on the motion vector of CP2 of the corresponding block. have.
  • the motion vector of CP0 of the current block is determined based on the motion vector of the lower right neighboring sample of the corresponding block derived based on CPs of the corresponding block. Can be derived.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP1 of the current block may be derived based on the motion vector of CP2 of the corresponding block.
  • the motion vector of the lower right neighboring sample of the corresponding block derived based on CPs of the corresponding block is based on the motion vector.
  • a motion vector of CP1 of the current block can be derived.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the motion vector of CP2 of the current block may be derived based on the motion vector of CP1 of the corresponding block.
  • the motion vector of the right lower peripheral sample of the corresponding block derived based on CPs of the corresponding block.
  • a motion vector of CP2 of the current block can be derived.
  • the motion vector of the lower right peripheral sample of the corresponding block may be derived based on the CPs of the corresponding block based on Equations 2 to 5 described above.
  • the decoding apparatus derives a sample unit motion vector in the current block based on the obtained motion vectors (S2020). Based on the motion vector of CP0, the motion vector of CP1, and the motion vector of CP2, the decoding apparatus may derive a sample unit motion vector according to the sample position in the current block. In this case, the decoding apparatus may derive a sample unit motion vector of the sample position in the current block based on Equations 2 to 5 described above.
  • the decoding apparatus derives a prediction sample for the current block based on the sample unit motion vector (S2030).
  • the decoding apparatus may derive a reference region within a reference picture based on the sample unit motion vector, and generate a predictive sample of the current block based on the reconstructed sample in the reference region.
  • the decoding apparatus may generate a reconstructed sample based on the prediction sample. If the prediction mode for the current block is not the skip mode, the decoding apparatus may obtain a residual signal from the bitstream received from the encoding apparatus and generate a residual sample for the current block. In this case, the decoding apparatus may generate the reconstructed sample based on the prediction sample and the residual sample. The decoding apparatus may generate a reconstructed picture based on the reconstructed sample.
  • the motion vectors of the control points for the current block can be derived based on the motion vectors of the control points of the neighboring block which have already been decoded. Can be. This may eliminate or reduce the amount of data for the motion vectors of the control points and improve the overall coding efficiency.
  • the inter prediction can be effectively performed through the sample unit motion vectors not only when the image in the current block is plane-shifted, but also when the image is rotated, zoomed in, zoomed out, or planarly transformed. This can eliminate or reduce the amount of data for the residual signal for the current block and improve the overall coding efficiency.
  • the above-described method according to the present invention may be implemented in software, and the encoding device and / or the decoding device according to the present invention may perform image processing of, for example, a TV, a computer, a smartphone, a set-top box, a display device, and the like. It can be included in the device.
  • the above-described method may be implemented as a module (process, function, etc.) for performing the above-described function.
  • the module may be stored in memory and executed by a processor.
  • the memory may be internal or external to the processor and may be coupled to the processor by various well known means.
  • the processor may include application-specific integrated circuits (ASICs), other chipsets, logic circuits, and / or data processing devices.
  • the memory may include read-only memory (ROM), random access memory (RAM), flash memory, memory card, storage medium and / or other storage device.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

본 발명에 따른 디코딩 장치에 의하여 수행되는 비디오 디코딩 방법은 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하는 단계, 상기 CP들에 대한 움직임 벡터들을 획득하는 단계, 상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하는 단계, 및 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 도출하는 단계를 포함하는 것을 특징으로 한다. 본 발명에 따르면 현재 블록 내의 이미지가 평면이동된 경우뿐 아니라, 다양한 영상의 변형이 있는 경우에 대하여도 샘플 단위 움직임 벡터들을 통하여 효과적으로 인터 예측을 수행할 수 있다.

Description

비디오 코딩 시스템에서 인터 예측 방법 및 장치
본 발명은 비디오 코딩 기술에 관한 것으로서 보다 상세하게는 비디오 코딩 시스템에서 인터 예측 방법 및 장치에 관한 것이다.
최근 HD(High Definition) 영상 및 UHD(Ultra High Definition) 영상과 같은 고해상도, 고품질의 영상에 대한 수요가 다양한 분야에서 증가하고 있다. 영상 데이터가 고해상도, 고품질이 될수록 기존의 영상 데이터에 비해 상대적으로 전송되는 정보량 또는 비트량이 증가하기 때문에 기존의 유무선 광대역 회선과 같은 매체를 이용하여 영상 데이터를 전송하거나 기존의 저장 매체를 이용해 영상 데이터를 저장하는 경우, 전송 비용과 저장 비용이 증가된다.
이에 따라, 고해상도, 고품질 영상의 정보를 효과적으로 전송하거나 저장하고, 재생하기 위해 고효율의 영상 압축 기술이 요구된다.
본 발명의 기술적 과제는 비디오 코딩 효율을 높이는 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 샘플 단위 움직임 벡터 기반 인터 예측을 수행하는 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 현재 블록의 컨트롤 포인트들에 대한 움직임 벡터를 기반으로 샘플 단위 움직임 벡터를 도출하는 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 주변 블록의 샘플을 기반으로 컨트롤 포인트에 대한 움직임 벡터를 도출하는 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 주변 블록의 샘플을 기반으로 비정방형 블록인 현재 블록의 컨트롤 포인트들에 대한 움직임 벡터를 도출하는 방법 및 장치를 제공함에 있다.
본 발명의 또 다른 기술적 과제는 이미 디코딩된 주변 블록의 컨트롤 포인트에 대한 움직임 벡터를 기반으로 현재 블록의 컨트롤 포인트에 대한 움직임 벡터를 도출하는 방법 및 장치를 제공함에 있다.
본 발명의 일 실시예에 따르면, 디코딩 장치에 의하여 수행되는 비디오 디코딩 방법을 제공한다. 상기 디코딩 방법은 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하는 단계, 상기 CP들에 대한 움직임 벡터들을 획득하는 단계, 상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하는 단계, 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 도출하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 다른 일 실시예에 따르면, 비디오 디코딩을 수행하는 디코딩 장치를 제공한다. 상기 디코딩 장치는 현재 블록에 대한 예측 모드 정보를 비트스트림으로부터 획득하는 디코딩부, 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하고, 상기 CP들에 대한 움직임 벡터들을 획득하고, 상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하고, 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 도출하는 예측부, 및 상기 예측 샘플을 기반으로 복원 샘플을 생성하는 가산기를 포함함을 특징으로 한다.
본 발명의 또 다른 일 실시예에 따르면, 인코딩 장치에 의하여 수행되는 비디오 인코딩 방법을 제공한다. 상기 인코딩 방법은 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하는 단계, 상기 CP들에 대한 움직임 벡터들을 획득하는 단계, 상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하는 단계, 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 생성하는 단계, 및 상기 현재 블록에 대한 예측 모드 정보를 인코딩하여 출력하는 단계를 포함하는 것을 특징으로 한다.
본 발명의 또 다른 일 실시예에 따르면, 비디오 인코딩을 수행하는 인코딩 장치를 제공한다. 상기 인코딩 장치는 현재 블록에 대한 예측 모드를 결정하고, 상기 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하고, 상기 CP들에 대한 움직임 벡터들을 획득하고, 상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하고, 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 생성하는 예측부, 및 상기 현재 블록에 대한 예측 모드 정보를 인코딩하여 출력하는 인코딩부를 포함함을 특징으로 한다.
본 발명에 따르면, 현재 블록에 대한 보다 정확한 샘플 단위 움직임 벡터들을 도출할 수 있고, 인터 예측 효율을 상당히 높일 수 있다.
본 발명에 따르면 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들을 기반으로 현재 블록의 샘플들에 대한 움직임 벡터를 효율적으로 도출할 수 있다.
본 발명에 따르면 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들에 대한 정보를 추가적으로 전송하지 않고 이미 디코딩된 주변 블록의 컨트롤 포인트들의 움직임 벡터들을 기반으로 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들을 도출할 수 있다. 이를 통하여 상기 컨트롤 포인트들의 움직임 벡터들을 위한 데이터량을 없애거나 줄일 수 있고, 전반적인 코딩 효율을 향상시킬 수 있다.
본 발명에 따르면 현재 블록 내의 이미지가 평면이동된 경우뿐 아니라, 회전, 줌인, 줌아웃 또는 평현사변형 변형된 경우에 대하여도 샘플 단위 움직임 벡터들을 통하여 효과적으로 인터 예측을 수행할 수 있다. 이를 통하여 현재 블록에 대한 레지듀얼 신호를 위한 데이터량을 없애거나 줄일 수 있고, 전반적인 코딩 효율을 향상시킬 수 있다.
도 1은 본 발명의 일 실시예에 따른 비디오 인코딩 장치를 개략적으로 도시한 블록도이다.
도 2는 본 발명의 일 실시예에 따른 비디오 디코딩 장치를 개략적으로 도시한 블록도이다.
도 3은 병진 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습을 예시적으로 나타낸다.
도 4는 아핀 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습을 예시적으로 나타낸다.
도 5는 아핀 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습 및 움직임 벡터를 예시적으로 나타낸다.
도 6은 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU의 CP들을 예시적으로 나타낸다.
도 7은 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU들의 CP들을 예시적으로 나타낸다.
도 8은 파티셔닝 타입 2NxN을 기반으로 CU로부터 파티셔닝된 PU들의 CP들을 예시적으로 나타낸다.
도 9는 비대칭형 PU들의 CP들을 예시적으로 나타낸다.
도 10은 파티셔닝 타입 2Nx2N이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다.
도 11은 파티셔닝 타입 2NxN이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다.
도 12는 파티셔닝 타입 2NxN이 적용된 PU의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다.
도 13은 파티셔닝 타입 Nx2N이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다.
도 14는 파티셔닝 타입 Nx2N이 적용된 PU의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다.
도 15는 비대칭형 PU들의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다.
도 16은 비대칭형 PU들의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다.
도 17은 움직임 정보 코딩이 요구되는 CP와 요구되지 않는 CP를 포함하는 PU를 예시적으로 나타낸다.
도 18은 움직임 정보 코딩이 요구되지 않는 CP들을 포함하는 PU를 예시적으로 나타낸다.
도 19는 본 발명에 따른 인코딩 장치에 의한 비디오 인코딩 방법을 개략적으로 나타낸다.
도 20은 본 발명에 따른 디코딩 장치에 의한 비디오 디코딩 방법을 개략적으로 나타낸다.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니다. 본 명세서에서 사용하는 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 기술적 사상을 한정하려는 의도로 사용되는 것은 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
한편, 본 발명에서 설명되는 도면상의 각 구성들은 비디오 인코딩 장치/디코딩 장치에서 서로 다른 특징적인 기능들에 관한 설명의 편의를 위해 독립적으로 도시된 것으로서, 각 구성들이 서로 별개의 하드웨어나 별개의 소프트웨어로 구현된다는 것을 의미하지는 않는다. 예컨대, 각 구성 중 두 개 이상의 구성이 합쳐져 하나의 구성을 이룰 수도 있고, 하나의 구성이 복수의 구성으로 나뉘어질 수도 있다. 각 구성이 통합 및/또는 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명에 포함된다.
이하, 첨부한 도면들을 참조하여, 본 발명의 실시예를 보다 상세하게 설명하고자 한다.
도 1은 본 발명의 일 실시예에 따른 비디오 인코딩 장치를 개략적으로 도시한 블록도이다.
도 1을 참조하면, 인코딩 장치(100)는 픽처 분할부(105), 예측부(110), 변환부(115), 양자화부(120), 재정렬부(125), 엔트로피 인코딩부(130), 역양자화부(135), 역변환부(140), 필터부(145) 및 메모리(150)를 구비한다.
픽처 분할부(105)는 입력된 픽처를 적어도 하나의 처리 단위 블록으로 분할할 수 있다. 이때, 처리 단위로서의 블록은 예측 유닛(Prediction Unit, PU)일 수도 있고, 변환 유닛(Transform Unit, TU)일 수도 있으며, 코딩 유닛(Coding Unit, CU)일 수도 있다. 픽처는 복수의 코딩 트리 유닛(Coding Tree Unit, CTU)들로 구성될 수 있으며, 각각의 CTU는 쿼드 트리(quad-tree) 구조로 CU들로 분할(split)될 수 있다. CU는 보다 하위(deeper) 뎁스의 CU들로 쿼드 트리 구조로 분할될 수도 있다. PU 및 TU는 CU로부터 획득될 수 있다. 예를 들어, PU는 CU로부터 대칭 또는 비대칭 사각형 구조로 파티셔닝(partitioning)될 수 있다. 또한 TU는 CU로부터 쿼드 트리 구조로 분할될 수도 있다. CTU는 CTB(coding tree block)에 대응될 수 있고, CU는 CB(coding block)에 대응될 수 있고, PU는 PB(prediction block)에 대응될 수 있고, TU는 TB(transform block)에 대응될 수 있다.
예측부(110)는 후술하는 바와 같이, 인터 예측을 수행하는 인터 예측부와 인트라 예측을 수행하는 인트라 예측부를 포함한다. 예측부(110)는, 픽처 분할부(105)에서 픽처의 처리 단위에 대하여 예측을 수행하여 예측 샘플(또는 예측 샘플 어레이)을 포함하는 예측 블록을 생성한다. 예측부(110)에서 픽처의 처리 단위는 CU일 수도 있고, TU일 수도 있고, PU일 수도 있다. 또한, 예측부(110)는 해당 처리 단위에 대하여 실시되는 예측이 인터 예측인지 인트라 예측인지를 결정하고, 각 예측 방법의 구체적인 내용(예컨대, 예측 모드 등)을 정할 수 있다. 이때, 예측이 수행되는 처리 단위와 예측 방법 및 예측 방법의 구체적인 내용이 정해지는 처리 단위는 다를 수 있다. 예컨대, 예측의 방법과 예측 모드 등은 PU 단위로 결정되고, 예측의 수행은 TU 단위로 수행될 수도 있다.
인터 예측을 통해서는 현재 픽처의 이전 픽처 및/또는 이후 픽처 중 적어도 하나의 픽처의 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다. 또한, 인트라 예측을 통해서는 현재 픽처 내의 픽셀 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다.
인터 예측의 방법으로서, 스킵(skip) 모드, 머지(merge) 모드, AMVP(Advanced Motion Vector Prediction) 등을 이용할 수 있다. 인터 예측에서는 PU에 대하여, 참조 픽처를 선택하고 PU에 대응하는 참조 블록을 선택할 수 있다. 참조 블록은 정수 픽셀(또는 샘플) 또는 분수 픽셀(또는 샘플) 단위로 선택될 수 있다. 이어서, PU와의 레지듀얼(residual) 신호가 최소화되며 움직임 벡터 크기 역시 최소가 되는 예측 블록이 생성된다. 본 명세서에서 픽셀(pixel), 펠(pel) 및 샘플(sample)은 서로 혼용될 수 있다.
예측 블록은 정수 픽셀 단위로 생성될 수도 있고, 1/2 픽셀 단위 또는 1/4 픽셀 단위와 같이 정수 이하 픽셀 단위로 생성될 수도 있다. 이때, 움직임 벡터 역시 정수 픽셀 이하의 단위로 표현될 수 있다.
인터 예측을 통해 선택된 참조 픽처의 인덱스, 움직임 벡터 차분(motion vector difference, MVD), 움직임 벡터 예측자(motion vector predictor, MVP), 레지듀얼 신호 등의 정보는 엔트로피 인코딩되어 디코딩 장치에 전달될 수 있다. 스킵 모드가 적용되는 경우에는 예측 블록을 복원 블록으로 할 수 있으므로, 레지듀얼을 생성, 변환, 양자화, 전송하지 않을 수 있다.
인트라 예측을 수행하는 경우에는, PU 단위로 예측 모드가 정해져서 PU 단위로 예측이 수행될 수 있다. 또한, PU 단위로 예측 모드가 정해지고 TU 단위로 인트라 예측이 수행될 수도 있다.
인트라 예측에서 예측 모드는 예를 들어 33개의 방향성 예측 모드와 적어도 2개 이상의 비방향성 모드를 가질 수 있다. 비방향성 모드는 DC 예측 모드 및 플래너 모드(Planar 모드)을 포함할 수 있다.
인트라 예측에서는 참조 샘플에 필터를 적용한 후 예측 블록을 생성할 수 있다. 이때, 참조 샘플에 필터를 적용할 것인지는 현재 블록의 인트라 예측 모드 및/또는 사이즈에 따라 결정될 수 있다.
생성된 예측 블록과 원본 블록 사이의 레지듀얼 값(레지듀얼 블록 또는 레지듀얼 신호)은 변환부(115)로 입력된다. 또한, 예측을 위해 사용한 예측 모드 정보, 움직임 벡터 정보 등은 레지듀얼 값과 함께 엔트로피 인코딩부(130)에서 인코딩되어 디코딩 장치에 전달된다.
변환부(115)는 변환 블록 단위로 레지듀얼 블록에 대한 변환을 수행하고 변환 계수를 생성한다.
변환 블록은 샘플들의 직사각형 블록으로서 동일한 변환이 적용되는 블록이다. 변환 블록은 변환 유닛(TU)일 수 있으며, 쿼드 트리(quad tree) 구조를 가질 수 있다.
변환부(115)는 레지듀얼 블록에 적용된 예측 모드와 블록의 크기에 따라서 변환을 수행할 수 있다.
예컨대, 레지듀얼 블록에 인트라 예측이 적용되었고 블록이 4x4의 레지듀얼 배열(array)이라면, 레지듀얼 블록을 DST(Discrete Sine Transform)를 이용하여 변환하고, 그 외의 경우라면 레지듀얼 블록을 DCT(Discrete Cosine Transform)를 이용하여 변환할 수 있다.
변환부(115)는 변환에 의해 변환 계수들의 변환 블록을 생성할 수 있다.
양자화부(120)는 변환부(115)에서 변환된 레지듀얼 값들, 즉 변환 계수들을 양자화하여 양자화된 변환 계수를 생성할 수 있다. 양자화부(120)에서 산출된 값은 역양자화부(135)와 재정렬부(125)에 제공된다.
재정렬부(125)는 양자화부(120)로부터 제공된 양자화된 변환 계수를 재정렬한다. 양자화된 변환 계수를 재정렬함으로써 엔트로피 인코딩부(130)에서의 인코딩 효율을 높일 수 있다.
재정렬부(125)는 계수 스캐닝(Coefficient Scanning) 방법을 통해 2차원 블록 형태의 양자화된 변환 계수들을 1차원의 벡터 형태로 재정렬할 수 있다.
엔트로피 인코딩부(130)는 재정렬부(125)에 의해 재정렬된 양자화된 변환 값들 또는 코딩 과정에서 산출된 인코딩 파라미터 값 등을 기초로 심볼(symbol)을 확률 분포에 따라 엔트로피 코딩하여 비트스트림(bitstream)을 출력할 수 있다. 엔트로피 인코딩 방법은 다양한 값을 갖는 심볼을 입력 받아, 통계적 중복성을 제거하면서, 디코딩 가능한 2진수의 열로 표현하는 방법이다.
여기서, 심볼이란 인코딩/디코딩 대상 구문 요소(syntax element) 및 코딩 파라미터(coding parameter), 레지듀얼 신호(residual signal)의 값 등을 의미한다. 인코딩 파라미터는 인코딩 및 디코딩에 필요한 매개변수로서, 구문 요소와 같이 인코딩 장치에서 인코딩되어 디코딩 장치로 전달되는 정보뿐만 아니라, 인코딩 혹은 디코딩 과정에서 유추될 수 있는 정보를 포함할 수 있으며 영상을 인코딩하거나 디코딩할 때 필요한 정보를 의미한다. 인코딩 파라미터는 예를 들어 인트라/인터 예측모드, 이동/움직임 벡터, 참조 영상 색인, 코딩 블록 패턴, 잔여 신호 유무, 변환 계수, 양자화된 변환 계수, 양자화 파라미터, 블록 크기, 블록 분할 정보 등의 값 또는 통계를 포함할 수 있다. 또한 잔여 신호는 원신호와 예측 신호의 차이를 의미할 수 있고, 또한 원신호와 예측 신호의 차이가 변환(transform)된 형태의 신호 또는 원신호와 예측 신호의 차이가 변환되고 양자화된 형태의 신호를 의미할 수도 있다. 잔여 신호는 블록 단위에서는 잔여 블록이라 할 수 있고, 샘플 단위에서는 잔여 샘플이라고 할 수 있다.
엔트로피 인코딩이 적용되는 경우, 높은 발생 확률을 갖는 심볼에 적은 수의 비트가 할당되고 낮은 발생 확률을 갖는 심볼에 많은 수의 비트가 할당되어 심볼이 표현됨으로써, 인코딩 대상 심볼들에 대한 비트열의 크기가 감소될 수 있다. 따라서 엔트로피 인코딩을 통해서 영상 인코딩의 압축 성능이 높아질 수 있다.
엔트로피 인코딩을 위해 지수 골룸(exponential golomb), CAVLC(Context-Adaptive Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 인코딩 방법이 사용될 수 있다. 예를 들어, 엔트로피 인코딩부(130)에는 가변 길이 코딩(VLC: Variable Length Coding/Code) 테이블과 같은 엔트로피 인코딩을 수행하기 위한 테이블이 저장될 수 있고, 엔트로피 인코딩부(130)는 저장된 가변 길이 코딩(VLC) 테이블을 사용하여 엔트로피 인코딩을 수행할 수 있다. 또한 엔트로피 인코딩부(130)는 대상 심볼의 이진화(binarization) 방법 및 대상 심볼/빈(bin)의 확률 모델(probability model)을 도출(derive)한 후, 도출된 이진화 방법 또는 확률 모델을 사용하여 엔트로피 인코딩을 수행할 수도 있다.
또한, 엔트로피 인코딩부(130)는 필요한 경우에, 전송하는 파라미터 셋(parameter set) 또는 신택스에 일정한 변경을 가할 수도 있다.
역양자화부(135)는 양자화부(120)에서 양자화된 값(양자화된 변환 계수)들을 역양자화하고, 역변환부(140)는 역양자화부(135)에서 역양자화된 값들을 역변환한다.
역양자화부(135) 및 역변환부(140)에서 생성된 레지듀얼 값(또는 레지듀얼 샘플 또는 레지듀얼 샘플 어레이)과 예측부(110)에서 예측된 예측 블록이 합쳐져 복원 샘플(또는 복원 샘플 어레이)를 포함하는 복원 블록(Reconstructed Block)이 생성될 수 있다.
도 1에서는 가산기를 통해서, 레지듀얼 블록과 예측 블록이 합쳐져 복원 블록이 생성되는 것으로 설명하고 있다. 이때, 가산기를 복원 블록을 생성하는 별도의 유닛(복원 블록 생성부)로 볼 수도 있다.
필터부(145)는 디블록킹 필터, ALF(Adaptive Loop Filter), SAO(Sample Adaptive Offset)를 복원된 픽처에 적용할 수 있다.
디블록킹 필터는 복원된 픽처에서 블록 간의 경계에 생긴 왜곡을 제거할 수 있다. ALF(Adaptive Loop Filter)는 디블록킹 필터를 통해 블록이 필터링된 후 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. ALF는 고효율을 적용하는 경우에만 수행될 수도 있다. SAO는 디블록킹 필터가 적용된 레지듀얼 블록에 대하여, 픽셀 단위로 원본 영상과의 오프셋 차이를 복원하며, 밴드 오프셋(Band Offset), 엣지 오프셋(Edge Offset) 등의 형태로 적용된다.
메모리(150)는 필터부(145)를 통해 산출된 복원 블록 또는 픽처를 저장할 수 있다. 메모리(150)에 저장된 복원 블록 또는 픽처는 인터 예측을 수행하는 예측부(110)에 제공될 수 있다.
도 2는 본 발명의 일 실시예에 따른 비디오 디코딩 장치를 개략적으로 나타낸 블록도이다. 도 2를 참조하면, 비디오 디코딩 장치(200)는 엔트로피 디코딩부(210), 재정렬부(215), 역양자화부(220), 역변환부(225), 예측부(230), 필터부(235) 메모리(240)를 포함할 수 있다.
비디오 인코딩 장치에서 영상 비트스트림이 입력된 경우, 입력된 비트스트림은 비디오 인코딩 장치에서 영상 정보가 처리된 절차에 따라서 디코딩될 수 있다.
엔트로피 디코딩부(210)는, 입력된 비트스트림을 확률 분포에 따라 엔트로피 디코딩하여, 양자화된 계수(quantized coefficient) 형태의 심볼을 포함한 심볼들을 생성할 수 있다. 엔트로피 디코딩 방법은 2진수의 열을 입력 받아 각 심볼들을 생성하는 방법이다. 엔트로피 디코딩 방법은 상술한 엔트로피 인코딩 방법과 유사하다.
예컨대, 비디오 인코딩 장치에서 엔트로피 인코딩을 수행하기 위해 CAVLC 등의 가변 길이 코딩(Variable Length Coding: VLC, 이하 'VLC' 라 함)가 사용된 경우에, 엔트로피 디코딩부(210)도 인코딩 장치에서 사용한 VLC 테이블과 동일한 VLC 테이블로 구현하여 엔트로피 디코딩을 수행할 수 있다. 또한, 비디오 인코딩 장치에서 엔트로피 인코딩을 수행하기 위해 CABAC을 이용한 경우에, 엔트로피 디코딩부(210)는 이에 대응하여 CABAC을 이용한 엔트로피 디코딩을 수행할 수 있다.
보다 상세하게, CABAC 엔트로피 디코딩 방법은, 비트스트림에서 각 구문 요소에 해당하는 빈을 수신하고, 디코딩 대상 구문 요소 정보와 주변 및 디코딩 대상 블록의 디코딩 정보 혹은 이전 단계에서 디코딩된 심볼/빈의 정보를 이용하여 문맥(context) 모델을 결정하고, 결정된 문맥 모델에 따라 빈(bin)의 발생 확률을 예측하여 빈의 산술 디코딩(arithmetic decoding)를 수행하여 각 구문 요소의 값에 해당하는 심볼을 생성할 수 있다. 이때, CABAC 엔트로피 디코딩 방법은 문맥 모델 결정 후 다음 심볼/빈의 문맥 모델을 위해 디코딩된 심볼/빈의 정보를 이용하여 문맥 모델을 업데이트할 수 있다.
엔트로피 디코딩부(210)에서 디코딩된 정보 중 예측 블록을 생성하기 위한 정보는 예측부(230)로 제공되고, 엔트로피 디코딩부(210)에서 엔트로피 디코딩이 수행된 레지듀얼 값, 즉 양자화된 변환 계수는 재정렬부(215)로 입력될 수 있다.
재정렬부(215)는 엔트로피 디코딩부(210)에서 엔트로피 디코딩된 비트스트림의 정보, 즉 양자화된 변환 계수를 인코딩 장치에서 재정렬한 방법을 기초로 재정렬할 수 있다.
재정렬부(215)는 1차원 벡터 형태로 표현된 계수들을 다시 2차원의 블록 형태의 계수로 복원하여 재정렬할 수 있다. 재정렬부(215)는 현재 블록(변환 블록)에 적용된 예측 모드와 변환 블록의 크기를 기반으로 계수에 대한 스캐닝을 수행하여 2 차원 블록 형태의 계수(양자화된 변환 계수) 배열(array)을 생성할 수 있다.
역양자화부(220)는 인코딩 장치에서 제공된 양자화 파라미터와 재정렬된 블록의 계수값을 기초로 역양자화를 수행할 수 있다.
역변환부(225)는 비디오 인코딩 장치에서 수행된 양자화 결과에 대해, 인코딩 장치의 변환부가 수행한 DCT 및 DST에 대해 역DCT 및/또는 역DST를 수행할 수 있다.
역변환은 인코딩 장치에서 결정된 전송 단위 또는 영상의 분할 단위를 기초로 수행될 수 있다. 인코딩 장치의 변환부에서 DCT 및/또는 DST는 예측 방법, 현재 블록의 크기 및 예측 방향 등 복수의 정보에 따라 선택적으로 수행될 수 있고, 디코딩 장치의 역변환부(225)는 인코딩 장치의 변환부에서 수행된 변환 정보를 기초로 역변환을 수행할 수 있다.
예측부(230)는 엔트로피 디코딩부(210)에서 제공된 예측 블록 생성 관련 정보와 메모리(240)에서 제공된 이전에 디코딩된 블록 및/또는 픽처 정보를 기초로 예측 샘플(또는 예측 샘플 어레이)를 포함하는 예측 블록을 생성할 수 있다.
현재 PU에 대한 예측 모드가 인트라 예측(intra prediction) 모드인 경우에, 현재 픽처 내의 픽셀 정보를 기초로 예측 블록을 생성하는 인트라 예측을 수행할 수 있다.
현재 PU에 대한 예측 모드가 인터 예측(inter prediction) 모드인 경우에, 현재 픽처의 이전 픽처 또는 이후 픽처 중 적어도 하나의 픽처에 포함된 정보를 기초로 현재 PU에 대한 인터 예측을 수행할 수 있다. 이때, 비디오 인코딩 장치에서 제공된 현재 PU의 인터 예측에 필요한 움직임 정보, 예컨대 움직임 벡터, 참조 픽처 인덱스 등에 관한 정보는 인코딩 장치로부터 수신한 스킵 플래그, 머지 플래그 등을 확인하고 이에 대응하여 유도될 수 있다.
현재 픽처에 대한 인터 예측 시, 현재 블록과의 레지듀얼(residual) 신호가 최소화되며 움직임 벡터 크기 역시 최소가 되도록 예측 블록을 생성할 수 있다.
한편, 움직임 정보 도출 방식은 현재 블록의 예측 모드에 따라 달라질 수 있다. 인터 예측을 위해 적용되는 예측 모드에는 AMVP(Advanced Motion Vector Prediction) 모드, 머지(merge) 모드 등이 있을 수 있다.
일 예로, 머지 모드가 적용되는 경우, 인코딩 장치 및 디코딩 장치는 복원된 공간적 주변 블록의 움직임 벡터 및/또는 시간적 주변 블록인 Col 블록에 대응하는 움직임 벡터를 이용하여, 머지 후보 리스트를 생성할 수 있다. 머지 모드에서는 머지 후보 리스트에서 선택된 후보 블록의 움직임 벡터가 현재 블록의 움직임 벡터로 사용된다. 인코딩 장치는 상기 머지 후보 리스트에 포함된 후보 블록들 중에서 선택된 최적의 움직임 벡터를 갖는 후보 블록을 지시하는 머지 인덱스를 디코딩 장치로 전송할 수 있다. 이 때, 디코딩 장치는 상기 머지 인덱스를 이용하여, 현재 블록의 움직임 벡터를 도출할 수 있다.
다른 예로, AMVP(Advanced Motion Vector Prediction) 모드가 적용되는 경우, 인코딩 장치 및 디코딩 장치는 복원된 공간적 주변 블록의 움직임 벡터 및/또는 시간적 주변 블록인 Col 블록에 대응하는 움직임 벡터를 이용하여, 움직임 벡터 예측자 후보 리스트를 생성할 수 있다. 즉, 복원된 공간적 주변 블록의 움직임 벡터 및/또는 시간적 주변 블록인 Col 블록에 대응하는 움직임 벡터는 움직임 벡터 후보로 사용될 수 있다. 인코딩 장치는 상기 리스트에 포함된 움직임 벡터 후보 중에서 선택된 최적의 움직임 벡터를 지시하는 예측 움직임 벡터 인덱스를 디코딩 장치로 전송할 수 있다. 이 때, 디코딩 장치는 상기 움직임 벡터 인덱스를 이용하여, 움직임 벡터 후보 리스트에 포함된 움직임 벡터 후보 중에서, 현재 블록의 예측 움직임 벡터를 선택할 수 있다.
인코딩 장치는 현재 블록의 움직임 벡터(MV)와 움직임 벡터 예측자(MVP) 간의 움직임 벡터 차분(MVD)을 구할 수 있고, 이를 인코딩하여 디코딩 장치로 전송할 수 있다. 즉, MVD는 현재 블록의 MV에서 MVP를 뺀 값으로 구해질 수 있다. 이 때, 디코딩 장치는 수신된 움직임 벡터 차분을 디코딩할 수 있고, 디코딩된 움직임 벡터 차분과 움직임 벡터 예측자의 가산을 통해 현재 블록의 움직임 벡터를 도출할 수 있다.
인코딩 장치는 또한 참조 픽처를 지시하는 참조 픽처 인덱스 등을 디코딩 장치에 전송할 수 있다.
디코딩 장치의 예측부(230)는 주변 블록의 움직임 정보들을 이용하여 현재 블록의 움직임 벡터를 예측하고, 인코딩 장치로부터 수신한 레지듀얼을 이용하여 현재 블록에 대한 움직임 벡터를 유도할 수 있다. 디코딩 장치는 유도한 움직임 벡터와 인코딩 장치로부터 수신한 참조 픽처 인덱스 정보를 기반으로 현재 블록에 대한 예측 샘플(또는 예측 샘플 어레이)을 생성할 수 있다.
디코딩 장치는 예측 샘플(또는 예측 샘플 어레이)과 인코딩 장치로부터 전송되는 변환 계수들로부터 획득한 레지듀얼 샘플(레지듀얼 샘플 어레이)을 더하여 복원 샘플(또는 복원 샘플 어레이)를 생성할 수 있다. 이를 기반으로 복원 블록 및 복원 픽처가 생성될 수 있다.
상술한 AMVP 및 머지 모드에서는, 현재 블록의 움직임 정보를 도출하기 위해, 복원된 주변 블록의 움직임 정보 및/또는 콜 블록의 움직임 정보가 사용될 수 있다.
인터 예측에 이용되는 다른 모드 중 하나인 스킵 모드의 경우에, 주변 블록의 정보를 그대로 현재 블록에 이용할 수 있다. 따라서 스킵 모드의 경우에, 인코딩 장치는 현재 블록의 움직임 정보로서 어떤 블록의 움직임 정보를 이용할 것인지를 지시하는 정보 외에 레지듀얼 등과 같은 신택스 정보를 디코딩 장치에 전송하지 않는다.
복원 블록은 예측부(230)에서 생성된 예측 블록과 역변환부(225)에서 제공된 레지듀얼 블록을 이용해 생성될 수 있다. 도 2에서는 가산기에서 예측 블록과 레지듀얼 블록이 합쳐져 복원 블록이 생성되는 것으로 설명하고 있다. 이때, 가산기를 복원 블록을 생성하는 별도의 유닛(복원 블록 생성부)로 볼 수 있다. 여기서 상기 복원 블록은 상술한 바와 같이 복원 샘플(또는 복원 샘플 어레이)를 포함하고, 상기 예측 블록은 예측 샘플(또는 예측 샘플 어레이)를 포함하고, 상기 레지듀얼 블록은 레지듀얼 샘플(또는 레지듀얼 샘플 어레이)를 포함할 수 있다. 따라서, 복원 샘플(또는 복원 샘플 어레이)은 대응하는 예측 샘플(또는 예측 샘플 어레이)과 레지듀얼 샘플(레지듀얼 샘플 어레이)이 합쳐서 생성된다고 표현될 수도 있다.
스킵 모드가 적용되는 블록에 대하여는 레지듀얼이 전송되지 않으며 예측 블록을 복원 블록으로 할 수 있다.
복원된 블록 및/또는 픽처는 필터부(235)로 제공될 수 있다. 필터부(235)는 복원된 블록 및/또는 픽처에 디블록킹 필터링, SAO(Sample Adaptive Offset) 및/또는 ALF 등을 적용할 수 있다.
메모리(240)는 복원된 픽처 또는 블록을 저장하여 참조 픽처 또는 참조 블록으로 사용할 수 있도록 할 수 있고 또한 복원된 픽처를 출력부로 제공할 수 있다.
디코딩 장치(200)에 포함되어 있는 엔트로피 디코딩부(210), 재정렬부(215), 역양자화부(220), 역변환부(225), 예측부(230), 필터부(235) 및 메모리(240) 중 영상의 디코딩에 직접적으로 관련된 구성요소들, 예컨대, 엔트로피 디코딩부(210), 재정렬부(215), 역양자화부(220), 역변환부(225), 예측부(230), 필터부(235) 등을 다른 구성요소와 구분하여 디코더 또는 디코딩부로 표현할 수 있다.
또한, 디코딩 장치(200)는 비트스트림에 포함되어 있는 인코딩된 영상에 관련된 정보를 파싱(parsing)하는 도시되지 않은 파싱부를 더 포함할 수 있다. 파싱부는 엔트로피 디코딩부(210)를 포함할 수도 있고, 엔트로피 디코딩부(210)에 포함될 수도 있다. 이러한 파싱부는 또한 디코딩부의 하나의 구성요소로 구현될 수도 있다.
픽처들 간 대상 객체 또는 이미지의 움직임을 고려하여 현재 블록에 대한 인터 예측을 수행할 수 있다. 그러나, 기존의 인터 예측 방법은 병진적인 움직임 (translational motion)을 보상해 주는 방법(병진 움직임 모델)을 기반으로 수행되었다. 상기 병진 움직임 모델은 하나의 움직임 벡터를 기반으로 현재 블록과 매칭되는 참조 블록을 도출하여 인터 예측을 수행하는바 블록 매칭 방법으로 불릴 수 있다. 즉, 기존 인터 예측에 적용된 방법, 병진 움직임 모델은 PU(prediction unit, PU) 내부의 각 샘플들이 모두 같은 움직임 정보를 갖는다.
도 3은 병진 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습을 예시적으로 나타낸다.
도 3을 참조하면 PU의 샘플들은 모두 같은 움직임 정보를 갖기 때문에 제한된 모양으로 예측 및 보상을 수행한다. 구체적으로, 상기 병진 움직임 모델에 따른 경우 PU 단위로 하나의 움직임 벡터에 대한 움직임 파라미터(motion parameter)인 x축 방향의 움직임 벡터 MVx, y축 방향의 움직임 벡터 MVy 를 사용하여 참조 픽처 내에 예측 블록과 같은 모양과 크기의 영역을 예측 참조 블록으로 지정하고, 상기 참조 블록 내의 샘플들이 상기 예측 블록에 대한 예측 샘플들로 사용되었다. 하지만, 상기 병진 움직임 모델을 적용하면 영상의 확대, 축소 및 회전 등의 변형에 대하여 예측 효율이 떨어지는 한계가 있었다. 본 발명에 따르면, 기존의 PU단위로 같은 움직임 정보가 전송되고 유도되는 과정을 수정하여 PU 내부의 샘플들이 서로 다른 움직임 정보를 갖을 수 있도록 할 수 있다. 상기 본 발명에 따른 예측 모델을 2D 아핀 변형(2-dimension affine transform) 방법 또는 아핀 움직임 모델(affine motion model)이라고 불릴 수도 있다. 상기 아핀 움직임 모델을 적용한 인터 예측은 도 4와 같을 수 있다.
도 4는 아핀 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습을 예시적으로 나타낸다. 이하 현재 블록은 PU에 대응될 수 있다.
도 4를 참조하면, x, y는 각각 현재 블록 내의 각 샘플들의 x좌표, y좌표를 나타낸다. x', y'는 각각 상기 x, y에 대응하는 참조 픽처 내의 대응 샘플의 x좌표, y좌표를 나타낸다. 이 경우 (x', y')가 가리키는 샘플 위치의 샘플들을 포함하는 영역은 참조 블록 또는 참조 영역으로 불릴 수 있다. 이 경우 상기 참조 블록은 상기 현재 블록 내 영상에 대한 상술한 회전 변형, 형태 변형, 줌인 또는 줌아웃 등의 크기 변형에 따라 변형된 영상을 포함하는 영역에 대응할 수 있다. 따라서 상기 참조 블록의 의 크기 및 형태는 상기 현재 블록의 크기 및 형태와 다를 수 있다. 도 4에서 나타난 현재 상기 현재 블록 내 샘플들마다 다른 또는 독자적인 움직임 벡터를 도출하는 구체적인 방법은 도 5를 통해 볼 수 있다.
도 5는 아핀 움직임 모델을 적용한 인터 예측에서 예측 블록이 생성되는 모습 및 움직임 벡터를 예시적으로 나타낸다. 도 5를 참조하면, 아핀 움직임 모델이 적용되는 경우의 움직임 벡터를 도출하는 수식을 볼 수 있다. 상기 움직임 벡터는 다음과 같은 수학식을 기반으로 도출될 수 있다.
Figure PCTKR2016007734-appb-M000001
여기서 vx는 현재 블록 내 (x, y)좌표 샘플의 샘플 단위 움직임 벡터의 x성분, vy는 현재 블록 내 상기 (x, y)좌표 샘플의 상기 샘플 단위 움직임 벡터의 y성분을 나타낸다. 즉, (vx, vy)는 상기 (x, y)좌표 샘플에 대한 상기 샘플 단위 움직임 벡터가 된다. 여기서, a, b, c, d, e, f는 상기 현재 블록의 컨트롤 포인트(control point, CP)들로부터 (x, y)좌표의 샘플 단위 움직임 벡터(움직임 정보)를 도출하기 위한 수학식의 파라미터(parameter)들을 나타낸다. 상기 CP는 조종화소라고 표현될 수도 있다. 상기 상기 파라미터들은 PU단위로 전송되는 각 PU의 CP들의 움직임 정보로부터 도출할 수 있다. 상술한 상기 CP들의 움직임 정보로부터 유도된 상기 샘플 단위 움직임 벡터를 도출하는 수학식은 각 PU의 샘플마다 적용될 수 있고, 상기 각 PU 샘플의 x축 및 y축 상대 위치에 따라 참조 영상 내 예측 샘플의 위치로 도출될 수 있다. 상기 샘플 단위 움직임 벡터는 CU(coding unit, CU)에 적용된 파티셔닝(partitioning) 타입에 따른 PU의 사이즈, 비대칭형 또는 대칭형, 파티션 ID 등에 따라 다르게 도출될 수 있다. 이에 대한 구체적인 실시예는 후술하는 도 6 내지 도 16을 통해 나타난다.
도 6은 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU의 CP들을 예시적으로 나타낸다.
상술한 수학식 1에서 나타나듯이 상기 샘플 단위 움직임 벡터를 도출하기 위한 수학식의 파라미터들은 현재 블록의 CP들의 움직임 벡터를 기반으로 다른 값으로 도출될 수 있다. 상기 CP들은 3개일 수 있다. 상기 CP들은 PU의 모양에 따라 다른 위치의 CP의 움직임 정보를 사용할 수 있다.
도 6을 참조하면 상기 샘플 단위 움직임 벡터를 도출하기 위한 수학식을 위한, 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU에서의 방법을 볼 수 있다. 예를 들어, 상기 PU 내 좌상단 샘플의 움직임 벡터를 v0이라고 할 수 있다. 또한 상기 PU와 인접한 주변 블록들의 샘플들을 CP들로 이용하여 각 CP의 움직임 벡터를 v1 및 v2로 할 수 있다. 즉, 상기 PU의 너비와 높이를 S이고, 상기 PU의 좌상단(top-left) 샘플 포지션의 좌표를 (xp, yp)라 할 때, 상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+S, yp)이고, CP2의 좌표는 (xp, yp+S)로 할 수 있다. 상기 CP0의 움직임 벡터는 v0, 상기 CP1의 움직임 벡터는 v1, 상기 CP2의 움직임 벡터는 v2로 할 수 있다. 상기 CP들의 움직임 벡터를 이용하여 상기 샘플 단위 움직임 벡터를 도출할 수 있다. 상기 샘플 단위 움직임 벡터는 다음과 같은 수학식을 기반으로 도출할 수 있다.
Figure PCTKR2016007734-appb-M000002
여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터 v0의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터 v1의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터 v2의 x성분, y성분을 나타낸다. 상술한 수학식 2와 같은 상기 샘플 단위 움직임 벡터를 도출하는 수식에 의하여 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU 내 각 샘플들은 PU 내 상대 위치를 기반으로 움직임 벡터가 도출될 수 있다.
도 7은 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU들의 CP들을 예시적으로 나타낸다. 도 7을 참조하면 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU들의 움직임 벡터를 유도하는 과정을 볼 수 있다. 상술한 파티셔닝 타입 2Nx2N의 경우와 동일한 방법을 통해 PU 내 샘플 단위 움직임 벡터를 도출하기 위한 수학식을 유도할 수 있다. 상기 수학식을 유도하는 과정에서 상기 PU의 모양에 맞는 너비값을 이용할 수 있다. 상기 샘플 단위 움직임 벡터를 유도하기 위하여 3개의 CP들을 도출할 수 있고, 상기 CP들의 위치를 도 7과 같이 조정할 수 있다. 즉, 상기 PU의 너비와 높이를 각각 S/2와 S이고, 상기 PU의 좌상단(top-left) 샘플 포지션의 좌표를 (xp, yp)라 할 때, 상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+S/2, yp)이고, CP2의 좌표는 (xp, yp+S)로 할 수 있다. 상기 샘플 단위 움직임 벡터는 다음과 같은 수학식을 기반으로 도출될 수 있다.
Figure PCTKR2016007734-appb-M000003
여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터 v0의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터 v1의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터 v2의 x성분, y성분을 나타낸다. 수학식 3은 상기 PU의 너비가 S/2임을 고려한 샘플 단위 움직임 벡터를 유도하는 수학식을 나타낸다. 상술한 수학식 3과 같은 상기 샘플 단위 움직임 벡터를 도출하는 수식에 의하여 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU 내 각 샘플들은 PU 내 상대 위치를 기반으로 움직임 벡터가 도출될 수 있다.
도 8은 파티셔닝 타입 2NxN을 기반으로 CU로부터 파티셔닝된 PU들의 CP들을 예시적으로 나타낸다. 도 8에 나타나듯이 상기 샘플 단위 움직임 벡터를 유도하기 위하여 3개의 CP들을 도출할 수 있고, 상기 CP들의 위치를 도 8과 같이 조정하여 도 8에 나타난 PU의 모양에 따라 높이를 S/2로 조정할 수 있다. 즉, 상기 PU의 너비와 높이를 각각 S와 S/2이고, 상기 PU의 좌상단(top-left) 샘플 포지션의 좌표를 (xp, yp)라 할 때, 상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+S, yp)이고, CP2의 좌표는 (xp, yp+S/2)로 할 수 있다. 상기 샘플 단위 움직임 벡터는 다음과 같은 수학식을 기반으로 도출될 수 있다.
Figure PCTKR2016007734-appb-M000004
여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터 v0의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터 v1의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터 v2의 x성분, y성분을 나타낸다. 수학식 4는 상기 PU의 높이가 S/2임을 고려한 샘플 단위 움직임 벡터를 유도하는 수학식을 나타낸다. 상술한 수학식 4와 같은 상기 샘플 단위 움직임 벡터를 도출하는 수식에 의하여 파티셔닝 타입 2NxN을 기반으로 CU로부터 파티셔닝된 PU 내 각 샘플들은 PU 내 상대 위치를 기반으로 움직임 벡터가 도출될 수 있다.
도 9는 비대칭형 PU들의 CP들을 예시적으로 나타낸다. 상기 비대칭형 PU들은 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU들일 수 있다.
도 9에서 나타나듯이 상기 비대칭형 PU들의 너비와 높이를 각각 W와 H라고 할 수 있다. 이 경우 PU 내 샘플 단위 움직임 벡터를 도출하기 위한 수학식은 다음과 같이 유도될 수 있다. 상기 샘플 단위 움직임 벡터를 유도하기 위하여 각 PU에 대한 3개의 CP들을 도출할 수 있고, 상기 CP들의 좌표는 도 9와 같이 PU의 모양에 따른 너비와 높이를 기반으로 조정될 수 있다. 즉, 상기 PU의 너비와 높이를 W와 H이고, 각 PU의 좌상단(top-left) 샘플 포지션의 좌표를 (xp, yp)라 할 때, 상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+W, yp)이고, CP2의 좌표는 (xp, yp+H)로 설정될 수 있다. 이 경우 상기 PU 내 상기 샘플 단위 움직임 벡터는 다음과 같은 수학식을 기반으로 도출될 수 있다.
Figure PCTKR2016007734-appb-M000005
여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터 v0의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터 v1의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터 v2의 x성분, y성분을 나타낸다. 수학식 5는 비대칭형 PU들의 너비와 높이를 고려한 샘플 단위 움직임 벡터를 유도하는 수학식을 나타낸다. 상술한 수학식 5와 같은 상기 샘플 단위 움직임 벡터를 도출하는 수식에 의하여 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU 내 각 샘플들에 대하여 PU 내 상대 위치를 기반으로 움직임 벡터가 도출될 수 있다.
한편, 본 발명에 따르면 PU 단위로 전송되는 CP들, 예를 들어 3개의 CP들의 움직임 정보를 줄이기 위해 PU의 주변 블록 또는 주변 샘플의 움직임 정보를 기반으로 적어도 하나의 CP에 대한 움직임 정보 예측 후보를 선정할 수 있다. 상기 움직임 정보 예측 후보는 움직임 정보 후보 또는 움직임 벡터 후보로 불릴 수 있다.
도 10은 파티셔닝 타입 2Nx2N이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다. 도 10을 참조하면 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 상기 3개의 CP들의 움직임 정보를 위한 예측 후보로 각 CP와 인접한 주변 블록(또는 주변 샘플)의 움직임 정보가 사용될 수 있다. 또한, 상기 각 CP의 움직임 정보 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우, 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
이 경우 예측 후보 위치의 움직임 정보는, 해당 위치의 샘플을 포함하는 주변 블록에 아핀 움직임 모델이 적용된 경우 상기 해당 위치의 샘플의 움직임 벡터를 기반으로 도출될 수 있고, 해당 위치의 샘플을 포함하는 주변 블록에 아핀 움직임 모델이 적용되지 않은 경우 상기 해당 위치의 샘플을 포함하는 상기 주변 블록의 움직임 벡터를 기반으로 도출될 수 있다. 이하 도 10 내지 도 16의 나머지 실시예들의 경우에도 마찬가지이다. 구체적으로 예를 들어, (xp-1, yp-1) 좌표의 샘플을 포함하는 주변 블록에 아핀 움직임 모델이 적용된 경우 상기 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터를 기반으로 상기 A0가 도출될 수 있고, (xp-1, yp-1) 좌표의 샘플을 포함하는 주변 블록에 아핀 움직임 모델이 적용되지 않은 경우 상기 (xp-1, yp-1) 좌표의 샘플을 포함하는 주변 블록의 움직임 벡터를 기반으로 상기 A0가 도출될 수 있다.
이 경우, 도면에서 각 CP에 대한 예측 후보들의 숫자는 예측 후보들을 구분하기 위한 것일 수 있고, 또는 예측 후보들의 우선순위를 나타낼 수도 있다. 예를 들어, CP0에 대한 예측 후보의 경우 A0가 A1더 높은 우선순위를 가질 수 있고, A1이 A2보다 더 높은 우선순위를 가질 수 있다. 이하 도 11 내지 16의 나머지 실시예들의 경우에도 마찬가지이다.
도 11은 파티셔닝 타입 2NxN이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다. 도 11을 참조하면 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 도 11에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
상기 3개의 CP들의 움직임 정보를 위한 예측 후보로 각 CP와 인접한 주변 블록(또는 주변 샘플)의 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우, 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우, 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+S, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다.
다른 실시 예로, CU에 포함된 각 PU들은 파티션 ID와 관계없이 CP들의 움직임 벡터들을 위한 예측 후보들로 CU 내 PU들 간 동일한 예측 후보들을 사용할 수 있다. 예를 들어, 각 PU의 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A0는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A1은 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A2는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B0는 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B1은 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C0는 (xc-1, yc+S) 좌표의 샘플의 움직임 벡터, C1은 (xc-1, yc+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
상기 2NxN 파티셔닝 타입이 적용된 PU의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다.
도 12는 파티셔닝 타입 2NxN이 적용된 PU의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다. 도 12를 참조하면 상기 PU의 각 CP의 예측 후보로 2개의 샘플을 포함한 리스트로 구성한 모습을 볼 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S와 S/2이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다.
도 13은 파티셔닝 타입 Nx2N이 적용된 PU의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다. 도 13을 참조하면 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 도 13에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
도 13에 나타나듯 3개의 CP들의 움직임 정보를 위한 예측 후보로 각 CP와 인접한 주변 블록(또는 주변 샘플)의 코딩된 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 또한, 상기 PU의 파티션 ID가 0인 경우에는 (xp+S/2+1, yp-1) 좌표의 샘플의 움직임 벡터 B2, (xp+S/2+2, yp-1) 좌표의 샘플의 움직임 벡터 B3 중 적어도 하나를 상기 v1의 예측 후보로 더 포함할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+S) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+S) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다.
다른 실시 예로, CU에 포함된 각 PU들은 파티션 ID와 관계없이 CP들의 움직임 벡터들을 위한 예측 후보들로 CU 내 PU들 간 동일한 예측 후보들을 사용할 수 있다. 예를 들어, 각 PU의 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A0는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A1은 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A2는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B0는 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B1은 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C0는 (xc-1, yc+S) 좌표의 샘플의 움직임 벡터, C1은 (xc-1, yc+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
상기 Nx2N 파티셔닝 타입이 적용된 PU의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다.
도 14는 파티셔닝 타입 Nx2N이 적용된 PU의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다. 도 14를 참조하면 상기 PU의 각 CP의 예측 후보로 2개의 샘플을 포함한 리스트로 구성한 모습을 볼 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 S/2와 S이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다.
도 15는 비대칭형 PU들의 CP들의 움직임 정보 예측 후보를 예시적으로 나타낸다. 상기 비대칭형 PU들은 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU들일 수 있다.
도 15의 (a)를 참조하면 파티셔닝 타입 nLx2N이 적용된 PU의 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 도 15의 (a)에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
도 15의 (a)에 나타나듯 3개의 CP들의 움직임 정보를 위한 예측 후보로 각 CP와 인접한 주변 블록(또는 주변 샘플)의 코딩된 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C2 및 C3로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C2 및 상기 C3 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다.
도 15의 (b)를 참조하면 파티셔닝 타입 nRx2N이 적용된 PU의 상기 CP들의 움직임 정보를 위한 예측 후보를 구성하는 방법을 볼 수 있다. 도 15의 (b)에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
도 15의 (b)에 나타나듯 3개의 CP들의 움직임 정보 예측 후보로 각 CP와 인접한 블록의 코딩된 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보를 위한 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+H) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다.
도 15의 (c)를 참조하면 파티셔닝 타입 2NxnU이 적용된 PU의 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 도 15의 (c)에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
도 15의 (c)에서 나타나듯 상기 3개의 CP들의 움직임 정보 예측 후보로 각 CP와 인접한 블록의 코딩된 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보를 위한 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B2 및 B3로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B3은 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B2 및 B3 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다.
도 15의 (d)를 참조하면 파티셔닝 타입 2NxnD이 적용된 PU의 상기 CP들의 움직임 정보 예측 후보를 구성하는 방법을 볼 수 있다. 도 15의 (d)에서 나타난 것과 같이 PU의 모양이 정방형이 아닌 것을 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, PU의 디코딩 처리 순서를 고려하여 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있다.
도 15의 (d)에서 나타나듯 상기 3개의 CP들의 움직임 정보를 위한 예측 후보로 각 CP와 인접한 주변 블록(또는 주변 샘플)의 코딩된 움직임 정보가 사용될 수 있다. 상기 주변 블록에 아핀 움직임 모델이 적용된 경우, 상기 각 CP의 움직임 정보 예측 후보로 상기 각 CP와 인접한 주변 샘플의 움직임 정보가 사용될 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 실시 예로, 상기 PU의 파티션 ID가 1인 경우에는, 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 PU가 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+W, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다.
상술한 도 15의 나타난 CU에 포함된 각 PU들은 모양과 파티션 ID에 관계없이 CP들의 움직임 벡터들을 위한 예측 후보들로 CU 내 PU들 간 동일한 예측 후보들을 사용할 수도 있다. 예를 들어, 각 PU의 CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 CU의 너비와 높이가 각각W와 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A0는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A1은 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A2는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B0는 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B1은 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, 각 PU의 CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C0는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C1은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
상기 nLx2N, nRx2N, 2NxnU 또는 2NxnD 파티셔닝 타입이 적용된 PU의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다.
도 16은 비대칭형 PU들의 CP들의 예측 후보를 2개로 제한하여 구성한 모습을 예시적으로 나타낸다. 상기 비대칭형 PU들은 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU들일 수 있다.
도 16을 참조하면 상기 각각의 PU의 각 CP의 예측 후보를 2개로 제한하여 구성한 모습을 볼 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 이미 디코딩된 주변 블록(또는 주변 샘플)의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 PU의 너비와 높이가 각각 W와 H이고 상기 PU의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다.
한편, 상술한 실시예에서 기술한 것처럼 상기 각 CP의 움직임 벡터를 도출하는 경우, 움직임 정보를 위한 데이터량이 다소 증가될 수 있다. 상기 각 CP들이 현재 PU의 경계부분에 위치하는 특성을 이용하여 상기 데이터량을 줄일 수 있는 방법을 사용할 수 있다.
현재 PU 다음으로 디코딩될 PU(다음 PU)의 CP가 상기 현재 PU의 CP와 동일한 위치를 갖는 경우, 인코딩 장치는 상기 다음 PU의 상기 CP에 대한 움직임 정보는 따로 코딩 하지 않을 수 있고, 이전 디코딩 과정에서 움직임 정보가 존재하지 않는 경우의 CP에 대해서만 상술한 예측 후보를 이용하여 코딩하는 방법을 사용할 수 있다.
도 17은 움직임 정보 코딩이 요구되는 CP와 요구되지 않는 CP를 포함하는 PU를 예시적으로 나타낸다. 움직임 정보가 요구되는 PU인지 여부는 인코딩 장치/디코딩 장치 내부적으로 현재 PU의 주변 블록의 움직임 정보의 디코딩 과정을 확인하여 결정할 수 있다. 따라서, 움직임 정보가 요구되는 PU인지 여부를 결정하는 데 있어 추가적인 신텍스(syntax) 정보의 전송은 필요하지 않을 수 있다. 도 17을 참조하면 현재 PU의 CP들을 볼 수 있다. 현재 PU의 좌상단 샘플을 CP0, 상기 현재 PU의 우상측 인접 샘플을 CP1, 상기 현재 PU의 좌하측 인접 샘플을 CP2라 할 수 있다. 블록들이 래스터 스캔 오더(raster scan order)에 따라 코딩되는 경우 현재 PU의 우측 블록은 아직 디코딩되지 않았다는 것을 판단할 수 있다. 따라서 우측 블록에 위치하는 CP에 대한 움직임 정보는 코딩될 필요가 있다는 것을 결정할 수 있다. 예를 들어, 상기 CP1를 제외한 CP들은 이전 PU들을 디코딩하는 과정에서 움직임 벡터가 도출되었으므로, 인코딩 장치는 상기 CP1에 대한 움직임 정보만을 코딩하여 비트스트림을 통하여 전송할 수 있다.
도 18은 움직임 정보 코딩이 요구되지 않는 CP들을 포함하는 PU를 예시적으로 나타낸다. 도 18을 참조하면 현재 PU의 상위 블록에서 이미 현재 PU의 CP들이 위치한 샘플의 움직임 정보가 도출된 것을 나타낸다. 따라서, 인코딩 장치는 추가적인 움직임 정보의 디코딩없이 해당 움직임 정보를 코딩할 수 있다. 즉, 디코딩 장치는 추가적인 움직임 정보의 수신하지 않고 현재 PU의 CP들의 움직임 벡터를 이전 디코딩 과정에서 도출한 움직임 벡터를 기반으로 도출할 수 있다.
예를 들어, CP0의 경우, 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 상측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 좌측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있다. 또한, 상기 현재 블록의 좌상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, CP1의 경우, 상기 현재 블록의 우상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 현재 블록의 CP1의 움직임 벡터로 이용할 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 우측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP1의 움직임 벡터로 이용할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, CP2의 경우, 상기 현재 블록의 좌하측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 현재 블록의 CP2의 움직임 벡터로 이용할 수 있다. 또한, 상기 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 하측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP2의 움직임 벡터로 이용할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
도 19는 본 발명에 따른 인코딩 장치에 의한 비디오 인코딩 방법을 개략적으로 나타낸다. 도 19에서 개시된 방법은 도 1에서 개시된 인코딩 장치에 의하여 수행될 수 있다. 구체적으로 예를 들어, 도 19의 S1900 내지 S1930은 상기 인코딩 장치의 예측부에 의하여 수행될 수 있고, 상기 S1940은 상기 인코딩 장치의 엔트로피 인코딩부에 의하여 수행될 수 있다.
인코딩 장치는 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출한다(S1900). 인코딩 장치는 RD 코스트를 기반으로 상기 현재 블록의 아핀 움직임 모델의 적용 여부를 결정할 수 있다. 상기 현재 블록에 아핀 움직임 모델이 적용되는 경우, 상기 인코딩 장치는 상기 아핀 움직임 모델을 적용하기 위하여 상기 CP들을 도출할 수 있다. 상기 CP들은 3개일 수 있다.
예를 들어, 상기 현재 블록이 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 S인 경우, 상기 인코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S, 0) 좌표의 샘플, CP2는 (0, S) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 S/2와 S인 경우, 상기 인코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S/2, 0) 좌표의 샘플, CP2는 (0, S) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 2NxN을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 S와 S/2인 경우, 상기 인코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S, 0) 좌표의 샘플, CP2는 (0, S/2) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 W와 H인 경우, 상기 인코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (W, 0) 좌표의 샘플, CP2는 (0, H) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
인코딩 장치는 상기 CP들에 대한 움직임 벡터들을 획득한다(S1910). 인코딩 장치는 상기 CP들에 인접한 주변 샘플들을 기반으로 상기 CP들에 대한 움직임 벡터들을 도출할 수 있다. 상기 CP들에 인접한 샘플들은 예측 후보로 구성될 수 있다. 인코딩 장치는 각 CP와 인접한 주변 블록(또는 샘플)의 코딩된 움직임 정보를 기반으로 상기 CP들의 움직임 벡터를 위한 예측 후보를 구성할 수 있고, 상기 구성된 예측 후보 중 최적의 후보를 기반으로 각 CP의 움직임 벡터를 도춣할 수 있다. 상기 예측 후보는 상기 현재 블록의 파티셔닝 타입, 파티션 ID 및 모양 등에 기반하여 결정될 수 있다.
일 예로, 상기 현재 블록이 파티셔닝 타입 2Nx2N이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플을 포함하는 주변 샘플 그룹 0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp+S, yp-1) 좌표의 샘플 및 (xp+S-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxN이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp+S, yp-1) 좌표의 샘플 및 (xp+S-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp+S/2) 좌표의 샘플 및 (xp-1, yp+S/2-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 인코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 현재 CU의 주변 블록의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 인코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+S, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xc+S, yc) 좌표의 샘플, (xc+S, yc-1) 좌표의 샘플, (xc+S-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 인코딩 장치는 상기 현재 블록의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다. CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+S/2) 좌표의 샘플 및 (xp-1, yp+S/2-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+S/2) 좌표의 샘플 및 상기 (xp-1, yp+S/2-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 Nx2N이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플을 포함하는 주변 샘플 그룹 0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 또한, 상기 현재 블록의 파티션 ID가 0인 경우에는 (xp+S/2+1, yp-1) 좌표의 샘플의 움직임 벡터 B2, (xp+S/2+2, yp-1) 좌표의 샘플의 움직임 벡터 B3 중 적어도 하나를 상기 v1의 예측 후보로 더 포함할 수 있다. 즉, 인코딩 장치는 상기 (xp+S/2, yp-1) 좌표의 샘플 및 (xp+S/2-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 인코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+S) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+S) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+S) 좌표의 샘플, (xc, yc+S) 좌표의 샘플, (xc-1, yc+S-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 인코딩 장치는 상기 현재 블록의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다. CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+S) 좌표의 샘플 및 상기 (xp-1, yp+S-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 nLx2N이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C2 및 C3로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C2 및 상기 C3 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+H) 좌표의 샘플 및 (xc-1, yc+H-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 nRx2N이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 상기 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+H) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+H) 좌표의 샘플, (xc, yc+H) 좌표의 샘플, (xc-1, yc+H-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxnU이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B2 및 B3로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B3은 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B2 및 B3 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xc+W, yc-1) 좌표의 샘플, (xc+W-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxnD이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 인코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+W, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xc+W, yc) 좌표의 샘플, (xc+W, yc-1) 좌표의 샘플, (xc+W-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 인코딩 장치는 상기 현재 블록의 모양과 파티션 ID에 관계없이 CP들의 움직임 벡터들을 위한 예측 후보들로 CU 내 PU들 간 동일한 예측 후보들을 사용할 수도 있다. 예를 들어, 상기 현재 블록의 CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 CU의 너비와 높이가 각각W와 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A0는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A1은 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A2는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, 상기 현재 블록의 CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B0는 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B1은 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, 상기 현재 블록의 CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C0는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C1은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 일 예로, nLx2N, nRx2N, 2NxnU 또는 2NxnD 파티셔닝 타입이 적용된 PU의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 하여 구성할 수 있다.
다른 일 예로, 인코딩 장치는 상기 현재 블록이 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD이 적용된 PU인 경우, 각 CP의 예측 후보를 2개로 제한하여 구성할 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹1에 (xp+W, yp-1) 좌표의 샘플 및 상기 (xp+W-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+W, yp-1) 좌표의 샘플 및 상기 (xp+W-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 인코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 인코딩 장치는 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 인코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+H) 좌표의 샘플 및 상기 (xp-1, yp+H-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
인코딩 장치는 상기 CP들에 대한 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출한다(S1920). 아핀 움직임 모델에 따르면 현재 블록 내 각 샘플 좌표에 따라 다른 움직임 벡터를 가질 수 있다. 상기 CP0의 움직임 벡터, 상기 CP1의 움직임 벡터 및 상기 CP2의 움직임 벡터를 알면 현재 블록 내 샘플 위치에 따른 움직임 벡터를 유도할 수 있다. 즉, 아핀 움직임 모델에 따르면 대상 샘플의 좌표 (x, y)와 3개의 컨트롤 포인트들과의 거리비를 기반으로, 상기 CP들에서의 움직임 벡터들, CP0의 움직임 벡터 (vx0, vy0), CP1의 움직임 벡터 (vx1, vy1), CP2의 움직임 벡터 (vx2, vy2)가 이용되어 상기 샘플 위치의 샘플 단위 움직임 벡터가 도출될 수 있다. 이 경우 인코딩 장치는 상술한 수학식 2 내지 5를 기반으로 상기 현재 블록 내 샘플 위치의 샘플 단위 움직임 벡터를 도출할 수 있다.
인코딩 장치는 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 생성한다(S1930). 인코딩 장치는 상기 샘플 단위 움직임 벡터를 기반으로 참조 픽처 내의 참조 영역을 도출할 수 있으며, 상기 참조 영역 내의 복원된 샘플을 기반으로 상기 현재 블록의 예측 샘플을 생성할 수 있다. 만약 상기 현재 블록에 대한 예측 모드가 스킵 모드가 아닌 경우, 인코딩 장치는 원본 픽처의 원본 샘플과 상기 예측 샘플을 기반으로 레지듀얼 샘플(또는 레지듀얼 신호)을 생성할 수 있다.
인코딩 장치는 상기 현재 블록에 대한 예측 모드 정보를 인코딩하여 출력한다(S1940). 인코딩 장치는 상기 현재 블록에 대한 예측 모드 및 상기 도출된 움직임 벡터에 관한 정보를 인코딩하여 비트스트림 형태로 출력할 수 있다. 또한, 상기 이전 디코딩되는 이전 블록의 CP가 상기 현재 블록의 CP와 동일한 위치를 갖는 경우, 인코딩 장치는 상기 현재 블록의 상기 CP에 대한 움직임 정보는 따로 코딩 하지 않을 수 있다.
예를 들어, 상기 현재 블록의 CP0에 대한 움직임 정보의 경우, 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 상측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 좌측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 또한, 상기 현재 블록의 좌상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP0의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, 상기 현재 블록의 CP1의 경우, 상기 현재 블록의 우상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 현재 블록의 CP1의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 우측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP1의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, 상기 현재 블록의 CP2의 경우, 상기 현재 블록의 좌하측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 현재 블록의 CP2의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다. 또한, 상기 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 하측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 현재 블록의 CP2의 움직임 벡터로 이용할 수 있으므로 상기 CP0에 대한 움직임 정보를 따로 코딩하지 않을 수 있다.
상기 비트스트림은 네트워크 또는 저장매체를 통하여 디코딩 장치로 전송될 수 있다.
비록 도시되지는 않았으나 인코딩 장치는 상기 현재 블록에 대한 레지듀얼 샘플에 관한 정보를 인코딩하여 출력할 수도 있다. 상기 레지듀얼 샘플에 관한 정보는 상기 레지듀얼 샘플에 관한 변환 계수들을 포함할 수 있다.
도 20은 본 발명에 따른 디코딩 장치에 의한 비디오 디코딩 방법을 개략적으로 나타낸다. 도 20에서 개시된 방법은 도 2에서 개시된 디코딩 장치에 의하여 수행될 수 있다. 구체적으로 예를 들어, 도 20의 S2000 내지 S2030은 상기 디코딩 장치의 예측부에 의하여 수행될 수 있다.
디코딩 장치는 현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출한다(S2000). 디코딩 장치는 비트스트림을 통해 상기 현재 블록의 인터 예측에 대한 정보를 수신할 수 있다. 상기 현재 블록에 아핀 움직임 모델이 적용되는 경우, 상기 디코딩 장치는 상기 아핀 움직임 모델을 적용하기 위하여 상기 CP들을 도출할 수 있다. 상기 CP들은 3개일 수 있다. 예를 들어, 상기 현재 블록이 파티셔닝 타입 2Nx2N을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 S인 경우, 디코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S, 0) 좌표의 샘플, CP2는 (0, S) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 Nx2N을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 S/2와 S인 경우, 디코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S/2, 0) 좌표의 샘플, CP2는 (0, S) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 2NxN을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 S와 S/2인 경우, 디코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (S, 0) 좌표의 샘플, CP2는 (0, S/2) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
또한, 상기 현재 블록이 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 CU로부터 파티셔닝된 PU이고 상기 현재 블록의 너비와 높이가 각각 W와 H인 경우, 디코딩 장치는 상기 현재 블록의 좌상단 샘플 포지션의 좌표 (0, 0)을 기준으로, CP0은 좌표는 (0, 0) 좌표의 샘플, CP1은 (W, 0) 좌표의 샘플, CP2는 (0, H) 좌표의 샘플인 것으로 3개의 CP들을 도출할 수 있다.
디코딩 장치는 상기 CP들에 대한 움직임 벡터들을 획득한다(S2010).
디코딩 장치는 상기 CP들의 움직임 벡터를 상기 현재 블록에 대한 움직임 벡터 및 상기 현재 블록의 주변 블록의 움직임 벡터를 기반으로 도출할 수 있다. 디코딩 장치는 비트스트림을 통해 상기 CP들의 움직임 정보를 수신할 수 있다. 상기 현재 블록의 디코딩 이전에 상기 현재 블록의 CP와 위치가 동일한 CP에 대한 움직임 벡터가 도출된 경우, 상기 현재 블록의 CP에 관한 정보를 수신하지 않을 수 있다. 디코딩 장치는 상기 각 CP의 인접한 샘플들을 주변 샘플 그룹으로 구성할 수 있고, 상기 주변 샘플 그룹를 기반으로 상기 CP의 움직임 벡터를 도출할 수 있다. 상기 주변 샘플 그룹은 상기 현재 블록의 파티셔닝 타입, 파티션 ID 및 모양 등에 기반하여 결정될 수 있다.
일 예로, 상기 현재 블록이 파티셔닝 타입 2Nx2N이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플을 포함하는 주변 샘플 그룹 0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp+S, yp-1) 좌표의 샘플 및 (xp+S-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxN이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp+S, yp-1) 좌표의 샘플 및 (xp+S-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp+S/2) 좌표의 샘플 및 (xp-1, yp+S/2-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 디코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 디코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+S, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+S, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+S-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xc+S, yc) 좌표의 샘플, (xc+S, yc-1) 좌표의 샘플, (xc+S-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 디코딩 장치는 상기 현재 블록의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다. CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S와 S/2이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S/2) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S/2-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+S/2) 좌표의 샘플 및 (xp-1, yp+S/2-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+S/2) 좌표의 샘플 및 상기 (xp-1, yp+S/2-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 Nx2N이 적용된 PU인 경우, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플을 포함하는 주변 샘플 그룹 0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 또한, 상기 현재 블록의 파티션 ID가 0인 경우에는 (xp+S/2+1, yp-1) 좌표의 샘플의 움직임 벡터 B2, (xp+S/2+2, yp-1) 좌표의 샘플의 움직임 벡터 B3 중 적어도 하나를 상기 v1의 예측 후보로 더 포함할 수 있다. 즉, 디코딩 장치는 상기 (xp+S/2, yp-1) 좌표의 샘플 및 (xp+S/2-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 디코딩 장치는 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 S이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+S) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+S) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+S) 좌표의 샘플, (xc, yc+S) 좌표의 샘플, (xc-1, yc+S-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 디코딩 장치는 상기 현재 블록의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다. CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+S/2, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+S/2-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 S/2와 S이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+S) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+S-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+S) 좌표의 샘플 및 상기 (xp-1, yp+S-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 nLx2N이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C2 및 C3로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C2 및 상기 C3 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+H) 좌표의 샘플 및 (xc-1, yc+H-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 nRx2N이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 상기 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함하는 주변 샘플 그룹 2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP2의 움직임 벡터 v2에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 C2, C3 및 C4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C2는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C3은 (xc, yc+H) 좌표의 샘플의 움직임 벡터, C4는 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C2, 상기 C3 및 상기 C4 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xc-1, yc+H) 좌표의 샘플, (xc, yc+H) 좌표의 샘플, (xc-1, yc+H-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxnU이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A3 및 A4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A4는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3 및 상기 A4 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 2개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B2 및 B3로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B3은 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B2 및 B3 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xc+W, yc-1) 좌표의 샘플, (xc+W-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 현재 블록이 파티셔닝 타입 2NxnD이 적용된 PU인 경우, 예를 들어, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터, A2는 (xp-1, yp) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터 v0을 도출할 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp+W, yp-1) 좌표의 샘플 및 (xp+W-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터 v1을 도출할 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터 v2를 도출할 수 있다.
또한, 상기 현재 블록의 파티션 ID가 1인 경우에는, 디코딩 장치는 상기 CP0의 움직임 벡터 v0 및 상기 CP1의 움직임 벡터 v1에 대한 예측 후보로 현재 CU의 주변 블록들의 샘플들을 더 포함할 수 있다. 예를 들어, 상기 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 상기 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A3, A4 및 A5로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A3는 (xc-1, yc) 좌표의 샘플의 움직임 벡터, A4는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A5는 (xc, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A3, 상기 A4 및 상기 A5 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
또한, 상기 CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보를 예측 후보로 더 포함할 수 있다. 구체적으로, 3개의 주변 샘플들의 움직임 정보들 중 적어도 하나를 예측 후보로 더 사용할 수 있고, 상기 3개의 움직임 정보는 각각 B2, B3 및 B4로 나타낼 수 있다. 상기 현재 블록이 포함된 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B2는 (xc+W, yc) 좌표의 샘플의 움직임 벡터, B3은 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B4는 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B2, 상기 B3 및 상기 B4 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 더 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xc+W, yc) 좌표의 샘플, (xc+W, yc-1) 좌표의 샘플, (xc+W-1, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함할 수 있다.
다른 일 예로, 상기 디코딩 장치는 상기 현재 블록의 모양과 파티션 ID에 관계없이 CP들의 움직임 벡터들을 위한 예측 후보들로 CU 내 PU들 간 동일한 예측 후보들을 사용할 수도 있다. 예를 들어, 상기 현재 블록의 CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(즉, 상기 현재 CU의 주변 블록 또는 주변 샘플)의 움직임 정보들 중 3개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 3개의 움직임 정보는 각각 A0, A1, A2로 나타낼 수 있다. 상기 CU의 너비와 높이가 각각W와 H이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 A0는 (xc-1, yc-1) 좌표의 샘플의 움직임 벡터, A1은 (xc, yc-1) 좌표의 샘플의 움직임 벡터, A2는 (xc-1, yc) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0, 상기 A1 및 상기 A2 중 적어도 하나의 움직임 벡터를 상기 v0의 예측 후보로 사용할 수 있다.
또한, 상기 현재 블록의 CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 B0는 (xc+W, yc-1) 좌표의 샘플의 움직임 벡터, B1은 (xc+W-1, yc-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1 중 적어도 하나의 움직임 벡터를 상기 v1의 예측 후보로 사용할 수 있다.
또한, 상기 현재 블록의 CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 CU의 너비와 높이가 W이고 상기 CU의 좌상단 샘플 포지션의 좌표가 (xc, yc)인 경우, 상기 C0는 (xc-1, yc+H) 좌표의 샘플의 움직임 벡터, C1은 (xc-1, yc+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1 중 적어도 하나의 움직임 벡터를 상기 v2의 예측 후보로 사용할 수 있다.
다른 일 예로, nLx2N, nRx2N, 2NxnU 또는 2NxnD 파티셔닝 타입이 적용된 PU의 CP들의 움직임 벡터를 위한 예측 후보를 구성하는 방법으로 예측 후보의 개수를 일정 개수로 제한하여 구성할 수 있다.
다른 일 예로, 디코딩 장치는 상기 현재 블록이 파티셔닝 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD이 적용된 PU인 경우, 각 CP의 예측 후보를 2개로 구성할 수 있다. 예를 들어, CP0의 움직임 벡터 v0의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 A0, A1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 A0는 (xp-1, yp-1) 좌표의 샘플의 움직임 벡터, A1은 (xp, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 A0 및 상기 A1을 상기 v0의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹0에 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP1의 움직임 벡터 v1의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 B0와 B1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 B0는 (xp+W, yp-1) 좌표의 샘플의 움직임 벡터, B1은 (xp+W-1, yp-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 B0 및 상기 B1을 상기 v1의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹1에 (xp+W, yp-1) 좌표의 샘플 및 상기 (xp+W-1, yp-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp+W, yp-1) 좌표의 샘플 및 상기 (xp+W-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, CP2의 움직임 벡터 v2의 경우, 디코딩 장치는 주변 블록(또는 주변 샘플)들의 움직임 정보들 중 2개의 움직임 정보를 예측 후보로 사용할 수 있고, 상기 2개의 움직임 정보는 각각 C0와 C1로 나타낼 수 있다. 상기 현재 블록의 너비와 높이가 각각 W와 H이고 상기 현재 블록의 좌상단 샘플 포지션의 좌표가 (xp, yp)인 경우, 상기 C0는 (xp-1, yp+H) 좌표의 샘플의 움직임 벡터, C1은 (xp-1, yp+H-1) 좌표의 샘플의 움직임 벡터를 나타낼 수 있다. 이 경우 디코딩 장치는 상기 C0 및 상기 C1을 상기 v2의 예측 후보로 사용할 수 있다. 즉, 디코딩 장치는 주변 샘플 그룹2에 (xp-1, yp+H) 좌표의 샘플 및 (xp-1, yp+H-1) 좌표의 샘플을 포함할 수 있고, 상기 (xp-1, yp+H) 좌표의 샘플 및 상기 (xp-1, yp+H-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단될 수 있다.
또한, 디코딩 장치는 추가적인 움직임 정보의 수신하지 않고 현재 PU의 CP들의 움직임 벡터를 이전 디코딩 과정에서 도출한 움직임 벡터를 기반으로 도출할 수 있다.
예를 들어, CP0의 경우, 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 상측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 기반으로 현재 블록의 CP0의 움직임 벡터로 도출할 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 좌측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 기반으로 현재 블록의 CP0의 움직임 벡터를 도출할 수 있다. 또한, 상기 현재 블록의 좌상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 기반으로 현재 블록의 CP0의 움직임 벡터를 도출할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, CP1의 경우, 상기 현재 블록의 우상측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP2의 움직임 벡터를 기반으로 현재 블록의 CP1의 움직임 벡터를 도출할 수 있다. 또한, 상기 현재 블록의 상측 경계에 인접하는 상측 주변 블록들 중 가장 우측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 기반으로 현재 블록의 CP1의 움직임 벡터를 도출할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
예를 들어, CP2의 경우, 상기 현재 블록의 좌하측 주변 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP1의 움직임 벡터를 기반으로 현재 블록의 CP2의 움직임 벡터를 도출할 수 있다. 또한, 상기 현재 블록의 좌측 경계에 인접하는 좌측 주변 블록들 중 가장 하측 블록이 아핀 움직임 모델 기반으로 디코딩된 경우, 해당 블록의 CP들을 기반으로 도출된 해당 블록의 우하측 주변 샘플의 움직임 벡터를 기반으로 현재 블록의 CP2의 움직임 벡터를 도출할 수 있다. 이 경우 상술한 수학식 2 내지 5 등을 기반으로 상기 해당 블록의 CP들을 기반으로 상기 해당 블록의 상기 우하측 주변 샘플의 움직임 벡터를 도출할 수 있다.
디코딩 장치는 상기 획득한 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출한다(S2020). 상기 CP0의 움직임 벡터, 상기 CP1의 움직임 벡터 및 상기 CP2의 움직임 벡터를 기반으로 디코딩 장치는 현재 블록 내 샘플 위치에 따른 샘플 단위 움직임 벡터를 유도할 수 있다. 이 경우 디코딩 장치는 상술한 수학식 2 내지 수학식 5를 기반으로 상기 현재 블록 내 샘플 위치의 샘플 단위 움직임 벡터를 도출할 수 있다.
디코딩 장치는 상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 도출한다(S2030). 디코딩 장치는 상기 샘플 단위 움직임 벡터를 기반으로 참조 픽처 내의 참조 영역을 도출할 수 있으며, 상기 참조 영역 내의 복원된 샘플을 기반으로 상기 현재 블록의 예측 샘플을 생성할 수 있다.
디코딩 장치는 상기 예측 샘플을 기반으로 복원 샘플을 생성할 수 있다. 만약 상기 현재 블록에 대한 예측 모드가 스킵 모드가 아닌 경우, 디코딩 장치는 인코딩 장치로부터 수신한 비트스트림으로부터 레지듀얼 신호를 획득하고, 상기 현재 블록에 대한 레지듀얼 샘플을 생성할 수 있다. 이 경우 디코딩 장치는 상기 예측 샘플 및 상기 레지듀얼 샘플을 기반으로 상기 복원 샘플을 생성할 수 있다. 디코딩 장치는 상기 복원 샘플을 기반으로 복원 픽처를 생성할 수 있다.
상술한 본 발명에 따르면, 현재 블록에 대한 보다 정확한 샘플 단위 움직임 벡터들을 도출할 수 있고, 인터 예측 효율을 상당히 높일 수 있다.
또한, 본 발명에 따르면 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들을 기반으로 현재 블록의 샘플들에 대한 움직임 벡터를 효율적으로 도출할 수 있다.
또한, 본 발명에 따르면 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들에 대한 정보를 추가적으로 전송하지 않고 이미 디코딩된 주변 블록의 컨트롤 포인트들의 움직임 벡터들을 기반으로 현재 블록에 대한 컨트롤 포인트들의 움직임 벡터들을 도출할 수 있다. 이를 통하여 상기 컨트롤 포인트들의 움직임 벡터들을 위한 데이터량을 없애거나 줄일 수 있고, 전반적인 코딩 효율을 향상시킬 수 있다.
또한, 본 발명에 따르면 현재 블록 내의 이미지가 평면이동된 경우뿐 아니라, 회전, 줌인, 줌아웃 또는 평현사변형 변형된 경우에 대하여도 샘플 단위 움직임 벡터들을 통하여 효과적으로 인터 예측을 수행할 수 있다. 이를 통하여 현재 블록에 대한 레지듀얼 신호를 위한 데이터량을 없애거나 줄일 수 있고, 전반적인 코딩 효율을 향상시킬 수 있다.
상술한 실시예에서, 방법들은 일련의 단계 또는 블록으로써 순서도를 기초로 설명되고 있지만, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 당업자라면 순서도에 나타내어진 단계들이 배타적이지 않고, 다른 단계가 포함되거나 순서도의 하나 또는 그 이상의 단계가 본 발명의 범위에 영향을 미치지 않고 삭제될 수 있음을 이해할 수 있을 것이다.
상술한 본 발명에 따른 방법은 소프트웨어 형태로 구현될 수 있으며, 본 발명에 따른 인코딩 장치 및/또는 디코딩 장치는 예를 들어 TV, 컴퓨터, 스마트폰, 셋톱박스, 디스플레이 장치 등의 영상 처리를 수행하는 장치에 포함될 수 있다.
본 발명에서 실시예들이 소프트웨어로 구현될 때, 상술한 방법은 상술한 기능을 수행하는 모듈(과정, 기능 등)로 구현될 수 있다. 모듈은 메모리에 저장되고, 프로세서에 의해 실행될 수 있다. 메모리는 프로세서 내부 또는 외부에 있을 수 있고, 잘 알려진 다양한 수단으로 프로세서와 연결될 수 있다. 프로세서는 ASIC(application-specific integrated circuit), 다른 칩셋, 논리 회로 및/또는 데이터 처리 장치를 포함할 수 있다. 메모리는 ROM(read-only memory), RAM(random access memory), 플래쉬 메모리, 메모리 카드, 저장 매체 및/또는 다른 저장 장치를 포함할 수 있다.

Claims (15)

  1. 디코딩 장치에 의하여 수행되는 비디오 디코딩 방법에 있어서,
    현재 블록에 대한 컨트롤 포인트(control point, CP)들을 도출하는 단계;
    상기 CP들에 대한 움직임 벡터들을 획득하는 단계;
    상기 획득된 움직임 벡터들을 기반으로 상기 현재 블록 내 샘플 단위 움직임 벡터를 도출하는 단계; 및
    상기 샘플 단위 움직임 벡터를 기반으로 상기 현재 블록에 대한 예측 샘플을 도출하는 단계를 포함하는 것을 특징으로 하는, 디코딩 방법.
  2. 제1항에 있어서,
    현재 코딩 유닛(coding unit, CU)로부터 복수의 예측 유닛(prediction unit, PU)들을 파티셔닝(partitioning) 타입 Nx2N을 기반으로 파티셔닝하는 단계를 더 포함하되,
    상기 현재 블록은 상기 복수의 PU들 중 하나에 대응되고,
    상기 현재 블록의 사이즈가 (S/2)xS이고 상기 현재 블록의 좌상단(top-left) 샘플 포지션의 좌표가 (xp, yp)인 경우,
    상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+S/2, yp)이고, CP2의 좌표는 (xp, yp+S)인 것을 특징으로 하는, 디코딩 방법.
  3. 제2항에 있어서,
    상기 샘플 단위 움직임 벡터는 다음의 수학식을 기반으로 도출되고,
    Figure PCTKR2016007734-appb-I000001
    여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터의 x성분, y성분을 나타내는 것을 특징으로 하는, 디코딩 방법.
  4. 제2항에 있어서,
    상기 CP들에 대한 움직임 벡터들을 획득하는 단계는,
    (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터0을 도출하는 단계;
    (xp+S/2, yp-1) 좌표의 샘플 및 (xp+S/2-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터1을 도출하는 단계; 및
    (xp-1, yp+S) 좌표의 샘플 및 (xp-1, yp+S-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터2를 도출하는 단계를 포함하는 것을 특징으로 하는, 디코딩 방법.
  5. 제4항에 있어서,
    상기 주변 샘플 그룹0은 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함하고, 상기 주변 샘플 그룹1은 상기 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플을 포함하고, 상기 주변 샘플 그룹2는 상기 (xp-1, yp+S) 좌표의 샘플 및 상기 (xp-1, yp+S-1) 좌표의 샘플을 포함하되,
    상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단되고,
    상기 (xp+S/2, yp-1) 좌표의 샘플 및 상기 (xp+S/2-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단되고,
    상기 (xp-1, yp+S) 좌표의 샘플 및 상기 (xp-1, yp+S-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단됨을 특징으로 하는, 디코딩 방법.
  6. 제4항에 있어서,
    상기 현재 블록에 대응하는 상기 PU의 파티션 ID가 1이고 상기 현재 CU 의 좌상단 샘플 포지션이 (xc, yc)인 경우,
    상기 주변 샘플 그룹0은 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함하고, 상기 주변 샘플 그룹2는 (xc-1, yc+S-1) 좌표의 샘플, (xc-1, yc+S) 좌표의 샘플, (xc, yc+S) 좌표의 샘플 중 적어도 하나를 더 포함함을 특징으로 하는, 디코딩 방법.
  7. 제1항에 있어서,
    현재 코딩 유닛(coding unit, CU)로부터 복수의 PU들을 파티셔닝 타입 2NxN을 기반으로 파티셔닝하는 단계를 더 포함하되,
    상기 현재 블록은 상기 복수의 PU들 중 하나에 대응되고,
    상기 현재 블록의 사이즈가 Sx(S/2)이고, 상기 현재 블록의 좌상단(top-left) 샘플 포지션의 좌표가 (xp, yp)인 경우,
    상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+S, yp)이고, CP2의 좌표는 (xp, yp+S/2)인 것을 특징으로 하는, 디코딩 방법.
  8. 제6항에 있어서,
    상기 샘플 단위 움직임 벡터는 다음의 수학식을 기반으로 도출되고,
    Figure PCTKR2016007734-appb-I000002
    여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터의 x성분, y성분을 나타내는 것을 특징으로 하는, 디코딩 방법.
  9. 제6항에 있어서,
    상기 CP들에 대한 움직임 벡터들을 획득하는 단계는,
    (xp-1, yp-1) 좌표의 샘플, (xp, yp-1) 좌표의 샘플 및 (xp-1, yp) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹0을 기반으로 CP0에 대한 움직임 벡터0을 도출하는 단계;
    (xp+S, yp-1) 좌표의 샘플 및 (xp+S-1, yp-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹1을 기반으로 CP1에 대한 움직임 벡터1을 도출하는 단계; 및
    (xp-1, yp+S/2) 좌표의 샘플 및 (xp-1, yp+S/2-1) 좌표의 샘플 중 적어도 하나를 포함하는 주변 샘플 그룹2를 기반으로 CP2에 대한 움직임 벡터2를 도출하는 단계를 포함하는 것을 특징으로 하는, 디코딩 방법.
  10. 제9항에 있어서,
    상기 주변 샘플 그룹0은 상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플을 포함하고, 상기 주변 샘플 그룹1은 상기 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플을 포함하고, 상기 주변 샘플 그룹2는 상기 (xp-1, yp+S/2) 좌표의 샘플 및 상기 (xp-1, yp+S/2-1) 좌표의 샘플을 포함하되,
    상기 (xp-1, yp-1) 좌표의 샘플 및 상기 (xp, yp-1) 좌표의 샘플은 미리 정의된 제1 우선 순서에 따라 순차적으로 가용성 여부가 판단되고,
    상기 (xp+S, yp-1) 좌표의 샘플 및 상기 (xp+S-1, yp-1) 좌표의 샘플은 미리 정의된 제2 우선 순서에 따라 순차적으로 가용성 여부가 판단되고,
    상기 (xp-1, yp+S/2) 좌표의 샘플 및 상기 (xp-1, yp+S/2-1) 좌표의 샘플은 미리 정의된 제3 우선 순서에 따라 순차적으로 가용성 여부가 판단됨을 특징으로 하는, 디코딩 방법.
  11. 제9항에 있어서,
    상기 현재 블록에 대응하는 상기 PU의 파티션 ID가 1이고 상기 현재 CU의 좌상단 샘플 포지션이 (xc, yc)인 경우, 상기 주변 샘플 그룹0은 (xc-1, yc-1) 좌표의 샘플, (xc-1, yc) 좌표의 샘플, (xc, yc-1) 좌표의 샘플 중 적어도 하나를 더 포함하고, 상기 주변 샘플 그룹1은 (xc+S, yc-1) 좌표의 샘플, (xc+S-1, yc-1) 좌표의 샘플, (xc+S, yc) 좌표의 샘플 중 적어도 하나를 더 포함함을 특징으로 하는, 디코딩 방법.
  12. 제1항에 있어서,
    현재 코딩 유닛(coding unit)로부터 비대칭한 복수의 PU(prediction unit, PU)들을 파티셔닝(partitioning) 타입 nLx2N, nRx2N, 2NxnU 또는 2NxnD을 기반으로 파티셔닝하는 단계를 더 포함하되,
    상기 현재 블록은 상기 PU들 중 하나인 것을 특징으로 하는, 디코딩 방법.
  13. 제10항에 있어서,
    상기 현재 블록의 사이즈는 WxH이고, 상기 현재 블록의 좌상단(top-left) 샘플 포지션의 좌표가 (xp, yp)인 경우,
    상기 CP들 중 CP0의 좌표는 (xp, yp)이고, CP1의 좌표는 (xp+W, yp)이고, CP2의 좌표는 (xp, yp+H)인 것을 특징으로 하는, 디코딩 방법.
  14. 제11항에 있어서,
    상기 샘플 단위 움직임 벡터는 다음의 수학식을 기반으로 도출되고,
    Figure PCTKR2016007734-appb-I000003
    여기서, vx, vy는 각각 상기 현재 블록 내 (x, y)좌표의 샘플에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx0, vy0는 각각 상기 CP0에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx1, vy1은 각각 상기 CP1에 대한 움직임 벡터의 x성분, y성분을 나타내고, vx2, vy2는 각각 상기 CP2에 대한 움직임 벡터의 x성분, y성분을 나타내는 것을 특징으로 하는, 디코딩 방법.
  15. 제1항에 있어서,
    상기 CP들 중 상기 현재 블록 이전에 디코딩된 주변 블록의 CP와 위치가 동일한 CP에 대한 움직임 벡터는 상기 주변 블록의 상기 CP에 대한 움직임 벡터를 기반으로 도출되는 것을 특징으로 하는, 디코딩 방법.
PCT/KR2016/007734 2015-08-07 2016-07-15 비디오 코딩 시스템에서 인터 예측 방법 및 장치 WO2017026681A1 (ko)

Priority Applications (12)

Application Number Priority Date Filing Date Title
US15/751,077 US10582215B2 (en) 2015-08-07 2016-07-15 Inter prediction method and apparatus in video coding system
CN202210527381.3A CN114866770A (zh) 2015-08-07 2016-07-15 视频编译系统中的帧间预测方法和装置
KR1020187004403A KR20180028514A (ko) 2015-08-07 2016-07-15 비디오 코딩 시스템에서 인터 예측 방법 및 장치
CN201680055123.2A CN108141582B (zh) 2015-08-07 2016-07-15 视频编译系统中的帧间预测方法和装置
CN202210527386.6A CN114866771A (zh) 2015-08-07 2016-07-15 视频编译系统中的帧间预测方法和装置
CN202210527374.3A CN114866769A (zh) 2015-08-07 2016-07-15 视频编译系统中的帧间预测方法和装置
CN202210527005.4A CN114866768A (zh) 2015-08-07 2016-07-15 视频编译系统中的帧间预测方法和装置
EP16835322.5A EP3334158A4 (en) 2015-08-07 2016-07-15 METHOD AND DEVICE FOR INTERPRETING IN A VIDEO CODING SYSTEM
US16/773,958 US11122290B2 (en) 2015-08-07 2020-01-27 Inter prediction method and apparatus in video coding system
US17/348,204 US11503334B2 (en) 2015-08-07 2021-06-15 Inter prediction method and apparatus in video coding system
US17/957,916 US11902569B2 (en) 2015-08-07 2022-09-30 Inter prediction method and apparatus in video coding system
US18/400,309 US20240187641A1 (en) 2015-08-07 2023-12-29 Inter prediction method and apparatus in video coding system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US201562202182P 2015-08-07 2015-08-07
US62/202,182 2015-08-07

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US15/751,077 A-371-Of-International US10582215B2 (en) 2015-08-07 2016-07-15 Inter prediction method and apparatus in video coding system
US16/773,958 Continuation US11122290B2 (en) 2015-08-07 2020-01-27 Inter prediction method and apparatus in video coding system

Publications (1)

Publication Number Publication Date
WO2017026681A1 true WO2017026681A1 (ko) 2017-02-16

Family

ID=57983307

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/007734 WO2017026681A1 (ko) 2015-08-07 2016-07-15 비디오 코딩 시스템에서 인터 예측 방법 및 장치

Country Status (5)

Country Link
US (5) US10582215B2 (ko)
EP (1) EP3334158A4 (ko)
KR (1) KR20180028514A (ko)
CN (5) CN108141582B (ko)
WO (1) WO2017026681A1 (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019072187A1 (en) * 2017-10-13 2019-04-18 Huawei Technologies Co., Ltd. PRUNING A MOVEMENT MODEL CANDIDATE LIST FOR AN INTERPRETING
CN109922347A (zh) * 2017-12-13 2019-06-21 财团法人工业技术研究院 视频编译码方法及其图像处理装置
WO2019144908A1 (en) * 2018-01-26 2019-08-01 Mediatek Inc. Method and apparatus of affine inter prediction for video coding system

Families Citing this family (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107925758B (zh) * 2015-08-04 2022-01-25 Lg 电子株式会社 视频编译系统中的帧间预测方法和设备
CN108600749B (zh) * 2015-08-29 2021-12-28 华为技术有限公司 图像预测的方法及设备
US11153600B2 (en) 2016-02-08 2021-10-19 Sharp Kabushiki Kaisha Motion vector generation device, prediction image generation device, video decoding device, and video coding device
TWI762260B (zh) 2016-02-09 2022-04-21 弗勞恩霍夫爾協會 用於圖像/視訊資料串流而允許有效可縮減性或有效隨機存取之技術
MX2018011412A (es) * 2016-03-24 2019-01-10 Lg Electronics Inc Metodo y aparato para inter-prediccion en sistema de codificacion de video.
US10448010B2 (en) * 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
CN108271023B (zh) * 2017-01-04 2021-11-19 华为技术有限公司 图像预测方法和相关设备
CN116193109A (zh) * 2017-01-16 2023-05-30 世宗大学校产学协力团 影像编码/解码方法
WO2019235819A1 (ko) * 2018-06-04 2019-12-12 엘지전자 주식회사 비디오 신호를 처리하기 위한 방법 및 장치
JP7104186B2 (ja) 2018-06-05 2022-07-20 北京字節跳動網絡技術有限公司 Ｉｂｃとａｔｍｖｐとの間でのインタラクション
WO2020007093A1 (zh) * 2018-07-02 2020-01-09 华为技术有限公司 一种图像预测方法及装置
BR112020026992A2 (pt) 2018-07-02 2021-04-06 Huawei Technologies Co., Ltd. Método de predição de vetor de movimento e aparelho relacionado
CN110677645B (zh) * 2018-07-02 2022-06-10 华为技术有限公司 一种图像预测方法及装置
US11257254B2 (en) * 2018-07-20 2022-02-22 Google Llc Data compression using conditional entropy models
WO2020035029A1 (en) * 2018-08-17 2020-02-20 Mediatek Inc. Method and apparatus of simplified sub-mode for video coding
US11057636B2 (en) 2018-09-17 2021-07-06 Qualcomm Incorporated Affine motion prediction
US10896494B1 (en) * 2018-09-27 2021-01-19 Snap Inc. Dirty lens image correction
US11589075B2 (en) * 2018-10-01 2023-02-21 Lg Electronics Inc. Encoding/decoding method for video signal and device therefor
WO2020114517A1 (en) * 2018-12-08 2020-06-11 Beijing Bytedance Network Technology Co., Ltd. Shifting on affine parameters
US11153598B2 (en) * 2019-06-04 2021-10-19 Tencent America LLC Method and apparatus for video coding using a subblock-based affine motion model
KR102638578B1 (ko) * 2019-11-21 2024-02-20 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 변환 및 계수 시그널링에 대한 방법 및 장치
GB2593778A (en) * 2020-04-03 2021-10-06 Sony Group Corp Video data encoding and decoding
GB2603559B (en) * 2021-07-22 2023-08-09 Imagination Tech Ltd Coding blocks of pixels

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09172644A (ja) * 1995-10-18 1997-06-30 Sharp Corp アフィン変換による動き補償フレーム間予測方式を用いた動画像符号化・復号化装置
JPH09200763A (ja) * 1996-01-12 1997-07-31 Hitachi Ltd 動画像符号化における動き補償方法
WO2011149292A2 (ko) * 2010-05-26 2011-12-01 엘지전자 주식회사 비디오 신호의 처리 방법 및 장치
KR20140113854A (ko) * 2013-03-15 2014-09-25 삼성전자주식회사 비디오의 부호화 방법 및 장치, 비디오의 복호화 방법 및 장치
WO2015099816A1 (en) * 2012-11-13 2015-07-02 Intel Corporation Content adaptive dominant motion compensated prediction for next generation video coding

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1274252A3 (en) 1995-08-29 2005-10-05 Sharp Kabushiki Kaisha Video coding device and video decoding device with a motion compensated interframe prediction
CN106454370B (zh) * 2010-04-13 2019-11-01 Ge视频压缩有限责任公司 解码器、重建数组的方法、编码器、编码方法及数据流
CN108632608B (zh) * 2011-09-29 2022-07-29 夏普株式会社 图像解码装置、图像解码方法、图像编码装置及图像编码方法
CN102936618B (zh) 2012-10-19 2014-04-09 江苏大学 基于已知e1查找特异性介导靶蛋白泛素反应e2-e3的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09172644A (ja) * 1995-10-18 1997-06-30 Sharp Corp アフィン変換による動き補償フレーム間予測方式を用いた動画像符号化・復号化装置
JPH09200763A (ja) * 1996-01-12 1997-07-31 Hitachi Ltd 動画像符号化における動き補償方法
WO2011149292A2 (ko) * 2010-05-26 2011-12-01 엘지전자 주식회사 비디오 신호의 처리 방법 및 장치
WO2015099816A1 (en) * 2012-11-13 2015-07-02 Intel Corporation Content adaptive dominant motion compensated prediction for next generation video coding
KR20140113854A (ko) * 2013-03-15 2014-09-25 삼성전자주식회사 비디오의 부호화 방법 및 장치, 비디오의 복호화 방법 및 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3334158A4 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019072187A1 (en) * 2017-10-13 2019-04-18 Huawei Technologies Co., Ltd. PRUNING A MOVEMENT MODEL CANDIDATE LIST FOR AN INTERPRETING
CN109922347A (zh) * 2017-12-13 2019-06-21 财团法人工业技术研究院 视频编译码方法及其图像处理装置
WO2019144908A1 (en) * 2018-01-26 2019-08-01 Mediatek Inc. Method and apparatus of affine inter prediction for video coding system
US11356657B2 (en) 2018-01-26 2022-06-07 Hfi Innovation Inc. Method and apparatus of affine inter prediction for video coding system

Also Published As

Publication number Publication date
CN108141582A (zh) 2018-06-08
CN108141582B (zh) 2022-06-03
CN114866769A (zh) 2022-08-05
US20200236396A1 (en) 2020-07-23
US20180234697A1 (en) 2018-08-16
US20210314603A1 (en) 2021-10-07
US11902569B2 (en) 2024-02-13
US20240187641A1 (en) 2024-06-06
CN114866770A (zh) 2022-08-05
US11122290B2 (en) 2021-09-14
US11503334B2 (en) 2022-11-15
CN114866768A (zh) 2022-08-05
US10582215B2 (en) 2020-03-03
KR20180028514A (ko) 2018-03-16
US20230035396A1 (en) 2023-02-02
CN114866771A (zh) 2022-08-05
EP3334158A1 (en) 2018-06-13
EP3334158A4 (en) 2019-03-20

Similar Documents

Publication Publication Date Title
WO2017026681A1 (ko) 비디오 코딩 시스템에서 인터 예측 방법 및 장치
WO2019164031A1 (ko) 영상 코딩 시스템에서 블록 분할 구조에 따른 영상 디코딩 방법 및 장치
WO2019107916A1 (ko) 영상 코딩 시스템에서 인터 예측에 따른 영상 디코딩 방법 및 장치
WO2020076143A1 (ko) 다중 가정 예측을 사용하는 비디오 신호 처리 방법 및 장치
WO2018030773A1 (ko) 영상 부호화/복호화 방법 및 장치
WO2018066867A1 (ko) 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
WO2017204532A1 (ko) 영상 부호화/복호화 방법 및 이를 위한 기록 매체
WO2018030599A1 (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
WO2017171370A1 (ko) 비디오 신호 처리 방법 및 장치
WO2018226066A1 (ko) 영상 코딩 시스템에서 어파인 예측에 따른 영상 디코딩 방법 및 장치
WO2018097626A1 (ko) 비디오 신호 처리 방법 및 장치
WO2017086747A1 (ko) 기하 변환 픽처를 이용한 영상의 부호화/복호화 방법 및 장치
WO2017086748A1 (ko) 기하 변환 영상을 이용하는 영상의 부호화/복호화 방법 및 장치
WO2019225993A1 (ko) 비디오 신호 처리 방법 및 장치
WO2018047995A1 (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
WO2012043989A2 (ko) 블록 분할 방법 및 복호화 장치
WO2019190201A1 (ko) 비디오 신호 처리 방법 및 장치
WO2020071616A1 (ko) Cclm에 기반한 인트라 예측 방법 및 그 장치
WO2019182295A1 (ko) 비디오 신호 처리 방법 및 장치
WO2018124333A1 (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
WO2018056701A1 (ko) 비디오 신호 처리 방법 및 장치
WO2019221465A1 (ko) 영상 복호화 방법/장치, 영상 부호화 방법/장치 및 비트스트림을 저장한 기록 매체
WO2020085800A1 (ko) 서브블록 기반의 모션 보상을 이용한 비디오 신호 처리 방법 및 장치
WO2016190627A1 (ko) 비디오 신호 처리 방법 및 장치
WO2020171681A1 (ko) 인트라 예측 기반 비디오 신호 처리 방법 및 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16835322

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 15751077

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20187004403

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 2016835322

Country of ref document: EP