WO2012050301A2 - Method for encoding and decoding image and device using same - Google Patents
Method for encoding and decoding image and device using same Download PDFInfo
- Publication number
- WO2012050301A2 WO2012050301A2 PCT/KR2011/006538 KR2011006538W WO2012050301A2 WO 2012050301 A2 WO2012050301 A2 WO 2012050301A2 KR 2011006538 W KR2011006538 W KR 2011006538W WO 2012050301 A2 WO2012050301 A2 WO 2012050301A2
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- information
- current
- lcu
- block
- picture
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
- H04N19/463—Embedding additional information in the video signal during the compression process by compressing encoding parameters before transmission
Definitions
- the present invention relates to image compression technology, and more particularly, to a method and apparatus for inter picture prediction.
- High-efficiency image compression technology can be used to effectively transmit, store, and reproduce high-resolution, high-quality video information.
- inter prediction and intra prediction may be used.
- a pixel value of a current picture is predicted by referring to information of another picture
- a pixel value is predicted by using a correlation between pixels in the same picture.
- An object of the present invention is to provide a method for deriving information of a current block from information of a collocated block.
- An object of the present invention is to provide a parameter set and syntax structure for deriving information of a current block by using information of a co-located block.
- An object of the present invention is to provide a method for variously selecting a target picture to which a same position block belongs.
- An object of the present invention is to provide a method of considering a temporal level between a target picture and a current picture in a process of deriving information of a current block by using information of the same position block.
- An object of the present invention is to provide a method for adaptive use, such as using some of the information of the same position block or modifying it.
- An object of the present invention is to provide a method for adaptively changing the order of information transmitted from an encoder to a decoder.
- An embodiment of the present invention is to determine to derive the information of the current block from the information of the same position block, encoding the information of the current block using the information of the same position block and the same position And transmitting indication information about deriving the information of the current block from the information of the block.
- the information of the current block derived from the same position block may be partition information of the current block.
- the indication information may be a flag indicating to derive information of the current block from information of the same position block.
- the indication information may be transmitted only when the current picture to which the current block belongs is in the inter prediction mode.
- the target picture to which the co-located block belongs is a picture coded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already-encoded pictures,
- the temporal level may be smaller and one of the most recently coded pictures.
- the indication information indicates that, when the temporal level of the current picture to which the current block belongs and the target picture to which the same position block belongs is different, the depth of the coding unit having the maximum depth is increased by a predetermined size.
- the dividing state of the co-located block may be adjusted so as to decrease the instruction to use the dividing state of the current block.
- the instruction information instructs to use the division state of the same position block as the division information of the current block up to a predetermined depth, and separate for the current block for the division exceeding the predetermined depth.
- the split information may be transmitted.
- the indication information instructs to use the division state of the same position block as the division information of the current block, and for the additional division performed based on the division state of the same position block,
- the split information can be transmitted.
- Another embodiment of the present invention includes the steps of constructing information for predicting a pixel value of a current block and transmitting the configured information, wherein the configured information is information about a prediction mode of the current block.
- the configured information is information about a prediction mode of the current block.
- Another embodiment of the present invention provides a method for deriving information of a current block and information of the derived current block according to the indication information about deriving information of a current block using information of a co-located block. Predicting a pixel value of the current block based on the image information decoding method.
- the indication information may be a flag indicating to derive information of the current block from information of the same location block.
- the information of the current block derived from the same position block may be partition information of the current block.
- the target picture to which the co-located block belongs is a picture that is coded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already coded pictures, and is already The most recent coded picture that has the same temporal level as the current picture among the coded pictures, the picture that has a smaller temporal level and has the closest temporal distance than the current picture among the previously coded pictures, or the picture that is currently coded among the pictures that are already coded.
- the temporal level may be one of the smallest and most recently coded pictures.
- the partitioning state of the same position block is used as the partitioning information of the current block up to a predetermined depth, and the partitioning beyond the predetermined depth is based on separately received partitioning information of the current block. Division can be performed.
- the predetermined depth may be one step lower than the maximum depth of the current block.
- the partitioning state of the same location block is used as the partitioning information of the current block, and the additional partitioning performed from the partitioning state of the same location block may be performed based on the separately received partitioning information. .
- the information of the current block can be derived from the information of the same block only when the current picture to which the current block belongs and the temporal level of the target picture to which the same location block belongs are the same.
- Another embodiment of the present invention includes receiving information for predicting a pixel value of a current block and predicting a pixel value of the current block according to the received information, wherein the current block In the step of predicting a pixel value of, the image information encoding method does not apply the split information of the current block when the received information indicates that the current block is predicted to be a skip mode.
- Information on how to use the direction of the layer and / or the information of the base layer, and information on how to use the information of the base layer indicates any one of full use, partial use, and modified use of the base layer information.
- a method of using the information of the base layer If the information derived according to the information is different from the information of the current layer, the video information encoding method is characterized by transmitting additional information for deriving the information of the current layer.
- the method comprises: receiving first information for deriving information of a current layer using information of a base layer, and based on the first information, the current layer from information of the base layer. Deriving information of the current layer and predicting pixel values of the current layer based on the derived information of the current layer, wherein the first information includes information of the current layer using information of the base layer. A flag indicating to induce and information on the direction of the base layer and / or a method of using the information of the base layer, wherein the information on the method of using the information of the base layer includes full use, partial use of the base layer information. And using one of the modifications, and using the information of the base layer. If the derived information and the information of the current layer are different according to the related information, the information of the current layer is derived based on additional information for deriving information of the current layer and information derived from the base layer.
- the video information decoding method is derived based on additional information for deriving information of the current layer and information derived from the base layer.
- the information of the current block can be derived using the information of the same position block, the amount of information transmitted can be reduced.
- the same position block suitable for deriving the information of the current block can be effectively selected.
- the information of the same position block is used in consideration of the temporal level of the target picture and the current picture, the information of the current block can be derived more accurately.
- the order of information transmitted from the encoder to the decoder can be adaptively changed, the amount of information and the amount of computation processed by the decoder can be reduced.
- FIG. 1 is a block diagram schematically illustrating an image encoding apparatus (encoder) according to an embodiment of the present invention.
- FIG. 2 is a conceptual diagram schematically illustrating a prediction unit according to an embodiment of the present invention.
- FIG. 3 is a diagram schematically illustrating an example of a quad tree structure of a processing unit in a system to which the present invention is applied.
- FIG. 4 is a block diagram schematically illustrating an image decoder according to an embodiment of the present invention.
- FIG. 5 is a conceptual diagram schematically illustrating a prediction unit of an image decoder according to an embodiment of the present invention.
- FIG. 6 is a diagram schematically illustrating candidate blocks that may be used in inter prediction of a current block.
- FIG. 7 is a diagram schematically illustrating division of a current LCU by using a split state of the same location LCU.
- FIG. 8 is a flowchart schematically illustrating an example of a method of encoding using a flag indicating whether to use information of an identical location LCU in a system to which the present invention is applied.
- FIG. 9 is a flowchart schematically illustrating a method of decoding information of a current LCU using information of a co-located LCU in a system to which the present invention is applied.
- FIG. 10 is a flowchart schematically illustrating an example of a method for transmitting information by configuring a parameter set in an encoder to which the present invention is applied.
- FIG. 11 is a flowchart schematically illustrating an example of a method of performing decoding by using a parameter set received by a decoder to which the present invention is applied.
- FIG. 12 is a flowchart schematically illustrating an example of a method for configuring and transmitting information about a current LCU in an encoder to which the present invention is applied.
- FIG. 13 is a flowchart schematically illustrating decoding of a coding unit using a parameter set received by a decoder to which the present invention is applied.
- FIG. 14 is a conceptual diagram schematically illustrating a hierarchical B structure.
- 15 is a view schematically showing a divided state of the same position LCU.
- FIG. 16 is a diagram schematically showing a derivation state of a current LCU using information of the same location LCU.
- FIG. 17 schematically illustrates an example of a split state of the same position LCU.
- 19 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- 20 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
- FIG. 21 schematically illustrates an example of a split state with respect to the same position LCU.
- FIG. 22 schematically illustrates an example in which the split state for the current LCU is further divided after being derived from the same position LCU.
- FIG. 24 schematically illustrates an example in which the split state of the current LCU is finally divided by additional split information after being derived from the split state of the same position LCU up to a predetermined depth.
- FIG. 25 is a conceptual diagram schematically illustrating a method for additionally transmitting additional partition information by using split information of the same location LCU in a system to which the present invention is applied.
- FIG. 26 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- FIG. 27 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
- 28 is a block diagram schematically illustrating an operation of an encoder in a system to which SVC is applied.
- 29 is a conceptual diagram schematically illustrating an example of inter-layer prediction.
- FIG. 30 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- 31 is a flowchart schematically illustrating an example of a method of receiving and decoding a parameter set in a decoder to which the present invention is applied.
- each of the components in the drawings described in the present invention are shown independently for the convenience of the description of the different characteristic functions in the image encoding / decoding apparatus, each component is implemented by separate hardware or separate software It does not mean to be.
- two or more of each configuration may be combined to form one configuration, or one configuration may be divided into a plurality of configurations.
- Embodiments in which each configuration is integrated and / or separated are also included in the scope of the present invention without departing from the spirit of the present invention.
- the image encoding apparatus 100 may include a picture splitter 105, a predictor 110, a transformer 115, a quantizer 120, a realigner 125, and an entropy encoder 130. , An inverse quantization unit 135, an inverse transform unit 140, a filter unit 145, and a memory 150.
- the picture dividing unit 105 may divide the input picture into at least one processing unit.
- the processing unit may be a prediction unit (PU), a transform unit (TU), or a coding unit (CU).
- the predictor 110 includes an inter prediction unit for performing inter prediction and an intra prediction unit for performing intra prediction.
- the prediction unit 110 generates a prediction block by performing prediction on the processing unit of the picture in the picture division unit 105.
- the processing unit of the picture in the prediction unit 110 may be a coding unit, a transformation unit, or a prediction unit.
- the processing unit in which the prediction is performed may differ from the processing unit in which the prediction method and the details are determined.
- the method of prediction and the prediction mode are determined in units of prediction units, and the performance of prediction may be performed in units of transform units.
- the residual value (residual block or residual signal) between the generated prediction block and the original block is input to the converter 115.
- prediction mode information and motion vector information used for prediction are encoded by the entropy encoder 130 along with the residual value and transmitted to the decoder.
- the transform unit 115 performs a transform on the residual block in transform units and generates transform coefficients.
- the transform unit in the transform unit 115 may be a transform unit and may have a quad tree structure. In this case, the size of the transform unit may be determined within a range of a predetermined maximum and minimum size.
- the transform unit 115 may transform the residual block using a discrete cosine transform (DCT) and / or a discrete sine transform (DST).
- DCT discrete cosine transform
- DST discrete sine transform
- the quantization unit 120 may generate quantization coefficients by quantizing the residual values transformed by the transformation unit 115.
- the value calculated by the quantization unit 120 is provided to the inverse quantization unit 135 and the reordering unit 125.
- the reordering unit 125 rearranges the quantization coefficients provided from the quantization unit 120. By rearranging the quantization coefficients, the efficiency of encoding in the entropy encoder 130 may be increased.
- the reordering unit 125 may rearrange the quantization coefficients in the form of a two-dimensional block into a one-dimensional vector form through a coefficient scanning method.
- the reordering unit 125 may increase the entropy coding efficiency of the entropy encoder 130 by changing the order of coefficient scanning based on probabilistic statistics of coefficients transmitted from the quantization unit.
- the entropy encoder 130 may perform entropy encoding on the quantized coefficients rearranged by the reordering unit 125.
- Entropy encoding may use, for example, an encoding method such as Exponential Golomb, Context-Adaptive Variable Length Coding (CAVLC), or Context-Adaptive Binary Arithmetic Coding (CABAC).
- CABAC Context-Adaptive Binary Arithmetic Coding
- the entropy encoder 130 may include quantization coefficient information, block type information, prediction mode information, division unit information, prediction unit information, transmission unit information, and motion vector of the coding unit received from the reordering unit 125 and the prediction unit 110.
- Various information such as information, reference picture information, interpolation information of a block, and filtering information may be encoded.
- the entropy encoder 130 may apply a constant change to a transmitted parameter set or syntax.
- the inverse quantization unit 135 inverse quantizes the quantized values in the quantization unit 120, and the inverse transformer 140 inversely transforms the inverse quantized values in the inverse quantization unit 135.
- the residual value generated by the inverse quantization unit 135 and the inverse transformer 140 may be combined with the prediction block predicted by the prediction unit 110 to generate a reconstructed block.
- the filter unit 145 may apply a deblocking filter and / or an adaptive loop filter (ALF) to the reconstructed picture.
- ALF adaptive loop filter
- the deblocking filter may remove block distortion generated at the boundary between blocks in the reconstructed picture.
- the adaptive loop filter may perform filtering based on a value obtained by comparing the reconstructed image with the original image after the block is filtered through the deblocking filter. ALF may be performed only when high efficiency is applied.
- the filter unit 145 may not apply filtering to the reconstructed block used for inter prediction.
- the memory 150 may store the reconstructed block or the picture calculated by the filter unit 145.
- the reconstructed block or picture stored in the memory 150 may be provided to the predictor 110 that performs inter prediction.
- a coding unit is a unit in which coding / decoding of a picture is performed and may be divided with a depth based on a quad tree structure. Unlike the existing macro block, the coding unit may have various sizes such as 64x64, 32x32, 16x16, and 8x8. The largest coding unit is called a largest coding unit (LCU).
- an LCU size, a maximum depth at which a coding unit may be divided, and the like may be defined in a sequence parameter set (SPS) transmitted from an encoder to a decoder.
- SPS sequence parameter set
- the encoder may transmit information about a largest coding unit (LCU) and a minimum coding unit (SCU) to the decoder.
- Information (depth information) regarding the number of splittable times together with information about the maximum coding unit and / or the minimum coding unit may be transmitted to the decoder.
- Information on whether the coding unit is split based on the quad tree structure may be transmitted from the encoder to the decoder through flag information such as a split flag.
- FIG. 2 is a conceptual diagram schematically illustrating a prediction unit according to an embodiment of the present invention.
- the predictor 200 may include an inter prediction unit 210 and an intra prediction unit 220.
- the inter prediction unit 210 may generate a prediction block by performing prediction based on information of at least one picture of a previous picture and / or a subsequent picture of the current picture.
- the intra prediction unit 220 may generate a prediction block by performing prediction based on pixel information in the current picture.
- the inter prediction unit 210 may select a reference picture with respect to the prediction unit and select a reference block having the same size as that of the prediction unit in units of integer pixel samples.
- the inter prediction unit 210 generates a prediction block in which the residual signal with the current prediction unit is minimized and the size of the motion vector is also minimized.
- the prediction block may be generated in sub-integer sample units such as 1/2 pixel sample unit and 1/4 pixel sample unit.
- the motion vector may be expressed in units of integer pixels or less.
- the motion vector may be expressed in units of 1/4 pixels for luminance pixels and in units of 1/8 pixels for chrominance pixels.
- Information such as an index, a motion vector (ex. Motion Vector Predictor), and a residual signal of the reference picture selected by the inter prediction unit 210 is encoded and transmitted to the decoder.
- FIG. 3 is a diagram schematically illustrating an example of a quad tree structure of a processing unit in a system to which the present invention is applied.
- the maximum coding unit (LCU) 300 may have a hierarchical structure composed of smaller coding units 310 through division, and the hierarchical structure of the coding unit may be based on size information, depth information, split flag information, and the like. Can be specified.
- the size information of the largest coding unit, the split depth information, and whether the current coding unit is split may be included in a sequence parameter set (SPS) on the bit stream and transmitted to the image decoder.
- SPS sequence parameter set
- the split flag of the coding unit may not be transmitted to the minimum coding unit.
- inter prediction may be performed in units of prediction units.
- intra prediction a prediction mode may be determined in units of prediction units, and prediction may be performed in units of prediction units.
- a prediction mode may be determined in units of prediction units, and intra prediction may be performed in units of transformation units.
- the prediction unit 320 may be 2N ⁇ 2N or N ⁇ N (N is an integer), and in case of inter prediction, the prediction unit 330 may be 2N ⁇ . 2N, 2N ⁇ N, N ⁇ 2N, or N ⁇ N.
- N ⁇ N may be determined to be applied only to the minimum size coding unit or to be applied only to intra prediction.
- N ⁇ mN, mN ⁇ N, 2N ⁇ mN, or mN ⁇ 2N (m ⁇ 1) may be further defined and used.
- the image decoder 400 includes an entropy decoder 410, a reordering unit 415, an inverse quantizer 420, an inverse transform unit 425, a predictor 430, and a filter unit 435.
- Memory 440 may be included.
- the input bit stream may be decoded according to a procedure in which image information is processed by the image encoder.
- variable length coding VLC, hereinafter called 'VLC'
- the entropy decoder 410 is also identical to the VLC table used in the encoder. It can be implemented as a VLC table to perform entropy decoding. Even when CABAC is used to perform entropy encoding in the image encoder, the entropy decoding unit 410 may perform entropy decoding using CABAC correspondingly.
- Information for generating a prediction block among the information decoded by the entropy decoder 410 may be provided to the predictor 430, and a residual value of which entropy decoding is performed by the entropy decoder may be input to the reordering unit 415.
- the reordering unit 415 may reorder the bit stream deentropy decoded by the entropy decoding unit 410 based on a method of reordering the image encoder.
- the reordering unit 415 may reorder the coefficients expressed in the form of a one-dimensional vector by restoring the coefficients in the form of a two-dimensional block.
- the reordering unit 415 may receive the information related to the coefficient scanning performed by the encoder and perform the rearrangement by performing a reverse scanning method based on the scanning order performed by the corresponding encoder.
- the inverse quantization unit 420 may perform inverse quantization based on the quantization parameter provided by the encoder and the coefficient values of the rearranged block.
- the inverse transform unit 425 may perform inverse DCT and / or inverse DST on DCT and DST performed by the transform unit of the encoder with respect to the quantization result performed by the image encoder.
- the inverse transform may be performed based on a transmission unit determined by the encoder or a division unit of an image.
- the DCT and / or DST may be selectively performed according to a plurality of pieces of information, such as a prediction method, a size and a prediction direction of the current block, and the inverse transformer 425 of the decoder is performed by the transformer of the encoder.
- Inverse transformation may be performed based on the transformation information.
- the prediction unit 430 may generate the prediction block based on the prediction block generation related information provided by the entropy decoding unit 410 and previously decoded block and / or picture information provided by the memory 440.
- the reconstruction block may be generated using the prediction block generated by the predictor 430 and the residual block provided by the inverse transform unit 425.
- the reconstructed block and / or picture may be provided to the filter unit 435.
- the filter unit 435 applies deblocking filtering, sample adaptive offset (SAO), and / or adaptive loop filtering to the reconstructed blocks and / or pictures.
- the memory 440 may store the reconstructed picture or block to use as a reference picture or reference block, and provide the reconstructed picture to the output unit.
- FIG. 5 is a conceptual diagram schematically illustrating a prediction unit of an image decoder according to an embodiment of the present invention.
- the predictor 500 may include an intra prediction unit 510 and an inter prediction unit 520.
- the intra prediction unit 510 may generate a prediction block based on pixel information in the current picture when the prediction mode for the prediction unit is an intra prediction mode (intra prediction mode).
- the inter screen prediction unit 520 may include motion information required for inter screen prediction of the current prediction unit provided by the image encoder when the prediction mode for the corresponding prediction unit is an inter prediction mode (inter prediction mode).
- An inter-screen prediction of the current prediction unit may be performed based on information included in at least one of a previous picture or a subsequent picture of the current picture including the current prediction unit by using information about a motion vector, a reference picture index, and the like.
- the motion information may be determined in response to the skip flag, the merge flag, and the like of the received coding unit.
- the prediction unit 500 has been described as including a configuration for each function.
- the present invention is not limited thereto, and the prediction unit may be implemented as a single configuration for performing the above-described functions.
- FIG. 6 is a diagram schematically illustrating candidate blocks that may be used in inter prediction of a current block.
- the current block 600 may select an available block from blocks of the upper region B and the left region A.
- the motion information of the current block may be predicted using the motion information of the selected block.
- a block that is an intra prediction mode among neighboring blocks of the current block may be excluded from the available block.
- the available candidate blocks may be selected while searching each area A and B in a predetermined order, and a block located at a specific position of each area may be selected. It can also be fixedly used as a candidate block. For example, at least one of blocks 650, 660, and 670 located at each corner of the current block 600 may be selected as a candidate block.
- the left block 630 and / or the right block 640 except for the corner blocks 660 and 670 among the blocks of the upper area B may be selected as candidate blocks, and the corner blocks among the blocks of the left area A may be selected as candidate blocks.
- the upper block 610 and / or the lower block 620 may be selected as candidate blocks.
- the motion information of the current block may be predicted using a block selected by a predetermined criterion among candidate blocks selected in each area (corner, left, top).
- a block having the same position as the current block (co-located block 680, hereinafter, referred to as 'same location block' for convenience of description) in another picture is included in the candidate block. It can be used to predict the motion information of the current block.
- a picture to which the same location block belongs is referred to as a " same location picture. &Quot;
- the current LCU may be recursively divided according to the split flag included in the sequence parameter set.
- the split flag eg, split_coding_unit_flag
- the current coding unit may be split. If the split flag value is 0, the current coding unit may not be split.
- the division may be divided into four symmetric subunits or asymmetric subunits. Therefore, a split flag is required for every LCU or every coding unit, and this syntax may affect the performance of encoding / decoding.
- the term "transfer" in the present specification means to be transmitted from the encoder to the decoder.
- a flag indicating whether to use the split state of the same position LCU is defined as it is.
- a flag such as use_coloc_LCU_split_info_flag may be defined and used.
- Table 1 schematically shows an example of a syntax structure indicating whether a block is divided using a split flag in a conventional system.
- the division of the coding unit is indicated by a flag as an example.
- split_coding_unit_flag when the unit size of the current coding unit is used at the position of the current coding unit, a split flag (split_coding_unit_flag) is exceeded when the size of the current coding unit is larger than the minimum coding unit size. Through, it may be indicated whether to split the coding unit.
- x0 and y0 may indicate the positions of the top left samples of the coding unit with respect to the top-left samples of the current picture.
- the split information may be transmitted in a syntax of a coding tree level instead of the coding unit level.
- Table 2 schematically shows an example of an encoding tree syntax structure indicating whether a block is divided using a split flag in a conventional system.
- splitting information (split_coding_unit_flag) relating to a coding unit is transmitted as the splitting target block as the syntax of the coding tree level.
- a flag indicating to use the split information (divided state) of the same location LCU may be defined, such as use_coloc_LCU_split_info_flag.
- Table 3 schematically illustrates an example of a coding unit level syntax structure indicating whether a split state (division information) of the same location LCU is currently used for the LCU in a system to which the present invention is applied.
- a flag indicating whether to use split information of the same position LCU may be transmitted in a syntax of a coding tree level.
- Table 4 schematically illustrates an example of a coded tree level syntax structure indicating, via a flag, whether to use a split state of a co-located LCU for a current LCU in a system to which the present invention is applied.
- the division information for the coding unit in the current LCU may be derived from the division information (division state) of the same position LCU.
- the value of use_coloc_LCU_split_info_flag is 1, split information for a coding unit in the current LCU, for example, a value of split_coding_unit_flag for each coding unit in the current LCU, may be derived.
- each sub-combination unit in the current LCU may be divided in the same manner as the coding unit in the same position LCU.
- the co-location LCU from which the split information of the current LCU is derived may be specified as the co-location LCU of the picture closest to the current picture in time among the pictures that are already encoded.
- FIG. 7 is a diagram schematically illustrating division of a current LCU by using a split state of the same location LCU.
- FIG. 7A schematically illustrates a coding unit division state of a picture that is closest in time to a current picture among encoded pictures.
- 7B schematically illustrates a coding unit division state of a current picture.
- the split state of the first LCU is the same between the same position picture and the current picture. Therefore, the division state of the same position LCU can be used as it is through the flag, and the division state of the second LCU of the same position picture can be used as the division state of the second LCU of the current picture.
- one flag indicates that the split state of the co-located LCU is not applied to the current LCU, and then indicates information indicating the split state of the current LCU. For example, a split flag (split_coding_unit_flag) for a coding unit may be transmitted.
- the flag indicates that the division state of the same position LCU is not applied to the current LCU.
- the split information on the coding unit of the current LCU may be transmitted.
- FIG. 8 is a flowchart schematically illustrating an example of a method of encoding using a flag indicating whether to use information of an identical location LCU in a system to which the present invention is applied.
- the encoder divides the coding unit starting from the LCU (S810).
- the splitting of the coding unit may be performed by the picture splitter in the encoder.
- the encoder may split the coding unit and may split the prediction unit and the transform unit.
- the encoder may configure a syntax to be transmitted to the decoder, that is, a parameter set, based on the split information of the current LCU (S820).
- the encoder may determine whether to transmit information about the split state of the current LCU using the split state of the same location LCU.
- the encoder may configure a parameter set including a flag indicating to use the split information of the same position LCU.
- the encoder transmits the configured parameter set to the decoder (830).
- the information in the parameter set may be encoded and transmitted.
- FIG. 9 is a flowchart schematically illustrating a method of decoding information of a current LCU using information of a co-located LCU in a system to which the present invention is applied.
- the decoder receives a parameter set from an encoder (S910).
- the parameter set may be encoded and transmitted to the decoder in a bitstream.
- the decoder decodes the parameter set to obtain information necessary to decode the information about the image of the current LCU.
- the received parameter set includes a flag indicating whether to derive the information of the current LCU using the information of the same location LCU.
- the parameter set may include a flag indicating to use the split state of the same position LCU as it is.
- the decoder decodes information about the current CU (S920). For example, when a flag indicating to use the split state of the same position LCU is transmitted, the decoder configures the split state of the current LCU to be the same as the split state of the same position LCU, and decodes based on the split state of the current LCU. Necessary procedures, such as predictions, can be performed.
- the syntaxes transmitted after indicating that the current coding unit is no longer divided include a skip flag (skip_flag) indicating whether to apply a skip mode, a syntax (pred_mode) indicating a prediction mode, and the like.
- the current coding unit may be encoded using the skip mode.
- the prediction unit of the current coding unit may predict the information of the reference block indicated by the index transmitted later by using the information of the current coding unit and not transmitting the residual signal.
- the prediction unit of the current coding unit may be a partition obtained by dividing the current coding unit.
- the index indicating the reference block may be a merge index.
- the skip mode may not transmit the residual signal by using the motion information of the block indicated by the merge index as the motion information of the current block and the pixel value of the prediction block as the pixel value of the current block.
- the motion information of the block indicated by the merge index may be used as the motion information of the current block, and the residual signals of the prediction block and the current block may be transmitted.
- a syntax indicating a prediction mode may indicate whether a prediction mode of a current block is an intra prediction mode or an inter prediction mode.
- the syntax pred_mode may indicate information on the partition state of the current block together with the prediction mode.
- Table 5 schematically shows a conventional syntax structure indicating other information about a current block after indicating whether a current coding block is to be split through a split flag.
- the skip flag is described as an example of information other than division.
- a method of first transmitting other information about the current coding block may be considered before indicating whether the current coding unit is split by the flag split_coding_unit_flag.
- a skip flag (skip_flag) may be used to indicate whether the current coding unit is to be coded in the skip mode.
- Table 6 schematically shows an example of a syntax structure for first transmitting other information about a current coding block before indicating with a flag whether a current coding block is to be divided in a system to which the present invention is applied.
- the split information may not be transmitted unnecessarily with the split flag, thereby reducing the total amount of information.
- a splitting flag for example, split_coding_unit_flag
- a splitting flag for transmitting split information in order to increase the efficiency of encoding / decoding and to reduce information processing cost and / or information amount, etc. It may be considered to adaptively change the order of syntaxes for transmitting other information (eg, a skip flag indicating whether to apply ski mode or skip_flag).
- the splitting flag may be transmitted first and then the skip flag is transmitted. If the splitting probability is low, the skipping flag may be transmitted first, followed by the splitting flag.
- the split flag and the skip flag may be adaptively determined according to the following conditions.
- the depth of the coding unit is shallow, it is likely to be divided. For example, it may be said that a coding unit having a depth of zero has a greater possibility of splitting than a coding unit having a depth of one.
- the division flag is first transmitted in the transmission of the parameter set, and the If the depth is equal to or deeper than the reference depth (the depth of the current coding unit ⁇ the reference depth), the skip flag may be transmitted first. For example, when the depth of the current coding unit is 0, the split flag (split_coding_unit_flag) is sent first when transmitting the parameter set, and when the depth of the current coding unit is equal to or greater than 1, the skip flag (skip_flag) is sent first. can do.
- the size of the coding unit is also likely to be divided if the size of the coding unit is large. For example, it may be said that an LCU is more likely to be split than a coding unit having a size of 32x32.
- the division flag is transmitted first in the transmission of the parameter set, and the size of the current coding unit If is equal to or smaller than the reference size (size of the current coding unit ⁇ reference size), the skip flag may be transmitted first. For example, if the size of the current coding unit is 32x32 or larger than 32x32, the split flag (split_coding_unit_flag) is sent first in the transmission of the parameter set, and if the size of the current coding unit is smaller than 32x32, the skip flag (skip_flag) is sent first. can do.
- QP quantization parameter
- the division flag is first transmitted in the transmission of the parameter set, If the quantization parameter of the current coding unit is equal to or greater than the reference quantization parameter (quantization parameter ⁇ reference quantization parameter of the current coding unit), the skip flag may be transmitted first.
- split_coding_unit_flag a split flag
- skip_flag a split flag
- a combination of depth, size, and quantization parameter of the coding unit may be combined to determine whether to send a split flag or skip flag first for the current coding unit.
- the division flag may be transmitted before the skip flag.
- the split flag may be transmitted before the skip flag.
- the split flag may be transmitted before the skip flag when the depth of the current coding unit is smaller than the reference depth and the quantization parameter of the current coding unit is smaller than the reference quantization parameter.
- the split flag may be transmitted before the skip flag when the size of the current coding unit is larger than the reference size and the quantization parameter of the current coding unit is smaller than the reference quantization parameter.
- the other one may be used as a condition for acknowledging an exception.
- the division flag may be transmitted later than the skip flag if the quantization parameter of the current coding unit is larger than the reference quantization parameter.
- the split flag may be transmitted later than the skip flag if the size of the current coding unit is smaller than the reference size.
- the split flag may be transmitted later than the skip flag if the depth of the current coding unit is larger than the reference depth.
- the division flag may be transmitted before the skip flag.
- the split flag may be transmitted before the skip flag.
- the information on whether to apply the skip mode as the information to be determined after the split information as the information on the current coding unit other than the split information has been described as an example, but the present invention is not limited thereto.
- the above-described method may be similarly applied to other information about the current coding unit, such as a syntax indicating a prediction mode.
- the transmission order of the split information and the skip information is determined for the current coding unit
- the present invention is not limited thereto, and the above-described method is similarly applied to other processing units (prediction unit, transformation unit). Applicable
- FIG. 10 is a flowchart schematically illustrating an example of a method for transmitting information by configuring a parameter set in an encoder to which the present invention is applied.
- the encoder first configures a parameter set (S1010).
- the encoder may adaptively determine the location of the split information for the current LCU and the information about the prediction mode in the parameter set.
- split_coding_unit_flag information about a prediction mode for the current LCU.
- the encoder transmits the configured parameter set to the decoder (S1020).
- the parameter set may be encoded and transmitted along with other information.
- 11 is a flowchart schematically illustrating an example of a method of performing decoding by using a parameter set received by a decoder to which the present invention is applied.
- the decoder receives a parameter set from an encoder (S1110).
- the parameter set may be encoded and transmitted on the bitstream.
- the splitting information for example, split_soding-unit_flag
- information pred_mode
- the decoder may decode the coding unit according to the information and / or the indication of the received parameter set (S1120).
- the decoder may first apply the transmitted information first, and sequentially decode the current LCU using the following information. For example, when split information of the current LCU is delivered, the current LCU is split as indicated by the information. Subsequently, when a prediction mode is transmitted for each LCU or each partition (CU / PU / TU), prediction may be performed in a corresponding region by applying the prediction mode.
- the prediction mode when the prediction mode is delivered first, the prediction mode may be applied first.
- the decoding may be performed by applying a skip mode by inter prediction to the unit.
- the same position LCU used to derive the split state of the current LCU has been described as a picture closest in time to the current picture among previously encoded pictures, but other pictures are also the same position LCU. We can consider how to use as target of.
- the following pictures may be used in addition to the picture closest in time to the current picture among pictures that are already encoded.
- the LCU in the same position as the current LCU spatially in the target picture becomes the same position LCU.
- a picture that is currently encoded has the same temporal level and the most recently encoded picture.
- the temporal level is smaller than the picture currently being encoded and the most recently encoded picture.
- the temporal level refers to the temporal layer of each picture.
- the temporal level is assigned an ID to a temporal layer corresponding to each temporal level. It can also be expressed as a temporal id.
- the current picture does not refer to a picture of a higher level than itself.
- 12 is a conceptual diagram schematically illustrating a hierarchical B structure. Referring to FIG. 12, each picture 1200 to 1280 may make predictions by referring to a picture having a temporal level lower than itself or a picture at a same temporal level (pictures having a time ID less than or equal to itself). No prediction is made by referring to a picture at a higher temporal level.
- the method of using the same position LCU to derive the split state of the current LCU is not used when the slice type of the current picture is an intra slice (Intra Slice) of the intra prediction mode, and the slice type of the current picture is inter-screen. It may be used only when a slice (inter slice) of a prediction mode is used.
- the method of using the co-located LCU to derive the split state of the current LCU may be used only when the slice type of the current picture and the slice type of the co-located LCU are both slices of an inter prediction mode. have.
- the information of the current LCU may be derived / predicted from the information of the same location LCU, or the information of the same location LCU may be used as the information of the current LCU.
- the expression 'use information of the same location LCU' is used herein to mean both including deriving / predicting information of the current LCU and using information of the same location LCU as the current LCU. do.
- use_coloc_LCU_info_flag may be defined.
- use_coloc_LCU_split_info_flag and use_coloc_LCU_info_flag described above may play the same role.
- 'use_coloc_LCU_info_flag' is used as an example of a flag indicating that information of the same location LCU is used for convenience of description.
- use_coloc_LCU_info_flag When the value of use_coloc_LCU_info_flag is 1, the information of the current LCU, which uses the information of the same location LCU, is not transmitted separately. This is because the information of the same location LCU can be inferred or the corresponding information of the same location LUC can be used as it is. For example, if the information of the same location LCU used through use_coloc_LCU_info_flag is split information of the LCU, the split flag, for example split_coding_unit_flag, may not be transmitted.
- the information of the same position LCU may be information of the coding unit CU in the same position LCU.
- the information of the coding unit in the same position LCU may be information of a specific coding unit or may be information of each coding unit.
- Information of a coding unit in the same position LCU may be used for a corresponding coding unit in the current LCU, or may be used for each coding unit or a specific coding unit in the current LCU.
- the information available is as follows:
- split information on a current LCU and / or a coding unit in a current LCU (hereinafter, for convenience of description, 'the current LCU and / or a coding unit in the current LCU' is referred to as a 'current coding unit'). For example, all splitting flags (split_coding_unit_flag) in a parameter set related to the current coding unit.
- Skip information for the current coding unit For example, all skip flags (skip_flag) in the parameter set for the current coding unit.
- Prediction mode for the current coding unit For example, all prediction mode syntax values (pred_mode) values in the parameter set for the current coding unit.
- Mode for the current coding unit For example, all mode values in the parameter set for the current coding unit.
- the decoder converts the received codeword into a mode table index through a variable length coding (VLC) table and converts the mode table index into a mode value through a mode table (ranking table).
- the mode value includes a prediction mode (pred_mode), a flag indicating division of a prediction unit (intra_split_flag), an indicator indicating partitioning of inter prediction, an inter_partitioning_idc, a reference picture list (ref_idx_l0), an inter prediction prediction indicator (inter_pred_idx), and a transformation.
- split_transform_unit_flag a value such as a split flag (split_transform_unit_flag) for a unit.
- the mode value of the same unit LCU and / or the coding unit within the same position LCU (hereinafter, for convenience of description, the term 'the same position LCU and / or the coding unit within the same position LCU' is referred to as the same position coding unit) Can be used as a mode value for the current coding unit.
- Partitioning information of the coding unit for inter prediction in the current coding unit For example, in the parameter set for the current coding unit, the indicator for specifying the type of partitioning the current coding unit for the purpose of inter-picture prediction (inter_partitioning_idc)
- the information of 1) to 8) can be obtained by using the information of the same position coding unit.
- Table 7 schematically illustrates an example of a syntax structure for applying the information of 1) to 8) in units of coding units in the LCU rather than the LCU level.
- the target coding unit may be designated (x0, y0) to transmit information on whether to use the information of the same position coding unit.
- a flag using information of the same position coding unit has been described at the coding unit level.
- a flag for designating target information may be used.
- a flag (use_coloc_CU_split_info_flag) that specifically indicates that the information indicating whether to use is split information may be used.
- the current coding unit that can use the information of the same position coding unit.
- the information of the same position coding unit may be used only for the coding unit that is no longer split among the current coding units.
- Table 8 schematically shows an example of a syntax structure indicating whether to use information of the same position coding unit for a coding unit that is no longer split among coding units in the current LCU.
- the SCU represents a coding unit that is no longer split.
- FIG. 13 is a flowchart schematically illustrating an example of a method for configuring and transmitting information about a current coding unit in an encoder to which the present invention is applied.
- the coding unit is a meaning including an LCU.
- the encoder determines whether to use information of the same position coding unit with respect to the current coding unit (S1310).
- the target picture of the same position coding unit may be selected from various pictures as well as the picture encoded immediately before the current picture.
- Various information may be derived from the same position coding unit as well as information on the split among the information about the current coding unit. The information on the method of selecting the target picture and the information available from the same position coding unit are as described above.
- the method of deriving the current information from the information of the same position coding unit may be applied only when the current picture is an inter slice of the inter prediction mode.
- the encoder configures a parameter set including information of the current coding unit (S1320).
- the encoder may include, in the parameter set, a flag indicating whether to derive information of the current coding unit by using the information of the same position coding unit.
- the information used from the same position coding unit is not limited to the split information. Therefore, not only the splitting information but also flags (use_coloc_LCU_info_flag and / or use_coloc_CU_info_flag) indicating whether to use more various information of the same position coding unit can be used.
- the decoder may induce the information of the current coding unit by using the information of the same position coding unit, and when the value of the flag is 0, separate information may be transmitted to the decoder. In the case of using information of the same position coding unit, separate information about the current coding unit may not be transmitted with respect to the corresponding information.
- the method and syntax structure for signaling whether to use information of the same position block for the LCU and the coding unit in the LCU have been described above.
- the parameter set may be configured to include a flag specifically indicating information to be used.
- the encoder transmits the configured parameter set to the decoder (S1330).
- the parameter set may be encoded and transmitted along with other information.
- FIG. 14 is a flowchart schematically illustrating decoding of a coding unit using a parameter set received by a decoder to which the present invention is applied.
- the coding unit is a meaning including an LCU.
- the decoder may receive a parameter set from an encoder (S1410).
- the parameter set may be encoded and received through the bitstream.
- the method and syntax structure for signaling whether to use information of the same position block for the LCU and the coding unit in the LCU have been described above.
- the decoder can derive information of the current coding unit from the received parameter set (S1420).
- the parameter set may include a flag indicating whether to use the information of the same position coding unit to derive the information of the current coding unit. When the value of the flag is 1, the decoder may derive the information of the current coding unit from the information of the same position coding unit.
- the parameter set may further include a flag that specifically indicates what information of the same position coding unit to use.
- the parameter set may include a flag indicating to use information of the same position coding unit only when the current picture is an inter slice.
- separate information may not be transmitted through a parameter set.
- split_coding_unit_flag split_coding_unit_flag
- Whether the information derived from the information of the same position encoding unit is specifically indicated or whether the information is derived from the information of the same position encoding unit unless separately transmitted may be predetermined between the encoder and the decoder.
- the decoder may decode the coding unit based on the derived information (S1430).
- a temporal level between a current picture and a target picture of the same position LCU may be different.
- the temporal level of the current picture is 2 and the temporal level of the target picture is 1.
- the temporal level of the current picture is 3 and the temporal level of the target picture is 1.
- the temporal level of the same LCU and the current LCU are different, the coding efficiency of the current LCU may be lowered when the method of using the information of the same LCU is applied.
- a flag indicating whether to use information of the same position LCU may not be transmitted. If a flag indicating whether to use information of the same location LCU is not transmitted, the value of the flag may not be inferred.
- a method of transmitting a flag indicating whether to use information of the same location LCU may be used only when the temporal level of the current picture and the target picture are the same.
- the information of the same position LCU can be used without any change in the information of the same position LCU.
- split information for example, split_coding_unit_flag
- split_coding_unit_flag split information of a coding unit among information of the same position LCU
- the depth of the highest CU depth region of the co-located LCU (The segmentation information can be derived so that the depth is reduced by a predetermined depth.
- split_coding_unit_flag may be derived such that the depth of the deepest region in the same position LCU is reduced by one. For example, it may be regarded as clipping about a depth available as split information of the current LCU among split information of the same position LCU.
- the depth of the highest CU depth region of the same position LCU is 0, the depth of the coding unit can no longer be reduced, thereby maintaining the depth of the coding unit.
- FIG. 15 is a view schematically showing a divided state of the same position LCU.
- FIG. 16 is a diagram schematically showing a derivation state of a current LCU using information of the same location LCU.
- the numbers indicated in the blocks represent the depths of the corresponding coding units.
- the region having the deepest depth among the co-located LCUs 1510 is the coding units 1520 and 1530 and has a depth of three.
- the split information of the current LCU may be derived by reducing the depth of the deepest region in the same location LCU by a predetermined size, for example, 1, without using the split information of the same location LCU as it is.
- the split state of the coding unit is induced to use the split state of the current LCU so that the depth of the region having the depth is 2, and the split state of the remaining portion of the co-located LCU is the current LCU. Use it as it is.
- FIG. 16 it can be seen that the regions 1620 and 1630 of the current LCU 1610 corresponding to the deepest regions in the same location LCU have a depth adjusted to 2 to induce a split state.
- the information of the same position LCU can be adaptively used according to the degree of the difference in temporal level without using the information of the same position LCU as it is. have.
- the information of the same position LCU is not used as it is and is adaptive as follows. Can be used as A case of using split information (for example, split_coding_unit_flag) of a coding unit among information of the same position LCU will be described.
- the depth of one region (e.g., coding unit) of each partition of the co-located LCU is greater than or equal to 'highest CU depth of the same region LCU-difference in temporal level + 1', i.e., 'current picture and target'
- the temporal level difference of the picture is greater than the difference between the depth of the region and the maximum depth of the same position LCU in the same position LCU, then the depth for that region in the same position LCU is the maximum depth of the same position LCU. It is adjusted to be a 'temporal level difference between the current picture and the target picture' to derive the split state of the same position LCU. For example, when the split information of the same position LCU is used as the split information of the current LCU, it can be regarded as clipping to what extent a depth difference between the same position LCU and the current LCU is allowed.
- the partitioned state of the co-located LCU derived may be used as the partitioned state of an area corresponding to the corresponding area in the current LCU.
- the depth of the corresponding area may be zero.
- the divided state of the area having a depth smaller than the 'highest CU depth of the same area LCU-difference in temporal level + 1' may be used as the divided state of the current LCU.
- FIG. 17 schematically illustrates an example of a split state of the same position LCU.
- the target picture of the same position LCU has a temporal level of 1.
- FIG. 18 shows an example of a split state of a current LCU derived using information of the same location LCU. In FIG. 18, it is assumed that the temporal level of the current picture is three.
- the number of each partition represents the depth of the corresponding area.
- the maximum coding unit depth is 3 in the same position LCU 1710. Since the temporal level of the current picture is 3 and the temporal level of the target picture is 1, as described above, the maximum coding unit depth of the same position LCU is minus the temporal level difference between the current picture and the target picture. Becomes two.
- the areas 1720 and 1730 having a depth greater than or equal to 2 have a depth of 'maximum depth of the co-located LCU'-'the current picture and the target picture.
- Temporal level difference ' In the case of the above-described example, an area greater than or equal to 2 (area greater than 1) is adjusted to have a depth of 1.
- regions 1820 and 1830 corresponding to 1720 and 1730 of FIG. 17 are derived to have a depth of 1.
- 19 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- the encoder first configures a parameter set (S1910).
- the encoder may configure a parameter set including a flag indicating whether to derive information of the current LCU using the information of the same position LCU.
- the encoder may determine in various ways whether to use information of the same position LCU. For example, it may be determined whether to use the information of the same location LCU based on the state of the current LCU, or an appropriate method may be selected by comparing the case of using the information of the same location LCU and the case of transmitting the information of the current LUC as it is. When it is determined to use the split information of the same position LCU based on the split state of the current LCU, the value of the flag may indicate 1.
- the encoder may consider the temporal level between the current picture to which the current LCU belongs and the target picture to which the same position LCU belongs. For example, the encoder may transmit a flag indicating whether to derive the information of the current LCU using the information of the same location LCU only when the temporal level of the current picture and the target picture are the same.
- the encoder may configure a parameter set to modify or adaptively use information of the same position LCU in consideration of the temporal level of the current picture and the target picture. How the information of the same location LCU is modified or applied is as described above.
- information indicating a method of transforming or adaptively using the information may be included in the parameter set or may be predetermined between the encoder and the decoder.
- the encoder transmits the configured parameter set (S1920).
- the parameter set may be encoded along with other information and transmitted in the bitstream.
- 20 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
- the decoder receives a parameter set from an encoder (S2010).
- the parameter set may be encoded and received on the bitstream.
- the decoder may derive information on the current LCU from the parameter set (S2020).
- the parameter set may directly include information on the current LCU or may include a flag indicating to derive information of the current LCU from information of the same location LCU.
- the information of the same location LCU may be used as it is, or the information may be modified or adaptively used in a predetermined manner.
- Information about a method of modifying or adaptively using the information of the same location LCU may be included in the received parameter set or may be predetermined between the encoder and the decoder.
- the decoder may derive the information of the current LCU using the information of the co-located LCU according to the method indicated by the parameter set or a predetermined method. Details of a method of modifying or adaptively using the information of the same location LCU are as described above.
- the decoder may decode the coding unit based on the derived information (S2030).
- a flag indicating in which direction a co-located slice belongs to the same location LCU may be included in the slice header.
- the flag indicating the position of the same position slice may indicate whether the direction of the same position slice is L0 or L1.
- L0 and L1 are lists of reference pictures
- L0 is a list in which the reference picture is assigned a lower index as the reference picture is closer to the current picture in the forward direction (past direction on the time axis)
- L1 is the reverse direction of the current picture (the future direction on the time axis). The closer the reference picture is, the lower the index is given.
- the flag indicating the position of the same position slice may indicate which list direction picture is in the same position slice.
- Table 9 shows an example of a syntax table for transmitting information according to a slice type in a conventional slice header part.
- the flag when the flag indicates that the slice type is B and the information of the same position LCU is used, the flag may indicate which list direction is the same position slice.
- mv_competetion_flag may indicate that a motion vector is selected by competition of the motion vectors.
- Table 10 and Table 11 show examples of indicating in which direction the same position slice exists in the list direction when the flag indicates that the information of the same position LCU is used in the system to which the present invention is applied. It is shown.
- collocated_from_l0_flag is a flag indicating which list direction the co-location slice is in. For example, if the value of collocated_from_l0_flag is 1, the same position slice may be indicated to be located in the L0 direction, and if the value of collocated_from_l0_flag is 0, the same position slice may be indicated to be positioned to the L1 direction.
- coloc_LCU_info_flag is a flag indicating whether to use information of the same location LCU, and may be transmitted in a sequence parameter set (SPS) or the like.
- SPS sequence parameter set
- a method of directly transmitting the information of the current LCU may be used.
- a flag indicating whether to use the split information of the same location LCU as it is may not be transmitted under the following conditions, and the information of the current LCU may be directly encoded and transmitted.
- the size of the smallest coding unit of the same position LCU that is, the size of the smallest coding unit (SCU) is equal to the size of the same position LCU-this case corresponds to the case where the same position LCU is not divided. Therefore, since the split state (split_coding_unit_flag) transmitted for the first LCU is expressed whether or not to use the split state of the same position LCU, it is not necessary to inform whether the information of the same position LCU is used as a flag (use_coloc_LCU_info_flag). .
- the partition information instead of using all of the same position LCU information, for example, the partition information, it is possible to limit the use of the partition information of the same position LCU when coding the current LCU. For example, rather than copying the split state of the co-located LCU as it is and using it for the current LCU, the split information (split_coding_unit_flag) for the co-located LCU is limitedly used.
- split information about the current LCU may be further transmitted.
- the split_coding_unit_flag for the current LCU may be further transmitted so that the size of the SCU in the same location LCU and the size of the SCU in the current LCU may be different.
- the conditions for further sending split_coding_unit_flag partially for the current LCU can be determined variously as follows:
- the number of divisions may be limited to one. It may also allow to continue dividing until the maximum depth of the current LCU is reached. According to the number of splits performed further for the current LCU than the split state of the same location LCU, the number (transmission amount) of split information (split_coding_unit_flag) transmitted for the current LCU is changed.
- FIG. 21 schematically illustrates an example of a split state with respect to the same position LCU.
- FIG. 22 schematically illustrates an example in which the split state for the current LCU is further divided after being derived from the same position LCU.
- the same position LCU from which the current LCUdml split state is derived is the LCU of FIG. 21, and the maximum depth of the current LCU is 3.
- the current LCU may be split at least once and at least twice in the split state of the same location LCU 2100.
- the coding units 2210 and 2220 of the current LCU 2200 corresponding to the coding units 2110 and 2120 of the same position LCU 2100, two times in the split state of the same position coding units 2110 and 2120. It can be seen that it can be further divided.
- the portion indicated by the solid line in the LCU 2200 of FIG. 22 is a portion divided by using the information of the same location LCU without transmitting additional split information (split_coding_unit_flag) to the current LCU.
- the portion indicated by a dotted line in the LCU 2200 of FIG. 22 indicates that it is divided by split information (split_coding_unit_flag) additionally transmitted for the current LCU 2200.
- the coding unit 2210 at the upper left is further divided in the split state of the same position LCU by the additionally transmitted split information (split_coding_unit_flag), and other coding units are split in the same state as the split state of the same position LCU. It is a state.
- split_coding_unit_flag indicating whether to be split even for each coding unit indicated by a solid line and no longer split, to indicate that no split is performed.
- split_coding_unit_flag the split information for the current LCU is transmitted. Can be.
- split information (divided state) of the same position LCU is used until the depth of the coding unit in the current LCU becomes just before the maximum depth allowed in the current LCU (maximum depth-1), and thereafter, separate split information.
- split_coding_unit_flag may be used to determine whether to split the corresponding coding unit.
- FIG. 24 schematically illustrates an example in which the split state of the current LCU is finally divided by additional split information after being derived from the split state of the same position LCU up to a predetermined depth.
- the same position LCU used to derive the split state of the current LCU is the LCU of FIG. 23, and the maximum depth allowed in the current LCU is 3.
- the coding unit may be divided according to the split state of the same position LCU.
- the maximum depth of the current LCU is 3 in the example of FIG. Until it becomes 2, it can divide according to the division state of the same position LCU shown in FIG. Subsequently, for a coding unit of the current LCU having a depth of 2, a flag (split_coding_unit_flag) indicating whether to split is transmitted to indicate additional splitting.
- the SCUs 2310 and 2320 of the same location LCU have a depth of 3, but only a split state up to depth 2 may be used for dividing the current LCU.
- the coding unit of the current LCU is no longer divided according to the split state of the same position LCU at depth 2.
- the coding units in the current LCU may be further split in the split state of the same position LCU.
- the two regions 2430 and 2440 of FIG. 24 are further divided in the split state of the same position LCU by the split flag split_coding_unit_flag.
- FIG. 25 is a conceptual diagram schematically illustrating a method for additionally transmitting additional partition information by using split information of the same location LCU in a system to which the present invention is applied.
- the tree structure of FIG. 25 conceptually illustrates the split state of the current LCU.
- a depth of maximum depth-1 (2530) May be divided according to split information of the same location LCU, and additional split may be performed by separate split information 2510.
- the split is performed according to the split state of the same position LCU up to the depth corresponding to the SCU of the same position LCU, and then further division is performed by the separate partition information 2520. Can be.
- FIG. 26 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- the encoder determines whether to derive information of the current LCU using the information of the same location LCU (S2610).
- the encoder may determine whether to derive the information of the current LCU using the information of the co-located LCU based on the current LCU state.
- the encoder may determine whether to derive the split information of the current LCU using the split information of the same location LCU based on the split state of the current LCU.
- the encoder configures a parameter set to be transmitted to the decoder (S2620).
- the parameter set may include a flag indicating whether to derive information of the current LCU using the information of the same location LCU. If the information on the current LCU is to be derived using the same location LCU in step S2610, the value of the flag may indicate 1.
- the parameter set may include information indicating which direction the collocated slice is in, for example, a flag indicating whether the direction is L0 or L1.
- the flag indicating the direction of the co-location slice may be included in a parameter set regarding the slice header.
- the parameter set may be configured to restrict the use of the information of the same location LCU. For example, when the same position LCU is not divided, it is possible not to transmit a flag using the split information of the same position LCU. In this case, the split information for the current LCU may be transmitted separately as in the prior art.
- the parameter set may be configured to use only part of the information of the same location LCU without using it as it is, and the parameter set may be configured to transmit additional information instead of determining the current LCU state using only the information of the same location LCU. It may be.
- the encoder may configure a parameter set to include additionally transmitted information. The encoder may indicate whether to use all or part of the information of the same location LCU through a parameter set or may be predetermined between the encoder and the decoder.
- the split information of the same location LCU may be used, but the current LCU may be split along the split information of the same location LCU only until the depth of the coding unit in the current LCU becomes a predetermined depth.
- split information split_coding_unit_flag
- the partitioning information may be further transmitted after partitioning according to the partitioning information of the same location LCU.
- the encoder configures a parameter set to include additional segmentation information. Whether to use only part or all of the information of the same location LCU may be transmitted by including a parameter indicating the information in the parameter set, or may be predetermined between the encoder and the decoder.
- the encoder transmits the parameter set to the decoder (S2630).
- the parameter set may be coded along with other information and transmitted to the decoder in a bitstream.
- FIG. 27 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
- the decoder receives a parameter set from an encoder (S2710).
- the parameter set includes a parameter, for example, a flag indicating whether to derive information of the current LCU using the information of the same position LCU.
- a flag indicating which direction of the target slice to which the same position LCU belongs belongs may be further included.
- additional information may be included in the parameter set even when information of the same location LCU is used.
- the flag and the additional information indicating the direction of the target slice may be included in the same parameter set or separate parameter set, respectively.
- a flag indicating a direction of the target slice, separately from a flag indicating whether to use information of the same location LCU, may be included in a parameter set regarding the slice header.
- the decoder derives information of the current LCU from the received parameter set (S2720).
- the decoder derives that information from the co-located LCU.
- the target slice may be found in the corresponding direction.
- predetermined information specified for the current LCU can be derived using the information of the same position LCU.
- necessary information may be derived using information of the same location LCU for information on which no separate parameter is transmitted.
- the partitioning up to a predetermined depth may be performed in the same manner as the partitioning information of the same location LCU with respect to the current LCU.
- the decoder may apply all the information of the same position LCU to the current LCU, and additional information may also be applied to the current LCU.
- the current LCU may be divided in the same manner as the split state of the same location LCU, and further divided according to the divided information transmitted separately.
- the decoder may decode the coding unit based on the derived information (S2730).
- SVC scalable video coding
- the encoded bitstream may be arranged in a base layer and one or more enhancement layers.
- FIG. 28 is a block diagram schematically illustrating an operation of an encoder in a system to which SVC is applied.
- the encoder encodes a plurality of layers (layer 0 and layer 1) in parallel and transmits a scalable bitstream to the decoder.
- the decoder that does not support SVC among the decoders may receive and decode the base layer (layer 0), and the decoder that supports SVC may receive and decode all layers.
- SVC includes various scalable coding modes. For example, spatial scalability provides a layer of spatial resolution, while temporal scalability provides a layer of frame rate. In addition, quality scalability and complexity scalability provide a layer of visual quality of image and a complexity of decoding method.
- the base layer of the image with spatial scalability includes coded frames of reduced resolution. When only the base layer is decoded, an output image having a low resolution can be obtained. By decoding the enhancement layer together with the base layer, a high resolution output image can be obtained.
- the base layer of an image having temporal scalability is encoded at a low video frame rate. If only the base layer is decoded, the frame rate is low, but the frame rate can be increased by decoding the base layer and the enhancement layer together.
- the enhancement layer includes an I-VOP encoded without prediction, a P-VOP predicted from a previous layer VOP and a subsequent base layer VOP, and a B-VOP predicted from a previous and subsequent layer VOP.
- the input signal used in the SVC may have a different resolution, frame rate, bit-depth, color format, aspect ratio, and the like. Accordingly, by performing prediction between layers in consideration of this point, redundancy may be reduced and encoding performance may be improved compared to simulcast.
- inter-layer prediction methods including prediction of inter-layer coding units / prediction units / transform units in order to reduce the amount of information about a coding unit, a prediction unit, and a transform unit transmitted in an enhancement layer. Can be performed.
- FIG. 29 is a conceptual diagram schematically illustrating an example of inter-layer prediction. In FIG. 29, it is assumed that the resolutions of layer 0 and layer 1 are two times different.
- the LCU 2910 of layer 0 is divided into various CUs and PUs (or TUs).
- CU info from the split information of layer 0 in layer 1
- the same information as that of block 2920 may be obtained.
- the use of the coding unit / prediction unit / transform unit information of the layer 0 in layer 1 may or may not help coding efficiency, it may be adaptive to use the layer 0 information in layer 1. I can tell you.
- CU unit information of the base layer may be quad tree structure or information about partitioning / partitioning, and information about prediction (eg, information about a skip / non-skip mode, a prediction direction, a motion vector, a reference index, etc.) It may be information about both.
- the methods used to derive the information of the current LCU based on the information of the co-located LCU described above can also be applied to the layers of the SVC.
- the information on the base layer may be selectively used by using a flag indicating whether to use the information on the base layer as it is.
- a flag indicating whether to use the information of the base layer as it is as a flag indicating whether to use the split information of the same position LCU as it is, indicating whether to use the tree structure of the base layer as it is or to skip it.
- a flag bl_tree_info_skip_flag may be defined.
- a syntax for indicating whether there is information to be used in the base layer may be used similarly to transmitting additional partition information.
- a syntax structure reflecting this may be configured as shown in Table 12.
- Table 12 schematically shows an example of a slice data syntax structure for a scalable extension layer in a system to which the present invention is applied.
- Table 13 schematically shows an example of coding tree syntax for a scalable extension layer in a system to which the present invention is applied.
- bl_tree_info_skip_flag 1
- bl_tree_info_skip_flag 0
- the tree structure information of the base layer is referred to as an enhancement layer, a current layer, or layer 1 by upscaling of coding unit information of FIG. 29. It is upscaled to match the resolution.
- LCU 02930 in FIG. 29 illustrates a case in which tree structure information of a base layer is used for an enhancement layer (current layer). As shown, split_coding_unit_flag values of the current LCU are derived so that the split information of the current LCU has the same value as the split information of the upscaled base layer.
- BLSplitInfo [x0] [y0] has a value of 1 when split information exists in upscaled coding unit information and 0 when split information does not exist in upscaled coding unit information. .
- the split information of the upscaled base layer is one step lower than the split information of the enhancement layer.
- split_coding_unit_flag additional split information
- Table 14 schematically shows an example of coding unit syntax for a scalable extension layer in a system to which the present invention is applied.
- Table 15 schematically shows an example of a transform tree syntax for a scalable extension layer in a system to which the present invention is applied.
- the upscaled transform unit split information of the base layer is used as it is for the current layer (enhanced layer).
- the upscaled tu split info of the base layer is used as is in the current layer. If the value of bl_tu_info_skip_flag is 0, transform unit splitting information for the current layer (enhanced layer) is separately transmitted.
- a flag indicating which direction the base layer is to be used may be further added.
- the information about whether to use the split information of the base layer and the information about the prediction mode may be adaptively determined according to the situation. For example, criteria such as size, depth, QP, etc. may be determined for the LCU of the current layer, and at least one criterion may be applied to determine what information should be transmitted first. For example, when the block size is large or the depth is low, the information about the partition may be transmitted before the information about the prediction mode. In this case, the information about the division may be a flag indicating whether to use the division information of the base layer.
- the split information and the information about the prediction mode have been described as an example, but the present invention is not limited thereto, and various types of information may be derived.
- the syntax may be configured for each information to be used and a region to be used, and if the syntax value is 1, the corresponding information of the base layer may be applied to the corresponding region.
- the partitioning information of the base layer is to be used as it is, and if the partitioning state is further divided than the partitioning state of the base layer, separate information should be transmitted.
- the division state of the base layer may be used only to a predetermined depth in the current layer, and the division state thereafter may be divided by transmitting division information separately.
- the split state of the base layer is used only to one level lower than the maximum depth of the current layer. You can also send it separately.
- the divided states of the base layer only the divided state corresponding to the depth of the previous stage of the maximum depth of the current layer may be used for the current layer, and the division of the subsequent stages may be performed by transmitting separate segmentation information.
- FIG. 30 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
- the encoder determines whether to induce information of the current layer by using information of the base layer (S3010).
- the encoder configures a parameter set to be transmitted to the decoder (S3020).
- the encoder may configure the parameter set to include information indicating whether to derive information of the current layer using information of the base layer, for example, a flag.
- additional information to be delivered may be included in the parameter set.
- the current layer may be split according to the split information of the base layer only up to a certain depth, and then the split layer may be split according to the separate split information. have.
- the current layer may be further divided according to separate partitioning information. In this case, information for additional division may be transmitted as separate division information.
- Direction information and / or additional information of the base layer may be included in a parameter set different from a parameter set including information indicating whether to use information of the base layer.
- the encoder transmits the parameter set to the decoder (S3030).
- the parameter set may be coded along with other information and transmitted to the decoder in a bitstream.
- 31 is a flowchart schematically illustrating an example of a method of receiving and decoding a parameter set in a decoder to which the present invention is applied.
- the decoder receives a parameter set from an encoder (S3110).
- the parameter set includes information indicating whether to derive information of the current layer using information of the base layer, for example, a flag.
- Direction information and / or additional information of the base layer may be included in a parameter set different from a parameter set including information indicating whether to use information of the base layer.
- the decoder derives information of the current layer from the received parameter set (S3120).
- the decoder derives the information from the base layer.
- the base layer may be found in the corresponding direction according to a flag indicating the direction of the base layer.
- only predetermined information may be derived using the information of the base layer, or necessary information may be derived using information of the base layer with respect to information to which no additional parameter is transmitted.
- the partitioning up to a predetermined depth may be performed with respect to the current layer in the same manner as the partition information of the base layer, and thereafter, the partition may be partitioned according to the partition information transmitted separately.
- information may be additionally transmitted from the decoder.
- the decoder may apply all the information of the base layer to the current layer, and additional information may also be applied to the current layer.
- the current layer may be divided in the same manner as the split state of the base layer and further divided according to the separately transmitted split information.
- the decoder may decode the current layer based on the derived information (S3130).
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
The present invention relates to a method for encoding/decoding image information, and according to the present invention, current block information is induced from collocated block information, thereby reducing the amount of transmitted information. According to the present invention, a method for encoding image information comprises the steps of: determining to induce current block information from collocated block information; encoding the current block information by using the collocated block information; and transmitting indicative information on the induction of said current block information from said collocated block information.
Description
본 발명은 영상 압축 기술에 관한 것으로서, 구체적으로는 화면 간 예측(inter picture prediction) 방법 및 장치에 관한 것이다.The present invention relates to image compression technology, and more particularly, to a method and apparatus for inter picture prediction.
최근, 고해상도, 고품질의 영상에 대한 요구가 다양한 응용 분야에서 증가하고 있다. 하지만, 영상의 고해상도, 고품질이 될수록 해당 영상에 관한 정보량도 함께 증가한다. 따라서 기존의 유무선 광대역 회선과 같은 매체를 이용하여 영상 정보를 전송하거나 기존의 저장 매체를 이용해 영상 정보를 저장하는 경우, 정보의 전송 비용과 저장 비용이 증가하게 된다. Recently, the demand for high resolution and high quality images is increasing in various application fields. However, as the resolution and quality of an image become higher, the amount of information on the image also increases. Therefore, when image information is transmitted using a medium such as a conventional wired / wireless broadband line or when image information is stored using an existing storage medium, information transmission cost and storage cost increase.
고해상도, 고품질 영상의 정보를 효과적으로 전송하거나 저장하고, 재생하기 위해 고효율의 영상 압축 기술을 이용할 수 있다.High-efficiency image compression technology can be used to effectively transmit, store, and reproduce high-resolution, high-quality video information.
영상 압축의 효율을 높이기 위해, 화면 간 예측과 화면 내 예측을 이용할 수 있다. 화면 간 예측 방법에서는 다른 픽처의 정보를 참조하여 현재 픽처(picture)의 화소값을 예측하며, 화면 내 예측 방법에서는 동일한 픽처 내에서 화소 간 연관 관계를 이용하여 화소값을 예측한다.In order to increase the efficiency of image compression, inter prediction and intra prediction may be used. In the inter prediction method, a pixel value of a current picture is predicted by referring to information of another picture, and in an intra prediction method, a pixel value is predicted by using a correlation between pixels in the same picture.
본 발명은 동일 위치(collocated) 블록의 정보로부터 현재 블록의 정보를 유도해 내는 방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a method for deriving information of a current block from information of a collocated block.
본 발명은 동일 위치 블록의 정보를 이용하여 현재 블록의 정보를 유도하기 위한 파라미터 셋 및 신택스 구조를 제공하는 것을 목적으로 한다. An object of the present invention is to provide a parameter set and syntax structure for deriving information of a current block by using information of a co-located block.
본 발명은 동일 위치 블록이 속하는 대상 픽처를 다양하게 선택하는 방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a method for variously selecting a target picture to which a same position block belongs.
본 발명은 동일 위치 블록의 정보를 이용하여 현재 블록의 정보를 유도하는 과정에서, 대상 픽처와 현재 픽처 사이의 시간적 레벨을 고려하는 방법을 제공하는 것을 목적으로 한다.An object of the present invention is to provide a method of considering a temporal level between a target picture and a current picture in a process of deriving information of a current block by using information of the same position block.
본 발명은 동일 위치 블록의 정보를 일부 이용하거나 변형하여 이용하는 것과 같이 적응적으로 이용하는 방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a method for adaptive use, such as using some of the information of the same position block or modifying it.
본 발명은 부호화기로부터 복호화기로 전송되는 정보의 순서를 적응적으로 변경하는 방법을 제공하는 것을 목적으로 한다. An object of the present invention is to provide a method for adaptively changing the order of information transmitted from an encoder to a decoder.
(1) 본 발명의 일 실시형태는 현재 블록의 정보를 동일 위치 블록의 정보로부터 유도할 것을 결정하는 단계, 상기 동일 위치 블록의 정보를 이용하여 상기 현재 블록의 정보를 부호화하는 단계 및 상기 동일 위치 블록의 정보로부터 상기 현재 블록의 정보를 유도하는 것에 관한 지시 정보를 전송하는 단계를 포함하는 영상 정보 부호화 방법이다.(1) An embodiment of the present invention is to determine to derive the information of the current block from the information of the same position block, encoding the information of the current block using the information of the same position block and the same position And transmitting indication information about deriving the information of the current block from the information of the block.
(2) (1) 에서, 상기 동일 위치 블록으로부터 유도하는 상기 현재 블록의 정보는 상기 현재 블록의 분할 정보일 수 있다.(2) In (1), the information of the current block derived from the same position block may be partition information of the current block.
(3) (1)에서, 상기 지시 정보는 상기 동일 위치 블록의 정보로부터 상기 현재 블록의 정보를 유도하는 것을 지시하는 플래그일 수 있다.(3) In (1), the indication information may be a flag indicating to derive information of the current block from information of the same position block.
(4) (1)에서, 상기 지시 정보는 현재 블록이 속하는 현재 픽처가 화면 간 예측 모드인 경우에만 전송될 수도 있다.(4) In (1), the indication information may be transmitted only when the current picture to which the current block belongs is in the inter prediction mode.
(5) (1)에서, 상기 동일 위치 블록이 속하는 대상 픽처는, 현재 블록이 속하는 현재 픽처 바로 전에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 시간적 거리가 가장 가까운 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 가장 최근에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처보다 시간적 레벨이 작고 시간적 거리가 가장 가까운 픽처 또는 이미 부호화된 픽처들 중에서 현재 부호화 중인 픽처보다 시간적 레벨이 작고 가장 최근에 부호화된 픽처 중 어느 하나일 수 있다.(5) In (1), the target picture to which the co-located block belongs is a picture coded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already-encoded pictures, The most recently coded picture that has the same temporal level as the current picture among pictures that are already coded, the one that has the smaller temporal level and has the shortest temporal distance than the current picture among pictures that are already coded, or the picture that is currently being coded among pictures that are already coded. The temporal level may be smaller and one of the most recently coded pictures.
(6) (1)에서, 상기 지시 정보는, 상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 다른 경우에, 최대 깊이를 갖는 부호화 유닛의 깊이가 소정의 크기만큼 감소하도록 상기 동일 위치 블록의 분할 상태를 조정해서 상기 현재 블록의 분할 상태로 이용하도록 지시하는 것일 수 있다. (6) In (1), the indication information indicates that, when the temporal level of the current picture to which the current block belongs and the target picture to which the same position block belongs is different, the depth of the coding unit having the maximum depth is increased by a predetermined size. The dividing state of the co-located block may be adjusted so as to decrease the instruction to use the dividing state of the current block.
(7) (1)에서, 상기 지시 정보는 소정의 깊이까지 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하도록 지시하며, 상기 소정의 깊이를 넘어서는 분할에 대해서는 현재 블록에 대한 별도의 분할 정보를 전송할 수 있다.(7) In (1), the instruction information instructs to use the division state of the same position block as the division information of the current block up to a predetermined depth, and separate for the current block for the division exceeding the predetermined depth. The split information may be transmitted.
(8) (1)에서, 상기 지시 정보는 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하도록 지시하며, 상기 동일 위치 블록의 분할 상태를 기반으로 수행되는 추가 분할에 대해서는 별도의 분할 정보를 전송할 수 있다. (8) In (1), the indication information instructs to use the division state of the same position block as the division information of the current block, and for the additional division performed based on the division state of the same position block, The split information can be transmitted.
(9) 본 발명의 다른 실시형태는, 현재 블록의 화소값을 예측하기 위한 정보를 구성하는 단계 및 상기 구성한 정보를 전송하는 단계를 포함하며, 상기 구성된 정보는 상기 현재 블록의 예측 모드에 관한 정보가 상기 현재 블록의 분할 정보보다 먼저 전달되도록 구성되는 영상 정보 부호화 방법이다.(9) Another embodiment of the present invention includes the steps of constructing information for predicting a pixel value of a current block and transmitting the configured information, wherein the configured information is information about a prediction mode of the current block. Is an image information encoding method configured to be transmitted before segmentation information of the current block.
(10) 본 발명의 또 다른 실시형태는, 동일 위치 블록의 정보를 이용하여 현재 블록의 정보를 유도하는 것에 관한 지시 정보에 따라서, 현재 블록의 정보를 유도하는 단계 및 상기 유도한 현재 블록의 정보를 기반으로 상기 현재 블록의 화소값을 예측하는 단계를 포함하는 영상 정보 복호화 방법이다.(10) Another embodiment of the present invention provides a method for deriving information of a current block and information of the derived current block according to the indication information about deriving information of a current block using information of a co-located block. Predicting a pixel value of the current block based on the image information decoding method.
(11) (10)에서, 상기 지시 정보는 상기 현재 블록의 정보를 상기 동일 위치 블록의 정보로부터 유도할 것을 지시하는 플래그일 수 있다. (11) In (10), the indication information may be a flag indicating to derive information of the current block from information of the same location block.
(12) (10)에서, 상기 동일 위치 블록으로부터 유도하는 상기 현재 블록의 정보는 상기 현재 블록의 분할 정보일 수 있다.(12) In (10), the information of the current block derived from the same position block may be partition information of the current block.
(13) (10)에서, 상기 동일 위치 블록이 속하는 대상 픽처는 현재 블록이 속하는 현재 픽처 바로 전에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 시간적 거리가 가장 가까운 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 가장 최근에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처보다 시간적 레벨이 작고 시간적 거리가 가장 가까운 픽처 또는 이미 부호화된 픽처들 중에서 현재 부호화 중인 픽처보다 시간적 레벨이 작고 가장 최근에 부호화된 픽처 중 어느 하나일 수 있다.(13) In (10), the target picture to which the co-located block belongs is a picture that is coded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already coded pictures, and is already The most recent coded picture that has the same temporal level as the current picture among the coded pictures, the picture that has a smaller temporal level and has the closest temporal distance than the current picture among the previously coded pictures, or the picture that is currently coded among the pictures that are already coded. The temporal level may be one of the smallest and most recently coded pictures.
(14) (10)에서, 상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 다른 경우에, 최대 깊이를 갖는 부호화 유닛의 깊이가 소정의 크기만큼 감소하도록 상기 동일 위치 블록의 분할 상태를 조정해서 상기 현재 블록의 분할 상태로 이용할 수 있다. (14) In (10), when the temporal level of the current picture to which the current block belongs and the target picture to which the same position block belongs is different, the same position so that the depth of the coding unit having the maximum depth is reduced by a predetermined size. The partitioned state of the block can be adjusted and used as the partitioned state of the current block.
(15) (10)에서, 소정의 깊이까지는 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하며, 상기 소정의 깊이를 넘어서는 분할에 대해서는 현재 블록에 대한 별도로 수신한 분할 정보에 기반해서 분할을 수행할 수 있다.(15) In (10), the partitioning state of the same position block is used as the partitioning information of the current block up to a predetermined depth, and the partitioning beyond the predetermined depth is based on separately received partitioning information of the current block. Division can be performed.
(16) (15)에서, 상기 소정의 깊이는 상기 현재 블록의 최대 깊이보다 한 단계 낮은 깊이일 수 있다.(16) In (15), the predetermined depth may be one step lower than the maximum depth of the current block.
(17) (10)에서, 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하되, 상기 동일 위치 블록의 분할 상태로부터 수행되는 추가 분할은 별도로 수신한 분할 정보를 기반으로 이루어질 수 있다.(17) In (10), the partitioning state of the same location block is used as the partitioning information of the current block, and the additional partitioning performed from the partitioning state of the same location block may be performed based on the separately received partitioning information. .
(18) (10)에서, 상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 같은 경우에만, 상기 현재 블록의 정보를 상기 동일 위치 블록의 정보로부터 유도할 수 있다.(18) In (10), the information of the current block can be derived from the information of the same block only when the current picture to which the current block belongs and the temporal level of the target picture to which the same location block belongs are the same.
(19) 본 발명의 또 다른 실시형태는, 현재 블록의 화소값을 예측하기 위한 정보를 수신하는 단계 및 상기 수신한 정보에 따라서 상기 현재 블록의 화소값을 예측하는 단계를 포함하며, 상기 현재 블록의 화소값을 예측하는 단계에서는, 상기 수신한 정보에서 상기 현재 블록이 스킵 모드로 예측된다는 것이 지시된 경우에, 상기 현재 블록의 분할 정보를 적용하지 않는 영상 정보 부호화 방법이다.(19) Another embodiment of the present invention includes receiving information for predicting a pixel value of a current block and predicting a pixel value of the current block according to the received information, wherein the current block In the step of predicting a pixel value of, the image information encoding method does not apply the split information of the current block when the received information indicates that the current block is predicted to be a skip mode.
(20) 본 발명의 또 다른 실시형태는, 현재 레이어의 정보를 베이스 동일 위치 블록의 정보로부터 유도할 것을 결정하는 단계, 상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 부호화하는 단계 및 상기 베이스 레이어의 정보로부터 상기 현재 레이어의 정보를 유도하기 위한 파라미터 셋을 전송하는 단계를 포함하며, 상기 파라미터 셋은 상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 유도할 것을 지시하는 플래그 및 베이스 레이어의 방향 및/또는 베이스 레이어의 정보를 이용하는 방법에 관한 정보를 포함하고, 상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보는 상기 베이스 레이어 정보의 전면 사용, 일부 사용 및 변형 사용 중 어느 하나를 지시하며, 상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보에 따라 유도된 정보와 현제 레이어의 정보가 상이한 경우에는, 현재 레이어의 정보를 유도하기 위한 추가 정보를 전송하는 것을 특징으로 하는 영상 정보 부호화 방법이다.(20) In another embodiment of the present invention, there is provided a method of determining information derived from information of a base co-located block, encoding information of the current layer using information of the base layer, and And transmitting a parameter set for deriving information of the current layer from information of a base layer, wherein the parameter set is a flag and a base indicating to derive information of the current layer using information of the base layer. Information on how to use the direction of the layer and / or the information of the base layer, and information on how to use the information of the base layer indicates any one of full use, partial use, and modified use of the base layer information. And a method of using the information of the base layer If the information derived according to the information is different from the information of the current layer, the video information encoding method is characterized by transmitting additional information for deriving the information of the current layer.
(21) 본 발명의 또 다른 실시형태는 베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도하기 위한 제1 정보를 수신하는 단계, 상기 제1 정보를 기반으로 상기 베이스 레이어의 정보로부터 상기 현재 레이어의 정보를 유도하는 단계 및 상기 유도한 현재 레이어의 정보를 기반으로 상기 현재 레이어의 화소값을 예측하는 단계를 포함하며, 상기 제1 정보는 상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 유도할 것을 지시하는 플래그 및 베이스 레이어의 방향 및/또는 베이스 레이어의 정보를 이용하는 방법에 관한 정보를 포함하고, 상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보는 상기 베이스 레이어 정보의 전면 사용, 일부 사용 및 변형 사용 중 어느 하나를 지시하며, 상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보에 따라 유도된 정보와 현재 레이어의 정보가 상이한 경우에는, 현재 레이어의 정보를 유도하기 위한 추가 정보 및 상기 베이스 레이어로부터 유도한 정보를 기반으로 상기 현재 레이어의 정보를 유도하는 것을 특징으로 하는 영상 정보 복호화 방법이다.(21) In another embodiment of the present invention, the method comprises: receiving first information for deriving information of a current layer using information of a base layer, and based on the first information, the current layer from information of the base layer. Deriving information of the current layer and predicting pixel values of the current layer based on the derived information of the current layer, wherein the first information includes information of the current layer using information of the base layer. A flag indicating to induce and information on the direction of the base layer and / or a method of using the information of the base layer, wherein the information on the method of using the information of the base layer includes full use, partial use of the base layer information. And using one of the modifications, and using the information of the base layer. If the derived information and the information of the current layer are different according to the related information, the information of the current layer is derived based on additional information for deriving information of the current layer and information derived from the base layer. The video information decoding method.
본 발명에 의하면, 동일 위치 블록의 정보를 이용하여 현재 블록의 정보를 유도할 수 있으므로, 정보의 전달량을 줄일 수 있다. According to the present invention, since the information of the current block can be derived using the information of the same position block, the amount of information transmitted can be reduced.
본 발명에 의하면, 동일 위치 블록이 속하는 대상 픽처를 다양하게 선택할 수 있으므로, 현재 블록의 정보를 유도하기에 적합한 동일 위치 블록을 효과적으로 선택할 수 있다.According to the present invention, since the target picture to which the same position block belongs can be variously selected, the same position block suitable for deriving the information of the current block can be effectively selected.
본 발명에 의하면, 대상 픽처와 현재 픽처의 시간적 레벨을 고려하여 동일 위치 블록의 정보를 이용하므로, 더 정확하게 현재 블록의 정보를 유도할 수 있다.According to the present invention, since the information of the same position block is used in consideration of the temporal level of the target picture and the current picture, the information of the current block can be derived more accurately.
본 발명에 의하면, 부호화기로부터 복호화기로 전송되는 정보의 순서를 적응적으로 변경할 수 있으므로, 복호화기에서 처리하는 정보의 양과 연산량을 줄일 수 있다.According to the present invention, since the order of information transmitted from the encoder to the decoder can be adaptively changed, the amount of information and the amount of computation processed by the decoder can be reduced.
도 1은 본 발명의 일 실시예에 따른 영상 부호화 장치(부호화기)를 개략적으로 도시한 블록도이다.1 is a block diagram schematically illustrating an image encoding apparatus (encoder) according to an embodiment of the present invention.
도 2는 본 발명의 일 실시예에 따른 예측부를 개략적으로 도시한 개념도이다.2 is a conceptual diagram schematically illustrating a prediction unit according to an embodiment of the present invention.
도 3은 본 발명이 적용되는 시스템에서 처리 유닛의 쿼드 트리 구조에 관한 일 예를 개략적으로 설명하는 도면이다.3 is a diagram schematically illustrating an example of a quad tree structure of a processing unit in a system to which the present invention is applied.
도 4는 본 발명의 일 실시예에 따른 영상 복호화기를 개략적으로 나타낸 블록도이다.4 is a block diagram schematically illustrating an image decoder according to an embodiment of the present invention.
도 5는 본 발명의 일 실시예에 따른 영상 복호화기의 예측부를 개략적으로 나타낸 개념도이다.5 is a conceptual diagram schematically illustrating a prediction unit of an image decoder according to an embodiment of the present invention.
도 6은 현재 블록의 화면 간 예측(inter prediction)에 있어서, 이용될 수 있는 후보 블록들을 개략적으로 설명하는 도면이다.FIG. 6 is a diagram schematically illustrating candidate blocks that may be used in inter prediction of a current block.
도 7은 동일 위치 LCU의 분할 상태를 이용하여 현재 LCU가 분할되는 것을 개략적으로 설명하는 도면이다.FIG. 7 is a diagram schematically illustrating division of a current LCU by using a split state of the same location LCU.
도 8은 본 발명이 적용되는 시스템에서 동일 위치 LCU의 정보를 사용할 것인지를 지시하는 플래그를 이용하여 부호화하는 방법의 일 예를 개략적으로 도시한 순서도이다.FIG. 8 is a flowchart schematically illustrating an example of a method of encoding using a flag indicating whether to use information of an identical location LCU in a system to which the present invention is applied.
도 9는 본 발명이 적용되는 시스템에서 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 복호화하는 방법을 개략적으로 설명하는 순서도이다.9 is a flowchart schematically illustrating a method of decoding information of a current LCU using information of a co-located LCU in a system to which the present invention is applied.
도 10은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성해서 정보를 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.10 is a flowchart schematically illustrating an example of a method for transmitting information by configuring a parameter set in an encoder to which the present invention is applied.
[규칙 제91조에 의한 정정 14.10.2011]
도 11은 본 발명이 적용된 복호화기에서 수신한 파라미터 셋을 이용하여 복호화를 수행하는 방법의 일 예를 개략적으로 설명하는 순서도이다. [Correction under Rule 91 14.10.2011]
11 is a flowchart schematically illustrating an example of a method of performing decoding by using a parameter set received by a decoder to which the present invention is applied.
도 11은 본 발명이 적용된 복호화기에서 수신한 파라미터 셋을 이용하여 복호화를 수행하는 방법의 일 예를 개략적으로 설명하는 순서도이다. [Correction under Rule 91 14.10.2011]
11 is a flowchart schematically illustrating an example of a method of performing decoding by using a parameter set received by a decoder to which the present invention is applied.
도 12는 본 발명이 적용되는 부호화기에서 현재 LCU에 관한 정보를 구성하여 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.12 is a flowchart schematically illustrating an example of a method for configuring and transmitting information about a current LCU in an encoder to which the present invention is applied.
도 13은 본 발명이 적용되는 복호화기에서 수신한 파라미터 셋을 이용하여 부호화 유닛을 복호화하는 것을 개략적으로 설명하는 순서도이다.FIG. 13 is a flowchart schematically illustrating decoding of a coding unit using a parameter set received by a decoder to which the present invention is applied.
도 14는 계층적 B 구조를 개략적으로 설명하는 개념도이다.14 is a conceptual diagram schematically illustrating a hierarchical B structure.
도 15는 동일 위치 LCU의 분할 상태를 개략적으로 나타낸 도면이다.15 is a view schematically showing a divided state of the same position LCU.
도 16은 현재 LCU의 분할 상태를 동일 위치 LCU의 정보를 이용하여 유도한 것을 개략적으로 나타낸 도면이다.FIG. 16 is a diagram schematically showing a derivation state of a current LCU using information of the same location LCU.
도 17은 동일 위치 LCU의 분할 상태에 관한 일 예를 개략적으로 나타낸 것이다.17 schematically illustrates an example of a split state of the same position LCU.
도 18은 동일 위치 LCU의 정보를 이용하여 유도된 현재 LCU의 분할 상태에 관한 일 예를 나타낸다.18 shows an example of a split state of a current LCU derived using information of the same location LCU.
도 19는 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.19 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 20은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 부호화 유닛을 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.20 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
도 21은 동일 위치 LCU에 관한 분할 상태의 일 예를 개략적으로 도시한 것이다.21 schematically illustrates an example of a split state with respect to the same position LCU.
도 22는 현재 LCU에 대한 분할 상태가 동일 위치 LCU로부터 유도된 후 추가로 더 분할된 경우의 예를 개략적으로 나타낸 것이다.FIG. 22 schematically illustrates an example in which the split state for the current LCU is further divided after being derived from the same position LCU.
도 23은 동일 위치 LCU에 대한 분할 상태의 일 예를 개략적으로 나타낸 것이다.23 schematically illustrates an example of a split state for the same position LCU.
도 24는 현재 LCU의 분할 상태가 소정의 깊이까지 동일 위치 LCU의 분할 상태로부터 유도된 후 추가 분할 정보에 의해 최종적으로 분할된 예를 개략적으로 나타낸 것이다. FIG. 24 schematically illustrates an example in which the split state of the current LCU is finally divided by additional split information after being derived from the split state of the same position LCU up to a predetermined depth.
도 25는 본 발명이 적용되는 시스템에서 동일 위치 LCU의 분할 정보를 이용하되, 별도의 분할 정보를 추가로 전송하는 방법을 개략적으로 설명하는 개념도이다.FIG. 25 is a conceptual diagram schematically illustrating a method for additionally transmitting additional partition information by using split information of the same location LCU in a system to which the present invention is applied.
도 26은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.FIG. 26 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 27은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 부호화 유닛을 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.27 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
도 28은 SVC가 적용되는 시스템에서 부호화기의 동작을 개략적으로 도시한 블록도이다.28 is a block diagram schematically illustrating an operation of an encoder in a system to which SVC is applied.
도 29는 레이어 간 예측의 예를 개략적으로 도시한 개념도이다.29 is a conceptual diagram schematically illustrating an example of inter-layer prediction.
도 30은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.30 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 31은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.31 is a flowchart schematically illustrating an example of a method of receiving and decoding a parameter set in a decoder to which the present invention is applied.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니다. 본 명세서에서 사용하는 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 기술적 사상을 한정하려는 의도로 사용되는 것은 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다. 본 명세서에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성 요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.As the present invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the invention to the specific embodiments. The terminology used herein is for the purpose of describing particular example embodiments only and is not intended to be limiting of the spirit of the present invention. Singular expressions include plural expressions unless the context clearly indicates otherwise. In this specification, terms such as "comprise" or "have" are intended to indicate that there is a feature, number, step, action, component, part, or combination thereof described on the specification, and one or more other features. It is to be understood that the present invention does not exclude the possibility of the presence or the addition of numbers, steps, operations, components, components, or a combination thereof.
한편, 본 발명에서 설명되는 도면상의 각 구성들은 영상 부호화/복호화 장치에서 서로 다른 특징적인 기능들에 관한 설명의 편의를 위해 독립적으로 도시된 것으로서, 각 구성들이 서로 별개의 하드웨어나 별개의 소프트웨어로 구현된다는 것을 의미하지는 않는다. 예컨대, 각 구성 중 두 개 이상의 구성이 합쳐져 하나의 구성을 이룰 수도 있고, 하나의 구성이 복수의 구성으로 나뉘어질 수도 있다. 각 구성이 통합 및/또는 분리된 실시예도 본 발명의 본질에서 벗어나지 않는 한 본 발명의 권리범위에 포함된다.On the other hand, each of the components in the drawings described in the present invention are shown independently for the convenience of the description of the different characteristic functions in the image encoding / decoding apparatus, each component is implemented by separate hardware or separate software It does not mean to be. For example, two or more of each configuration may be combined to form one configuration, or one configuration may be divided into a plurality of configurations. Embodiments in which each configuration is integrated and / or separated are also included in the scope of the present invention without departing from the spirit of the present invention.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성 요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성 요소에 대해서 중복된 설명은 생략한다.Hereinafter, with reference to the accompanying drawings, it will be described in detail a preferred embodiment of the present invention. Hereinafter, the same reference numerals are used for the same components in the drawings, and redundant description of the same components is omitted.
도 1은 본 발명의 일 실시예에 따른 영상 부호화 장치(부호화기)를 개략적으로 도시한 블록도이다. 도 1을 참조하면, 영상 부호화 장치(100)는 픽처 분할부(105), 예측부(110), 변환부(115), 양자화부(120), 재정렬부(125), 엔트로피 부호화부(130), 역양자화부(135), 역변환부(140), 필터부(145) 및 메모리(150)를 구비한다. 1 is a block diagram schematically illustrating an image encoding apparatus (encoder) according to an embodiment of the present invention. Referring to FIG. 1, the image encoding apparatus 100 may include a picture splitter 105, a predictor 110, a transformer 115, a quantizer 120, a realigner 125, and an entropy encoder 130. , An inverse quantization unit 135, an inverse transform unit 140, a filter unit 145, and a memory 150.
픽처 분할부(105)는 입력된 픽처를 적어도 하나의 처리 단위로 분할할 수 있다. 이때, 처리 단위는 예측 유닛(Prediction Unit: PU)일 수도 있고, 변환 유닛(Transform Unit: TU)일 수도 있으며, 부호화 유닛(Coding Unit: CU)일 수도 있다. The picture dividing unit 105 may divide the input picture into at least one processing unit. In this case, the processing unit may be a prediction unit (PU), a transform unit (TU), or a coding unit (CU).
예측부(110)는 후술하는 바와 같이, 화면 간 예측을 수행하는 화면 간 예측부와 화면 내 예측을 수행하는 화면 내 예측부를 포함한다. 예측부(110)는, 픽처 분할부(105)에서 픽처의 처리 단위에 대하여 예측을 수행하여 예측 블록을 생성한다. 예측부(110)에서 픽처의 처리 단위는 부호화 유닛일 수도 있고, 변환 유닛일 수도 있고, 예측 유닛일 수도 있다. 또한, 해당 처리 단위에 대하여 실시되는 예측이 화면 간 예측인지 화면 내 예측인지를 결정하고, 각 예측 방법의 구체적인 내용(예컨대, 예측 모드 등)를 정할 수 있다. 이때, 예측이 수행되는 처리 단위와 예측 방법 및 구체적인 내용이 정해지는 처리 단위는 다를 수 있다. 예컨대, 예측의 방법과 예측 모드 등은 예측 유닛 단위로 결정되고, 예측의 수행은 변환 유닛 단위로 수행될 수도 있다. 생성된 예측 블록과 원본 블록 사이의 잔차값(잔차 블록 또는 잔차 신호)은 변환부(115)로 입력된다. 또한, 예측을 위해 사용한 예측 모드 정보, 움직임 벡터 정보 등은 잔차값과 함께 엔트로피 부호화부(130)에서 부호화되어 복호화기에 전달된다. The predictor 110 includes an inter prediction unit for performing inter prediction and an intra prediction unit for performing intra prediction. The prediction unit 110 generates a prediction block by performing prediction on the processing unit of the picture in the picture division unit 105. The processing unit of the picture in the prediction unit 110 may be a coding unit, a transformation unit, or a prediction unit. In addition, it is possible to determine whether the prediction performed on the processing unit is inter-screen prediction or intra-screen prediction, and determine specific contents (eg, prediction mode, etc.) of each prediction method. In this case, the processing unit in which the prediction is performed may differ from the processing unit in which the prediction method and the details are determined. For example, the method of prediction and the prediction mode are determined in units of prediction units, and the performance of prediction may be performed in units of transform units. The residual value (residual block or residual signal) between the generated prediction block and the original block is input to the converter 115. In addition, prediction mode information and motion vector information used for prediction are encoded by the entropy encoder 130 along with the residual value and transmitted to the decoder.
변환부(115)는 변환 단위로 잔차 블록에 대한 변환을 수행하고 변환 계수를 생성한다. 변환부(115)에서의 변환 단위는 변환 유닛일 수 있으며, 쿼드 트리(quad tree) 구조를 가질 수 있다. 이때, 변환 단위의 크기는 소정의 최대 및 최소 크기의 범위 내에서 정해질 수 있다. 변환부(115)는 잔차 블록을 DCT(Discrete Cosine Transform) 및/또는 DST(Discrete Sine Transform)를 이용하여 변환할 수 있다. The transform unit 115 performs a transform on the residual block in transform units and generates transform coefficients. The transform unit in the transform unit 115 may be a transform unit and may have a quad tree structure. In this case, the size of the transform unit may be determined within a range of a predetermined maximum and minimum size. The transform unit 115 may transform the residual block using a discrete cosine transform (DCT) and / or a discrete sine transform (DST).
양자화부(120)는 변환부(115)에서 변환된 잔차값들을 양자화하여 양자화 계수를 생성할 수 있다. 양자화부(120)에서 산출된 값은 역양자화부(135)와 재정렬부(125)에 제공된다. The quantization unit 120 may generate quantization coefficients by quantizing the residual values transformed by the transformation unit 115. The value calculated by the quantization unit 120 is provided to the inverse quantization unit 135 and the reordering unit 125.
재정렬부(125)는 양자화부(120)로부터 제공된 양자화 계수를 재정렬한다. 양자화 계수를 재정렬함으로써 엔트로피 부호화부(130)에서의 부호화의 효율을 높일 수 있다. 재정렬부(125)는 계수 스캐닝(Coefficient Scanning) 방법을 통해 2차원 블록 형태의 양자화 계수들을 1차원의 벡터 형태로 재정렬할 수 있다. 재정렬부(125)에서는 양자화부에서 전송된 계수들의 확률적인 통계를 기반으로 계수 스캔닝의 순서를 변경함으로써 엔트로피 부호화부(130)에서의 엔트로피 부호화 효율을 높일 수도 있다.The reordering unit 125 rearranges the quantization coefficients provided from the quantization unit 120. By rearranging the quantization coefficients, the efficiency of encoding in the entropy encoder 130 may be increased. The reordering unit 125 may rearrange the quantization coefficients in the form of a two-dimensional block into a one-dimensional vector form through a coefficient scanning method. The reordering unit 125 may increase the entropy coding efficiency of the entropy encoder 130 by changing the order of coefficient scanning based on probabilistic statistics of coefficients transmitted from the quantization unit.
엔트로피 부호화부(130)는 재정렬부(125)에 의해 재정렬된 양자화 계수들에 대한 엔트로피 부호화를 수행할 수 있다. 엔트로피 부호화에는 예를 들어, 지수 골롬(Exponential Golomb), CAVLC(Context-Adaptive Variable Length Coding), CABAC(Context-Adaptive Binary Arithmetic Coding)과 같은 부호화 방법을 사용할 수 있다. 엔트로피 부호화부(130)는 재정렬부(125) 및 예측부(110)로부터 전달받은 부호화 유닛의 양자화 계수 정보 및 블록 타입 정보, 예측 모드 정보, 분할 단위 정보, 예측 유닛 정보 및 전송 단위 정보, 움직임 벡터 정보, 참조 픽처 정보, 블록의 보간 정보, 필터링 정보 등 다양한 정보를 부호화할 수 있다. The entropy encoder 130 may perform entropy encoding on the quantized coefficients rearranged by the reordering unit 125. Entropy encoding may use, for example, an encoding method such as Exponential Golomb, Context-Adaptive Variable Length Coding (CAVLC), or Context-Adaptive Binary Arithmetic Coding (CABAC). The entropy encoder 130 may include quantization coefficient information, block type information, prediction mode information, division unit information, prediction unit information, transmission unit information, and motion vector of the coding unit received from the reordering unit 125 and the prediction unit 110. Various information such as information, reference picture information, interpolation information of a block, and filtering information may be encoded.
또한, 엔트로피 부호화부(130)는 필요한 경우에, 전송하는 파라미터 셋 또는 신택스에 일정한 변경을 가할 수도 있다. In addition, if necessary, the entropy encoder 130 may apply a constant change to a transmitted parameter set or syntax.
역양자화부(135)는 양자화부(120)에서 양자화된 값들을 역양자화하고, 역변환부(140)는 역양자화부(135)에서 역양자화된 값들을 역변환한다. 역양자화부(135) 및 역변환부(140)에서 생성된 잔차값(Residual)은 예측부(110)에서 예측된 예측 블록과 합쳐져 복원 블록(Reconstructed Block)이 생성될 수 있다. The inverse quantization unit 135 inverse quantizes the quantized values in the quantization unit 120, and the inverse transformer 140 inversely transforms the inverse quantized values in the inverse quantization unit 135. The residual value generated by the inverse quantization unit 135 and the inverse transformer 140 may be combined with the prediction block predicted by the prediction unit 110 to generate a reconstructed block.
필터부(145)는 디블록킹 필터 및/또는 ALF(Adaptive Loop Filter)를 복원된 픽처에 적용할 수 있다. The filter unit 145 may apply a deblocking filter and / or an adaptive loop filter (ALF) to the reconstructed picture.
디블록킹 필터는 복원된 픽처에서 블록 간의 경계에 생긴 블록 왜곡을 제거할 수 있다. ALF(Adaptive Loop Filter)는 디블록킹 필터를 통해 블록이 필터링된 후 복원된 영상과 원래의 영상을 비교한 값을 기초로 필터링을 수행할 수 있다. ALF는 고효율을 적용하는 경우에만 수행될 수도 있다. The deblocking filter may remove block distortion generated at the boundary between blocks in the reconstructed picture. The adaptive loop filter (ALF) may perform filtering based on a value obtained by comparing the reconstructed image with the original image after the block is filtered through the deblocking filter. ALF may be performed only when high efficiency is applied.
한편, 화면 간 예측에 사용되는 복원 블록에 대해서 필터부(145)는 필터링을 적용하지 않을 수 있다. Meanwhile, the filter unit 145 may not apply filtering to the reconstructed block used for inter prediction.
메모리(150)는 필터부(145)를 통해 산출된 복원 블록 또는 픽처를 저장할 수 있다. 메모리(150)에 저장된 복원 블록 또는 픽처는 화면 간 예측을 수행하는 예측부(110)에 제공될 수 있다. The memory 150 may store the reconstructed block or the picture calculated by the filter unit 145. The reconstructed block or picture stored in the memory 150 may be provided to the predictor 110 that performs inter prediction.
부호화 유닛(Coding Unit: CU)은 픽처의 부호화/복호화가 수행되는 단위로서, 쿼드 트리 구조(Quad Tree Structure)를 기반으로 깊이(Depth)를 가지며 분할될 수 있다. 기존의 매크로 블록과 달리 부호화 유닛은 64x64, 32x32, 16x16, 8x8 등의 여러 크기를 가질 수 있다. 이 중 가장 큰 사이즈의 부호화 유닛을 최대 부호화 유닛(Largest Coding Unit: LCU, 이하 ‘LCU’라 함)라고 한다. A coding unit (CU) is a unit in which coding / decoding of a picture is performed and may be divided with a depth based on a quad tree structure. Unlike the existing macro block, the coding unit may have various sizes such as 64x64, 32x32, 16x16, and 8x8. The largest coding unit is called a largest coding unit (LCU).
다양한 크기의 부호화 유닛 사이즈를 지시하기 위해, 부호화기로부터 복호화기로 전송되는 시퀀스 파라미터 셋(Sequence Parameter Set: SPS)에는 LCU 사이즈, 부호화 유닛이 분할될 수 있는 최대 깊이(depth) 등이 정의될 수 있다. In order to indicate various sizes of coding unit sizes, an LCU size, a maximum depth at which a coding unit may be divided, and the like may be defined in a sequence parameter set (SPS) transmitted from an encoder to a decoder.
부호화기는 최대 부호화 유닛(Largest Coding Unit: LCU)과 최소 부호화 유닛(Smallest Coding Unit: SCU)에 관한 정보를 복호화기에 전송할 수도 있다. 최대 부호화 유닛 및/또는 최소 부호화 유닛에 관한 정보와 함께 분할 가능한 회수에 관한 정보(깊이 정보)가 복호화기에 전송될 수 있다. 부호화 유닛이 쿼드 트리 구조를 기반으로 분할되는지에 관한 정보는 분할 플래그(Split Flag)와 같은 플래그 정보를 통해 부호화기로부터 복호화기로 전달될 수 있다. The encoder may transmit information about a largest coding unit (LCU) and a minimum coding unit (SCU) to the decoder. Information (depth information) regarding the number of splittable times together with information about the maximum coding unit and / or the minimum coding unit may be transmitted to the decoder. Information on whether the coding unit is split based on the quad tree structure may be transmitted from the encoder to the decoder through flag information such as a split flag.
도 2는 본 발명의 일 실시예에 따른 예측부를 개략적으로 도시한 개념도이다. 2 is a conceptual diagram schematically illustrating a prediction unit according to an embodiment of the present invention.
도 2를 참조하면 예측부(200)는 화면 간 예측부(210) 및 화면 내 예측부(220) 를 포함할 수 있다. Referring to FIG. 2, the predictor 200 may include an inter prediction unit 210 and an intra prediction unit 220.
화면 간 예측부(210)는 현재 픽처의 이전 픽처 및/또는 이후 픽처 중 적어도 하나의 픽처의 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다. 또한, 화면 내 예측부(220)는 현재 픽처 내의 화소 정보를 기초로 예측을 수행하여 예측 블록을 생성할 수 있다. 화면 간 예측부(210)는 예측 유닛에 대하여, 참조 픽처를 선택하고 예측 유닛과 동일한 크기의 참조 블록을 정수 화소 샘플 단위로 선택할 수 있다. 이어서, 화면 간 예측부(210)는 현재 예측 유닛과의 잔차 신호가 최소화되며 움직임 벡터 크기 역시 최소가 되는 예측 블록을 생성한다. 예측 블록은 1/2 화소 샘플 단위와 1/4 화소 샘플 단위와 같이 정수 이하 샘플 단위로 생성될 수 있다. The inter prediction unit 210 may generate a prediction block by performing prediction based on information of at least one picture of a previous picture and / or a subsequent picture of the current picture. In addition, the intra prediction unit 220 may generate a prediction block by performing prediction based on pixel information in the current picture. The inter prediction unit 210 may select a reference picture with respect to the prediction unit and select a reference block having the same size as that of the prediction unit in units of integer pixel samples. Next, the inter prediction unit 210 generates a prediction block in which the residual signal with the current prediction unit is minimized and the size of the motion vector is also minimized. The prediction block may be generated in sub-integer sample units such as 1/2 pixel sample unit and 1/4 pixel sample unit.
이때, 움직임 벡터는 정수 화소 이하의 단위로 표현될 수 있으며, 예컨대 휘도 화소에 대해서는 1/4 화소 단위로, 색차 화소에 대해서는 1/8 화소 단위로 표현될 수 있다. In this case, the motion vector may be expressed in units of integer pixels or less. For example, the motion vector may be expressed in units of 1/4 pixels for luminance pixels and in units of 1/8 pixels for chrominance pixels.
화면 간 예측부(210)가 선택한 참조 픽처의 인덱스, 움직임 벡터(ex. Motion Vector Predictor), 잔차 신호 등의 정보는 부호화되어 복호화기에 전달된다.Information such as an index, a motion vector (ex. Motion Vector Predictor), and a residual signal of the reference picture selected by the inter prediction unit 210 is encoded and transmitted to the decoder.
도 3은 본 발명이 적용되는 시스템에서 처리 유닛의 쿼드 트리 구조에 관한 일 예를 개략적으로 설명하는 도면이다. 3 is a diagram schematically illustrating an example of a quad tree structure of a processing unit in a system to which the present invention is applied.
최대 부호화 유닛(LCU, 300)은 분할을 통해서 더 작은 부호화 유닛(310)들로 이루어진 계층적 구조를 가질 수 있으며, 부호화 유닛의 계층적 구조는 크기 정보, 깊이 정보, 분할 플래그 정보 등을 기반으로 특정될 수 있다. 최대 부호화 유닛의 크기 정보, 분할 깊이 정보 및 현재 부호화 유닛의 분할 여부 정보는 비트 스트림 상의 시퀀스 파라미터 셋(SPS)에 포함되어 영상 복호화기에 전송될 수 있다. 다만, 최소 부호화 유닛은 더 이상 작은 부호화 유닛으로 분할되지 않으므로, 최소 부호화 유닛에 대해서는 부호화 유닛의 분할 플래그가 전송되지 않을 수 있다. The maximum coding unit (LCU) 300 may have a hierarchical structure composed of smaller coding units 310 through division, and the hierarchical structure of the coding unit may be based on size information, depth information, split flag information, and the like. Can be specified. The size information of the largest coding unit, the split depth information, and whether the current coding unit is split may be included in a sequence parameter set (SPS) on the bit stream and transmitted to the image decoder. However, since the minimum coding unit is no longer divided into small coding units, the split flag of the coding unit may not be transmitted to the minimum coding unit.
한편, 화면 간 예측과 화면 내 예측 중 어떤 예측이 수행될 것인지는 부호화 유닛 단위로 결정될 수 있다. 화면 간 예측을 수행하는 경우에는 예측 유닛 단위로 화면 간 예측이 수행될 수 있다. 화면 내 예측을 수행하는 경우에는, 예측 유닛 단위로 예측 모드가 정해져서 예측 유닛 단위로 예측이 수행될 수 있다. 이때, 예측 유닛 단위로 예측 모드가 정해지고 변환 유닛 단위로 화면 내 예측이 수행될 수도 있다. Meanwhile, which prediction between inter prediction and intra prediction may be performed may be determined in units of coding units. When performing inter prediction, inter prediction may be performed in units of prediction units. When performing intra prediction, a prediction mode may be determined in units of prediction units, and prediction may be performed in units of prediction units. In this case, a prediction mode may be determined in units of prediction units, and intra prediction may be performed in units of transformation units.
도 3을 참조하면, 화면 내 예측의 경우에 예측 유닛(320)은 2N×2N 또는 N×N (N은 정수)의 크기일 수 있고, 화면 간 예측의 경우에 예측 유닛(330)은 2N×2N, 2N×N, N×2N, 또는 N×N의 크기일 수 있다. 이때, N×N를 특정한 경우, 예컨대 최소 크기 부호화 유닛에 대해서만 적용하도록 정하거나 화면 내 예측에 대해서만 적용하도록 정할 수도 있다. 또한, 도시된 예측 블록의 사이즈 외에, N×mN, mN×N, 2N×mN 또는 mN×2N (m<1)을 더 정의하여 사용할 수도 있다. Referring to FIG. 3, in the case of intra prediction, the prediction unit 320 may be 2N × 2N or N × N (N is an integer), and in case of inter prediction, the prediction unit 330 may be 2N ×. 2N, 2N × N, N × 2N, or N × N. In this case, for example, N × N may be determined to be applied only to the minimum size coding unit or to be applied only to intra prediction. In addition to the size of the illustrated prediction block, N × mN, mN × N, 2N × mN, or mN × 2N (m <1) may be further defined and used.
도 4는 본 발명의 일 실시예에 따른 영상 복호화기를 개략적으로 나타낸 블록도이다. 도 4를 참조하면, 영상 복호화기(400)는 엔트로피 복호화부(410), 재정렬부(415), 역양자화부(420), 역변환부(425), 예측부(430), 필터부(435) 메모리(440)를 포함할 수 있다. 4 is a block diagram schematically illustrating an image decoder according to an embodiment of the present invention. Referring to FIG. 4, the image decoder 400 includes an entropy decoder 410, a reordering unit 415, an inverse quantizer 420, an inverse transform unit 425, a predictor 430, and a filter unit 435. Memory 440 may be included.
영상 부호화기에서 영상 비트 스트림이 입력된 경우, 입력된 비트 스트림은 영상 부호화기에서 영상 정보가 처리된 절차에 따라서 복호화될 수 있다.When an image bit stream is input from the image encoder, the input bit stream may be decoded according to a procedure in which image information is processed by the image encoder.
예컨대, 영상 부호화기에서 엔트로피 부호화를 수행하기 위해 CAVLC 등의 가변 길이 부호화(Variable Length Coding: VLC, 이하 ‘VLC’ 라 함)가 사용된 경우에는 엔트로피 복호화부(410)도 부호화기에서 사용한 VLC 테이블과 동일한 VLC 테이블로 구현하여 엔트로피 복호화를 수행할 수 있다. 영상 부호화기에서 엔트로피 부호화를 수행하기 위해, CABAC을 이용한 경우에도, 엔트로피 복호화부(410)는 이에 대응하여 CABAC을 이용한 엔트로피 복호화를 수행할 수 있다.For example, when variable length coding (VLC, hereinafter called 'VLC') is used to perform entropy encoding in the image encoder, the entropy decoder 410 is also identical to the VLC table used in the encoder. It can be implemented as a VLC table to perform entropy decoding. Even when CABAC is used to perform entropy encoding in the image encoder, the entropy decoding unit 410 may perform entropy decoding using CABAC correspondingly.
엔트로피 복호화부(410)에서 복호화된 정보 중 예측 블록을 생성하기 위한 정보는 예측부(430)로 제공되고 엔트로피 복호화부에서 엔트로피 복호화가 수행된 잔차값은 재정렬부(415)로 입력될 수 있다. Information for generating a prediction block among the information decoded by the entropy decoder 410 may be provided to the predictor 430, and a residual value of which entropy decoding is performed by the entropy decoder may be input to the reordering unit 415.
재정렬부(415)는 엔트로피 복호화부(410)에서 엔트로피 복호화된 비트 스트림을 영상 부호화기에서 재정렬한 방법을 기초로 재정렬할 수 있다. 재정렬부(415)는 1차원 벡터 형태로 표현된 계수들을 다시 2차원의 블록 형태의 계수로 복원하여 재정렬할 수 있다. 재정렬부(415)는 부호화기에서 수행된 계수 스캐닝에 관련된 정보를 제공받고 해당 부호화부에서 수행된 스캐닝 순서에 기초하여 역으로 스캐닝하는 방법을 통해 재정렬을 수행할 수 있다. The reordering unit 415 may reorder the bit stream deentropy decoded by the entropy decoding unit 410 based on a method of reordering the image encoder. The reordering unit 415 may reorder the coefficients expressed in the form of a one-dimensional vector by restoring the coefficients in the form of a two-dimensional block. The reordering unit 415 may receive the information related to the coefficient scanning performed by the encoder and perform the rearrangement by performing a reverse scanning method based on the scanning order performed by the corresponding encoder.
역양자화부(420)는 부호화기에서 제공된 양자화 파라미터와 재정렬된 블록의 계수값을 기초로 역양자화를 수행할 수 있다. The inverse quantization unit 420 may perform inverse quantization based on the quantization parameter provided by the encoder and the coefficient values of the rearranged block.
역변환부(425)는 영상 부호화기에서 수행된 양자화 결과에 대해, 부호화기의 변환부가 수행한 DCT 및 DST에 대해 역DCT 및/또는 역DST를 수행할 수 있다. 역변환은 부호화기에서 결정된 전송 단위 또는 영상의 분할 단위를 기초로 수행될 수 있다. 부호화기의 변환부에서 DCT 및/또는 DST는 예측 방법, 현재 블록의 크기 및 예측 방향 등 복수의 정보에 따라 선택적으로 수행될 수 있고, 복호화기의 역변환부(425)는 부호화기의 변환부에서 수행된 변환 정보를 기초로 역변환을 수행할 수 있다. The inverse transform unit 425 may perform inverse DCT and / or inverse DST on DCT and DST performed by the transform unit of the encoder with respect to the quantization result performed by the image encoder. The inverse transform may be performed based on a transmission unit determined by the encoder or a division unit of an image. In the encoder, the DCT and / or DST may be selectively performed according to a plurality of pieces of information, such as a prediction method, a size and a prediction direction of the current block, and the inverse transformer 425 of the decoder is performed by the transformer of the encoder. Inverse transformation may be performed based on the transformation information.
예측부(430)는 엔트로피 복호화부(410)에서 제공된 예측 블록 생성 관련 정보와 메모리(440)에서 제공된 이전에 복호화된 블록 및/또는 픽처 정보를 기초로 예측 블록을 생성할 수 있다. 복원 블록은 예측부(430)에서 생성된 예측 블록과 역변환부(425)에서 제공된 잔차 블록을 이용해 생성될 수 있다. The prediction unit 430 may generate the prediction block based on the prediction block generation related information provided by the entropy decoding unit 410 and previously decoded block and / or picture information provided by the memory 440. The reconstruction block may be generated using the prediction block generated by the predictor 430 and the residual block provided by the inverse transform unit 425.
복원된 블록 및/또는 픽처는 필터부(435)로 제공될 수 있다. 필터부(435)는 복원된 블록 및/또는 픽처에 디블록킹 필터링, SAO(Sample Adaptive Offset) 및/또는 적응적 루프 필터링 등을 적용한다. The reconstructed block and / or picture may be provided to the filter unit 435. The filter unit 435 applies deblocking filtering, sample adaptive offset (SAO), and / or adaptive loop filtering to the reconstructed blocks and / or pictures.
메모리(440)는 복원된 픽처 또는 블록을 저장하여 참조 픽처 또는 참조 블록으로 사용할 수 있도록 할 수 있고 또한 복원된 픽처를 출력부로 제공할 수 있다.The memory 440 may store the reconstructed picture or block to use as a reference picture or reference block, and provide the reconstructed picture to the output unit.
도 5는 본 발명의 일 실시예에 따른 영상 복호화기의 예측부를 개략적으로 나타낸 개념도이다. 5 is a conceptual diagram schematically illustrating a prediction unit of an image decoder according to an embodiment of the present invention.
도 5를 참조하면, 예측부(500)는 화면 내 예측부(510) 및 화면 간 예측부(520)를 포함할 수 있다. Referring to FIG. 5, the predictor 500 may include an intra prediction unit 510 and an inter prediction unit 520.
화면 내 예측부(510)는 해당 예측 유닛에 대한 예측 모드가 인트라 예측(intra prediction) 모드(화면 내 예측 모드)인 경우에, 현재 픽처 내의 화소 정보를 기초로 예측 블록을 생성할 수 있다.The intra prediction unit 510 may generate a prediction block based on pixel information in the current picture when the prediction mode for the prediction unit is an intra prediction mode (intra prediction mode).
화면 간 예측부(520)는 해당 예측 유닛에 대한 예측 모드가 인터 예측(inter prediction) 모드(화면 간 예측 모드)인 경우에, 영상 부호화기에서 제공된 현재 예측 유닛의 화면 간 예측에 필요한 움직임 정보, 예컨대 움직임 벡터, 참조 픽처 인덱스 등에 관한 정보를 이용해 현재 예측 유닛이 포함된 현재 픽처의 이전 픽처 또는 이후 픽처 중 적어도 하나의 픽처에 포함된 정보를 기초로 현재 예측 유닛에 대한 화면 간 예측을 수행할 수 있다. 이때, 움직임 정보는 수신되는 부호화 유닛의 스킵 플래그, 머지 플래그 등을 확인하고, 이에 대응하여 유도될 수 있다. The inter screen prediction unit 520 may include motion information required for inter screen prediction of the current prediction unit provided by the image encoder when the prediction mode for the corresponding prediction unit is an inter prediction mode (inter prediction mode). An inter-screen prediction of the current prediction unit may be performed based on information included in at least one of a previous picture or a subsequent picture of the current picture including the current prediction unit by using information about a motion vector, a reference picture index, and the like. . In this case, the motion information may be determined in response to the skip flag, the merge flag, and the like of the received coding unit.
도 5에서는 설명의 편의를 위해, 예측부(500)가 각 기능별 구성을 포함하는 것으로 설명하였으나, 본 발명은 이에 한정되지 않으며, 예측부는 상술한 기능을 수행하는 단일 구성으로 구현될 수도 있다.In FIG. 5, for convenience of description, the prediction unit 500 has been described as including a configuration for each function. However, the present invention is not limited thereto, and the prediction unit may be implemented as a single configuration for performing the above-described functions.
도 6은 현재 블록의 화면 간 예측(inter prediction)에 있어서, 이용될 수 있는 후보 블록들을 개략적으로 설명하는 도면이다. FIG. 6 is a diagram schematically illustrating candidate blocks that may be used in inter prediction of a current block.
도 6을 참조하면, 화면 간 예측을 적용하는 경우 현재 블록(600)은 상단 영역(B)와 좌측 영역(A)의 블록들 중에서 이용 가능한(available) 블록을 선택할 수 있다. 현재 블록의 움직임 정보는 선택된 블록의 움직임 정보를 이용해서 예측될 수 있다. 현재 블록의 주변 블록 중 화면 내 예측(intra prediction) 모드인 블록은 이용 가능한 블록에서 제외될 수 있다. Referring to FIG. 6, when the inter prediction is applied, the current block 600 may select an available block from blocks of the upper region B and the left region A. FIG. The motion information of the current block may be predicted using the motion information of the selected block. A block that is an intra prediction mode among neighboring blocks of the current block may be excluded from the available block.
현재 블록(600)의 주변 블록에서 후보 블록을 선택하는 경우에, 각 영역(A, B)를 소정의 순서에 따라서 검색하면서 이용 가능한 후보 블록을 선택할 수도 있고, 각 영역의 특정 위치에 있는 블록을 후보 블록으로서 고정적으로 이용할 수도 있다. 예컨대, 현재 블록(600)에 대해 각 코너에 위치하는 블록(650, 660, 670) 중 적어도 하나를 후보 블록으로 선택할 수 있다. 또한, 상단 영역(B)의 블록 중 코너 블록(660, 670)을 제외한 좌측 블록(630) 및/또는 우측 블록(640)을 후보 블록으로 선택할 수 있고, 좌측 영역(A)의 블록 중 코너 블록(650)을 제외하고, 상측 블록(610) 및/또는 하측 블록(620)을 후보 블록으로 선택할 수 있다. 각 영역(코너, 좌측, 상단)에서 선택한 후보 블록 중에서 소정의 기준에 의해 선택된 블록을 이용하여 현재 블록의 움직임 정보를 예측할 수 있다.In the case of selecting a candidate block from the neighboring blocks of the current block 600, the available candidate blocks may be selected while searching each area A and B in a predetermined order, and a block located at a specific position of each area may be selected. It can also be fixedly used as a candidate block. For example, at least one of blocks 650, 660, and 670 located at each corner of the current block 600 may be selected as a candidate block. In addition, the left block 630 and / or the right block 640 except for the corner blocks 660 and 670 among the blocks of the upper area B may be selected as candidate blocks, and the corner blocks among the blocks of the left area A may be selected as candidate blocks. Except for 650, the upper block 610 and / or the lower block 620 may be selected as candidate blocks. The motion information of the current block may be predicted using a block selected by a predetermined criterion among candidate blocks selected in each area (corner, left, top).
이때, 현재 블록(600)이 위치하는 픽처 외에 다른 픽처에서 현재 블록과 동일한 위치의 블록(co-located block, 680, 이하, 설명의 편의를 위해 ‘동일 위치 블록’이라 함)을 후보 블록에 포함시켜 현재 블록의 움직임 정보 예측에 이용할 수 있다. 설명의 편의를 위해 동일 위치 블록이 속하는 픽처를 ‘동일 위치 픽처’라 한다. In this case, in addition to the picture in which the current block 600 is located, a block having the same position as the current block (co-located block 680, hereinafter, referred to as 'same location block' for convenience of description) in another picture is included in the candidate block. It can be used to predict the motion information of the current block. For convenience of description, a picture to which the same location block belongs is referred to as a " same location picture. &Quot;
한편, 현재 블록의 움직임 정보뿐만 아니라, 현재 블록의 여러 정보를 유도하기 위해 동일 위치 블록의 정보를 이용하는 방법을 고려할 수 있다. On the other hand, not only the motion information of the current block but also a method of using the information of the same position block to derive various information of the current block may be considered.
예컨대, 상술한 바와 같이 현재 LCU는 시퀀스 파라미터 셋에 포함된 분할 플래그(split flag)에 따라서 재귀적으로(recursively) 분할될 수 있다. 부호화 유닛에 대한 분할 플래그(예를 들어, split_coding_unit_flag)의 값이 1인 경우에는 현재 부호화 유닛을 분할하고, 분할 플래그의 값이 0이면 현재 부호화 유닛을 분할하지 않을 수 있다. 분할은 부호화 유닛을 네 개의 대칭적인 서브 유닛으로 나누는 방식일 수도 있고, 비대칭적인 서브 유닛으로 나누는 방식일 수도 있다. 따라서, 분할 플래그라는 매 LCU 혹은 매 코딩 유닛별로 필요하며, 이 신택스가 부호화/복호화의 성능에 영향을 줄 수 있다. For example, as described above, the current LCU may be recursively divided according to the split flag included in the sequence parameter set. When the split flag (eg, split_coding_unit_flag) of the coding unit has a value of 1, the current coding unit may be split. If the split flag value is 0, the current coding unit may not be split. The division may be divided into four symmetric subunits or asymmetric subunits. Therefore, a split flag is required for every LCU or every coding unit, and this syntax may affect the performance of encoding / decoding.
본 발명에서는 동일 위치 블록의 분할 정보를 이용함으로써, 분할 플래그의 전송 회수를 줄이고 코딩 성능을 향상 시킬 수 있다. 이하, 특별한 설명이 없는 한, 본 명세서에서 “전송”이라 함은 부호화기로부터 복호화기로 전송되는 것을 의미한다. In the present invention, by using the partition information of the same position block, it is possible to reduce the number of transmission of the partition flag and improve coding performance. Hereinafter, unless otherwise stated, the term "transfer" in the present specification means to be transmitted from the encoder to the decoder.
<동일 위치 블록의 분할 정보를 이용할 것인지를 지시하는 플래그><Flag indicating whether to use split information of the same location block>
동일 위치 LCU의 분할 정보 중 LCU의 분할 상태를 이용하기 위해, 동일 위치 LCU의 분할 상태를 그대로 이용할 것인지를 지시하는 플래그를 정의한다. 이 플래그의 일 예로서, use_coloc_LCU_split_info_flag와 같은 플래그를 정의하고 이용할 수 있다. In order to use the split state of the LCU among the split information of the same position LCU, a flag indicating whether to use the split state of the same position LCU is defined as it is. As an example of this flag, a flag such as use_coloc_LCU_split_info_flag may be defined and used.
표 1은 종래의 시스템에서 분할 플래그를 사용하여 블록의 분할 여부를 지시하는 신택스 구조의 일 예를 개략적으로 나타낸 것이다. 표 1에서는 부호화 유닛의 분할을 플래그로 지시하는 것을 예로서 보이고 있다. Table 1 schematically shows an example of a syntax structure indicating whether a block is divided using a split flag in a conventional system. In Table 1, the division of the coding unit is indicated by a flag as an example.
표 1을 참조하면, 현재 부호화 유닛의 위치에서 현재 사이즈의 유닛 사이즈를 사용할 때, 픽처의 오른쪽 혹은 아래의 경계를 넘어서고, 현재 부호화 유닛의 사이즈가 최소 부호화 유닛 사이즈보다 큰 경우에는 분할 플래그(split_coding_unit_flag)를 통해, 부호화 유닛의 분할 여부를 지시할 수 있다. 여기서 x0과 y0은 현재 픽처의 좌상단(top-left) 샘플에 대한 부호화 유닛의 좌상단(top left) 샘플의 위치를 나타낼 수 있다. Referring to Table 1, when the unit size of the current coding unit is used at the position of the current coding unit, a split flag (split_coding_unit_flag) is exceeded when the size of the current coding unit is larger than the minimum coding unit size. Through, it may be indicated whether to split the coding unit. Here, x0 and y0 may indicate the positions of the top left samples of the coding unit with respect to the top-left samples of the current picture.
한편, 분할 정보가 부호화 유닛 레벨이 아닌 부호화 트리(coding tree) 레벨의 신택스로 전송될 수도 있다. 표 2는 종래의 시스템에서 분할 플래그를 사용하여 블록의 분할 여부를 지시하는 부호화 트리 신택스 구조의 일 예를 개략적으로 나타낸 것이다.Meanwhile, the split information may be transmitted in a syntax of a coding tree level instead of the coding unit level. Table 2 schematically shows an example of an encoding tree syntax structure indicating whether a block is divided using a split flag in a conventional system.
표 2의 예에서는, 부호화 유닛에 관한 분할 정보(split_coding_unit_flag)가 부호화 트리 레벨의 신택스로서 분할이 대상 블록을 지정하여 전송된다.In the example of Table 2, splitting information (split_coding_unit_flag) relating to a coding unit is transmitted as the splitting target block as the syntax of the coding tree level.
한편, 상술한 바와 같이, 현재 LCU에 대한 분할 정보를 직접 전송하지 않고, 동일 위치 LCU의 분할 정보(분할 상태)를 이용하도록 지시하는 플래그를 전송할 수 있다. 예컨대, use_coloc_LCU_split_info_flag와 같이 동일 위치 LCU의 정보를 이용할지를 지시하는 플래그를 정의할 수 있다.On the other hand, as described above, instead of directly transmitting the split information for the current LCU, it is possible to transmit a flag indicating to use the split information (divided state) of the same location LCU. For example, a flag indicating whether to use information of the same location LCU may be defined, such as use_coloc_LCU_split_info_flag.
표 3은 본 발명이 적용되는 시스템에서 동일 위치 LCU의 분할 상태 (분할 정보)를 현재 LCU에 이용할 것인지를 플래그를 통해 지시하는 부호화 유닛 레벨 신택스 구조의 일 예를 개략적으로 나타낸 것이다.Table 3 schematically illustrates an example of a coding unit level syntax structure indicating whether a split state (division information) of the same location LCU is currently used for the LCU in a system to which the present invention is applied.
또한, 동일 위치 LCU의 분할 정보를 이용할 것인지를 지시하는 플래그를 부호화 트리 레벨의 신택스로 전송할 수도 있다. 표 4는 본 발명이 적용되는 시스템에서 동일 위치 LCU의 분할 상태를 현재 LCU에 이용할 것인지를 플래그를 통해 지시하는 부호화 트리 레벨 신택스 구조의 일 예를 개략적으로 나타낸 것이다. In addition, a flag indicating whether to use split information of the same position LCU may be transmitted in a syntax of a coding tree level. Table 4 schematically illustrates an example of a coded tree level syntax structure indicating, via a flag, whether to use a split state of a co-located LCU for a current LCU in a system to which the present invention is applied.
동일 위치 LCU의 분할 상태를 현재 LCU에 그대로 이용할 것을 플래그를 통해서 지시하는 경우에는, 현재 LCU 내 코딩 유닛에 대한 분할 정보가 동일 위치 LCU의 분할 정보(분할 상태)로부터 유도될 수 있다. 예컨대, 표 3을 참조하면, use_coloc_LCU_split_info_flag의 값이 1인 경우에, 현재 LCU 내 코딩 유닛에 대한 분할 정보, 예컨대 현재 LCU 내의 각 부호화 유닛에 대한 split_coding_unit_flag의 값이 유도될 수 있다.
In the case of indicating through the flag that the division state of the same position LCU is used as it is in the current LCU, the division information for the coding unit in the current LCU may be derived from the division information (division state) of the same position LCU. For example, referring to Table 3, when the value of use_coloc_LCU_split_info_flag is 1, split information for a coding unit in the current LCU, for example, a value of split_coding_unit_flag for each coding unit in the current LCU, may be derived.
즉, 동일 위치 LCU의 분할 상태를 현재 LCU에 그대로 이용할 것을 플래그를 통해서 지시하는 경우에는, 현재 LCU 내의 각 부보화 유닛이 동일 위치 LCU 내의 부호화 유닛과 동일하게 분할될 수 있다. That is, when a flag indicates that the division state of the same position LCU is to be used as it is in the current LCU, each sub-combination unit in the current LCU may be divided in the same manner as the coding unit in the same position LCU.
이때, 현재 LCU의 분할 정보가 유도되는 동일 위치 LCU는 이미 부호화된 픽처 중 시간적으로 현재 픽처에 가장 가까운 픽처의 동일 위치 LCU로 특정될 수 있다. In this case, the co-location LCU from which the split information of the current LCU is derived may be specified as the co-location LCU of the picture closest to the current picture in time among the pictures that are already encoded.
도 7은 동일 위치 LCU의 분할 상태를 이용하여 현재 LCU가 분할되는 것을 개략적으로 설명하는 도면이다. 도 7(a)는 부호화된 픽처 중 현재 픽처에 시간적으로 가장 가까운 픽처의 부호화 유닛 분할 상태를 개략적으로 나타낸 것이다. 도 7(b)는 현재 픽처의 부호화 유닛 분할 상태를 개략적으로 나타낸 것이다.FIG. 7 is a diagram schematically illustrating division of a current LCU by using a split state of the same location LCU. FIG. 7A schematically illustrates a coding unit division state of a picture that is closest in time to a current picture among encoded pictures. 7B schematically illustrates a coding unit division state of a current picture.
도 7을 참조하면, 1번째 LCU의 분할 상태가 동일 위치 픽처와 현재 픽처 사이에서 동일하다는 것을 확인할 수 있다. 따라서, 동일 위치 LCU의 분할 상태를 현재 LCU에 그대로 이용할 것을 플래그를 통해서 지시하고, 동일 위치 픽처 2 번째 LCU의 분할 상태를 현재 픽처 2번째 LCU의 분할 상태로 그대로 이용할 수 있다. Referring to FIG. 7, it can be seen that the split state of the first LCU is the same between the same position picture and the current picture. Therefore, the division state of the same position LCU can be used as it is through the flag, and the division state of the second LCU of the same position picture can be used as the division state of the second LCU of the current picture.
도 7에서 현재 픽처의 1번째 LCU에 대한 분할 상태를 지시하기 위해서는, 현재 LCU에서 최대 분할 가능 깊이가 2보다 크다고 가정할 때, 깊이 0의 분할 여부, 깊이 1의 분할 여부, 깊이 2의 분할 여부까지 지시하기 위해 9개의 플래그가 전송되어야 한다. 하지만, 동일 위치 LCU의 분할 상태를 현재 LCU에 그대로 이용하는 경우에는 하나의 플래그(use_coloc_LCU_split_info_flag)만 전송하면 된다. In FIG. 7, to indicate a split state of the first LCU of the current picture, assuming that the maximum dividable depth is greater than 2 in the current LCU, whether the depth 0 is divided, whether the depth 1 is divided, and whether the depth 2 is divided Nine flags should be sent to indicate. However, when using the split state of the same position LCU as the current LCU, only one flag (use_coloc_LCU_split_info_flag) needs to be transmitted.
현재 픽처의 0번째, 2번째 LCU의 경우에는, 각각 1개의 플래그(use_coloc_LCU_split_info_flag)를 통해 동일 위치 LCU의 분할 상태를 현재 LCU에 적용하지 않는다는 것을 지시한 후, 현재 LCU의 분할 상태를 지시하는 정보, 예컨대 부호화 유닛에 대한 분할 플래그(split_coding_unit_flag)를 전송할 수 있다. 또한, 현재 픽처의 0번째, 2번째 LCU와 같이 동일 위치 블록의 분할 정보(분할 상태)를 현재 블록에 적용하지 않는 경우에는, 동일 위치 LCU의 분할 상태를 현재 LCU에 적용하지 않는다는 것을 플래그로 지시하고, 현재 LCU의 부호화 유닛에 대한 분할 정보를 전송하도록 할 수도 있다. In the case of the 0th and 2nd LCUs of the current picture, one flag (use_coloc_LCU_split_info_flag) indicates that the split state of the co-located LCU is not applied to the current LCU, and then indicates information indicating the split state of the current LCU. For example, a split flag (split_coding_unit_flag) for a coding unit may be transmitted. In addition, when division information (divided state) of the same position block is not applied to the current block like the 0th and 2nd LCUs of the current picture, the flag indicates that the division state of the same position LCU is not applied to the current LCU. In addition, the split information on the coding unit of the current LCU may be transmitted.
도 8은 본 발명이 적용되는 시스템에서 동일 위치 LCU의 정보를 사용할 것인지를 지시하는 플래그를 이용하여 부호화하는 방법의 일 예를 개략적으로 도시한 순서도이다.FIG. 8 is a flowchart schematically illustrating an example of a method of encoding using a flag indicating whether to use information of an identical location LCU in a system to which the present invention is applied.
도 8을 참조하면, 부호화기는 LCU부터 시작해서, 부호화 유닛을 분할한다(S810). 부호화 유닛의 분할은 부호화기 내 픽처 분할부에서 수행될 수 있다. 부호화기는 부호화 유닛을 분할하고, 예측 유닛과 변환 유닛을 분할할 수도 있다.Referring to FIG. 8, the encoder divides the coding unit starting from the LCU (S810). The splitting of the coding unit may be performed by the picture splitter in the encoder. The encoder may split the coding unit and may split the prediction unit and the transform unit.
부호화기는 현재 LCU의 분할 정보를 바탕으로 복호화기에 전송할 신택스, 즉 파라미터 셋을 구성할 수 있다(S820). 부호화기는 현재 LCU의 분할 상태에 관한 정보를 동일 위치 LCU의 분할 상태를 이용하여 전송할 것인지를 결정할 수 있다. 현재 LCU의 분할 상태 정보가 동일 위치 LCU의 분할 정보를 이용하여 전달되는 경우에, 부호화기는 동일 위치 LCU의 분할 정보를 이용할 것을 지시하는 플래그를 포함해서 파라미터 셋을 구성할 수 있다.The encoder may configure a syntax to be transmitted to the decoder, that is, a parameter set, based on the split information of the current LCU (S820). The encoder may determine whether to transmit information about the split state of the current LCU using the split state of the same location LCU. When the split state information of the current LCU is delivered using the split information of the same position LCU, the encoder may configure a parameter set including a flag indicating to use the split information of the same position LCU.
부호화기는 구성된 파라미터 셋을 복호화기에 전송한다(830). 파라미터 셋의 정보는 부호화되어 전달될 수 있다.The encoder transmits the configured parameter set to the decoder (830). The information in the parameter set may be encoded and transmitted.
도 9는 본 발명이 적용되는 시스템에서 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 복호화하는 방법을 개략적으로 설명하는 순서도이다.9 is a flowchart schematically illustrating a method of decoding information of a current LCU using information of a co-located LCU in a system to which the present invention is applied.
도 9를 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신한다(S910). 파라미터 셋은 부호화되어 비트스트림으로 복호화기에 전송될 수 있다. 복호화기는 파라미터 셋을 복호화하여 현재 LCU의 영상에 관한 정보를 복호화하는데 필요한 정보를 확보한다. Referring to FIG. 9, the decoder receives a parameter set from an encoder (S910). The parameter set may be encoded and transmitted to the decoder in a bitstream. The decoder decodes the parameter set to obtain information necessary to decode the information about the image of the current LCU.
수신한 파라미터 셋에는 현재 LCU의 정보를 동일 위치 LCU의 정보를 이용해서 유도할 것인지를 지시하는 플래그가 포함되어 있다. 예컨대, 파라미터 셋에는 동일 위치 LCU의 분할 상태를 그대로 이용할 것을 지시하는 플래그가 포함되어 있을 수 있다.The received parameter set includes a flag indicating whether to derive the information of the current LCU using the information of the same location LCU. For example, the parameter set may include a flag indicating to use the split state of the same position LCU as it is.
복호화기는 현재 CU에 관한 정보를 복호화한다(S920). 예컨대, 동일 위치 LCU의 분할 상태를 그대로 이용하도록 지시하는 플래그가 전송된 경우에, 복호화기는 현재 LCU의 분할 상태를 동일 위치 LCU의 분할 상태와 동일하게 구성하고, 현재 LCU의 분할 상태를 기반으로 복호화를 하기 위한 예측 등의 필요한 절차를 수행할 수 있다.The decoder decodes information about the current CU (S920). For example, when a flag indicating to use the split state of the same position LCU is transmitted, the decoder configures the split state of the current LCU to be the same as the split state of the same position LCU, and decodes based on the split state of the current LCU. Necessary procedures, such as predictions, can be performed.
<분할을 지시하는 플래그와 다른 신택스들의 위치> <Location of flags and other syntaxes indicating partitioning>
한편, 현재 블록의 분할에 관련해서, 종래에는 분할 플래그를 통해 LCU를 재귀적으로 분할하는 경우에, 현재 부호화 블록을 더 이상 분할하지 않는다는 신택스가 전송된 경우에만, 부호화 유닛에 대한 다른 신택스들이 전송되었다. 이때, 현재 부호화 유닛이 더 이상 분할되지 않는다는 것이 지시된 후에 전송되는 신택스들로서는 스킵 모드를 적용할 것인지를 지시하는 스킵 플래그(skip_flag), 예측 모드를 지시하는 신택스(pred_mode) 등이 있다. On the other hand, with respect to the division of the current block, conventionally, when recursively splitting the LCU through the division flag, other syntaxes for the coding unit are transmitted only when a syntax is transmitted that no longer divides the current coding block. It became. In this case, the syntaxes transmitted after indicating that the current coding unit is no longer divided include a skip flag (skip_flag) indicating whether to apply a skip mode, a syntax (pred_mode) indicating a prediction mode, and the like.
스킵 플래그가 1을 지시하는 경우에는 현재 부호화 유닛이 스킵 모드를 이용하여 부호화될 수 있다. 예컨대, 현재 부호화 유닛의 예측 유닛은 이후에 전송되는 인덱스가 지시하는 참조 블록의 정보를 현재 부호화 유닛의 정보를 사용하고 잔차 신호를 전송않는 방식으로 예측될 수 있다. 이때, 현재 부호화 유닛의 예측 유닛은 현재 부호화 유닛이 분할된 파티션일 수 있다. 참조 블록을 지시하는 인덱스는 머지 인덱스일 수 있다. 화면 간 예측을 이용하는 경우에, 스킵 모드는 머지 인덱스가 지시하는 블록의 움직임 정보를 현재 블록의 움직임 정보로 이용하고 예측 블록의 화소값을 현재 블록의 화소값으로 사용하여 잔차 신호를 전송하지 않을 수 있으며, 머지 모드의 경우에는 머지 인덱스가 지시하는 블록의 움직임 정보를 현재 블록의 움직임 정보로 이용하고 예측 블록과 현재 블록의 잔차 신호를 전송할 수 있다. If the skip flag indicates 1, the current coding unit may be encoded using the skip mode. For example, the prediction unit of the current coding unit may predict the information of the reference block indicated by the index transmitted later by using the information of the current coding unit and not transmitting the residual signal. In this case, the prediction unit of the current coding unit may be a partition obtained by dividing the current coding unit. The index indicating the reference block may be a merge index. In the case of using the inter prediction, the skip mode may not transmit the residual signal by using the motion information of the block indicated by the merge index as the motion information of the current block and the pixel value of the prediction block as the pixel value of the current block. In the merge mode, the motion information of the block indicated by the merge index may be used as the motion information of the current block, and the residual signals of the prediction block and the current block may be transmitted.
예측 모드를 지시하는 신택스(pred_mode)는 현재 블록의 예측 모드가 화면 내 예측 모드인지 화면 간 예측 모드인지를 지시할 수 있다. 또한, 신택스 pred_mode는 현재 블록의 분할 상태에 관한 정보를 예측 모드와 함께 지시할 수도 있다.A syntax indicating a prediction mode may indicate whether a prediction mode of a current block is an intra prediction mode or an inter prediction mode. In addition, the syntax pred_mode may indicate information on the partition state of the current block together with the prediction mode.
표 5는 분할 플래그를 통해 현재 부호화 블록이 분할될 것인지를 지시한 후에 현재 블록에 관한 다른 정보를 나타내는 종래의 신택스 구조를 개략적으로 나타낸 것이다. 표 5에서는 스킵 플래그를 분할 이외 정보의 예로서 설명하고 있다. Table 5 schematically shows a conventional syntax structure indicating other information about a current block after indicating whether a current coding block is to be split through a split flag. In Table 5, the skip flag is described as an example of information other than division.
표 5를 참조하면, 현재 부호화 유닛에 대한 분할 정보를 split_coding_unit_flag으로 알려준 뒤에, 더 이상 분할하지 않는 경우(split_coding_unit_flag=0)인 경우에, 화면 간 예측 모드를 적용하는 슬라이스(slice_type!=I)에 대하여 스킵 모드를 적용할 것인지를 예측 유닛에 관한 파라미터 셋에서 알려준다. Referring to Table 5, when the split information about the current coding unit is informed to split_coding_unit_flag and no further split is performed (split_coding_unit_flag = 0), the slice (slice_type! = I) to which the inter prediction mode is applied Whether to apply the skip mode is indicated in the parameter set for the prediction unit.
이와 관련하여, 현재 부호화 블록이 분할될 것인지를 플래그로 지시하기 전에, 현재 부호화 블록에 관한 다른 정보들을 먼저 전송하는 방법을 고려할 수 있다. 예컨대, 플래그(split_coding_unit_flag)로 현재 부호화 유닛이 분할될지를 나타내기 전에, 스킵 플래그(skip_flag)를 사용해서 현재 부호화 유닛이 스킵 모드로 코딩될 것인지를 나타낼 수 있다.In this regard, before indicating with a flag whether a current coding block is to be split, a method of first transmitting other information about the current coding block may be considered. For example, before indicating whether the current coding unit is split by the flag split_coding_unit_flag, a skip flag (skip_flag) may be used to indicate whether the current coding unit is to be coded in the skip mode.
표 6은 본 발명이 적용되는 시스템에서 현재 부호화 블록이 분할될 것인지를 플래그로 지시하기 전에, 현재 부호화 블록에 관한 다른 정보들을 먼저 전송하는 신택스 구조의 예를 개략적으로 나타낸 것이다.Table 6 schematically shows an example of a syntax structure for first transmitting other information about a current coding block before indicating with a flag whether a current coding block is to be divided in a system to which the present invention is applied.
표 6을 참조하면, 화면 간 예측이 적용되는 영상 슬라이스(slice_type!=I)에 대하여 스킵 모드를 적용하는지를 스킵 플래그(skip_flag)로 먼저 알려준 뒤에, 현재 부호화 유닛이 분할하는지를 분할 플래그(split_coding_unit_flag)를 통해서 알려주고 있다. Referring to Table 6, a skip flag (skip_flag) first indicates whether a skip mode is applied to an image slice (slice_type! = I) to which inter prediction is applied, and then a split flag (split_coding_unit_flag) indicates whether a current coding unit is split. Let me know.
따라서, 스킵 모드가 적용되는 경우에는 불필요하게 분할 플래그로 분할 정보를 전송하지 않을 수 있으므로, 전체 정보량을 줄일 수 있다.Therefore, when the skip mode is applied, the split information may not be transmitted unnecessarily with the split flag, thereby reducing the total amount of information.
더 나아가, 입력 영상의 특성 및 부호화/복호화의 환경 설정 등에 따라서, 부호화/복호화의 효율성을 높이고, 정보 처리 비용 및/또는 정보량 등을 줄이기 위해 분할 정보를 전달하는 분할 플래그(예컨대, split_coding_unit_flag)와 분할 이외의 정보를 전달하는 신택스(예컨대, 스키 모드 적용 여부를 지시하는 스킵 플래그, skip_flag)의 순서를 적응적으로 변경하는 것을 고려할 수 있다.Furthermore, according to the characteristics of the input image and the environment of encoding / decoding, a splitting flag (for example, split_coding_unit_flag) and a splitting flag for transmitting split information in order to increase the efficiency of encoding / decoding and to reduce information processing cost and / or information amount, etc. It may be considered to adaptively change the order of syntaxes for transmitting other information (eg, a skip flag indicating whether to apply ski mode or skip_flag).
예컨대, 현재 블록의 분할 가능성이 높다면 분할 플래그를 먼저 전송하고 스킵 플래그를 전송하며, 분할 가능성이 낮다면 스킵 플래그를 먼저 전송하고 그 뒤에 분할 플래그를 전송할 수 있다. 구체적으로 아래와 같은 조건에 따라서, 분할 플래그와 스킵 플래그의 위치를 적응적으로 결정할 수 있다. For example, if the splitting probability of the current block is high, the splitting flag may be transmitted first and then the skip flag is transmitted. If the splitting probability is low, the skipping flag may be transmitted first, followed by the splitting flag. In more detail, the split flag and the skip flag may be adaptively determined according to the following conditions.
(1) 현재 부호화 유닛의 깊이(depth)를 조건으로 판단(1) Determining the depth of the current coding unit as a condition
부호화 유닛의 깊이가 얕다면 분할될 가능성이 크다고 볼 수 있다. 예를 들어, 깊이가 0인 부호화 유닛은 깊이가 1인 부호화 유닛보다 분할의 가능성이 더 크다고 할 수 있다. If the depth of the coding unit is shallow, it is likely to be divided. For example, it may be said that a coding unit having a depth of zero has a greater possibility of splitting than a coding unit having a depth of one.
따라서, 소정의 기준 깊이(depth_th)를 정하고, 현재 부호화 유닛의 깊이가 기준 깊이보다 얕으면(현재 부호화 유닛의 깊이 < 기준 깊이) 파라미터 셋의 전송에 있어서 분할 플래그를 먼저 전송하고, 현재 부호화 유닛의 깊이가 기준 깊이보다 같거나 깊으면 (현재 부호화 유닛의 깊이 ≥ 기준 깊이) 스킵 플래그를 먼저 전송할 수 있다. 예컨대, 현재 부호화 유닛의 깊이가 0일 때는 파라미터 셋의 전송에 있어서 분할 플래그(split_coding_unit_flag)를 먼저 보내고, 현재 부호화 유닛의 깊이가 1과 같거나 1보다 큰 경우에는 스킵 플래그(skip_flag)를 먼저 보내도록 할 수 있다. Therefore, if a predetermined reference depth (depth_th) is determined and the depth of the current coding unit is shallower than the reference depth (the depth of the current coding unit <the reference depth), the division flag is first transmitted in the transmission of the parameter set, and the If the depth is equal to or deeper than the reference depth (the depth of the current coding unit ≥ the reference depth), the skip flag may be transmitted first. For example, when the depth of the current coding unit is 0, the split flag (split_coding_unit_flag) is sent first when transmitting the parameter set, and when the depth of the current coding unit is equal to or greater than 1, the skip flag (skip_flag) is sent first. can do.
(2) 현재 부호화 유닛의 크기(size)를 조건으로 판단(2) Determine the size of the current coding unit as a condition
부호화 유닛의 깊이와 마찬가지로 부호화 유닛의 크기에 대해서도, 부호화 유닛의 크기가 크다면 분할될 가능성이 크다고 볼 수 있다. 예를 들어, LCU는 크기가 32x32인 부호화 유닛보다 분할될 가능성이 더 크다고 할 수 있다. Similarly to the depth of the coding unit, the size of the coding unit is also likely to be divided if the size of the coding unit is large. For example, it may be said that an LCU is more likely to be split than a coding unit having a size of 32x32.
따라서, 소정의 기준 크기(size_th)를 정하고, 현재 부호화 유닛의 크기가 기준 크기보다 크면(현재 부호화 유닛의 크기 < 기준 크기) 파라미터 셋의 전송에 있어서 분할 플래그를 먼저 전송하고, 현재 부호화 유닛의 크기가 기준 크기보다 같거나 작으면 (현재 부호화 유닛의 크기 ≥ 기준 크기) 스킵 플래그를 먼저 전송할 수 있다. 예컨대, 현재 부호화 유닛의 크기가 32x32이거나 32x32보다 큰 경우에는 파라미터 셋의 전송에 있어서 분할 플래그(split_coding_unit_flag)를 먼저 보내고, 현재 부호화 유닛의 크기가 32x32보다 작은 경우에는 스킵 플래그(skip_flag)를 먼저 보내도록 할 수 있다.Therefore, if a predetermined reference size (size_th) is determined, and if the size of the current coding unit is larger than the reference size (size of the current coding unit <reference size), the division flag is transmitted first in the transmission of the parameter set, and the size of the current coding unit If is equal to or smaller than the reference size (size of the current coding unit ≥ reference size), the skip flag may be transmitted first. For example, if the size of the current coding unit is 32x32 or larger than 32x32, the split flag (split_coding_unit_flag) is sent first in the transmission of the parameter set, and if the size of the current coding unit is smaller than 32x32, the skip flag (skip_flag) is sent first. can do.
(3) 현재 영상 슬라이스의 양자화 파라미터를 조건으로 판단 (3) Determine the condition of the quantization parameter of the current image slice
양자화 파라미터(Quantization Parameter: QP)가 작으면, 더 세밀한 정보를 전송할 수 있으며, 현재 블록의 분할 가능성이 높다고 할 수 있다. If the quantization parameter (QP) is small, more detailed information can be transmitted, and the possibility of partitioning the current block is high.
따라서, 소정의 기준 양자화 파라미터(QP_th)를 정하고, 현재 부호화 유닛의 양자화 파라미터가 양자화 파라미터보다 작으면(현재 부호화 유닛의 양자화 파라미터 < 기준 양자화 파라미터) 파라미터 셋의 전송에 있어서 분할 플래그를 먼저 전송하고, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 같거나 크면 (현재 부호화 유닛의 양자화 파라미터 ≥ 기준 양자화 파라미터) 스킵 플래그를 먼저 전송할 수 있다. 예컨대, 현재 부호화 유닛의 양자화 파라미터가 30보다 작을 경우에는, 파라미터 셋의 전송에 있어서 분할 플래그(split_coding_unit_flag)를 먼저 보내고, 현재 부호화 유닛의 양자화 파라미터가 30과 같거나 30보다 큰 경우에는 스킵 플래그(skip_flag)를 먼저 보내도록 할 수 있다.Therefore, if the predetermined reference quantization parameter QP_th is determined and the quantization parameter of the current coding unit is smaller than the quantization parameter (quantization parameter <reference quantization parameter of the current coding unit), the division flag is first transmitted in the transmission of the parameter set, If the quantization parameter of the current coding unit is equal to or greater than the reference quantization parameter (quantization parameter ≥ reference quantization parameter of the current coding unit), the skip flag may be transmitted first. For example, if the quantization parameter of the current coding unit is less than 30, a split flag (split_coding_unit_flag) is sent first in the transmission of the parameter set, and if the quantization parameter of the current coding unit is equal to or greater than 30, the skip flag (skip_flag) is transmitted. ) Can be sent first.
(4) 상기 조건들의 조합(4) a combination of the above conditions
상기 부호화 유닛의 깊이, 크기 그리고 양자화 파라미터에 관한 조건을 조합하여 현재 부호화 유닛에 대해 분할 플래그를 먼저 보낼지 스킵 플래그를 먼저 보낼지를 결정할 수 있다.A combination of depth, size, and quantization parameter of the coding unit may be combined to determine whether to send a split flag or skip flag first for the current coding unit.
예컨대, 상기 (1) 내지 (3)의 중 적어도 둘 이상의 조건에 해당하는 경우에 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수 있다. For example, when at least two or more of the above (1) to (3) correspond to the condition, the division flag may be transmitted before the skip flag.
예컨대, 현재 부호화 유닛의 깊이가 기준 깊이보다 작고, 현재 부호화 유닛의 크기가 기준 크기보다 큰 경우에 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수 있다. 현재 부호화 유닛의 깊이가 기준 깊이보다 작고, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 작은 경우에 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수도 있다. 현재 부호화 유닛의 크기가 기준 크기보다 크고, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 작은 경우에 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수도 있다. For example, when the depth of the current coding unit is smaller than the reference depth and the size of the current coding unit is larger than the reference size, the split flag may be transmitted before the skip flag. The split flag may be transmitted before the skip flag when the depth of the current coding unit is smaller than the reference depth and the quantization parameter of the current coding unit is smaller than the reference quantization parameter. When the size of the current coding unit is larger than the reference size and the quantization parameter of the current coding unit is smaller than the reference quantization parameter, the split flag may be transmitted before the skip flag.
상기 (1) 내지 (3)의 세 조건 중 두 조건을 조합하여 사용하는 경우에, 나머지 한 조건을 예외를 인정하는 조건으로 활용할 수도 있다. 예컨대, 현재 부호화 유닛의 깊이가 기준 깊이보다 작고, 현재 부호화 유닛의 크기가 기준 크기보다 큰 경우에도 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 크면 분할 플래그를 스킵 플래그보다 나중에 전송하도록 할 수 있다. 현재 부호화 유닛의 깊이가 기준 깊이보다 작고, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 작은 경우에도 현재 부호화 유닛의 크기가 기준 크기보다 작으면 분할 플래그를 스킵 플래그보다 나중에 전송하도록 할 수도 있다. 현재 부호화 유닛의 크기가 기준 크기보다 크고, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 작은 경우에도 현재 부호화 유닛의 깊이가 기준 깊이보다 크면 분할 플래그를 스킵 플래그보다 나중에 전송하도록 할 수도 있다.In the case of using a combination of two of the three conditions (1) to (3) above, the other one may be used as a condition for acknowledging an exception. For example, even when the depth of the current coding unit is smaller than the reference depth and the size of the current coding unit is larger than the reference size, the division flag may be transmitted later than the skip flag if the quantization parameter of the current coding unit is larger than the reference quantization parameter. Even when the depth of the current coding unit is smaller than the reference depth and the quantization parameter of the current coding unit is smaller than the reference quantization parameter, the split flag may be transmitted later than the skip flag if the size of the current coding unit is smaller than the reference size. Even when the size of the current coding unit is larger than the reference size and the quantization parameter of the current coding unit is smaller than the reference quantization parameter, the split flag may be transmitted later than the skip flag if the depth of the current coding unit is larger than the reference depth.
또한, 상기 (1) 내지 (3)의 조건을 모두 만족하는 경우에 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수도 있다. 예컨대, 현재 부호화 유닛의 깊이가 기준 깊이보다 작고, 현재 부호화 유닛의 크기가 기준 크기보다 크며, 현재 부호화 유닛의 양자화 파라미터가 기준 양자화 파라미터보다 작으면 분할 플래그를 스킵 플래그보다 먼저 전송하도록 할 수도 있다.In addition, when all of the conditions (1) to (3) are satisfied, the division flag may be transmitted before the skip flag. For example, when the depth of the current coding unit is smaller than the reference depth, the size of the current coding unit is larger than the reference size, and the quantization parameter of the current coding unit is smaller than the reference quantization parameter, the split flag may be transmitted before the skip flag.
여기서는, 분할 정보(분할 플래그) 외 현재 부호화 유닛에 대한 정보로서 분할 정보와 전달의 선후를 따져야 하는 정보로서 스킵 모드를 적용하는지에 관한 정보를 예로서 설명하였으나, 본 발명은 이에 한정되지 않으며, 상술한 바와 같이 예측 모드를 지시하는 신택스 등 현재 부호화 유닛에 관한 다른 정보들에 대해서도 동일하게 상술한 방법을 적용할 수 있다.Herein, the information on whether to apply the skip mode as the information to be determined after the split information as the information on the current coding unit other than the split information (split flag) has been described as an example, but the present invention is not limited thereto. As described above, the above-described method may be similarly applied to other information about the current coding unit, such as a syntax indicating a prediction mode.
또한, 여기서는 현재 부호화 유닛에 대해서 분할 정보와 스킵 정보의 전달 순서를 판단하는 것을 설명하였으나, 본 발명은 이에 한정되지 않으며, 그 외의 처리 유닛(예측 유닛, 변환 유닛)에 대해서도 상술한 방법을 동일하게 적용할 수 있다. In addition, although it has been described herein that the transmission order of the split information and the skip information is determined for the current coding unit, the present invention is not limited thereto, and the above-described method is similarly applied to other processing units (prediction unit, transformation unit). Applicable
도 10은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성해서 정보를 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.10 is a flowchart schematically illustrating an example of a method for transmitting information by configuring a parameter set in an encoder to which the present invention is applied.
도 10을 참조하면, 부호화기는 먼저 파라미터 셋을 구성한다(S1010). 이때, 부호화기는 현재 LCU에 대한 분할 정보와 예측 모드에 관한 정보의 위치를 파라미터 셋 내에서 적응적으로 결정할 수 있다. Referring to FIG. 10, the encoder first configures a parameter set (S1010). In this case, the encoder may adaptively determine the location of the split information for the current LCU and the information about the prediction mode in the parameter set.
현재 LCU에 대한 분할 정보(예컨대, split_coding_unit_flag)와 예측 모드에 관한 정보(pred_mode)의 위치를 결정하는 방법 및 조건은 상술한 바와 같다.Methods and conditions for determining the location of split information (eg, split_coding_unit_flag) and information about a prediction mode (pred_mode) for the current LCU are as described above.
부호화기는 구성된 파라미터 셋을 복호화기로 전송한다(S1020). 파라미터 셋은 다른 정보들과 함께 부호화되어 전송될 수 있다.The encoder transmits the configured parameter set to the decoder (S1020). The parameter set may be encoded and transmitted along with other information.
도 11은 본 발명이 적용된 복호화기에서 수신한 파라미터 셋을 이용하여 복호화를 수행하는 방법의 일 예를 개략적으로 설명하는 순서도이다.11 is a flowchart schematically illustrating an example of a method of performing decoding by using a parameter set received by a decoder to which the present invention is applied.
도 11을 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신한다(S1110). 파라미터 셋은 부호화되어 비트스트림상으로 전송될 수 있다. Referring to FIG. 11, the decoder receives a parameter set from an encoder (S1110). The parameter set may be encoded and transmitted on the bitstream.
파라미터 셋 내에서 현재 LCU에 대한 분할 정보(예컨대, split_soding-unit_flag)와 어떤 예측 모드를 적용할 것인지를 지시하는 정보(pred_mode)의 선후는 상술한 바와 같이 상황에 따라 다를 수 있다.In the parameter set, the splitting information (for example, split_soding-unit_flag) for the current LCU and information (pred_mode) indicating which prediction mode to apply may vary depending on the situation as described above.
복호화기는 수신한 파라미터 셋의 정보 및/또는 지시에 따라서 부호화 유닛을 복호화할 수 있다(S1120). 복호화기는 먼저 전달된 정보를 우선적으로 적용하고, 순차적으로 다음 정보를 이용하여 현재 LCU를 복호화할 수 있다. 예컨대, 현재 LCU의 분할 정보가 전달된 경우에는, 해당 정보가 지시하는 대로 현재 LCU를 분할한다. 이어서, LCU 혹은 각 파티션(CU/PU/TU)별로 예측 모드가 전달되면, 해당 예측 모드를 적용하여 해당 영역에서 예측을 수행할 수 있다. The decoder may decode the coding unit according to the information and / or the indication of the received parameter set (S1120). The decoder may first apply the transmitted information first, and sequentially decode the current LCU using the following information. For example, when split information of the current LCU is delivered, the current LCU is split as indicated by the information. Subsequently, when a prediction mode is transmitted for each LCU or each partition (CU / PU / TU), prediction may be performed in a corresponding region by applying the prediction mode.
반대로 예측 모드가 먼저 전달된 경우에는, 해당 예측 모드를 우선 적용할 수 있다. 예컨대, 예측 모드가 화면 간 예측으로서 스킵 모드가 적용된다는 것이 전달된 경우(slice_type!=I && skip_flag=1)에는 인 경우에는, 더 이상 부호화 유닛의 분할 정보를 파싱(parsing)하지 않고, 해당 부호화 유닛에 화면 간 예측에 의한 스킵 모드를 적용하여 복호화를 진행할 수도 있다. On the contrary, when the prediction mode is delivered first, the prediction mode may be applied first. For example, when the prediction mode is transmitted that the skip mode is applied as inter-screen prediction (slice_type! = I & & skip_flag = 1), the encoding is no longer parsed by parsing the split information of the coding unit. The decoding may be performed by applying a skip mode by inter prediction to the unit.
<동일 위치 LCU의 대상 픽처 및 이용 가능한 정보><Target picture and available information of the same location LCU>
한편, 본 발명에 대하여 상술한 내용에서는 현재 LCU의 분할 상태를 유도하는데 이용하는 동일 위치 LCU를, 이미 부호화된 픽처들 중에서 현재 픽처에 시간적으로 가장 가까운 픽처로 설명하였으나, 그 외의 픽처들도 동일 위치 LCU의 대상으로서 활용하는 방법을 고려할 수 있다. Meanwhile, in the above description of the present invention, the same position LCU used to derive the split state of the current LCU has been described as a picture closest in time to the current picture among previously encoded pictures, but other pictures are also the same position LCU. We can consider how to use as target of.
(1) 동일 위치 LCU의 대상 픽처(1) Target picture of the same position LCU
현재 LCU에 관한 정보를 유도할 수 있는 동일 위치 LCU의 대상이 되는 픽처로서, 이미 부호화된 픽처들 중에서 현재 픽처에 시간적으로 가장 가까운 픽처 외에도 아래와 같은 픽처들을 이용할 수 있다. 이때, 앞서 설명한 바와 같이 대상 픽처에서 공간적으로 현재 LCU와 같은 위치에 있는 LCU가 동일 위치 LCU가 된다. As a picture that is a target of a co-located LCU capable of deriving information about the current LCU, the following pictures may be used in addition to the picture closest in time to the current picture among pictures that are already encoded. At this time, as described above, the LCU in the same position as the current LCU spatially in the target picture becomes the same position LCU.
1) 현재 부호화 중인 픽처(현재 픽처) 바로 전에 부호화된 픽처1) The picture encoded immediately before the picture currently being encoded (the current picture).
2) 이미 부호화된 픽처들 중에서, 현재 부호화 중인 픽처와 시간적 레벨이 같고, 시간적 거리가 가장 가까운 픽처2) Among pictures that are already encoded, a picture having the same temporal level and the closest temporal distance from the picture currently being encoded.
3) 이미 부호화된 픽처들 중에서, 현재 부호화 중인 픽처와 시간적 레벨이 같고, 가장 최근에 부호화된 픽처3) Among pictures that are already encoded, a picture that is currently encoded has the same temporal level and the most recently encoded picture.
4) 이미 부호화된 픽처들 중에서, 현재 부호화 중인 픽처보다 시간적 레벨이 작고, 시간적 거리가 가장 가까운 픽처4) Among pictures that are already encoded, a picture having a temporal level smaller than the picture currently being encoded and having the closest temporal distance.
5) 이미 부호화된 픽처들 중에서, 현재 부호화 중인 픽처보다 시간적 레벨이 작고, 가장 최근에 부호화된 픽처5) Of the pictures that are already encoded, the temporal level is smaller than the picture currently being encoded and the most recently encoded picture.
여기서, 시간적 레벨은 계층적(hierarchical) B 픽처 구조를 사용하여 영상이 부호화된 경우, 각 픽처의 시간적 계층을 말하는 것으로서, 각 시간적 레벨에 대응하는 시간적 계층에 ID를 부여해서, 시간적 레벨을 시간 ID(temporal id)로 표현할 수도 있다. 계층적 B 픽처 구조에서 현재 픽처는 자신보다 높은 레벨의 픽처는 참조하지 않는다. 도 12는 계층적 B 구조를 개략적으로 설명하는 개념도이다. 도 12를 참조하면, 각각의 픽처(1200 ~ 1280)는 자신보다 하위의 시간적 레벨 또는 동일한 시간적 레벨에 있는 픽처(자신보다 작거나 같은 시간 id 를 갖는 픽처)를 참조하여 예측을 할 수 있으며, 자신보다 상위의 시간적 레벨에 있는 픽처를 참조하여 예측을 하지 않는다.Here, when the temporal level is encoded using a hierarchical B picture structure, the temporal level refers to the temporal layer of each picture. The temporal level is assigned an ID to a temporal layer corresponding to each temporal level. It can also be expressed as a temporal id. In the hierarchical B picture structure, the current picture does not refer to a picture of a higher level than itself. 12 is a conceptual diagram schematically illustrating a hierarchical B structure. Referring to FIG. 12, each picture 1200 to 1280 may make predictions by referring to a picture having a temporal level lower than itself or a picture at a same temporal level (pictures having a time ID less than or equal to itself). No prediction is made by referring to a picture at a higher temporal level.
한편, 현재 LCU의 분할 상태를 유도하는데 동일 위치 LCU를 이용하는 방법을 현재 픽처의 슬라이스 타입이 화면 내 예측 모드의 슬라이스(인트라 슬라이스, Intra Slice)일 때는 사용하지 않고, 현재 픽처의 슬라이스 타입이 화면 간 예측 모드의 슬라이스(인터 슬라이스, Inter Slice)일 때만 사용하도록 할 수도 있다. On the other hand, the method of using the same position LCU to derive the split state of the current LCU is not used when the slice type of the current picture is an intra slice (Intra Slice) of the intra prediction mode, and the slice type of the current picture is inter-screen. It may be used only when a slice (inter slice) of a prediction mode is used.
또한, 현재 LCU의 분할 상태를 유도하는데 동일 위치 LCU를 이용하는 방법을 현재 픽처의 슬라이스 타입과 동일 위치 LCU의 슬라이스 타입이 모두 화면 간 예측 모드의 슬라이스(인터 슬라이스, inter slice)일 때만 사용하도록 할 수도 있다. In addition, the method of using the co-located LCU to derive the split state of the current LCU may be used only when the slice type of the current picture and the slice type of the co-located LCU are both slices of an inter prediction mode. have.
(2) 동일 위치 LCU로부터 이용 가능한 정보(2) Information available from the same location LCU
상술한 바와 같이, 현재 LCU를 부호화할 때 동일 위치 LCU의 정보로부터 현재 LCU의 정보를 유도/예측하거나 동일 위치 LCU의 정보를 현재 LCU의 정보로 이용할 수 있다. 이하, 설명의 편의를 위해, 본 명세서에서 ‘동일 위치 LCU의 정보를 이용한다’라는 표현은 현재 LCU의 정보를 유도/예측하는 것과 동일 위치 LCU의 정보를 현재 LCU로 이용하는 것을 모두 포함하는 의미로 사용한다. 부호화기가 동일 위치 LCU의 정보를 이용하는 경우에는 이를 지시하는 플래그를 복호화기로 전송할 수 있다. As described above, when the current LCU is encoded, the information of the current LCU may be derived / predicted from the information of the same location LCU, or the information of the same location LCU may be used as the information of the current LCU. Hereinafter, for convenience of description, the expression 'use information of the same location LCU' is used herein to mean both including deriving / predicting information of the current LCU and using information of the same location LCU as the current LCU. do. When the encoder uses information of the same position LCU, a flag indicating this may be transmitted to the decoder.
동일 위치 LCU의 정보를 이용하는 것을 지시하는 플래그의 일 예로서, use_coloc_LCU_info_flag를 정의할 수 있다. 동일 위치 LCU의 정보로서 현재 LCU에 이용되는 정보가 LCU의 분할 정보에 한정되는 경우에는, 앞서 설명한 use_coloc_LCU_split_info_flag와 use_coloc_LCU_info_flag는 동일한 역할을 수행할 수 있다. As an example of a flag indicating that information of the same location LCU is used, use_coloc_LCU_info_flag may be defined. When the information currently used in the LCU as information on the same location LCU is limited to the split information of the LCU, use_coloc_LCU_split_info_flag and use_coloc_LCU_info_flag described above may play the same role.
이하, 설명의 편의를 위해 동일 위치 LCU의 정보를 이용하는 것을 지시하는 플래그의 예로서, ‘use_coloc_LCU_info_flag’를 이용한다. Hereinafter, 'use_coloc_LCU_info_flag' is used as an example of a flag indicating that information of the same location LCU is used for convenience of description.
use_coloc_LCU_info_flag의 값이 1인 경우에는, 동일 위치 LCU의 정보를 이용하게 되는 현재 LCU의 정보는 따로 전송되지 않는다. 동일 위치 LCU의 정보를 이용하여 추론(infer)되거나 동일 위치 LUC의 해당 정보를 그대로 사용할 수 있기 때문이다. 예컨대, use_coloc_LCU_info_flag를 통해 이용하는 동일 위치 LCU의 정보가 LCU의 분할 정보라면, 분할 플래그 예컨대 split_coding_unit_flag는 전송되지 않을 수 있다. When the value of use_coloc_LCU_info_flag is 1, the information of the current LCU, which uses the information of the same location LCU, is not transmitted separately. This is because the information of the same location LCU can be inferred or the corresponding information of the same location LUC can be used as it is. For example, if the information of the same location LCU used through use_coloc_LCU_info_flag is split information of the LCU, the split flag, for example split_coding_unit_flag, may not be transmitted.
LCU의 분할 정보뿐만 아니라 동일 위치 LCU의 다양한 정보들을 현재 LCU의 정보로서 이용할 수 있다. 이 경우에, 동일 위치 LCU의 정보는 동일 위치 LCU 내 부호화 유닛(CU)의 정보일 수도 있다. 동일 위치 LCU 내 부호화 유닛의 정보는 특정 부호화 유닛의 정보일 수도 있고, 각 부호화 유닛의 정보일 수도 있다. 동일 위치 LCU 내 부호화 유닛의 정보는 현재 LCU 내의 대응하는 부호화 유닛에 이용될 수도 있고, 현재 LCU 내의 각 부호화 유닛 또는 특정 부호화 유닛에 이용될 수도 있다. 이용 가능한 정보는 아래와 같다: Various information of the same location LCU as well as the split information of the LCU can be used as the information of the current LCU. In this case, the information of the same position LCU may be information of the coding unit CU in the same position LCU. The information of the coding unit in the same position LCU may be information of a specific coding unit or may be information of each coding unit. Information of a coding unit in the same position LCU may be used for a corresponding coding unit in the current LCU, or may be used for each coding unit or a specific coding unit in the current LCU. The information available is as follows:
1) 현재 LCU 및/또는 현재 LCU 내 부호화 유닛(이하, 설명의 편의를 위해, ‘현재 LCU 및/또는 현재 LCU 내 부호화 유닛’을 ‘현재 부호화 유닛’이라 함)에 대한 분할 정보. 예컨대, 현재 부호화 유닛에 관한 파라미터 셋 내의 모든 분할 플래그 (split_coding_unit_flag)1) Split information on a current LCU and / or a coding unit in a current LCU (hereinafter, for convenience of description, 'the current LCU and / or a coding unit in the current LCU' is referred to as a 'current coding unit'). For example, all splitting flags (split_coding_unit_flag) in a parameter set related to the current coding unit.
2) 현재 부호화 유닛에 대한 스킵 정보. 예컨대, 현재 부호화 유닛에 관한 파라미터 셋 내의 모든 스킵 플래그(skip_flag)2) Skip information for the current coding unit. For example, all skip flags (skip_flag) in the parameter set for the current coding unit.
3) 현재 부호화 유닛에 대한 예측 모드. 예컨대, 현재 부호화 유닛에 대한 파라미터 셋 내의 모든 예측 모드 신택스(pred_mode) 값3) Prediction mode for the current coding unit. For example, all prediction mode syntax values (pred_mode) values in the parameter set for the current coding unit.
4) 현재 부호화 유닛에 대한 모드. 예컨대, 현재 부호화 유닛에 대한 파라미터 셋 내의 모든 모드 값. 디코더는, 수신한 코드워드를 가변 길이 부호화(Variable Length Coding: VLC) 테이블을 통해 모드 테이블(mode table) 인덱스로 변환하고, 모드 테이블 인덱스를 다시 모드 테이블(랭킹 테이블)을 통해 모드 값으로 변환한다. 모드 값은 예측 모드(pred_mode), 예측 유닛의 분할을 지시하는 플래그(intra_split_flag), 화면 간 예측의 파티셔닝을 지시하는 지시자(inter_partitioning_idc), 참조 화면 리스트(ref_idx_l0), 화면 간 예측 지시자(inter_pred_idx), 변환 유닛에 대한 분할 플래그(split_transform_unit_flag) 등의 값을 산출하기 위해 이용될 수 있다. 이때, 동일 위치 LCU 및/또는 동일 위치 LCU 내 부호화 유닛(이하, 설명의 편의를 위해 ‘동일 위치 LCU 및/또는 동일 위치 LCU 내 부호화 유닛’을 ‘동일 위치 부호화 유닛’이라 함)의 모드 값을 현재 부호화 유닛에 대한 모드 값으로 이용할 수 있다. 4) Mode for the current coding unit. For example, all mode values in the parameter set for the current coding unit. The decoder converts the received codeword into a mode table index through a variable length coding (VLC) table and converts the mode table index into a mode value through a mode table (ranking table). . The mode value includes a prediction mode (pred_mode), a flag indicating division of a prediction unit (intra_split_flag), an indicator indicating partitioning of inter prediction, an inter_partitioning_idc, a reference picture list (ref_idx_l0), an inter prediction prediction indicator (inter_pred_idx), and a transformation. It may be used to calculate a value such as a split flag (split_transform_unit_flag) for a unit. In this case, the mode value of the same unit LCU and / or the coding unit within the same position LCU (hereinafter, for convenience of description, the term 'the same position LCU and / or the coding unit within the same position LCU' is referred to as the same position coding unit) Can be used as a mode value for the current coding unit.
5) 현재 부호화 유닛에 대한 예측 유닛의 분할에 관한 정보. 예컨대, 현재 부호화 유닛에 대한 파라미터 셋 내의 모든 예측 유닛 분할 플래그 (intra_split_flag)5) Information about the splitting of the prediction unit for the current coding unit. For example, all prediction unit splitting flags (intra_split_flag) in the parameter set for the current coding unit.
6) 현재 부호화 유닛에서 화면 간 예측을 위한 부호화 유닛의 파티셔닝 정보. 예컨대, 현재 부호화 유닛에 대한 파라미터 셋 내에서, 화면 간 예측을 위한 목적으로 현재 부호화 유닛을 파티셔닝하는 타입을 특정하는 지시자 (inter_partitioning_idc)6) Partitioning information of the coding unit for inter prediction in the current coding unit. For example, in the parameter set for the current coding unit, the indicator for specifying the type of partitioning the current coding unit for the purpose of inter-picture prediction (inter_partitioning_idc)
7) 상술한 정보들 외 현재 부호화 유닛에 관한 파라미터 셋에서 전송될 수 있는 모든 종류의 정보7) All kinds of information that can be transmitted in the parameter set related to the current coding unit in addition to the above-described information.
8) 상기 1) ~ 7)의 정보들의 조합8) Combination of the information of 1) to 7)
상술한 바와 같이, 상기 1) 내지 8)의 정보를 동일 위치 부호화 유닛의 정보를 이용하여 얻을 수 있다.As described above, the information of 1) to 8) can be obtained by using the information of the same position coding unit.
현재 LCU가 아닌 부호화 유닛에 대하여 상기 1) 내지 8)의 정보를 적용하는 경우에는, 현재 LCU 내의 어떤 부호화 유닛에 해당 정보를 적용할 것인지를 지시할 수 있다. 표 7은 LCU 레벨이 아닌 LCU 내 부호화 유닛 단위로 상기 1) 내지 8)의 정보를 적용하기 위한 신택스 구조의 일 예를 개략적으로 나타낸 것이다.When the information of 1) to 8) is applied to a coding unit other than the current LCU, it may be indicated to which coding unit in the current LCU to apply the information. Table 7 schematically illustrates an example of a syntax structure for applying the information of 1) to 8) in units of coding units in the LCU rather than the LCU level.
표 7을 참조하면, 대상 부호화 유닛을 지정(x0, y0)하여, 동일 위치 부호화 유닛의 정보를 이용할 것인지에 관한 정보를 전송할 수 있다.Referring to Table 7, the target coding unit may be designated (x0, y0) to transmit information on whether to use the information of the same position coding unit.
표 7의 예에서는 부호화 유닛 레벨로 동일 위치 부호화 유닛의 정보를 이용하는 플래그를 설명하였지만, 구체적인 정보를 이용할 것을 부호화 유닛 단위로 지시하는 경우에는, 대상 정보를 지정하는 플래그를 이용할 수도 있다. 예컨대, 동일 위치 블록의 분할 정보를 이용하는 경우에는, 이용할 것인지를 지시하는 정보가 분할 정보임을 구체적으로 지시하는 플래그(use_coloc_CU_split_info_flag)를 사용할 수도 있다.
In the example of Table 7, a flag using information of the same position coding unit has been described at the coding unit level. However, when a coding unit unit indicates that specific information is to be used, a flag for designating target information may be used. For example, when using split information of the same position block, a flag (use_coloc_CU_split_info_flag) that specifically indicates that the information indicating whether to use is split information may be used.
한편, 동일 위치 부호화 유닛의 정보를 이용할 수 있는 현재 부호화 유닛을 구체적으로 특정할 수도 있다. 예컨대, 현재 부호화 유닛 중에서 더 이상 분할되지 않는 부호화 유닛에 대해서만 동일 위치 부호화 유닛의 정보를 이용하도록 할 수도 있다. 표 8은 현재 LCU 내의 부호화 유닛 중 더 이상 분할되니 않는 부호화 유닛에 대해서 동일 위치 부호화 유닛의 정보를 이용할 것인지를 지시하는 신택스 구조의 일 예를 개략적으로 나타낸 것이다.On the other hand, it is also possible to specifically specify the current coding unit that can use the information of the same position coding unit. For example, the information of the same position coding unit may be used only for the coding unit that is no longer split among the current coding units. Table 8 schematically shows an example of a syntax structure indicating whether to use information of the same position coding unit for a coding unit that is no longer split among coding units in the current LCU.
표 8의 예에서, SCU는 더 이상 분할되지 않는 부호화 유닛을 나타낸다. In the example of Table 8, the SCU represents a coding unit that is no longer split.
도 13은 본 발명이 적용되는 부호화기에서 현재 부호화 유닛에 관한 정보를 구성하여 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다. 도 13의 설명에 있어서, 부호화 유닛은 LCU를 포함하는 의미이다. 13 is a flowchart schematically illustrating an example of a method for configuring and transmitting information about a current coding unit in an encoder to which the present invention is applied. In the description of FIG. 13, the coding unit is a meaning including an LCU.
도 13을 참조하면, 부호화기는 현재 부호화 유닛에 대하여 동일 위치 부호화 유닛의 정보를 이용할 것인지를 결정한다(S1310). 이때, 동일 위치 부호화 유닛의 대상 픽처는 현재 픽처 바로 전에 부호화된 픽처 뿐만 아니라, 다양한 픽처들 중에서 선택될 수 있다. 현재 부호화 유닛에 관한 정보들 중 분할에 관한 정보뿐만 아니라 다양한 정보가 동일 위치 부호화 유닛으로부터 유도될 수 있다. 대상 픽처를 선택하는 방법과 동일 위치 부호화 유닛로부터 이용할 수 있는 정보들에 관한 내용은 상술한 바와 같다. Referring to FIG. 13, the encoder determines whether to use information of the same position coding unit with respect to the current coding unit (S1310). In this case, the target picture of the same position coding unit may be selected from various pictures as well as the picture encoded immediately before the current picture. Various information may be derived from the same position coding unit as well as information on the split among the information about the current coding unit. The information on the method of selecting the target picture and the information available from the same position coding unit are as described above.
한편, 동일 위치 부호화 유닛의 정보로부터 현재 정보를 유도하는 방법은 현재 픽처가 화면 간 예측 모드의 인터 슬라이스(inter slice)인 경우에만 적용하도록 할 수도 있다.Meanwhile, the method of deriving the current information from the information of the same position coding unit may be applied only when the current picture is an inter slice of the inter prediction mode.
부호화기는 현재 부호화 유닛의 정보를 포함하는 파라미터 셋을 구성한다(S1320). 부호화기는 동일 위치 부호화 유닛의 정보를 이용하여 현재 부호화 유닛의 정보를 유도할 것인지를 지시하는 플래그를 파라미터 셋에 포함시킬 수 있다. 상술한 바와 같이, 동일 위치 부호화 유닛으로부터 이용하는 정보는 분할 정보에 한정되지 않는다. 따라서, 분할 정보뿐만 아니라, 동일 위치 부호화 유닛의 더 다양한 정보를 이용할 것인지를 지시하는 플래그(use_coloc_LCU_info_flag 및/또는 use_coloc_CU_info_flag)를 이용할 수 있다. 상기 플래그의 값이 1인 경우에는 복호화기가 동일 위치 부호화 유닛의 정보를 이용하여 현재 부호화 유닛의 정보를 유도하도록 하고, 상기 플래그의 값이 0인 경우에는 별도의 정보를 복호화기에 전달할 수 있다. 동일 위치 부호화 유닛의 정보를 이용하는 경우에, 해당 정보에 관해서는 현재 부호화 유닛에 대한 별도의 정보를 전송하지 않을 수 있다. LCU와 LCU 내 부호화 유닛에 대해, 동일 위치 블록의 정보를 이용할 것인지를 시그널링하는 방법 및 신택스 구조에 관한 내용은 상술한 바와 같다.The encoder configures a parameter set including information of the current coding unit (S1320). The encoder may include, in the parameter set, a flag indicating whether to derive information of the current coding unit by using the information of the same position coding unit. As described above, the information used from the same position coding unit is not limited to the split information. Therefore, not only the splitting information but also flags (use_coloc_LCU_info_flag and / or use_coloc_CU_info_flag) indicating whether to use more various information of the same position coding unit can be used. When the value of the flag is 1, the decoder may induce the information of the current coding unit by using the information of the same position coding unit, and when the value of the flag is 0, separate information may be transmitted to the decoder. In the case of using information of the same position coding unit, separate information about the current coding unit may not be transmitted with respect to the corresponding information. The method and syntax structure for signaling whether to use information of the same position block for the LCU and the coding unit in the LCU have been described above.
상기 플래그(use_coloc_LCU_info_flag 및/또는 use_coloc_CU_info_flag)가 동일 위치 부호화 유닛의 정보를 이용하는 것을 지시하는 경우에, 해당 LCU 에 대하여 혹은 특정 파티션(CU/PU/TU)에 대하여 별도로 전송되는 정보 외에는 모두 동일 위치 부호화 유닛의 정보를 이용하도록 할 수도 있다. 동일 위치 부호화 유닛으로부터 유도되는 정보에 관해서는 별도의 정보를 전송하지 않는다. When the flag (use_coloc_LCU_info_flag and / or use_coloc_CU_info_flag) indicates to use the information of the same location coding unit, all the same location coding unit except for information transmitted separately for the LCU or a specific partition (CU / PU / TU) You can also use the information. No additional information is transmitted with respect to the information derived from the same position coding unit.
한편, 상기 플래그(use_coloc_LCU_info_flag 및/또는 use_coloc_CU_info_flag)의 값이 1인 경우에도, 이용할 정보를 구체적으로 지시하는 플래그를 포함하도록 파라미터 셋을 구성할 수 있다.Meanwhile, even when the value of the flag (use_coloc_LCU_info_flag and / or use_coloc_CU_info_flag) is 1, the parameter set may be configured to include a flag specifically indicating information to be used.
부호화기는 구성된 파라미터 셋을 복호화기에 전송한다(S1330). 파라미터 셋은 다른 정보들과 함께 부호화되어 전송될 수 있다.The encoder transmits the configured parameter set to the decoder (S1330). The parameter set may be encoded and transmitted along with other information.
도 14는 본 발명이 적용되는 복호화기에서 수신한 파라미터 셋을 이용하여 부호화 유닛을 복호화하는 것을 개략적으로 설명하는 순서도이다. 도 14의 설명에 있어서, 부호화 유닛은 LCU를 포함하는 의미이다. 14 is a flowchart schematically illustrating decoding of a coding unit using a parameter set received by a decoder to which the present invention is applied. In the description of FIG. 14, the coding unit is a meaning including an LCU.
도 14을 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신할 수 있다(S1410). 파라미터 셋은 부호화되어 비트스트림을 통해 수신될 수 있다. LCU와 LCU 내 부호화 유닛에 대해, 동일 위치 블록의 정보를 이용할 것인지가 시그널링되는 방법 및 신택스 구조에 관한 내용은 상술한 바와 같다.Referring to FIG. 14, the decoder may receive a parameter set from an encoder (S1410). The parameter set may be encoded and received through the bitstream. The method and syntax structure for signaling whether to use information of the same position block for the LCU and the coding unit in the LCU have been described above.
복호화기는 수신한 파라미터 셋으로부터 현재 부호화 유닛의 정보를 유도할 수 있다(S1420). 파라미터 셋에는 현재 부호화 유닛의 정보를 유도하기 위해 동일 위치 부호화 유닛의 정보를 이용할 것인지를 지시하는 플래그가 포함될 수 있다. 복호화기는 상기 플래그의 값이 1인 경우에, 동일 위치 부호화 유닛의 정보로부터 현재 부호화 유닛의 정보를 유도할 수 있다. The decoder can derive information of the current coding unit from the received parameter set (S1420). The parameter set may include a flag indicating whether to use the information of the same position coding unit to derive the information of the current coding unit. When the value of the flag is 1, the decoder may derive the information of the current coding unit from the information of the same position coding unit.
파라미터 셋은 동일 위치 부호화 유닛의 어떤 정보를 이용할 것인지를 구체적으로 지시하는 플래그를 더 포함할 수도 있다. 또한, 파라미터 셋은 현재 픽처가 인터 슬라이스인 경우에만 동일 위치 부호화 유닛의 정보를 이용하도록 지시하는 플래그를 포함할 수도 있다. The parameter set may further include a flag that specifically indicates what information of the same position coding unit to use. In addition, the parameter set may include a flag indicating to use information of the same position coding unit only when the current picture is an inter slice.
동일 위치 부호화 유닛으로부터 유도되는 정보에 관해서는 파라미터 셋을 통해 별도의 정보가 전송되지 않을 수도 있다. 예컨대, 동일 위치 부호화 유닛의 정보로부터 유도하는 정보가 분할 정보인 경우에는, 현재 부호화 유닛에 대한 별도의 분할 정보(split_coding_unit_flag)가 수신한 파라미터 셋에 포함되어 있지 않을 수 있다. Regarding information derived from the same position coding unit, separate information may not be transmitted through a parameter set. For example, when the information derived from the information of the same position coding unit is split information, separate split information (split_coding_unit_flag) for the current coding unit may not be included in the received parameter set.
동일 위치 부호화 유닛의 정보로부터 유도되는 정보를 구체적으로 지시할 것인지, 해당 정보가 별도로 전송되지 않으면 동일 위치 부호화 유닛의 정보로부터 유도할 것인지는 부호화기와 복호화기 사이에 미리 정해져 있을 수 있다.Whether the information derived from the information of the same position encoding unit is specifically indicated or whether the information is derived from the information of the same position encoding unit unless separately transmitted may be predetermined between the encoder and the decoder.
복호화기는 유도한 정보를 기반으로 부호화 유닛을 복호화할 수 있다(S1430). The decoder may decode the coding unit based on the derived information (S1430).
<시간적 레벨의 고려>Consideration of temporal level
한편, 상술한 바와 같이 계층적(hierarchical) B 구조를 사용하여 영상이 부호화되는 경우에는, 도 12와 같이, 현재 픽처와 동일 위치 LCU의 대상 픽처 간의 시간적 레벨(temporal level)이 다른 경우가 발생한다. On the other hand, when an image is encoded using a hierarchical B structure as described above, as shown in FIG. 12, a temporal level between a current picture and a target picture of the same position LCU may be different. .
예컨대, 현재 픽처가 픽처(1220)이고, 동일 위치 LCU의 대상 픽처가 픽처(1240)인 경우라면, 현재 픽처의 시간적 레벨은 2이고, 대상 픽처의 시간적 레벨은 1이다. 또한, 현재 픽처가 픽처(1230)이고, 동일 위치 LCU의 대상 픽처가 픽처(1240)이라면, 현재 픽처의 시간적 레벨은 3이고 대상 픽처의 시간적 레벨은 1이다.For example, if the current picture is the picture 1220 and the target picture of the same position LCU is the picture 1240, the temporal level of the current picture is 2 and the temporal level of the target picture is 1. Also, if the current picture is the picture 1230 and the target picture of the same position LCU is the picture 1240, the temporal level of the current picture is 3 and the temporal level of the target picture is 1.
이렇게 현재 픽처와 동일 위치 LCU의 대상 픽처 사이에 시간적 레벨이 다를 경우에는, 현재 LCU와 동일 위치 LCU가 서로 다른 부호화 특성을 가질 통계적 확률이 높아진다. LCU 간 시간적 레벨의 차이가 클수록 서로 다른 부호화 특성을 가질 확률도 커진다고 할 수 있다. 따라서, 현재 LCU와 동일 위치 LCU의 시간적 레벨이 다른 경우에는 동일 위치 LCU의 정보를 이용하는 방법을 적용할 때 현재 LCU의 부호화 효율이 떨어질 수 있다. When the temporal level is different between the current picture and the target picture of the same position LCU, the statistical probability that the current LCU and the same position LCU have different coding characteristics increases. The greater the difference in temporal levels between LCUs, the greater the probability of having different coding characteristics. Therefore, when the temporal level of the same LCU and the current LCU are different, the coding efficiency of the current LCU may be lowered when the method of using the information of the same LCU is applied.
따라서, 현재 LCU와 동일 위치 LCU의 시간적 레벨이 상이한 경우에는, 시간적 레벨을 고려하여 동일 위치 LCU의 정보를 이용하는 방법이 필요하다.Therefore, when the temporal level of the same position LCU and the current LCU are different, there is a need for a method of using the information of the same position LCU in consideration of the temporal level.
(1) 동일한 시간적 레벨만을 고려하는 방법(1) how to consider only the same temporal level
현재 픽처와 동일 위치 LCU의 대상 픽처 사이에 시간적 레벨의 차이가 있는 경우에는, 동일 위치 LCU의 정보를 이용할지를 지시하는 플래그를 전송하지 않을 수 있다. 동일 위치 LCU의 정보를 이용할지를 지시하는 플래그가 전송되지 않는 경우에는, 해당 플래그의 값을 추론(infer)하지 않을 수도 있다, When there is a difference in temporal level between the current picture and the target picture of the same position LCU, a flag indicating whether to use information of the same position LCU may not be transmitted. If a flag indicating whether to use information of the same location LCU is not transmitted, the value of the flag may not be inferred.
따라서, 현재 픽처와 대상 픽처의 시간적 레벨이 동일한 경우에만, 동일 위치 LCU의 정보를 이용할지를 지시하는 플래그를 전송하는 방법을 이용할 수 있다. Therefore, a method of transmitting a flag indicating whether to use information of the same location LCU may be used only when the temporal level of the current picture and the target picture are the same.
(2) 동일 위치 LCU의 정보를 변형하여 이용하는 방법(2) How to modify and use the information of the same location LCU
현재 픽처와 동일 위치 LCU의 대상 픽처 사이에 시간적 레벨의 차이가 있는 경우에는, 동일 위치 LCU의 정보를 그대로 이용하지 않고, 동일 위치 LCU의 정보에 적절한 변형을 가해서 이용할 수 있다. If there is a difference in temporal level between the current picture and the target picture of the same position LCU, the information of the same position LCU can be used without any change in the information of the same position LCU.
예컨대, 현재 픽처와 동일 위치 LCU의 대상 픽처가 서로 다른 시간적 레벨을 가지며, 동일 위치 LCU의 정보를 이용하는 경우(use_coloc_LCU_info_flag=1)에, 동일 위치 동일 위치 LCU의 정보를 그대로 이용하지 않고 아래와 같이 변형하여 이용할 수 있다.For example, when the current picture and the target picture of the same position LCU have different temporal levels and use the information of the same position LCU (use_coloc_LCU_info_flag = 1), the following information is modified without using the information of the same position LCU as it is. It is available.
동일 위치 LCU의 정보 중 부호화 유닛의 분할 정보(예컨대, split_coding_unit_flag)를 이용하는 경우를 예로서 설명한다. 앞서 설명한 방법들에서는 동일 위치 LCU의 분할 정보를 그대로 현재 LCU에 이용/적용하였으나, 본 방법에서는 픽처들의 시간적 레벨을 고려하여 정보를 변형할 수 있다.A case of using split information (for example, split_coding_unit_flag) of a coding unit among information of the same position LCU will be described. In the above-described methods, the split information of the same location LCU is used / applied to the current LCU as it is, but in this method, the information may be modified in consideration of the temporal level of pictures.
동일 위치 LCU의 정보 중 부호화 유닛의 분할 정보를 이용할 때, 동일 위치 LCU의 대상 픽처와 현재 LCU의 픽처가 서로 다른 시간적 레벨을 갖는다면, 동일 위치 LCU에서 가장 깊은(highest CU depth) 영역의 깊이(depth)가 소정의 깊이만큼 감소하도록 분할 정보를 유도할 수 있다. 예컨대, 동일 위치 LCU에서 가장 깊은 영역의 깊이가 1만큼 감소하도록 split_coding_unit_flag를 유도할 수 있다. 예컨대, 동일 위치 LCU의 분할 정보 중 현재 LCU의 분할 정보로서 이용 가능한 깊이에 관해 클리핑(cliping)을 하는 것으로 볼 수도 있다. When using the split information of the coding unit among the information of the co-located LCU, if the target picture of the co-located LCU and the picture of the current LCU have different temporal levels, the depth of the highest CU depth region of the co-located LCU ( The segmentation information can be derived so that the depth is reduced by a predetermined depth. For example, split_coding_unit_flag may be derived such that the depth of the deepest region in the same position LCU is reduced by one. For example, it may be regarded as clipping about a depth available as split information of the current LCU among split information of the same position LCU.
다만, 동일 위치 LCU의 가장 깊은(highest CU depth) 영역의 깊이가 0인 경우에는 더 이상 부호화 유닛의 깊이를 감소시킬 수 없으므로, 부호화 유닛의 깊이를 유지시킨다.However, when the depth of the highest CU depth region of the same position LCU is 0, the depth of the coding unit can no longer be reduced, thereby maintaining the depth of the coding unit.
도 15는 동일 위치 LCU의 분할 상태를 개략적으로 나타낸 도면이다. 도 16은 현재 LCU의 분할 상태를 동일 위치 LCU의 정보를 이용하여 유도한 것을 개략적으로 나타낸 도면이다.15 is a view schematically showing a divided state of the same position LCU. FIG. 16 is a diagram schematically showing a derivation state of a current LCU using information of the same location LCU.
도 15와 도 16의 예에서는, 동일 위치 LCU의 대상 픽처와 현재 픽처의 시간적 레벨이 서로 상이한 경우를 가정한다. 예컨대, 대상 픽처는 시간적 레벨이 1이고, 현재 픽처의 시간적 레벨은 3이라고 가정한다. In the examples of FIGS. 15 and 16, it is assumed that the temporal level of the target picture and the current picture of the same position LCU are different from each other. For example, it is assumed that the temporal level of the target picture is 1, and the temporal level of the current picture is 3.
도 15와 도 16에서 각 블록에 표시된 숫자는 해당 부호화 유닛의 깊이를 나타낸다. In FIG. 15 and FIG. 16, the numbers indicated in the blocks represent the depths of the corresponding coding units.
도 15 및 도 16을 참조하면, 동일 위치 LCU(1510) 중 가장 깊은 깊이를 갖는 영역은 부호화 유닛(1520, 1530)으로서 깊이가 3이다.15 and 16, the region having the deepest depth among the co-located LCUs 1510 is the coding units 1520 and 1530 and has a depth of three.
상술한 바와 같이, 도 15에 도시된 동일 위치 LCU의 대상 픽처와 도 16에 도시된 현재 픽처의 시간적 레벨은 서로 상이하다. 따라서, 동일 위치 LCU의 분할 정보를 그대로 현재 LCU에 사용하지 않고, 동일 위치 LCU에서 가장 깊은 영역의 깊이를 소정의 크기, 예컨대 1만큼 줄여서 현재 LCU의 분할 정보를 유도할 수 있다.As described above, the temporal level of the target picture of the same position LCU shown in FIG. 15 and the current picture shown in FIG. 16 are different from each other. Accordingly, the split information of the current LCU may be derived by reducing the depth of the deepest region in the same location LCU by a predetermined size, for example, 1, without using the split information of the same location LCU as it is.
따라서, 도 15의 동일 위치 LCU에서 깊이가 3인 영역의 깊이가 2가 되도록 부호화 유닛의 분할 상태를 유도하여 현재 LCU의 분할 상태로 사용하고, 동일 위치 LCU의 나머지 부분에 대한 분할 상태는 현재 LCU에 그대로 이용한다. 도 16을 참조하면, 동일 위치 LCU에서 가장 깊은 영역에 대응하는 현재 LCU(1610)의 영역(1620, 1630)은 깊이가 2로 조정되어 분할 상태가 유도되었음을 알 수 있다.Therefore, in the co-located LCU of FIG. 15, the split state of the coding unit is induced to use the split state of the current LCU so that the depth of the region having the depth is 2, and the split state of the remaining portion of the co-located LCU is the current LCU. Use it as it is. Referring to FIG. 16, it can be seen that the regions 1620 and 1630 of the current LCU 1610 corresponding to the deepest regions in the same location LCU have a depth adjusted to 2 to induce a split state.
(3) 동일 위치 LCU의 정보를 적응적으로 이용하는 방법(3) How to adaptively use the information of the same location LCU
현재 픽처와 동일 위치 LCU의 대상 픽처 사이에 시간적 레벨의 차이가 있는 경우에는, 동일 위치 LCU의 정보를 그대로 이용하지 않고, 시간적 레벨의 차이의 정도에 따라서 동일 위치 LCU의 정보를 적응적으로 이용할 수 있다.If there is a difference in temporal level between the current picture and the target picture of the same position LCU, the information of the same position LCU can be adaptively used according to the degree of the difference in temporal level without using the information of the same position LCU as it is. have.
예컨대, 현재 픽처와 동일 위치 LCU의 대상 픽처가 서로 다른 시간적 레벨을 가지며, 동일 위치 LCU의 정보를 이용하는 경우(use_coloc_LCU_info_flag=1)에, 동일 위치 동일 위치 LCU의 정보를 그대로 이용하지 않고 아래와 같이 적응적으로 이용할 수 있다. 동일 위치 LCU의 정보 중 부호화 유닛의 분할 정보(예컨대, split_coding_unit_flag)를 이용하는 경우를 예로서 설명한다. For example, when the current picture and the target picture of the same position LCU have different temporal levels and use the information of the same position LCU (use_coloc_LCU_info_flag = 1), the information of the same position LCU is not used as it is and is adaptive as follows. Can be used as A case of using split information (for example, split_coding_unit_flag) of a coding unit among information of the same position LCU will be described.
동일 위치 LCU의 각 파티션 중 한 영역(예컨대 부호화 유닛)의 깊이가 ‘동일 영역 LCU의 최고 깊이(highest CU depth) - 시간적 레벨의 차이 + 1’보다 크거나 같은 경우, 즉, ‘현재 픽처와 대상 픽처의 시간적 레벨 차이’가 ‘동일 위치 LCU에서 상기 영역의 깊이와 동일 위치 LCU의 최대 깊이의 차’보다 더 큰 경우에는, 동일 위치 LCU에서 해당 영역에 대한 깊이가 ‘동일 위치 LCU의 최대 깊이’ - ‘현재 픽처와 대상 픽처의 시간적 레벨 차이’가 되도록 조정해서 동일 위치 LCU의 분할 상태를 유도한다. 예컨대, 동일 위치 LCU의 분할 정보를 현재 LCU의 분할 정보로서 이용할 때, 동일 위치 LCU와 현재 LCU 사이에 어느 정도의 깊이 차이까지 허용할지에 관해서, 클리핑(cliping)을 거는 것으로 볼 수 있다. If the depth of one region (e.g., coding unit) of each partition of the co-located LCU is greater than or equal to 'highest CU depth of the same region LCU-difference in temporal level + 1', i.e., 'current picture and target' If the temporal level difference of the picture is greater than the difference between the depth of the region and the maximum depth of the same position LCU in the same position LCU, then the depth for that region in the same position LCU is the maximum depth of the same position LCU. It is adjusted to be a 'temporal level difference between the current picture and the target picture' to derive the split state of the same position LCU. For example, when the split information of the same position LCU is used as the split information of the current LCU, it can be regarded as clipping to what extent a depth difference between the same position LCU and the current LCU is allowed.
유도한 동일 위치 LCU의 분할 상태는 현재 LCU에서 해당 영역에 대응하는 영역의 분할 상태로서 이용될 수 있다. 이때, ‘동일 위치 LCU의 최대 깊이’ - ‘현재 픽처와 대상 픽처의 시간적 레벨 차이’가 0보다 작거나 0인 경우에는, 해당 영역의 깊이를 0으로 할 수 있다.The partitioned state of the co-located LCU derived may be used as the partitioned state of an area corresponding to the corresponding area in the current LCU. In this case, when the 'maximum depth of the same location LCU'-'the temporal level difference between the current picture and the target picture' is less than or equal to zero, the depth of the corresponding area may be zero.
동일 영역 LCU에서 ‘동일 영역 LCU의 최고 깊이(highest CU depth) - 시간적 레벨의 차이 + 1’보다 작은 깊이를 갖는 영역의 분할 상태는 그대로 현재 LCU의 분할 상태로서 이용될 수 있다. In the same area LCU, the divided state of the area having a depth smaller than the 'highest CU depth of the same area LCU-difference in temporal level + 1' may be used as the divided state of the current LCU.
도 17은 동일 위치 LCU의 분할 상태에 관한 일 예를 개략적으로 나타낸 것이다. 도 17의 예에서는 동일 위치 LCU의 대상 픽처는 1의 시간적 레벨을 갖는 것으로 가정한다.17 schematically illustrates an example of a split state of the same position LCU. In the example of FIG. 17, it is assumed that the target picture of the same position LCU has a temporal level of 1. FIG.
도 18은 동일 위치 LCU의 정보를 이용하여 유도된 현재 LCU의 분할 상태에 관한 일 예를 나타낸다. 도 18에서 현재 픽처의 시간적 레벨은 3이라고 가정한다. 18 shows an example of a split state of a current LCU derived using information of the same location LCU. In FIG. 18, it is assumed that the temporal level of the current picture is three.
도 17 및 도 18에서 각 파티션의 숫자는 해당 영역의 깊이를 나타낸다. 17 and 18, the number of each partition represents the depth of the corresponding area.
도 17을 참조하면, 동일 위치 LCU(1710)에서 최대 부호화 유닛 깊이는 3인 것을 알 수 있다. 현재 픽처의 시간적 레벨은 3이며, 대상 픽처의 시간적 레벨은 1이므로, 앞서 설명한 바에 따라, ‘동일 위치 LCU의 최대 부호화 유닛 깊이’ - ‘현재 픽처와 대상 픽처 사이의 시간적 레벨 차이’+ 1의 값은 2가 된다. Referring to FIG. 17, it can be seen that the maximum coding unit depth is 3 in the same position LCU 1710. Since the temporal level of the current picture is 3 and the temporal level of the target picture is 1, as described above, the maximum coding unit depth of the same position LCU is minus the temporal level difference between the current picture and the target picture. Becomes two.
따라서, 도 17에서 동일 위치 LCU의 파티션(예컨대 부호화 유닛) 중, 깊이가 2보다 크거나 같은 영역(1720, 1730)은, 깊이가 ‘ 동일 위치 LCU의 최대 깊이’- ‘현재 픽처와 대상 픽처의 시간적 레벨 차이’가 되도록 조정된다. 상술한 예의 경우라면, 깊이가 2보다 크거나 같은 영역(깊이가 1보다 큰 영역)은 깊이가 1이 되도록 조정된다. Therefore, in the partitions of the co-located LCU (for example, the coding unit) in FIG. 17, the areas 1720 and 1730 having a depth greater than or equal to 2 have a depth of 'maximum depth of the co-located LCU'-'the current picture and the target picture. Temporal level difference '. In the case of the above-described example, an area greater than or equal to 2 (area greater than 1) is adjusted to have a depth of 1.
도 18을 참조하면, 도 17의 1720과 1730에 대응하는 영역(1820, 1830)은 깊이가 1이 되도록 분할 상태가 유도된 것을 확인할 수 있다. Referring to FIG. 18, it can be seen that regions 1820 and 1830 corresponding to 1720 and 1730 of FIG. 17 are derived to have a depth of 1.
도 19는 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.19 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 19를 참조하면, 부호화기는 우선 파라미터 셋을 구성한다(S1910). 부호화기는 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 유도할 것인지를 지시하는 플래그를 포함하여 파라미터 셋을 구성할 수 있다. 부호화기는 동일 위치 LCU의 정보를 이용할 것인지를 다양한 방법으로 결정할 수 있다. 예컨대, 현재 LCU의 상태를 기반으로 동일 위치 LCU의 정보를 이용할 것인지를 결정할 수도 있고, 동일 위치 LCU의 정보를 이용한 경우와 현재 LUC의 정보를 그대로 전송하는 경우를 비교하여 적절한 방법을 선택할 수도 있다. 현재 LCU의 분할 상태를 기반으로 동일 위치 LCU의 분할 정보를 이용하는 것을 결정한 경우에는, 상기 플래그의 값이 1을 지시하도록 할 수 있다.Referring to FIG. 19, the encoder first configures a parameter set (S1910). The encoder may configure a parameter set including a flag indicating whether to derive information of the current LCU using the information of the same position LCU. The encoder may determine in various ways whether to use information of the same position LCU. For example, it may be determined whether to use the information of the same location LCU based on the state of the current LCU, or an appropriate method may be selected by comparing the case of using the information of the same location LCU and the case of transmitting the information of the current LUC as it is. When it is determined to use the split information of the same position LCU based on the split state of the current LCU, the value of the flag may indicate 1.
이때, 부호화기는 현재 LCU가 속하는 현재 픽처와 동일 위치 LCU가 속하는 대상 픽처 사이의 시간적 레벨을 고려할 수 있다. 예컨대, 부호화기는 현재 픽처와 대상 픽처의 시간적 레벨이 동일한 경우에만, 동일 위치 LCU의 정보를 이용해서, 현재 LCU의 정보를 유도할 것인지를 지시하는 플래그를 전송할 수도 있다. In this case, the encoder may consider the temporal level between the current picture to which the current LCU belongs and the target picture to which the same position LCU belongs. For example, the encoder may transmit a flag indicating whether to derive the information of the current LCU using the information of the same location LCU only when the temporal level of the current picture and the target picture are the same.
또한, 부호화기는 현재 픽처와 대상 픽처의 시간적 레벨을 고려하여 동일 위치 LCU의 정보를 변형하거나 적응적으로 이용하도록 파라미터 셋을 구성할 수도 있다. 동일 위치 LCU의 정보가 어떻게 변형 적용되거나 적응적으로 이용되는지는 상술한 바와 같다. In addition, the encoder may configure a parameter set to modify or adaptively use information of the same position LCU in consideration of the temporal level of the current picture and the target picture. How the information of the same location LCU is modified or applied is as described above.
동일 위치 LCU의 정보를 변형하거나 적응적으로 이용하는 경우에, 정보를 변형하거나 적응적으로 이용하는 방식을 지시하는 정보가 파라미터 셋에 포함될 수도 있고, 부호화기와 복호화기 사이에 미리 정해져 있을 수도 있다. In the case of transforming or adaptively using the information of the same position LCU, information indicating a method of transforming or adaptively using the information may be included in the parameter set or may be predetermined between the encoder and the decoder.
부호화기는 구성된 파라미터 셋을 전송한다(S1920). 파라미터 셋은 다른 정보들과 함께 부호화되어 비트스트림으로 전송될 수 있다.The encoder transmits the configured parameter set (S1920). The parameter set may be encoded along with other information and transmitted in the bitstream.
도 20은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 부호화 유닛을 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.20 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
도 20을 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신한다(S2010). 파라미터 셋은 부호화되어 비트스트림상으로 수신될 수 있다.Referring to FIG. 20, the decoder receives a parameter set from an encoder (S2010). The parameter set may be encoded and received on the bitstream.
복호화기는 파라미터 셋으로부터 현재 LCU에 대한 정보를 유도할 수 있다(S2020). 파라미터 셋은 현재 LCU에 대한 정보를 직접 포함할 수도 있고, 동일 위치 LCU의 정보로부터 현재 LCU의 정보를 유도할 것을 지시하는 플래그를 포함할 수도 있다. The decoder may derive information on the current LCU from the parameter set (S2020). The parameter set may directly include information on the current LCU or may include a flag indicating to derive information of the current LCU from information of the same location LCU.
또한, 동일 위치 LCU로부터 현재 LCU의 정보를 유도할 것이 플래그를 통해 지시되는 경우에, 동일 위치 LCU의 정보를 그대로 이용할 수도 있고, 소정의 방식에 따라서 정보를 변형하거나 적응적으로 이용할 수도 있다. In addition, when it is indicated through the flag to derive information of the current LCU from the same location LCU, the information of the same location LCU may be used as it is, or the information may be modified or adaptively used in a predetermined manner.
동일 위치 LCU의 정보를 변형하여 이용하거나 적응적으로 이용하는 방법에 관한 정보는 수신한 파라미터 셋에 포함되어 있을 수도 있고, 부호화기와 복호화기 사이에 미리 정해져 있을 수도 있다. 복호화기는 파라이터 셋에서 지시하는 방법 또는 미리 정해진 방법에 따라서, 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 유도할 수 있다. 동일 위치 LCU의 정보를 변형하여 이용하거나 적응적으로 이용하는 방법의 구체적인 내용은 상술한 바와 같다.Information about a method of modifying or adaptively using the information of the same location LCU may be included in the received parameter set or may be predetermined between the encoder and the decoder. The decoder may derive the information of the current LCU using the information of the co-located LCU according to the method indicated by the parameter set or a predetermined method. Details of a method of modifying or adaptively using the information of the same location LCU are as described above.
복호화기는 유도한 정보를 기반으로 부호화 유닛을 복호화할 수 있다(S2030). The decoder may decode the coding unit based on the derived information (S2030).
<동일 위치 슬라이스의 방향 정보와 동일 위치 LCU 정보의 선택적 이용><Optional use of the same position LCU information as the direction information of the same position slice>
(1) 동일 위치 슬라이스의 방향을 알려주는 방법(1) How to tell the direction of the same position slice
한편, 동일 위치 LCU의 정보를 이용하는 경우에 동일 위치 LCU가 속하는 동일 위치 슬라이스(co-located slice)가 어느 방향에 있는지를 알려주는 플래그를 슬라이스 헤더(slice header)에 포함시킬 수 있다. 동일 위치 슬라이스의 위치를 알려주는 플래그는 동일 위치 슬라이스의 방향이 L0인지 L1인지를 지시할 수 있다. Meanwhile, when using the information of the same location LCU, a flag indicating in which direction a co-located slice belongs to the same location LCU may be included in the slice header. The flag indicating the position of the same position slice may indicate whether the direction of the same position slice is L0 or L1.
여기서, L0과 L1은 참조 픽처의 리스트로서, L0은 현재 픽처에 순방향(시간축상에서 과거 방향)으로 가까운 참조 픽처일수록 더 낮은 인덱스가 부여된 리스트이고, L1은 현재 픽처에 역방향(시간축상에서 미래 방향)으로 가까운 참조 픽처일수록 더 낮은 인덱스가 부여된 리스트이다. Here, L0 and L1 are lists of reference pictures, L0 is a list in which the reference picture is assigned a lower index as the reference picture is closer to the current picture in the forward direction (past direction on the time axis), and L1 is the reverse direction of the current picture (the future direction on the time axis). The closer the reference picture is, the lower the index is given.
따라서, 동일 위치 슬라이스의 위치를 알려주는 플래그는 어떤 리스트 방향의 픽처 중에 동일 위치 슬라이스가 있는지를 지시할 수 있다. Therefore, the flag indicating the position of the same position slice may indicate which list direction picture is in the same position slice.
표 9는 종래 슬라이스 헤더 부분에서 슬라이스 타입에 따라 정보를 전송하는 신택스 테이블의 예를 나타낸 것이다.Table 9 shows an example of a syntax table for transmitting information according to a slice type in a conventional slice header part.
이때, 슬라이스 타입이 B인 경우이면서 동일 위치 LCU의 정보를 이용한다는 것을 플래그가 지시하는 경우에, 어떤 리스트 방향이 동일 위치 슬라이스가 있는지를 플래그로 지시하도록 할 수 있다. mv_competetion_flag는 움직임 벡터의 경쟁에 의해 움직임 벡터가 선택되었음을 지시할 수 있다.In this case, when the flag indicates that the slice type is B and the information of the same position LCU is used, the flag may indicate which list direction is the same position slice. mv_competetion_flag may indicate that a motion vector is selected by competition of the motion vectors.
표 10과 표 11은 상술한 바와 같이, 본 발명이 적용되는 시스템에서 동일 위치 LCU의 정보를 이용한다는 것을 플래그가 지시하는 경우에, 어떤 리스트 방향에 동일 위치 슬라이스가 있는지를 플래그로 지시하는 예를 나타낸 것이다.Table 10 and Table 11 show examples of indicating in which direction the same position slice exists in the list direction when the flag indicates that the information of the same position LCU is used in the system to which the present invention is applied. It is shown.
표 10과 표 11의 예에서 collocated_from_l0_flag는 어떤 리스트 방향에 동일 위치 슬라이스가 있는지를 나타내는 플래그이다. 예컨대, collocated_from_l0_flag의 값이 1이면 동일 위치 슬라이스는 L0 방향에 위치하는 것을 지시하고, collocated_from_l0_flag의 값이 0이면 동일 위치 슬라이스는 L1 방향에 위치하는 것을 지시하도록 할 수 있다.
In the examples of Table 10 and Table 11, collocated_from_l0_flag is a flag indicating which list direction the co-location slice is in. For example, if the value of collocated_from_l0_flag is 1, the same position slice may be indicated to be located in the L0 direction, and if the value of collocated_from_l0_flag is 0, the same position slice may be indicated to be positioned to the L1 direction.
표 10과 11의 예에서, coloc_LCU_info_flag는 동일 위치 LCU의 정보를 이용할 것인지를 지시하는 플래그로서, 시퀀스 파라미터 셋(Sequence Parameter Set: SPS) 등에서 전송될 수 있다. In the examples of Tables 10 and 11, coloc_LCU_info_flag is a flag indicating whether to use information of the same location LCU, and may be transmitted in a sequence parameter set (SPS) or the like.
(2) 동일 위치 LCU의 정보를 선택적으로 이용하는 방법(2) How to selectively use the information of the same location LCU
동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 유도하는 방법을 항상 적용하는 것이 아니라, 소정의 경우에는 현재 LCU의 정보를 직접 전송하는 방법을 이용하도록 할 수도 있다.Instead of always applying a method of deriving the information of the current LCU using the information of the same location LCU, in some cases, a method of directly transmitting the information of the current LCU may be used.
예컨대, 동일 위치 LCU의 분할 정보를 그대로 사용할 것인지를 지시하는 플래그를 아래와 같은 조건에서는 전송하지 않고, 현재 LCU의 정보를 직접 부호화하고 전송하도록 할 수도 있다. For example, a flag indicating whether to use the split information of the same location LCU as it is, may not be transmitted under the following conditions, and the information of the current LCU may be directly encoded and transmitted.
동일 위치 LCU의 가장 작은 부호화 유닛의 크기 즉, SCU(Smallest Coding Unit)의 크기가 동일 위치 LCU의 크기와 같은 경우 - 이 경우는, 동일 위치 LCU가 분할되지 않은 경우에 해당한다. 따라서, 현재 LCU에 대해서 처음으로 전송되는 분할 정보(split_coding_unit_flag)를 통해 동일 위치 LCU의 분할 상태를 이용할지 여부가 표현되기 때문에, 굳이 동일 위치 LCU의 정보를 이용할지를 플래그(use_coloc_LCU_info_flag)로 알려줄 필요가 없다.When the size of the smallest coding unit of the same position LCU, that is, the size of the smallest coding unit (SCU) is equal to the size of the same position LCU-this case corresponds to the case where the same position LCU is not divided. Therefore, since the split state (split_coding_unit_flag) transmitted for the first LCU is expressed whether or not to use the split state of the same position LCU, it is not necessary to inform whether the information of the same position LCU is used as a flag (use_coloc_LCU_info_flag). .
(3) 동일 위치 LCU의 정보를 제한적으로 이용하는 방법(3) How to use limited information on the same location LCU
동일 위치 LCU 정보, 예컨대 분할 정보를 전부 이용하는 것이 아니라, 현재 LCU를 코딩할 때, 동일 위치 LCU의 분할 정보를 제한적으로 이용할 수 있다. 예를 들어, 동일 위치 LCU의 분할 상태를 그대로 복사하여 현재 LCU에 사용하는 것이 아니라, 동일 위치 LCU에 대한 분할 정보(split_coding_unit_flag)를 제한적으로 사용한다. Instead of using all of the same position LCU information, for example, the partition information, it is possible to limit the use of the partition information of the same position LCU when coding the current LCU. For example, rather than copying the split state of the co-located LCU as it is and using it for the current LCU, the split information (split_coding_unit_flag) for the co-located LCU is limitedly used.
현재 LCU에 동일 위치 LCU의 정보를 이용하는 경우(use_coloc_LCU_info_flag=1)에도, 부분적으로는 현재 LCU에 대한 분할 정보를 더 전송할 수도 있다. 예컨대, 현재 LCU에 대한 split_coding_unit_flag를 더 전송하여, 동일 위치 LCU에서 SCU의 크기와 현재 LCU에서 SCU의 크기를 다르게 할 수 있다. Even when information of the same location LCU is used for the current LCU (use_coloc_LCU_info_flag = 1), partly, split information about the current LCU may be further transmitted. For example, the split_coding_unit_flag for the current LCU may be further transmitted so that the size of the SCU in the same location LCU and the size of the SCU in the current LCU may be different.
현재 LCU에 대해 부분적으로 split_coding_unit_flag를 더 전송하는 조건은 다음과 같이 다양하게 결정될 수 있다:The conditions for further sending split_coding_unit_flag partially for the current LCU can be determined variously as follows:
1) 동일 위치 SCU의 깊이가 최대 깊이보다 작은 경우1) When the depth of the same position SCU is smaller than the maximum depth
동일 위치 SCU의 깊이가 현재 LCU에서 허용된 최대 깊이보다 작은 경우에는, 현재 LCU의 해당 영역에서 추가적인 분할을 허용한다. If the depth of the co-located SCU is less than the maximum depth allowed in the current LCU, then additional partitioning is allowed in that area of the current LCU.
이때, 분할의 회수는 1번으로 제한할 수 있다. 또한, 현재 LCU의 최대 깊이에 이를 때까지 계속 분할하도록 허용할 수도 있다. 동일 위치 LCU의 분할 상태보다 현재 LCU에 대하여 추가로 더 수행되는 분할의 회수에 따라서, 현재 LCU에 대해 전송되는 분할 정보(split_coding_unit_flag)의 개수(전송량)가 달라지게 된다. At this time, the number of divisions may be limited to one. It may also allow to continue dividing until the maximum depth of the current LCU is reached. According to the number of splits performed further for the current LCU than the split state of the same location LCU, the number (transmission amount) of split information (split_coding_unit_flag) transmitted for the current LCU is changed.
도 21은 동일 위치 LCU에 관한 분할 상태의 일 예를 개략적으로 도시한 것이다. 21 schematically illustrates an example of a split state with respect to the same position LCU.
도 22는 현재 LCU에 대한 분할 상태가 동일 위치 LCU로부터 유도된 후 추가로 더 분할된 경우의 예를 개략적으로 나타낸 것이다. 도 22에서 현재 LCUdml 분할 상태가 유도되는 동일 위치 LCU는 도 21의 LCU이며, 현재 LCU에 대한 최대 깊이가 3이라고 가정하자. FIG. 22 schematically illustrates an example in which the split state for the current LCU is further divided after being derived from the same position LCU. In FIG. 22, the same position LCU from which the current LCUdml split state is derived is the LCU of FIG. 21, and the maximum depth of the current LCU is 3.
따라서, 도 21과 도 22를 비교하면, 현재 LCU는 동일 위치 LCU(2100)의 분할 상태에서 최소 1회, 최대 2회 더 분할될 수 있다. 예컨대, 동일 위치 LCU(2100)의 부호화 유닛(2110, 2120)에 대응하는 현재 LCU(2200)의 부호화 유닛(2210, 2220)에 대해서는, 동일 위치 부호화 유닛(2110, 2120)의 분할 상태에서 2회 더 분할될 수 있다는 것을 알 수 있다.Thus, comparing FIG. 21 and FIG. 22, the current LCU may be split at least once and at least twice in the split state of the same location LCU 2100. For example, for the coding units 2210 and 2220 of the current LCU 2200 corresponding to the coding units 2110 and 2120 of the same position LCU 2100, two times in the split state of the same position coding units 2110 and 2120. It can be seen that it can be further divided.
도 22의 LCU(2200)에서 실선으로 표시된 부분까지는 현재 LCU에 대해 추가적인 분할 정보(split_coding_unit_flag)의 전송 없이, 동일 위치 LCU의 정보를 이용하여 분할된 부분이다. 또한, 도 22의 LCU(2200)에서 점선으로 표시된 부분이 현재 LCU(2200)에 대해 추가로 전송된 분할 정보(split_coding_unit_flag)에 의해 분할된 것을 나타낸다. The portion indicated by the solid line in the LCU 2200 of FIG. 22 is a portion divided by using the information of the same location LCU without transmitting additional split information (split_coding_unit_flag) to the current LCU. In addition, the portion indicated by a dotted line in the LCU 2200 of FIG. 22 indicates that it is divided by split information (split_coding_unit_flag) additionally transmitted for the current LCU 2200.
도 22의 예에서, 좌상단의 부호화 유닛(2210)은 추가로 전송된 분할 정보(split_coding_unit_flag)에 의해 동일 위치 LCU의 분할 상태에서 더 분할되었고, 그 외의 부호화 유닛은 동일 위치 LCU의 분할 상태와 동일한 분할 상태이다. In the example of FIG. 22, the coding unit 2210 at the upper left is further divided in the split state of the same position LCU by the additionally transmitted split information (split_coding_unit_flag), and other coding units are split in the same state as the split state of the same position LCU. It is a state.
한편, 도 22의 LCU에서 실선으로 표시되고 더 이상 분할되지 않은 각각의 부호화 유닛에 대해서도 분할될 것인지를 지시하는 플래그(split_coding_unit_flag)를 전송하여 분할하지 않는다는 것을 지시하는 것이 필요할 수 있다.Meanwhile, in the LCU of FIG. 22, it may be necessary to transmit a flag (split_coding_unit_flag) indicating whether to be split even for each coding unit indicated by a solid line and no longer split, to indicate that no split is performed.
2) 소정의 깊이까지만 동일 위치 LCU의 분할 정보를 이용2) Use the split information of the same position LCU only up to a predetermined depth
현재 LCU 내 부호화 유닛의 깊이가 소정의 깊이가 되는 범위 내에서 동일 위치 LCU의 분할 정보를 이용하고, 상기 소정의 깊이보다 더 깊게 분할하는 경우에는 현재 LCU에 대한 분할 정보(split_coding_unit_flag)를 전송하도록 할 수 있다. When the split information of the same position LCU is used within a range where the depth of the coding unit in the current LCU becomes a predetermined depth, and is divided deeper than the predetermined depth, the split information (split_coding_unit_flag) for the current LCU is transmitted. Can be.
예컨대, 현재 LCU 내 부호화 유닛의 깊이가 현재 LCU에서 허용되는 최대 깊이 바로 전(최대 깊이-1)이 되는 때까지 동일 위치 LCU의 분할 정보(분할 상태)를 이용하고, 그 후에는 별도의 분할 정보(split_coding_unit_flag)를 이용하여 해당 부호화 유닛의 분할 여부를 결정하도록 할 수 있다. For example, the split information (divided state) of the same position LCU is used until the depth of the coding unit in the current LCU becomes just before the maximum depth allowed in the current LCU (maximum depth-1), and thereafter, separate split information. (split_coding_unit_flag) may be used to determine whether to split the corresponding coding unit.
도 23은 동일 위치 LCU(2300)에 대한 분할 상태의 일 예를 개략적으로 나타낸 것이다. 23 schematically illustrates an example of a split state for the same position LCU 2300.
도 24는 현재 LCU의 분할 상태가 소정의 깊이까지 동일 위치 LCU의 분할 상태로부터 유도된 후 추가 분할 정보에 의해 최종적으로 분할된 예를 개략적으로 나타낸 것이다. 도 24의 예에서 현재 LCU의 분할 상태를 유도하는데 이용되는 동일 위치 LCU가 도 23의 LCU이며, 현재 LCU에서 허용되는 최대 깊이가 3이라고 가정한다.FIG. 24 schematically illustrates an example in which the split state of the current LCU is finally divided by additional split information after being derived from the split state of the same position LCU up to a predetermined depth. In the example of FIG. 24, it is assumed that the same position LCU used to derive the split state of the current LCU is the LCU of FIG. 23, and the maximum depth allowed in the current LCU is 3.
따라서, 현재 LCU에서 부호화 유닛이 소정의 깊이가 될 때까지는 동일 위치 LCU의 분할 상태에 따라 분할될 수 있다. 앞서 예를 든 바와 같이, 현재 LCU에서 허용되는 최대 깊이보다 하나 더 얕은 깊이까지는 동일 위치 LCU의 분할 상태를 따른다고 하면, 도 24의 예에서는 현재 LCU의 최대 깊이가 3이므로, 부호화 유닛의 깊이가 2가 될 때까지는 도 23에 도시된 동일 위치 LCU의 분할 상태에 따라서 분할될 수 있다. 이후, 깊이가 2인 현재 LCU의 부호화 유닛에 대해서는 분할 여부를 지시하는 플래그(split_coding_unit_flag)를 전송하여 추가 분할을 지시한다. Therefore, until the coding unit becomes a predetermined depth in the current LCU, it may be divided according to the split state of the same position LCU. As described above, if the depth of the co-located LCU is one to a depth smaller than the maximum depth allowed in the current LCU, the maximum depth of the current LCU is 3 in the example of FIG. Until it becomes 2, it can divide according to the division state of the same position LCU shown in FIG. Subsequently, for a coding unit of the current LCU having a depth of 2, a flag (split_coding_unit_flag) indicating whether to split is transmitted to indicate additional splitting.
도 23에서 동일 위치 LCU의 SCU(2310, 2320)는 깊이가 3이지만, 깊이 2까지의 분할 상태만 현재 LCU의 분할에 이용될 수 있다. 따라서, 동일 위치 LCU의 SCU(2310, 2320)에 대응하는 영역(2410, 2420)이라고 하더라도, 현재 LCU의 부호화 유닛은 깊이 2에서 더 이상 동일 위치 LCU의 분할 상태에 따라서 분할되지는 않는다. In FIG. 23, the SCUs 2310 and 2320 of the same location LCU have a depth of 3, but only a split state up to depth 2 may be used for dividing the current LCU. Thus, even in the areas 2410 and 2420 corresponding to the SCUs 2310 and 2320 of the same position LCU, the coding unit of the current LCU is no longer divided according to the split state of the same position LCU at depth 2.
이어서, 추가로 전송된 분할 플래그에 따라서, 현재 LCU 내의 부호화 유닛들이 동일 위치 LCU의 분할 상태에서 더 분할될 수 있다. 도 24의 두 영역(2430, 2440)은 분할 플래그(split_coding_unit_flag)에 의해 동일 위치 LCU의 분할 상태에서 더 분할된 경우이다.Subsequently, according to the split flag further transmitted, the coding units in the current LCU may be further split in the split state of the same position LCU. The two regions 2430 and 2440 of FIG. 24 are further divided in the split state of the same position LCU by the split flag split_coding_unit_flag.
도 25는 본 발명이 적용되는 시스템에서 동일 위치 LCU의 분할 정보를 이용하되, 별도의 분할 정보를 추가로 전송하는 방법을 개략적으로 설명하는 개념도이다. FIG. 25 is a conceptual diagram schematically illustrating a method for additionally transmitting additional partition information by using split information of the same location LCU in a system to which the present invention is applied.
도 25의 트리 구조는 현재 LCU의 분할 상태를 개념적으로 나타낸 것이다. 도 25를 참조하면, 동일 위치 LCU의 분할 정보를 일부 이용하는 경우, 예컨대 동일 위치 LCU의 분할 상태 중 현재 LCU의 최대 깊이보다 한 단계 전까지의 분할 정보만 이용하는 경우에는, 최대 깊이-1의 깊이(2530)까지 동일 위치 LCU의 분할 정보에 따라서 분할하고, 별도의 분할 정보(2510)에 의해 추가 분할을 수행할 수 있다. The tree structure of FIG. 25 conceptually illustrates the split state of the current LCU. Referring to FIG. 25, in the case of using part of the split information of the same location LCU, for example, only using split information one step before the maximum depth of the current LCU in the split state of the same location LCU, a depth of maximum depth-1 (2530) ) May be divided according to split information of the same location LCU, and additional split may be performed by separate split information 2510.
또한, 동일 위치 LCU의 분할 정보를 모두 이용하는 경우에는, 동일 위치 LCU의 SCU에 대응하는 깊이까지 동일 위치 LCU의 분할 상태에 따라서 분할한 뒤, 별도의 분할 정보(2520)에 의해 추가 분할을 수행할 수 있다. In addition, when all the split information of the same position LCU is used, the split is performed according to the split state of the same position LCU up to the depth corresponding to the SCU of the same position LCU, and then further division is performed by the separate partition information 2520. Can be.
도 26은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.FIG. 26 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 26을 참조하면, 부호화기는 현재 LCU의 정보를 동일 위치 LCU의 정보를 이용하여 유도할 것인지를 결정한다(S2610). 부호화기는 현재 LCU 상태를 기반으로 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 유도하도록 할 것인지를 결정할 수 있다. 예컨대, 부호화기는 현재 LCU의 분할 상태를 기반으로 동일 위치 LCU의 분할 정보를 이용하여 현재 LCU의 분할 정보를 유도하도록 할 것인지를 결정할 수 있다.Referring to FIG. 26, the encoder determines whether to derive information of the current LCU using the information of the same location LCU (S2610). The encoder may determine whether to derive the information of the current LCU using the information of the co-located LCU based on the current LCU state. For example, the encoder may determine whether to derive the split information of the current LCU using the split information of the same location LCU based on the split state of the current LCU.
부호화기는 복호화기에 전송할 파라미터 셋을 구성한다(S2620).The encoder configures a parameter set to be transmitted to the decoder (S2620).
파라미터 셋은 현재 LCU의 정보를 동일 위치 LCU의 정보를 이용하여 유도하는지를 지시하는 플래그를 포함할 수 있다. 상기 S2610 단계에서 현재 LCU의 정보를 동일 위치 LCU를 이용하여 유도하기로 한 경우에는, 상기 플래그의 값이 1을 지시하도록 할 수 있다. The parameter set may include a flag indicating whether to derive information of the current LCU using the information of the same location LCU. If the information on the current LCU is to be derived using the same location LCU in step S2610, the value of the flag may indicate 1.
또한, 파라미터 셋은 동일 위치 슬라이스(collocated slice)의 방향이 어느 방향인지를 나타내는 정보, 예컨대 L0 방향인지 L1 방향인지를 지시하는 플래그를 포함할 수 있다. 동일 위치 슬라이스의 방향을 지시하는 플래그는 슬라이스 헤더에 관한 파라미터 셋에 포함될 수 있다.Also, the parameter set may include information indicating which direction the collocated slice is in, for example, a flag indicating whether the direction is L0 or L1. The flag indicating the direction of the co-location slice may be included in a parameter set regarding the slice header.
한편, 동일 위치 LCU의 정보를 제한적으로 이용하도록 파라미터 셋을 구성할 수도 있다. 예컨대, 동일 위치 LCU가 분할되지 않은 경우에는 동일 위치 LCU의 분할 정보를 이용하는 플래그를 전송하지 않도록 할 수 있다. 이 경우에 현재 LCU에 대한 분할 정보는 종래와 같이 별도로 전송될 수 있다.Meanwhile, the parameter set may be configured to restrict the use of the information of the same location LCU. For example, when the same position LCU is not divided, it is possible not to transmit a flag using the split information of the same position LCU. In this case, the split information for the current LCU may be transmitted separately as in the prior art.
또한, 동일 위치 LCU의 정보를 전부 그대로 이용하지 않고 일부만 이용하도록 파라미터 셋을 구성할 수도 있고, 동일 위치 LCU의 정보만으로 현재 LCU의 상태를 결정하는 것이 아니라, 추가 정보가 전달되도록 파라미터 셋을 구성할 수도 있다. 부호화기는 추가로 전송하는 정보를 포함하도록 파라미터 셋을 구성할 수 있으며, 동일 위치 LCU의 정보를 전부 사용할지 일부만 사용할지는 파라미터 셋을 통해 지시할 수도 있고 부호화기와 복호화기 사이에 미리 정해져 있을 수도 있다.In addition, the parameter set may be configured to use only part of the information of the same location LCU without using it as it is, and the parameter set may be configured to transmit additional information instead of determining the current LCU state using only the information of the same location LCU. It may be. The encoder may configure a parameter set to include additionally transmitted information. The encoder may indicate whether to use all or part of the information of the same location LCU through a parameter set or may be predetermined between the encoder and the decoder.
예컨대, 동일 위치 LCU의 분할 정보를 이용하되, 현재 LCU 내 부호화 유닛의 깊이가 소정의 깊이가 될 때까지만, 동일 위치 LCU의 분할 정보를 따라서 현재 LCU가 분할되도록 할 수 있다. 이 경우, 동일 위치 LCU의 분할 정보를 따라서 분할된 뒤에 추가로 분할 되는 경우에는 별도의 분할 정보(split_coding_unit_flag)가 해당 부호화 유닛에 대해 전달될 수 있다. 동일 위치 LCU 분할 정보를 모두 이용하더라도, 동일 위치 LCU의 분할 정보대로 분할한 뒤에는 추가로 분할 정보를 더 전송할 수도 있다. For example, the split information of the same location LCU may be used, but the current LCU may be split along the split information of the same location LCU only until the depth of the coding unit in the current LCU becomes a predetermined depth. In this case, in the case of being further divided after being divided according to the split information of the same location LCU, separate split information (split_coding_unit_flag) may be delivered to the corresponding coding unit. Even if all of the same location LCU partitioning information is used, the partitioning information may be further transmitted after partitioning according to the partitioning information of the same location LCU.
이때, 부호화기는 추가 분할 정보를 포함하도록 파라미터 셋을 구성한다. 동일 위치 LCU의 정보를 일부만 사용할 것인지 모두 사용할 것인지는 파라미터 셋에 해당 정보를 지시하는 파라미터를 포함시켜 전송하도록 할 수도 있고, 부호화기와 복호화기 사이에 미리 정해져 있을 수도 있다.In this case, the encoder configures a parameter set to include additional segmentation information. Whether to use only part or all of the information of the same location LCU may be transmitted by including a parameter indicating the information in the parameter set, or may be predetermined between the encoder and the decoder.
부호화기는 파라미터 셋을 복호화기에 전송한다(S2630). 파라미터 셋은 다른 정보들과 함께 부호화되어 비트스트림으로 복호화기에 전달될 수 있다. The encoder transmits the parameter set to the decoder (S2630). The parameter set may be coded along with other information and transmitted to the decoder in a bitstream.
도 27은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 부호화 유닛을 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.27 is a flowchart schematically illustrating an example of a method of decoding a coding unit by receiving a parameter set in a decoder to which the present invention is applied.
도 27을 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신한다(S2710).Referring to FIG. 27, the decoder receives a parameter set from an encoder (S2710).
파라미터 셋에는 동일 위치 LCU의 정보를 이용하여 현재 LCU의 정보를 유도할 것인지를 지시하는 파라미터, 예컨대 플래그가 포함되어 있다. The parameter set includes a parameter, for example, a flag indicating whether to derive information of the current LCU using the information of the same position LCU.
상기 플래그가 동일 위치 LCU의 정보를 이용할 것을 지시하는 경우에는, 동일 위치 LCU가 속하는 대상 슬라이스의 방향이 어느 쪽인지를 지시하는 플래그가 더 포함되어 있을 수 있다. 또한, 동일 위치 LCU의 정보를 이용하는 경우에도 추가 정보가 파라미터 셋에 포함되어 있을 수 있다. 이 경우, 대상 슬라이스의 방향을 지시하는 플래그와 추가 정보는 각각 상기 플래그와 동일한 파라미터 셋에 포함될 수도 있고 별도의 파라미터 셋에 포함될 수도 있다. 예컨대, 동일 위치 LCU의 정보를 이용할지를 지시하는 플래그와 별도로 대상 슬라이스의 방향을 지시하는 플래그는 슬라이스 헤더에 관한 파라미터 셋에 포함되어 있을 수 있다. When the flag indicates to use information of the same position LCU, a flag indicating which direction of the target slice to which the same position LCU belongs belongs may be further included. In addition, additional information may be included in the parameter set even when information of the same location LCU is used. In this case, the flag and the additional information indicating the direction of the target slice may be included in the same parameter set or separate parameter set, respectively. For example, a flag indicating a direction of the target slice, separately from a flag indicating whether to use information of the same location LCU, may be included in a parameter set regarding the slice header.
복호화기는 수신한 파라미터 셋으로부터 현재 LCU의 정보를 유도한다(S2720).The decoder derives information of the current LCU from the received parameter set (S2720).
동일 위치 LCU로부터 현재 LCU의 정보를 유도하도록 지시된 경우에, 복호화기는 동일 위치 LCU로부터 해당 정보를 유도한다. If instructed to derive information of the current LCU from the co-located LCU, the decoder derives that information from the co-located LCU.
예컨대, 대상 슬라이스의 방향을 지시하는 플래그에 따라서, 해당 방향에서 대상 슬라이스를 찾을 수 있다.For example, according to a flag indicating a direction of the target slice, the target slice may be found in the corresponding direction.
또한, 현재 LCU에 대해서, 지정된 소정의 정보는 동일 위치 LCU의 정보를 이용해서 유도할 수 있다. 혹은 현재 LCU에 대해서, 별도의 파라미터가 전달되지 않은 정보에 대해서는 동일 위치 LCU의 정보를 이용해서 필요한 정보를 유도할 수도 있다. In addition, predetermined information specified for the current LCU can be derived using the information of the same position LCU. Alternatively, for the current LCU, necessary information may be derived using information of the same location LCU for information on which no separate parameter is transmitted.
한편, 동일 위치 LCU의 정보를 이용하는 경우에도, 해당 정보를 일부만 이용할 수도 있다. 이 경우, 추가로 필요한 정보는 복호화기로부터 수신한 별도의 정보로부터 얻을 수 있다. 별도의 정보는 동일 위치 LCU의 정보를 이용할 것인지를 지시하는 정보와는 서로 다른 파라미터 셋에 속할 수도 있다. 예컨대, 현재 LCU에 대하여 소정 깊이까지의 분할은 동일 위치 LCU의 분할 정보와 동일하게 수행하고, 그 이후부터는 별도로 전송된 분할 정보에 따라서 분할할 수 있다.On the other hand, even when using the information of the same position LCU, only a part of the information may be used. In this case, additionally necessary information can be obtained from separate information received from the decoder. The separate information may belong to a different parameter set from the information indicating whether to use the information of the same location LCU. For example, the partitioning up to a predetermined depth may be performed in the same manner as the partitioning information of the same location LCU with respect to the current LCU.
또한, 동일 위치 LCU의 정보를 모두 이용하는 경우에도, 복호화기로부터 추가로 정보가 전달될 수 있다. 이 경우에 복호화기는 동일 위치 LCU의 정보를 현재 LCU에 모두 적용하고, 추가 정보 역시 현재 LCU에 적용할 수 있다. 예컨대, 현재 LCU에 대해서, 동일 위치 LCU의 분할 상태와 동일하게 분할한 후 별도로 전송된 분할 정보에 따라서 더 분할해 나갈 수 있다. In addition, even when all of the information of the same position LCU, information may be further transmitted from the decoder. In this case, the decoder may apply all the information of the same position LCU to the current LCU, and additional information may also be applied to the current LCU. For example, the current LCU may be divided in the same manner as the split state of the same location LCU, and further divided according to the divided information transmitted separately.
복호화기는 유도한 정보를 기반으로 부호화 유닛을 복호화 할 수 있다(S2730).The decoder may decode the coding unit based on the derived information (S2730).
<스캐일러블(scalable) 비디오 부호화><Scalable Video Coding>
복호화기가 비트스트림의 일부를 선택적으로 복호화할 수 있도록 하는 방식으로 스캐일러블 비디오 부호화(Scalable Video Coding: SVC, 이하 ‘SVC’라 함)가 있다. 부호화된 비트스트림은 베이스 레이어(base layer)와 하나 이상의 인핸스먼트 레이어(enhancement layer)로 배열될 수 있다.There is scalable video coding (SVC, hereinafter referred to as SVC) in a manner that allows the decoder to selectively decode a portion of the bitstream. The encoded bitstream may be arranged in a base layer and one or more enhancement layers.
도 28은 SVC가 적용되는 시스템에서 부호화기의 동작을 개략적으로 도시한 블록도이다. 도 28을 참조하면, 부호화기는 복수의 레이어(레이어 0, 레이어 1)을 병렬적으로 부호화하여, 스캐일러블 비트스트림을 복호화기로 전송한다.28 is a block diagram schematically illustrating an operation of an encoder in a system to which SVC is applied. Referring to FIG. 28, the encoder encodes a plurality of layers (layer 0 and layer 1) in parallel and transmits a scalable bitstream to the decoder.
복호화기 중 SVC를 지원하지 않는 복호화기는 베이스 레이어(레이어 0)을 수신하여 복호화하고 SVC를 지원하는 복호화기는 모든 레이어를 수신하여 복호화할 수 있다. The decoder that does not support SVC among the decoders may receive and decode the base layer (layer 0), and the decoder that supports SVC may receive and decode all layers.
SVC는 다양한 스캐일러블 부호화 모드를 포함한다. 예컨대, 공간적 확장성(scalability)은 공간적 해상도의 계층을 제공하며, 시간적 확장성은 프레임율의 계층을 제공한다. 그 외 품질 확장성, 복잡도 확장성 등은 영상의 시각적 품질의 계층과 디코딩 방식의 복잡도에 대한 계층을 제공한다. SVC includes various scalable coding modes. For example, spatial scalability provides a layer of spatial resolution, while temporal scalability provides a layer of frame rate. In addition, quality scalability and complexity scalability provide a layer of visual quality of image and a complexity of decoding method.
공간적 확장성을 갖는 영상의 베이스 레이어는 감소된 해상도의 부호화된 프레임을 포함한다. 베이스 레이어만을 복호화하는 경우에는 낮은 해상도의 출력 영상을 얻을 수 있다. 베이스 레이어와 함께 인핸스먼트 레이어를 복호화하면 높은 해상도의 출력 영상을 얻을 수 있다. The base layer of the image with spatial scalability includes coded frames of reduced resolution. When only the base layer is decoded, an output image having a low resolution can be obtained. By decoding the enhancement layer together with the base layer, a high resolution output image can be obtained.
시간적 확장성을 갖는 영상의 베이스 레이어는 낮은 비디오 프레임율로 부호화된다. 베이스 레이어만을 복호화하면 프레임율이 낮지만, 베이스 레이어와 인핸스먼트 레이어를 함께 복호화하여 프레임율을 높일 수 있다. 인핸스먼트 레이어는 예측없이 부호화되는 I-VOP, 이전의 레이어 VOP와 이후의 베이스 레이어 VOP로부터 예측되는 P-VOP, 그리고 이전과 이후의 레이어 VOP로부터 예측되는 B-VOP를 포함한다.The base layer of an image having temporal scalability is encoded at a low video frame rate. If only the base layer is decoded, the frame rate is low, but the frame rate can be increased by decoding the base layer and the enhancement layer together. The enhancement layer includes an I-VOP encoded without prediction, a P-VOP predicted from a previous layer VOP and a subsequent base layer VOP, and a B-VOP predicted from a previous and subsequent layer VOP.
SVC에 사용되는 입력 신호는 레이어 간에, 상술한 바와 같이 해상도, 프레임율, 비트-뎁스(bit-depth), 색상 포맷(colour format), 화면 비율(aspect ratio) 등이 서로 다를 수 있다. 따라서, 이런 점을 고려하여 레이어 간의 예측을 수행함으로써 중복성(redundancy)을 줄이고 사이멀캐스트(simulcast) 대비 부호화 성능을 높일 수 있다. As described above, the input signal used in the SVC may have a different resolution, frame rate, bit-depth, color format, aspect ratio, and the like. Accordingly, by performing prediction between layers in consideration of this point, redundancy may be reduced and encoding performance may be improved compared to simulcast.
다양한 레이어 간 예측(inter-layer prediction) 방법이 사용될 수 있는데, 인핸스먼트 레이어에서 전송되는 부호화 유닛, 예측 유닛, 변환 유닛에 관한 정보의 양을 줄이기 위해 레이어 간 부호화 유닛/예측 유닛/변환 유닛의 예측을 수행할 수 있다. Various inter-layer prediction methods may be used, including prediction of inter-layer coding units / prediction units / transform units in order to reduce the amount of information about a coding unit, a prediction unit, and a transform unit transmitted in an enhancement layer. Can be performed.
도 29는 레이어 간 예측의 예를 개략적으로 도시한 개념도이다. 도 29에서 레이어 0과 레이어 1의 해상도는 2배의 차이가 있다고 가정한다. 29 is a conceptual diagram schematically illustrating an example of inter-layer prediction. In FIG. 29, it is assumed that the resolutions of layer 0 and layer 1 are two times different.
도 29를 참조하면, 레이어 0의 LCU (2910)은 다양한 CU, PU (또는 TU)로 분할되어 있다. 레이어 1에서 레이어 0의 분할 정보를 부호화 유닛 정보(CU info)를 업스캐일링(upscaling) 하면, 블록(2920)과 같은 정보를 얻을 수 있다. 이때, 레이어 1에서 레이어 0의 부호화 유닛/예측 유닛/변환 유닛 정보를 활용하는 것이 부호화 효율에 도움이 될 수도 있고 도움이 되지 않을 수도 있으므로, 레이어 0의 정보를 레이어 1에서 이용할 것인지를 적응적으로 알려줄 수 있다. Referring to FIG. 29, the LCU 2910 of layer 0 is divided into various CUs and PUs (or TUs). When upscaling coding unit information CU info from the split information of layer 0 in layer 1, the same information as that of block 2920 may be obtained. In this case, since the use of the coding unit / prediction unit / transform unit information of the layer 0 in layer 1 may or may not help coding efficiency, it may be adaptive to use the layer 0 information in layer 1. I can tell you.
베이스 레이어의 부호화 유닛 정보(CU info) 쿼드 트리 구조 또는 분할/파티셔닝에 관한 정보일 수도 있고, 예측에 관한 정보(예컨대, 스킵/논스킵 모드, 예측 방향, 움직임 벡터, 참조 인덱스 등에 관한 정보)가 될 수도 있으며, 둘 모두에 관한 정보일 수도 있다. CU unit information of the base layer may be quad tree structure or information about partitioning / partitioning, and information about prediction (eg, information about a skip / non-skip mode, a prediction direction, a motion vector, a reference index, etc.) It may be information about both.
따라서, 앞서 설명한 동일 위치 LCU의 정보를 기반으로 현재 LCU의 정보를 유도하는데 사용했던 방법들을 SVC의 레이어들에도 적용할 수 있다. 예를 들어, 베이스 레이어의 정보를 그대로 사용할 것인지를 지시하는 플래그를 이용하여, 베이스 레이어의 정보를 선택적으로 사용할 수 있다. 베이스 레이어의 정보를 그대로 사용할 것인지를 지시하는 플래그의 예로서, 동일 위치 LCU의 분할 정보를 그대로 사용할 것인지를 지시하는 플래그와 동일하게 베이스 레이어의 트리 구조를 그대로 이용할 것인지 이용하는 것을 스킵할 것인지를 지시하는 플래그(bl_tree_info_skip_flag)를 정의할 수 있다. Therefore, the methods used to derive the information of the current LCU based on the information of the co-located LCU described above can also be applied to the layers of the SVC. For example, the information on the base layer may be selectively used by using a flag indicating whether to use the information on the base layer as it is. As an example of a flag indicating whether to use the information of the base layer as it is, as a flag indicating whether to use the split information of the same position LCU as it is, indicating whether to use the tree structure of the base layer as it is or to skip it. A flag bl_tree_info_skip_flag may be defined.
또한, 동일 위치 LCU의 분할 정보를 소정의 깊이까지만 이용하고 해당 깊이보다 더 분할되는 경우에는 추가적인 분할 정보를 전송하는 것과 유사하게, 베이스 레이어에 이용할 정보가 있는지를 알려주는 신택스를 이용할 수도 있다. 이때, 이용 가능한 정보가 무엇인지를 특정하여 알려줄 수도 있다. 예컨대, 베이스 레이어에서 분할에 관해 이용할 정보가 있다면, 분할 정보를 이용하는 것을 지시하는 신택스를 사용할 수 있다. In addition, when the partition information of the same location LCU is used only up to a predetermined depth and is further divided than the corresponding depth, a syntax for indicating whether there is information to be used in the base layer may be used similarly to transmitting additional partition information. At this time, it is also possible to specify what information is available. For example, if there is information to be used for partitioning in the base layer, a syntax indicating use of the partitioning information may be used.
레이어 0(베이스 레이어)의 해당 정보가 레이어 1(인핸스먼트 레이어)의 트리/파티셔닝 및/또는 예측에 사용된다면, 이를 반영하는 신택스 구조를 표 12와 같이 구성할 수 있다.If the corresponding information of the layer 0 (base layer) is used for tree / partitioning and / or prediction of the layer 1 (enhancement layer), a syntax structure reflecting this may be configured as shown in Table 12.
표 12는 본 발명이 적용되는 시스템에서 스캐일러블 확장 레이어(scalable extension layer)에 대한 슬라이스 데이터 신택스(Slice data syntax)구조의 일 예를 개략적으로 나타낸 것이다. Table 12 schematically shows an example of a slice data syntax structure for a scalable extension layer in a system to which the present invention is applied.
표 13은 본 발명이 적용되는 시스템에서 스캐일러블 확장 레이어에 대한 부호화 트리(coding tree) 신택스의 일 예를 개략적으로 나타낸 것이다. Table 13 schematically shows an example of coding tree syntax for a scalable extension layer in a system to which the present invention is applied.
표 12와 표 13에서 bl_tree_info_skip_flag 가 1이면 베이스 레이어(base layer, 참조 레이어(reference layer) 또는 레이어 0(layer 0)이라고도 함)의 트리 구조 정보(tree info)를 그대로 사용하겠다는 것을 의미한다. bl_tree_info_skip_flag 가 0이면 베이스 레이어의 트리 구조 정보를 사용하지 않는다는 의미이다. In Table 12 and Table 13, if bl_tree_info_skip_flag is 1, it means that tree information of a base layer (also referred to as a base layer, a reference layer, or layer 0) is used as it is. If bl_tree_info_skip_flag is 0, this means that tree structure information of the base layer is not used.
예컨대, bl_tree_info_skip_flag 의 값이 1이면 베이스 레이어의 트리 구조 정보가 도 29의 부호화 유닛 정보 업스캐일링에 의해 인핸스먼트 레이어(enhancement layer, 현재 레이어(current layer) 또는 레이어 1(layer 1)이라고도 함)의 해상도에 맞도록 업스캐일링된다. For example, when the value of bl_tree_info_skip_flag is 1, the tree structure information of the base layer is referred to as an enhancement layer, a current layer, or layer 1 by upscaling of coding unit information of FIG. 29. It is upscaled to match the resolution.
도 29의 LCU 0(2930)은 베이스 레이어의 트리 구조 정보를 인핸스먼트 레이어(현재 레이어)에 이용하는 경우를 나타낸다. 도시된 바와 같이, 현재 LCU의 분할 정보(split_coding_unit_flag) 값들은 현재 LCU의 분할 정보가 업스캐일링된 베이스 레이어의 분할 정보와 동일한 값을 갖도록 유도된다.LCU 02930 in FIG. 29 illustrates a case in which tree structure information of a base layer is used for an enhancement layer (current layer). As shown, split_coding_unit_flag values of the current LCU are derived so that the split information of the current LCU has the same value as the split information of the upscaled base layer.
BLSplitInfo[x0][y0]는 업스캐일링된 부호화 유닛 정보에 분할 정보가 존재하는 경우에는 1의 값을 가지고, 업스캐일링된 부호화 유닛 정보에 분할 정보가 존재하지 않는 경우에는 0의 값을 갖는다. 예를 들어 베이스 레이어와 인핸스먼트 레이어의 해상도 차이가 2배이며, 부호화 유닛의 깊이가 동일하다면, 업스캐일링된 베이스 레이어의 분할 정보는 인핸스먼트 레이어의 분할 정보보다 한 단계 더 낮은 깊이에 대한 정보가 된다. BLSplitInfo [x0] [y0] has a value of 1 when split information exists in upscaled coding unit information and 0 when split information does not exist in upscaled coding unit information. . For example, if the resolution difference between the base layer and the enhancement layer is twice and the depths of the coding units are the same, the split information of the upscaled base layer is one step lower than the split information of the enhancement layer. Becomes
베이스 레이어에 분할 정보가 존재하지 않는 경우, BLSplitInfo의 값을 0으로 설정하고 인핸스먼트 레이어만을 위한 추가적인 분할 정보(split_coding_unit_flag)를 전송하여 업스캐일된 베이스 레이어로부터 예측되는 분할 정보보다 더 자세한 분할 정보를 알려줄 수 있다. If the split information does not exist in the base layer, set the value of BLSplitInfo to 0 and send additional split information (split_coding_unit_flag) only for the enhancement layer to inform more detailed split information than the split information predicted from the upscaled base layer. Can be.
유사한 방법을 변환 유닛(TU)에도 적용할 수 있는데, 베이스 레이어의 정보를 이용할 것인지를 나타내는 플래그(bl_tu_info_skip_flag)를 사용하여 표 14와 같이 현재 레이어(인핸스먼트 레이어)를 위한 추가적인 분할 정보의 전송을 생략할 수도 있다. A similar method can be applied to the transform unit (TU), and using the flag (bl_tu_info_skip_flag) indicating whether to use the information of the base layer, omitting transmission of additional partition information for the current layer (enhanced layer) as shown in Table 14 You may.
표 14는 본 발명이 적용되는 시스템에 있어서 스캐일러블 확장 레이어에 대한 부호화 유닛 신택스의 일 예를 개략적으로 나타낸 것이다. Table 14 schematically shows an example of coding unit syntax for a scalable extension layer in a system to which the present invention is applied.
또한, 표 15는 본 발명이 적용되는 시스템에서 스캐일러블 확장 레이어에 대한 변환 트리(transform tree) 신택스의 일 예를 개략적으로 나타낸 것이다. In addition, Table 15 schematically shows an example of a transform tree syntax for a scalable extension layer in a system to which the present invention is applied.
상술한 바와 같이, bl_tu_info_skip_flag의 값이 1이면, 베이스 레이어의 업스캐일된 변환 유닛 분할 정보를 현재 레이어(인핸스먼트 레이어)에 그대로 사용한다. base layer의 upscaled tu split info를 current layer에서 그대로 사용하게 된다. bl_tu_info_skip_flag의 값이 0이면 현재 레이어(인핸스먼트 레이어)를 위한 변환 유닛 분할 정보가 별도로 전송된다. As described above, when the value of bl_tu_info_skip_flag is 1, the upscaled transform unit split information of the base layer is used as it is for the current layer (enhanced layer). The upscaled tu split info of the base layer is used as is in the current layer. If the value of bl_tu_info_skip_flag is 0, transform unit splitting information for the current layer (enhanced layer) is separately transmitted.
한편, 상술한 바와 같이, SVC에서 베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도하는 경우에, 동일 위치 LCU를 이용하는 경우와 동일하게 신택스에 몇 가지 제한/조정을 더 가할 수도 있다. Meanwhile, as described above, when the information of the current layer is derived using the information of the base layer in the SVC, some limitations / adjustments may be added to the syntax as in the case of using the same position LCU.
예컨대, 베이스 레이어의 정보를 사용하는 경우에, 어느 방향에 있는 베이스 레이어를 사용할 것인지를 지시하는 플래그를 더 추가할 수도 있다.For example, in case of using the information of the base layer, a flag indicating which direction the base layer is to be used may be further added.
또한, 베이스 레이어의 정보를 사용할 것인지를 지시하는 플래그의 위치를 적응적으로 선택할 수도 있다. 예컨대, 동일 위치 LCU의 정보를 이용하는 경우와 유사하게, 베이스 레이어의 분할 정보를 이용할 것인지에 관한 정보와 예측 모드에 관한 정보의 선후를 상황에 따라 적응적으로 결정할 수도 있다. 가령, 현재 레이어의 LCU에 대하여 크기, 깊이, QP 등의 기준을 정하고, 적어도 하나 이상의 기준을 적용하여 어떤 정보가 먼저 전달되어야 하는지를 정할 수 있다. 예를 들어, 블록의 사이즈가 크거나 깊이가 낮은 경우에는 분할에 관한 정보를 예측 모드에 관한 정보보다 먼저 전달할 수 있다. 이 경우 분할에 관한 정보는 베이스 레이어의 분할 정보를 사용할 것인지를 지시하는 플래그일 수 있다. It is also possible to adaptively select the position of a flag indicating whether to use the information of the base layer. For example, similarly to the case of using the information of the same position LCU, the information about whether to use the split information of the base layer and the information about the prediction mode may be adaptively determined according to the situation. For example, criteria such as size, depth, QP, etc. may be determined for the LCU of the current layer, and at least one criterion may be applied to determine what information should be transmitted first. For example, when the block size is large or the depth is low, the information about the partition may be transmitted before the information about the prediction mode. In this case, the information about the division may be a flag indicating whether to use the division information of the base layer.
상술한 바와 같이, 베이스 레이어로부터 분할 정보 외에 더 많을 정보를 이용할 수 있다. 여기서는 분할 정보들과 예측 모드에 관한 정보를 예로서 설명하였으나, 이에 한하지 않고, 다양한 정보를 유도할 수 있다. 이때, 이용하는 정보 및 이용할 영역별로 신택스를 구성해서, 신택스의 값이 1이면, 베이스 레이어의 해당 정보를 해당 영역에 적용하도록 할 수 있다.As described above, more information may be used from the base layer in addition to the split information. Herein, the split information and the information about the prediction mode have been described as an example, but the present invention is not limited thereto, and various types of information may be derived. In this case, the syntax may be configured for each information to be used and a region to be used, and if the syntax value is 1, the corresponding information of the base layer may be applied to the corresponding region.
또한, 분할 정보와 같은 경우에도, 동일 위치 LCU의 정보를 이용하는 방법에서 사용한 것과 같이, 베이스 레이어의 분할 정보를 그대로 이용하도록 하고 베이스 레이어의 분할 상태보다 더 분할되는 상태는 별도의 정보를 전송하도록 할 수 있다. 베이스 레이어의 분할 상태를 현재 레이어에서는 소정의 깊이까지만 이용하고 그 이후의 분할 상태는 별도로 분할 정보를 전송하여 분할될 수 있도록 할 수도 있다. 예컨대, 베이스 레이어의 분할 상태와 현재 레이어의 최대 깊이를 고려하여, 베이스 레이어의 분할 상태를 현재 레이어의 최대 깊이보다 한 단계 낮은 깊이까지만 이용하고, 그보다 더 분할하는 경우에는 현재 레이어에 대한 분할 정보를 별도로 전송하도록 할 수도 있다. 베이스 레이어의 분할 상태 중, 현재 레이어의 최대 깊이 전 단계의 깊이에 해당하는 분할 상태까지만 현재 레이어에 이용하고, 그 이후 단계의 분할은 별도의 분할 정보를 전송하여 수행되도록 할 수도 있다.In addition, even in the case of the partitioning information, as in the method of using the information of the same position LCU, the partitioning information of the base layer is to be used as it is, and if the partitioning state is further divided than the partitioning state of the base layer, separate information should be transmitted. Can be. The division state of the base layer may be used only to a predetermined depth in the current layer, and the division state thereafter may be divided by transmitting division information separately. For example, in consideration of the split state of the base layer and the maximum depth of the current layer, the split state of the base layer is used only to one level lower than the maximum depth of the current layer. You can also send it separately. Of the divided states of the base layer, only the divided state corresponding to the depth of the previous stage of the maximum depth of the current layer may be used for the current layer, and the division of the subsequent stages may be performed by transmitting separate segmentation information.
도 30은 본 발명이 적용되는 부호화기에서 파라미터 셋을 구성하여 복호화기에 전송하는 방법의 일 예를 개략적으로 설명하는 순서도이다.30 is a flowchart schematically illustrating an example of a method for configuring a parameter set in an encoder to which the present invention is applied and transmitting the same to a decoder.
도 30을 참조하면, 부호화기는 현재 레이어의 정보를 베이스 레이어의 정보를 이용하여 유도할 것인지를 결정한다(S3010). Referring to FIG. 30, the encoder determines whether to induce information of the current layer by using information of the base layer (S3010).
부호화기는 복호화기에 전송할 파라미터 셋을 구성한다(S3020).The encoder configures a parameter set to be transmitted to the decoder (S3020).
부호화기는 베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도할 것인지를 지시하는 정보, 예컨대 플래그를 포함하도록 파라미터 셋을 구성할 수 있다. The encoder may configure the parameter set to include information indicating whether to derive information of the current layer using information of the base layer, for example, a flag.
베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도하도록 결정한 경우에는, 상기 플래그 외에 베이스 레이어의 방향에 관한 정보, 베이스 레이어의 정보를 전부 이용할 것인지, 일부 이용할 것인지, 변형하여 이용할 것인지를 지시하는 정보를 파라미터 셋에 포함할 수 있다.In the case where it is determined to derive the information of the current layer by using the information of the base layer, in addition to the flag, information indicating whether the base layer is to be used in all directions, information on the base layer, whether to use part of it, or modify it. Can be included in the parameter set.
또한, 베이스 레이어의 정보를 이용하는 경우에도, 추가로 전달할 정보를 파라미터 셋에 포함시킬 수 있다. 예컨대, 베이스 레이어의 분할 정보를 이용해 현재 레이어의 분할 정보를 유도하는 경우에, 일정 깊이까지만 베이스 레이어의 분할 정보에 따라서 현재 레이어를 분할하고 그 이후는 별도의 분할 정보에 따라서 현재 레이어를 분할하도록 수 있다. 또한, 베이스 레이어가 분할된 대로 현재 레이어를 분할한 뒤에 별도의 분할 정보에 따라서 현재 레이어를 더 분할하도록 할 수 있다. 이 경우, 추가 분할을 위한 정보가 별도의 분할 정보로서 전송될 수 있다.In addition, even when using the information of the base layer, additional information to be delivered may be included in the parameter set. For example, when the split information of the current layer is derived using the split information of the base layer, the current layer may be split according to the split information of the base layer only up to a certain depth, and then the split layer may be split according to the separate split information. have. In addition, after dividing the current layer as the base layer is divided, the current layer may be further divided according to separate partitioning information. In this case, information for additional division may be transmitted as separate division information.
베이스 레이어의 방향 정보 및/또는 추가 정보는 베이스 레이어의 정보를 이용할 것인지를 지시하는 정보가 포함되는 파라미터 셋과는 다른 파라미터 셋에 포함될 수도 있다. Direction information and / or additional information of the base layer may be included in a parameter set different from a parameter set including information indicating whether to use information of the base layer.
부호화기는 파라미터 셋을 복호화기에 전송한다(S3030). 파라미터 셋은 다른 정보들과 함께 부호화되어 비트스트림으로 복호화기에 전달될 수 있다.The encoder transmits the parameter set to the decoder (S3030). The parameter set may be coded along with other information and transmitted to the decoder in a bitstream.
도 31은 본 발명이 적용되는 복호화기에서 파라미터 셋을 수신하여 복호화하는 방법의 일 예를 개략적으로 설명하는 순서도이다.31 is a flowchart schematically illustrating an example of a method of receiving and decoding a parameter set in a decoder to which the present invention is applied.
도 31을 참조하면, 복호화기는 부호화기로부터 파라미터 셋을 수신한다(S3110).Referring to FIG. 31, the decoder receives a parameter set from an encoder (S3110).
파라미터 셋은 베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도할 것인지를 지시하는 정보, 예컨대 플래그를 포함한다. The parameter set includes information indicating whether to derive information of the current layer using information of the base layer, for example, a flag.
베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도하도록 지시된 경우에는, 상기 플래그 외에 베이스 레이어의 방향에 관한 정보, 베이스 레이어의 정보를 전부 이용할 것인지, 일부 이용할 것인지, 변형하여 이용할 것인지를 지시하는 정보 등이 수신될 수 있다. 또한, 베이스 레이어의 정보를 이용하는 경우에도, 추가로 전달할 정보들이 수신될 수 있다. In the case where it is instructed to derive information of the current layer using the information of the base layer, in addition to the above flag, it is indicated whether information on the direction of the base layer, information on the base layer is to be used, partially or modified. Information and the like can be received. In addition, even when using the information of the base layer, additional information to be delivered may be received.
베이스 레이어의 방향 정보 및/또는 추가 정보는 베이스 레이어의 정보를 이용할 것인지를 지시하는 정보가 포함되는 파라미터 셋과는 다른 파라미터 셋에 포함될 수도 있다.Direction information and / or additional information of the base layer may be included in a parameter set different from a parameter set including information indicating whether to use information of the base layer.
복호화기는 수신한 파라미터 셋으로부터 현재 레이어의 정보를 유도한다(S3120).The decoder derives information of the current layer from the received parameter set (S3120).
베이스 레이어로부터 현재 레이어의 정보를 유도하도록 지시된 경우에, 복호화기는 베이스 레이어로부터 해당 정보를 유도한다. If instructed to derive information of the current layer from the base layer, the decoder derives the information from the base layer.
예컨대, 베이스 레이어의 방향을 지시하는 플래그에 따라서, 해당 방향에서 베이스 레이어를 찾을 수 있다. 그 외 지정된 소정의 정보만을 베이스 레이어의 정보를 이용해서 유도할 수도 있고, 별도의 파라미터가 전달되지 않은 정보에 대해서는 베이스 레이어의 정보를 이용해서 필요한 정보를 유도할 수도 있다. For example, the base layer may be found in the corresponding direction according to a flag indicating the direction of the base layer. In addition, only predetermined information may be derived using the information of the base layer, or necessary information may be derived using information of the base layer with respect to information to which no additional parameter is transmitted.
한편, 베이스 레이어의 정보를 이용하는 경우에도, 해당 정보를 일부만 이용할 수도 있다. 이 경우, 추가로 필요한 정보는 복호화기로부터 수신한 별도의 정보로부터 얻을 수 있다. 예컨대, 현재 레이어에 대하여 소정 깊이까지의 분할은 베이스 레이어의 분할 정보와 동일하게 수행하고, 그 이후부터는 별도로 전송된 분할 정보에 따라서 분할할 수 있다.On the other hand, even when using the information of the base layer, only a part of the information may be used. In this case, additionally necessary information can be obtained from separate information received from the decoder. For example, the partitioning up to a predetermined depth may be performed with respect to the current layer in the same manner as the partition information of the base layer, and thereafter, the partition may be partitioned according to the partition information transmitted separately.
또한, 베이스 레이어의 정보를 모두 이용하는 경우에도, 복호화기로부터 추가로 정보가 전달될 수 있다. 이 경우에 복호화기는 베이스 레이어의 정보를 현재 레이어에 모두 적용하고, 추가 정보 역시 현재 레이어에 적용할 수 있다. 예컨대, 현재 레이어에 대해서, 베이스 레이어의 분할 상태와 동일하게 분할한 후 별도로 전송된 분할 정보에 따라서 더 분할해 나갈 수 있다. In addition, even when all the information of the base layer is used, information may be additionally transmitted from the decoder. In this case, the decoder may apply all the information of the base layer to the current layer, and additional information may also be applied to the current layer. For example, the current layer may be divided in the same manner as the split state of the base layer and further divided according to the separately transmitted split information.
복호화기는 유도한 정보를 기반으로 현재 레이어를 복호화할 수 있다(S3130).The decoder may decode the current layer based on the derived information (S3130).
상술한 예시적인 시스템에서, 방법들은 일련의 단계 또는 블록으로써 순서도를 기초로 설명되고 있지만, 본 발명은 단계들의 순서에 한정되는 것은 아니며, 어떤 단계는 상술한 바와 다른 단계와 다른 순서로 또는 동시에 발생할 수 있다. 또한, 상술한 실시예들은 다양한 양태의 예시들을 포함한다. 따라서, 본 발명은 이하의 특허청구범위 내에 속하는 모든 다른 교체, 수정 및 변경을 포함한다고 할 것이다.In the exemplary system described above, the methods are described based on a flowchart as a series of steps or blocks, but the invention is not limited to the order of steps, and certain steps may occur in a different order or concurrently with other steps than those described above. Can be. In addition, the above-described embodiments include examples of various aspects. Accordingly, the invention is intended to embrace all other replacements, modifications and variations that fall within the scope of the following claims.
지금까지 본 발명에 관한 설명에서 일 구성 요소가 타 구성 요소에 "연결되어" 있다거나 "접속되어"있다고 언급된 때에는, 상기 일 다른 구성 요소가 상기 타 구성 요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 두 구성 요소 사이에 다른 구성 요소가 존재할 수도 있다고 이해되어야 한다. 반면에, 일 구성 요소가 타 구성 요소에 "직접 연결되어"있다거나 "직접 접속되어"있다고 언급된 때에는, 두 구성 요소 사이에 다른 구성요소가 존재하지 않는 것으로 이해되어야 한다.So far in the description of the present invention, when one component is referred to as being "connected" or "connected" to another component, the other component is directly connected to or connected to the other component. It may be, but it should be understood that other components may exist between the two components. On the other hand, when one component is referred to as being "directly connected" or "directly connected" to another component, it should be understood that no other component exists between the two components.
Claims (21)
- 현재 블록의 정보를 동일 위치 블록의 정보로부터 유도할 것을 결정하는 단계;
상기 동일 위치 블록의 정보를 이용하여 상기 현재 블록의 정보를 부호화하는 단계; 및
상기 동일 위치 블록의 정보로부터 상기 현재 블록의 정보를 유도하는 것에 관한 지시 정보를 전송하는 단계를 포함하는 것을 특징으로 하는 영상 정보 부호화 방법.Determining to derive information of the current block from information of the same position block;
Encoding information of the current block by using the information of the same position block; And
And transmitting indication information relating to deriving the information of the current block from the information of the same position block. - 제1항에 있어서, 상기 동일 위치 블록으로부터 유도하는 상기 현재 블록의 정보는 상기 현재 블록의 분할 정보인 것을 특징으로 하는 영상 정보 부호화 방법.The method of claim 1, wherein the information of the current block derived from the same position block is split information of the current block.
- 제1항에 있어서, 상기 지시 정보는 상기 동일 위치 블록의 정보로부터 상기 현재 블록의 정보를 유도하는 것을 지시하는 플래그인 것을 특징으로 하는 영상 정보 부호화 방법.The video information encoding method of claim 1, wherein the indication information is a flag indicating to derive information of the current block from information of the same position block.
- 제1항에 있어서, 상기 지시 정보는 현재 블록이 속하는 현재 픽처가 화면 간 예측 모드인 경우에만 전송되는 것을 특징으로 하는 영상 정보 부호화 방법.The method of claim 1, wherein the indication information is transmitted only when the current picture to which the current block belongs is in the inter prediction mode.
- 제1항에 있어서, 상기 동일 위치 블록이 속하는 대상 픽처는, 현재 블록이 속하는 현재 픽처 바로 전에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 시간적 거리가 가장 가까운 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 가장 최근에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처보다 시간적 레벨이 작고 시간적 거리가 가장 가까운 픽처 또는 이미 부호화된 픽처들 중에서 현재 부호화 중인 픽처보다 시간적 레벨이 작고 가장 최근에 부호화된 픽처 중 어느 하나인 것을 특징으로 하는 영상 정보 부호화 방법.The target picture to which the co-located block belongs is a picture encoded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already encoded pictures, and is already encoded. The most recently coded picture with the same temporal level as the current picture among pictures that have been coded, the picture that has a smaller temporal level than the current picture with the nearest temporal distance among the pictures that have already been encoded, or the picture that is currently coded among the pictures that are already coded. The video information encoding method, characterized in that the level is any one of the most recently encoded pictures.
- 제1항에 있어서, 상기 지시 정보는,
상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 다른 경우에, 최대 깊이를 갖는 부호화 유닛의 깊이가 소정의 크기만큼 감소하도록 상기 동일 위치 블록의 분할 상태를 조정해서 상기 현재 블록의 분할 상태로 이용하도록 지시하는 것을 특징으로 하는 영상 정보 부호화 방법.The method of claim 1, wherein the indication information,
When the temporal level of the current picture to which the current block belongs and the target picture to which the same position block belongs is different, the dividing state of the same position block is adjusted to reduce the depth of the coding unit having the maximum depth by a predetermined size. And instructing to use the segmented state of the current block. - 제1항에 있어서, 상기 지시 정보는, 소정의 깊이까지 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하도록 지시하며,
상기 소정의 깊이를 넘어서는 분할에 대해서는 현재 블록에 대한 별도의 분할 정보를 전송하는 것을 특징으로 하는 영상 정보 부호화 방법.The method according to claim 1, wherein the instruction information instructs to use the division state of the same position block as the division information of the current block to a predetermined depth,
And dividing information for the current block is transmitted for the division exceeding the predetermined depth. - 제1항에 있어서, 상기 지시 정보는 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하도록 지시하며,
상기 동일 위치 블록의 분할 상태를 기반으로 수행되는 추가 분할에 대해서는 별도의 분할 정보를 전송하는 것을 특징으로 하는 영상 정보 부호화 방법.The method of claim 1, wherein the indication information indicates to use the division state of the same block as the partition information of the current block.
And additional partition information is transmitted for the additional partitioning performed on the basis of the partition state of the same location block. - 현재 블록의 화소값을 예측하기 위한 정보를 구성하는 단계; 및
상기 구성한 정보를 전송하는 단계를 포함하며,
상기 구성된 정보는 상기 현재 블록의 예측 모드에 관한 정보가 상기 현재 블록의 분할 정보보다 먼저 전달되도록 구성되는 것을 특징으로 하는 영상 정보 부호화 방법.Constructing information for predicting pixel values of the current block; And
Transmitting the configured information;
And the configured information is configured such that information about a prediction mode of the current block is transmitted before segmentation information of the current block. - 동일 위치 블록의 정보를 이용하여 현재 블록의 정보를 유도하는 것에 관한 지시 정보에 따라서, 현재 블록의 정보를 유도하는 단계; 및
상기 유도한 현재 블록의 정보를 기반으로 상기 현재 블록의 화소값을 예측하는 단계를 포함하는 것을 특징으로 하는 영상 정보 복호화 방법.Deriving information of the current block according to the indication information about deriving information of the current block using information of the same position block; And
And predicting a pixel value of the current block based on the derived information of the current block. - 제10항에 있어서, 상기 지시 정보는 상기 현재 블록의 정보를 상기 동일 위치 블록의 정보로부터 유도할 것을 지시하는 플래그인 것을 특징으로 하는 영상 정보 복호화 방법.The method of claim 10, wherein the indication information is a flag indicating to induce information of the current block from information of the same position block.
- 제10항에 있어서, 상기 동일 위치 블록으로부터 유도하는 상기 현재 블록의 정보는 상기 현재 블록의 분할 정보인 것을 특징으로 하는 영상 정보 부호화 방법.The method of claim 10, wherein the information of the current block derived from the same position block is split information of the current block.
- 제10항에 있어서, 상기 동일 위치 블록이 속하는 대상 픽처는 현재 블록이 속하는 현재 픽처 바로 전에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 시간적 거리가 가장 가까운 픽처, 이미 부호화된 픽처들 중에서 현재 픽처와 시간적 레벨이 같고 가장 최근에 부호화된 픽처, 이미 부호화된 픽처들 중에서 현재 픽처보다 시간적 레벨이 작고 시간적 거리가 가장 가까운 픽처 또는 이미 부호화된 픽처들 중에서 현재 부호화 중인 픽처보다 시간적 레벨이 작고 가장 최근에 부호화된 픽처 중 어느 하나인 것을 특징으로 하는 영상 정보 복호화 방법.The target picture to which the co-located block belongs is a picture encoded immediately before the current picture to which the current block belongs, a picture that has the same temporal level and has the closest temporal distance from the current picture among the already encoded pictures, and is already encoded. Of the pictures, the temporal level is the same as the current picture, the most recently coded picture, the previously-encoded picture, the temporal level is smaller than the current picture, the closest temporal distance, or the temporal level of the currently coded picture from among the already-encoded pictures. And the smallest and most recently coded picture.
- 제10항에 있어서, 상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 다른 경우에, 최대 깊이를 갖는 부호화 유닛의 깊이가 소정의 크기만큼 감소하도록 상기 동일 위치 블록의 분할 상태를 조정해서 상기 현재 블록의 분할 상태로 이용하는 것을 특징으로 하는 영상 정보 복호화 방법.12. The method of claim 10, wherein when the temporal level of the current picture to which the current block belongs and the target picture to which the same position block belongs is different, the depth of the coding unit having the maximum depth is reduced by a predetermined size. And adjusting the division state to use the division state of the current block.
- 제10항에 있어서, 소정의 깊이까지는 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하며,
상기 소정의 깊이를 넘어서는 분할에 대해서는 현재 블록에 대한 별도로 수신한 분할 정보에 기반해서 분할을 수행하는 것을 특징으로 하는 영상 정보 복호화 방법.The method of claim 10, wherein the divided state of the same position block is used as the split information of the current block up to a predetermined depth.
And dividing the data beyond the predetermined depth based on separately received split information of the current block. - 제15항에 있어서, 상기 소정의 깊이는 상기 현재 블록의 최대 깊이보다 한 단계 낮은 깊이인 것을 특징으로 하는 영상 정보 복호화 방법.The method of claim 15, wherein the predetermined depth is one step lower than the maximum depth of the current block.
- 제10항에 있어서, 상기 동일 위치 블록의 분할 상태를 상기 현재 블록의 분할 정보로 이용하되,
상기 동일 위치 블록의 분할 상태로부터 수행되는 추가 분할은 별도로 수신한 분할 정보를 기반으로 이루어지는 것을 특징으로 하는 영상 정보 복호화 방법.The method of claim 10, wherein the split state of the same location block is used as split information of the current block.
The method of claim 1, wherein the additional division performed from the division state of the same location block is performed based on the separately received partition information. - 제10항에 있어서, 상기 현재 블록이 속하는 현재 픽처와 상기 동일 위치 블록이 속하는 대상 픽처의 시간적 레벨이 같은 경우에만, 상기 현재 블록의 정보를 상기 동일 위치 블록의 정보로부터 유도하는 것을 특징으로 하는 영상 정보 복호화 방법.The image of claim 10, wherein the information of the current block is derived from the information of the same location block only when the temporal level of the current picture to which the current block belongs and the target picture to which the same location block belongs is the same. Information decryption method.
- 현재 블록의 화소값을 예측하기 위한 정보를 수신하는 단계; 및
상기 수신한 정보에 따라서 상기 현재 블록의 화소값을 예측하는 단계를 포함하며,
상기 현재 블록의 화소값을 예측하는 단계에서는,
상기 수신한 정보에서 상기 현재 블록이 스킵 모드로 예측된다는 것이 지시된 경우에는, 상기 현재 블록의 분할 정보를 적용하지 않는 것을 특징으로 하는 영상 정보 부호화 방법.Receiving information for predicting pixel values of a current block; And
Predicting pixel values of the current block according to the received information;
In the step of predicting the pixel value of the current block,
And when the received information indicates that the current block is predicted to be a skip mode, split information of the current block is not applied. - 현재 레이어의 정보를 베이스 동일 위치 블록의 정보로부터 유도할 것을 결정하는 단계;
상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 부호화하는 단계; 및
상기 베이스 레이어의 정보로부터 상기 현재 레이어의 정보를 유도하기 위한 파라미터 셋을 전송하는 단계를 포함하며,
상기 파라미터 셋은
상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 유도할 것을 지시하는 플래그; 및
베이스 레이어의 방향 및/또는 베이스 레이어의 정보를 이용하는 방법에 관한 정보를 포함하고,
상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보는 상기 베이스 레이어 정보의 전면 사용, 일부 사용 및 변형 사용 중 어느 하나를 지시하며,
상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보에 따라 유도된 정보와 현재 레이어의 정보가 상이한 경우에는, 현재 레이어의 정보를 유도하기 위한 추가 정보를 전송하는 것을 특징으로 하는 영상 정보 부호화 방법. Determining to derive information of the current layer from information of the base co-located block;
Encoding information of the current layer using information of the base layer; And
Transmitting a parameter set for deriving information of the current layer from information of the base layer,
The parameter set is
A flag indicating to induce information of the current layer by using information of the base layer; And
Includes information about the direction of the base layer and / or how to use the information of the base layer,
The information on the method of using the information of the base layer indicates any one of full use, partial use, and modified use of the base layer information.
And when the derived information and the information of the current layer are different according to the information on the method of using the information of the base layer, additional information for deriving the information of the current layer is transmitted. - 베이스 레이어의 정보를 이용하여 현재 레이어의 정보를 유도하기 위한 제1 정보를 수신하는 단계;
상기 제1 정보를 기반으로 상기 베이스 레이어의 정보로부터 상기 현재 레이어의 정보를 유도하는 단계; 및
상기 유도한 현재 레이어의 정보를 기반으로 상기 현재 레이어의 화소값을 예측하는 단계를 포함하며,
상기 제1 정보는 상기 베이스 레이어의 정보를 이용하여 상기 현재 레이어의 정보를 유도할 것을 지시하는 플래그; 및
베이스 레이어의 방향 및/또는 베이스 레이어의 정보를 이용하는 방법에 관한 정보를 포함하고,
상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보는 상기 베이스 레이어 정보의 전면 사용, 일부 사용 및 변형 사용 중 어느 하나를 지시하며,
상기 베이스 레이어의 정보를 이용하는 방법에 관한 정보에 따라 유도된 정보와 현재 레이어의 정보가 상이한 경우에는, 현재 레이어의 정보를 유도하기 위한 추가 정보 및 상기 베이스 레이어로부터 유도한 정보를 기반으로 상기 현재 레이어의 정보를 유도하는 것을 특징으로 하는 영상 정보 복호화 방법.Receiving first information for deriving information of a current layer using information of a base layer;
Deriving information of the current layer from information of the base layer based on the first information; And
Predicting pixel values of the current layer based on the derived information of the current layer,
The first information may include a flag indicating to induce information of the current layer by using information of the base layer; And
Includes information about the direction of the base layer and / or how to use the information of the base layer,
The information on the method of using the information of the base layer indicates any one of full use, partial use, and modified use of the base layer information.
If the information derived from the information on the method of using the information of the base layer is different from the information of the current layer, the current layer based on the additional information for deriving the information of the current layer and the information derived from the base layer. Image information decoding method characterized in that to derive the information.
Applications Claiming Priority (10)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US39295010P | 2010-10-14 | 2010-10-14 | |
US61/392,950 | 2010-10-14 | ||
US40702710P | 2010-10-27 | 2010-10-27 | |
US61/407,027 | 2010-10-27 | ||
US41490510P | 2010-11-18 | 2010-11-18 | |
US61/414,905 | 2010-11-18 | ||
US41726410P | 2010-11-25 | 2010-11-25 | |
US61/417,264 | 2010-11-25 | ||
US42073410P | 2010-12-07 | 2010-12-07 | |
US61/420,734 | 2010-12-07 |
Publications (2)
Publication Number | Publication Date |
---|---|
WO2012050301A2 true WO2012050301A2 (en) | 2012-04-19 |
WO2012050301A3 WO2012050301A3 (en) | 2012-06-07 |
Family
ID=45938762
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/KR2011/006538 WO2012050301A2 (en) | 2010-10-14 | 2011-09-02 | Method for encoding and decoding image and device using same |
Country Status (1)
Country | Link |
---|---|
WO (1) | WO2012050301A2 (en) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014092434A2 (en) * | 2012-12-10 | 2014-06-19 | 한국전자통신연구원 | Video encoding method, video decoding method, and device using same |
WO2014189345A1 (en) * | 2013-05-24 | 2014-11-27 | 주식회사 케이티 | Method for inducing motion information in multilayer structure and apparatus using same |
EP2842322A1 (en) * | 2012-04-24 | 2015-03-04 | Telefonaktiebolaget LM Ericsson (Publ) | Encoding and deriving parameters for coded multi-layer video sequences |
US10250902B2 (en) | 2013-05-24 | 2019-04-02 | Kt Corporation | Method for inducing motion information in multilayer structure and apparatus using same |
CN114258674A (en) * | 2019-07-19 | 2022-03-29 | Lg 电子株式会社 | Image encoding/decoding method and apparatus using IBC, and method of transmitting bitstream |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5841477A (en) * | 1995-12-29 | 1998-11-24 | Daewoo Electronics Co., Ltd. | Method for rectifying channel errors in an image signal transmitted from a block-based encoder |
KR20060012440A (en) * | 2004-08-03 | 2006-02-08 | 학교법인 대양학원 | Direct mode motion prediction method and apparatus for multi-view video |
KR20070110636A (en) * | 2006-05-15 | 2007-11-20 | 경희대학교 산학협력단 | Method for predicting a image information disparity value and encoding/decoding method and apparatus of multi-view video using the image information disparity value prediction method |
-
2011
- 2011-09-02 WO PCT/KR2011/006538 patent/WO2012050301A2/en active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5841477A (en) * | 1995-12-29 | 1998-11-24 | Daewoo Electronics Co., Ltd. | Method for rectifying channel errors in an image signal transmitted from a block-based encoder |
KR20060012440A (en) * | 2004-08-03 | 2006-02-08 | 학교법인 대양학원 | Direct mode motion prediction method and apparatus for multi-view video |
KR20070110636A (en) * | 2006-05-15 | 2007-11-20 | 경희대학교 산학협력단 | Method for predicting a image information disparity value and encoding/decoding method and apparatus of multi-view video using the image information disparity value prediction method |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2842322A1 (en) * | 2012-04-24 | 2015-03-04 | Telefonaktiebolaget LM Ericsson (Publ) | Encoding and deriving parameters for coded multi-layer video sequences |
WO2014092434A2 (en) * | 2012-12-10 | 2014-06-19 | 한국전자통신연구원 | Video encoding method, video decoding method, and device using same |
WO2014092434A3 (en) * | 2012-12-10 | 2014-10-23 | 한국전자통신연구원 | Video encoding method, video decoding method, and device using same |
WO2014189345A1 (en) * | 2013-05-24 | 2014-11-27 | 주식회사 케이티 | Method for inducing motion information in multilayer structure and apparatus using same |
US10250902B2 (en) | 2013-05-24 | 2019-04-02 | Kt Corporation | Method for inducing motion information in multilayer structure and apparatus using same |
CN114258674A (en) * | 2019-07-19 | 2022-03-29 | Lg 电子株式会社 | Image encoding/decoding method and apparatus using IBC, and method of transmitting bitstream |
Also Published As
Publication number | Publication date |
---|---|
WO2012050301A3 (en) | 2012-06-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11616989B2 (en) | Entropy decoding method, and decoding apparatus using same | |
KR102313195B1 (en) | Methods And Apparatuses For Encoding and Decoding Quantization marix | |
DK3020198T3 (en) | PALETTE PREVIEW IN PALET-BASED VIDEO CODING | |
US9451256B2 (en) | Reusing parameter sets for video coding | |
KR101616667B1 (en) | Video decoding device, video decoding method, and recording medium | |
KR102290091B1 (en) | Method and apparatus for video encoding/decoding based on multi-layer | |
CN108055538B (en) | Video encoding apparatus and video encoding method | |
US20150312571A1 (en) | Method and device for encoding/ decoding image supporting plurality of layers | |
JP7323099B2 (en) | Signaling DPB parameters for multi-layer video bitstreams | |
US20240137546A1 (en) | Coding enhancement in cross-component sample adaptive offset | |
WO2012050301A2 (en) | Method for encoding and decoding image and device using same | |
KR101553514B1 (en) | Image decoding method and apparatus using same | |
US20240007652A1 (en) | Coding enhancement in cross-component sample adaptive offset | |
US20230319315A1 (en) | Coding enhancement in cross-component sample adaptive offset | |
US20230336785A1 (en) | Coding enhancement in cross-component sample adaptive offset | |
KR102602633B1 (en) | Method and apparatus for image encoding/decoding |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 11832688 Country of ref document: EP Kind code of ref document: A2 |
|
NENP | Non-entry into the national phase in: |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 11832688 Country of ref document: EP Kind code of ref document: A2 |