WO2020084929A1 - 映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体 - Google Patents

映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体 Download PDF

Info

Publication number
WO2020084929A1
WO2020084929A1 PCT/JP2019/035171 JP2019035171W WO2020084929A1 WO 2020084929 A1 WO2020084929 A1 WO 2020084929A1 JP 2019035171 W JP2019035171 W JP 2019035171W WO 2020084929 A1 WO2020084929 A1 WO 2020084929A1
Authority
WO
WIPO (PCT)
Prior art keywords
value
parameter
deblocking
candidate
quantization parameter
Prior art date
Application number
PCT/JP2019/035171
Other languages
English (en)
French (fr)
Inventor
慶一 蝶野
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Publication of WO2020084929A1 publication Critical patent/WO2020084929A1/ja

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Definitions

  • the present invention relates to a video encoding or decoding device, a video encoding or decoding method, a program, and a recording medium.
  • Deblocking filters that reduce block noise caused by quantization noise are used, for example, in video encoding devices and video decoding devices (see, for example, Patent Document 1).
  • An object of the present invention is to provide a video encoding or decoding device, a video encoding or decoding method, a program, and a recording medium that can appropriately reduce block noise.
  • a video encoding or decoding apparatus uses a lookup table indicating a correspondence relationship between a candidate value related to a quantization parameter and a candidate value of a deblocking parameter, to quantize a block boundary in an image.
  • the lookup table includes a determination unit that determines a deblocking parameter corresponding to a value related to the conversion parameter, and a processing unit that performs a filtering process related to the block boundary using the deblocking parameter, and the lookup table is defined by a predetermined candidate value. Also includes a candidate range for the quantization parameter including a large candidate value and a candidate range for the deblocking parameter corresponding to the candidate range for the quantization parameter.
  • a video encoding or decoding method uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to quantize a block boundary in an image. Determining a deblocking parameter corresponding to a value related to the conversion parameter, and performing a filtering process related to the block boundary using the deblocking parameter, wherein the lookup table is larger than a predetermined candidate value. It includes a candidate range for the quantization parameter including the candidate value and a candidate range for the deblocking parameter corresponding to the candidate range for the quantization parameter.
  • a program uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to determine a value for a quantization parameter at a block boundary in an image. Determining a corresponding deblocking parameter and performing a filtering process on the block boundary using the deblocking parameter, wherein the look-up table includes a quantum including a candidate value larger than a predetermined candidate value.
  • a computer is caused to execute a video encoding or decoding process including a candidate value range for the quantization parameter and a candidate value range for the deblocking parameter corresponding to the candidate value range for the quantization parameter.
  • a recording medium uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to determine a value for a quantization parameter at a block boundary in an image. Determining a deblocking parameter corresponding to, and performing a filtering process on the block boundary using the deblocking parameter, the lookup table including a candidate value larger than a predetermined candidate value. It is readable by a computer that records a program for causing a computer to perform a video encoding or decoding process, including a candidate range of quantization parameters and a candidate range of deblocking parameters corresponding to the candidate range of quantization parameters. It is a non-transitory recording medium
  • a video encoding or decoding apparatus uses a lookup table indicating a correspondence relationship between a candidate value related to a quantization parameter and a candidate value of a deblocking parameter, to quantize a block boundary in an image.
  • Determination unit that determines a deblocking parameter corresponding to a value related to the quantization parameter, an acquisition unit that acquires an offset value of the value related to the quantization parameter of the block boundary, and the quantum of the block boundary based on the offset value.
  • a correction unit that corrects the deblocking parameter corresponding to a value related to the conversion parameter, and a filter processing unit that performs a filter process related to the block boundary using the corrected deblocking parameter, and is based on the offset value. Correction width of the deblocking parameter , Which is the de-blocking parameter value corresponding to the fluctuation by the quantization parameter corresponding to each element in the scaling list applied to the block boundary.
  • a video encoding or decoding method uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to quantize a block boundary in an image. Determining a deblocking parameter corresponding to a value related to the quantization parameter, obtaining an offset value of the value related to the quantization parameter at the block boundary, and based on the offset value, the quantization parameter at the block boundary. Compensating the deblocking parameter corresponding to the value of the deblocking parameter, and performing a filtering process on the block boundary using the compensated deblocking parameter, the deblocking parameter of the deblocking parameter based on the offset value.
  • the correction width is the above block It is a value wherein according to the deblocking parameters that vary by the quantization parameter corresponding to each element in the scaling list applied to the field.
  • a program uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to determine a value for a quantization parameter at a block boundary in an image. Determining a corresponding deblocking parameter, obtaining an offset value of a value for the quantization parameter of the block boundary, and corresponding to a value for the quantization parameter of the block boundary based on the offset value.
  • a recording medium uses a lookup table indicating a correspondence relationship between a candidate value for a quantization parameter and a candidate value for a deblocking parameter to determine a value for a quantization parameter at a block boundary in an image. Determining a deblocking parameter corresponding to the block boundary, obtaining an offset value of a value related to the quantization parameter of the block boundary, and corresponding to a value related to the quantization parameter of the block boundary based on the offset value. Correcting the deblocking parameter to Performing a filtering process on the block boundary using the corrected deblocking parameter, wherein a correction width of the deblocking parameter based on the offset value is set in each scaling list applied to the block boundary.
  • FIG. 1 is an explanatory diagram showing an example of a schematic configuration of a filter device 100 according to the first embodiment.
  • FIG. 2 is a diagram showing a specific example of the scaling list.
  • FIG. 3A is a diagram showing a specific example of the first lookup table according to the comparative example.
  • FIG. 3B is a diagram showing a specific example of the first lookup table according to the first embodiment.
  • FIG. 4 is a diagram showing an example of specific numerical values of the first lookup table according to the comparative example and the first embodiment.
  • FIG. 5A is a diagram showing a specific example of the second lookup table according to the comparative example.
  • FIG. 5B is a diagram showing a specific example of the second lookup table according to the first embodiment.
  • FIG. 6 is a diagram showing an example of specific numerical values of the second lookup table according to the comparative example and the first embodiment.
  • FIG. 7 is a flowchart for explaining an example of the flow of processing performed by the filter device 100.
  • FIG. 8 is a block diagram showing a schematic configuration of the video encoding device 800.
  • FIG. 9 is a block diagram showing a schematic configuration of the video decoding device 900.
  • FIG. 10 is a block diagram showing a schematic configuration of an information processing system 1000 to which the filter device 100 is applied.
  • FIG. 11 is a block diagram showing an example of a schematic configuration of a video encoding device 1100 according to the second embodiment.
  • FIG. 12 is a block diagram showing an example of a schematic configuration of a video decoding device 1200 according to the second embodiment.
  • the purpose of this embodiment is to enable appropriate reduction of block noise.
  • quantization of block boundaries in an image is performed using a look-up table indicating a correspondence relationship between candidate values related to quantization parameters and candidate values for deblocking parameters.
  • the deblocking parameter corresponding to the value related to the parameter is determined, and the block boundary filtering process is performed using the deblocking parameter.
  • the lookup table includes a candidate range of the quantization parameter including a candidate value larger than a predetermined candidate value, and a deblocking parameter candidate range corresponding to the candidate range of the quantization parameter.
  • FIG. 1 is an explanatory diagram showing an example of a schematic configuration of a filter device 100 according to the first embodiment.
  • the filter device 100 includes a deblocking parameter processing unit 110 and a filter processing unit 120.
  • the deblocking parameter processing unit 110 also includes a determination unit 111, an acquisition unit 113, and a correction unit 115.
  • the filter device 100 having the above-described configuration performs filter processing on a block boundary in a dequantized reconstructed image performed in video encoding or decoding processing, and outputs the image subjected to the filter processing. Output as an image.
  • the filter device 100 uses a lookup table indicating the correspondence between the candidate values for the quantization parameter and the candidate values for the deblocking parameter to determine the value for the quantization parameter at the block boundary in the reconstructed image. Determine the corresponding deblocking parameters. Then, the filter device (filter processing unit 120) performs the filter processing on the block boundary using the deblocking parameter.
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • the lookup table includes the candidate range of the deblocking parameter corresponding to the candidate value larger than the predetermined candidate value (for example, the predetermined upper limit candidate value), It becomes possible to adjust the deblocking parameter appropriately. More specifically, for example, the following advantages over the case of expanding the deblocking parameter candidate range so as to correspond to both the lower limit value side of the quantization parameter and the predetermined upper limit candidate value side are provided. is there. That is, it is possible to appropriately perform the filter processing while suppressing an increase in the data capacity of the lookup table.
  • Quantization parameter is a parameter for expressing the size of the quantization step which shows the divisor at the time of quantization.
  • the quantization process for obtaining the quantization coefficient qij of the orthogonal transform coefficient cij corresponding to the frequency component (i, j) is calculated according to the following Expressions 1 to 3.
  • qij Int [cij / Qstep] (Equation 1)
  • Qstep (m ij ⁇ 2 qbit ) / (Qscale (qP% 6))
  • Int [] is a function that converts an input into an integer value.
  • Qscale is a quantization step coefficient.
  • m ij is a quantization weighting coefficient.
  • qP% 6 is a remainder obtained by dividing qP by 6.
  • log 2 N is the base 2 logarithm of N.
  • BitDepth is the pixel bit precision of the signal to be processed. N indicates the size of orthogonal transform.
  • the quantization process is performed so that the quantization step is doubled every time the quantization parameter is increased by 6.
  • quantization weighting for each frequency component may be used.
  • FIG. 2 is a diagram showing a specific example of the scaling list. As shown in FIG. 2, the candidate range of the quantization weighting coefficient corresponding to each element in the scaling list applied to the block boundary is 1 to 255.
  • the relationship between the quantization parameter Qp and the quantization step size Qstep (i, j, Qp) can be simplified and expressed as follows.
  • the quantization step size corresponding to the quantization parameter may change from 1/16 times to 16 times according to the weighting coefficient of each element in the scaling list.
  • the average value of the quantization parameters of the target region eg, the adjacent block of the above-mentioned block boundary
  • the lookup table indicates a correspondence relationship between the candidate value of the average value of the quantization parameter of the target area and the candidate value of the deblocking parameter.
  • the filter device 100 determines the average value of the quantization parameter of the target area, and refers to the lookup table to determine the deblocking parameter corresponding to the average value of the quantization parameter. To do.
  • the value related to the quantization parameter will be described below on the assumption that it corresponds to the average value of the quantization parameter of the target region, but the present invention is not limited to this assumption.
  • the value regarding the quantization parameter for example, an intermediate value, a minimum value, or a maximum value of the quantization parameter of the target region may be used.
  • the filtering process on the block boundary is performed on the prediction image at the block boundary based on the analysis results such as the prediction mode, the motion vector, the presence / absence of the transform coefficient, and the pixel variation amount. This is a process for alleviating a block-like distortion caused by the shift and the quantization (quantization noise) of the transform coefficient.
  • the filtering process on the block boundary is performed by, for example, HEVC (High-Efficiency Video Coding) / H. This corresponds to the deblocking filter process defined by H.265, but is not limited to this.
  • the quantization noise is determined by the quantization step
  • the characteristics of the filter processing (ease, strength, etc.) are adjusted in proportion to the quantization step.
  • the deblocking parameter is specifically a parameter for adjusting the characteristics of the filter processing regarding the block boundary. Further, as described below, the deblocking parameter includes the following two types of parameters, for example.
  • the deblocking parameter includes a first parameter ⁇ for adjusting how easily the filtering process is performed on the block boundary.
  • the first parameter ⁇ is HEVC (High-Efficiency Video Coding) / H. It may correspond to the deblocking parameter ⁇ defined in H.265, but is not limited to this.
  • the lookup table stores a correspondence relationship between the candidate value of the average value Q AVE of the quantization parameters of the target region and the candidate value of the first parameter ⁇ .
  • a first look-up table indicating
  • FIG. 3A is a diagram showing a specific example of the first lookup table according to the comparative example.
  • FIG. 3B is a diagram showing a specific example of the first lookup table according to the first embodiment.
  • FIG. 4 is a diagram showing an example of specific numerical values of the first lookup table according to the comparative example and the first embodiment.
  • the candidate value of the average value Q AVE of the quantization parameter is 0 to 51, and the first parameter The candidate value of ⁇ monotonically increases according to the candidate value of the average value Q AVE .
  • the first lookup table according to the first embodiment includes the candidate value of the average value Q AVE of the quantization parameters that can be taken by the first lookup table according to the comparative example and the first parameter ⁇ .
  • the candidate value as shown in FIGS. 3B and 4, the following candidate value range is further included.
  • the first look-up table according to the first embodiment has a candidate range of the average value Q AVE of the quantization parameter that includes a candidate value larger than 51 (the predetermined candidate value) and a larger value range than 51. And a candidate value range of the first parameter ⁇ corresponding to the candidate value range of the average value Q AVE of the quantization parameter including the candidate value.
  • the candidate range of the average value Q AVE of the quantization parameter including the candidate value larger than 51 includes the candidate value 1 to 12 larger than 51 (52 ⁇ Q AVE ⁇ 63).
  • the upper limit of the ease with which the deblocking filter is applied is increased.
  • the value is four times higher than that of the first lookup table according to the comparative example.
  • the deblocking parameter candidate range is set so as to correspond to both the lower limit value side of the quantization parameter and the predetermined upper limit candidate value side.
  • the deblocking parameter includes a second parameter tc for adjusting the strength of the filtering process on the block boundary.
  • the second parameter tc is HEVC (High-Efficiency Video Coding) / H. It may correspond to the deblocking parameter tc defined in H.265, but is not limited to this.
  • the lookup table stores the candidate value of the average value Q AVE of the quantization parameters of the target area and the candidate value of the second parameter tc. It includes a second look-up table showing the correspondence.
  • FIG. 5A is a diagram showing a specific example of the second lookup table according to the comparative example.
  • FIG. 5B is a diagram showing a specific example of the second lookup table according to the first embodiment.
  • FIG. 6 is a diagram showing an example of specific numerical values of the second lookup table according to the comparative example and the first embodiment.
  • the candidate value of the average value Q AVE of the quantization parameter is 0 to 53, and the second parameter The candidate value of tc monotonically increases according to the candidate value of the average value Q AVE .
  • the following candidate value range is further included as shown in FIGS.
  • the second look-up table has a candidate value range of the average value Q AVE of the quantization parameter that includes a candidate value larger than 53 (the predetermined candidate value) and a larger value range than 53. And a candidate range of the second parameter ⁇ corresponding to the candidate range of the average value Q AVE of the quantization parameters including candidate values.
  • the candidate range of the average value Q AVE of the quantization parameter including the candidate value larger than 53 includes the candidate value 1 to 12 larger than 53 (54 ⁇ Q AVE ⁇ 65).
  • the second lookup table according to the first embodiment by expanding the candidate value of the average value Q AVE of the quantization parameter to 65, the upper limit value of the strength of the deblocking filter is increased. , 4 times higher than the second lookup table according to the comparative example.
  • the deblocking parameter candidate range is set so as to correspond to both the lower limit value side of the quantization parameter and the predetermined upper limit candidate value side.
  • the filter device 100 may correct the deblocking parameter determined by the determining unit 111 based on the offset value as described below.
  • the filter device 100 acquires the offset value of the average value of the quantization parameter at the block boundary.
  • the filter device 100 corrects the deblocking parameter corresponding to the average value of the quantization parameter at the block boundary based on the offset value. Specifically, the filter device 100 (correction unit 115) adds the offset value to the average value of the quantization parameter at the block boundary, and uses the lookup table to deblock the parameter corresponding to the added value. Is determined as the corrected deblocking parameter. In this way, the offset value can be grasped as a value for correcting the deblocking parameter, that is, an offset value of the deblocking parameter.
  • the offset value is an offset value used to correct the first parameter ⁇ (hereinafter also referred to as a first offset value) and an offset value used to correct the second parameter tc (hereinafter , Also referred to as a second offset value).
  • the correction width of the deblocking parameter based on the offset value depends on the quantization parameter corresponding to each element in the scaling list applied to the block boundary, as described later. A value according to the varying deblocking parameter is used.
  • the quantization step may change from 1/16 times to 16 times as described above. Therefore, the value corresponding to the deblocking parameter also varies from 1/16 to 16 times depending on the quantization parameter corresponding to each element in the scaling list applied to the block boundary.
  • the range in which the offset value can be taken is ⁇ 24 to 24. preferable.
  • the correction range of the deblocking parameter becomes 1/16 times to 16 times.
  • the range of the value corresponding to the offset value is -12 to 12.
  • the correction range of the deblocking parameter is limited to 1/4 to 4 times.
  • the candidate range in the lookup table is expanded, and the range that the offset value can take is doubled as compared with the comparative example. It becomes possible to perform the deblocking filter processing more appropriately in consideration of possible values of the quantization parameter corresponding to each element in.
  • the filter device 100 may acquire the offset value by decoding the syntax element included in the bitstream.
  • the filter device 100 acquisition unit 113 doubles the syntax element decoded from the syntax element.
  • the value can be acquired as the offset value.
  • the syntax element beta_offset_div2 corresponding to the first offset value and the syntax element tc_offset_div2 corresponding to the second offset value are, for example, Is defined as beta_offset_div2 and tc_offset_div2 specify the default deblocking parameter offsets for ⁇ and tC (divided by 2) that are applied for pictures referring to the picture parameter set unless the default deblocking parameter offsets are overridden by the deblocking parameter offsets present in the slice header for pictures referring to the picture parameter set.
  • the values of beta_offset_div2 and tc_offset_div2 shall both be in the range of -12 to 12, inclusive.
  • the filter device 100 may acquire the offset value by determining the offset value according to the quantization parameter corresponding to each element in the scaling list.
  • the filter device 100 may acquire the offset value by determining the offset value according to the average value of the quantization parameter corresponding to each element in the scaling list.
  • each of the first offset value and the second offset value is a syntax element obtained by decoding a bitstream and an average value of quantization parameters corresponding to each element in the scaling list. And may be acquired based on both.
  • the first offset value beta_offset and the second offset value tc_offset are calculated according to the following equations 6 to 8.
  • beta_offset ((scalingListDataPresent)? tmp: 0) + (beta_offset_div2 ⁇ 1)
  • tc_offset ((scalingListDataPresent)? tmp: 0) + (tc_offset_div2 ⁇ 1)
  • tmp log2 (ave (ScliningListtData) / 16) / 6 (Equation 8)
  • scalingListDataPresent is a value indicating whether or not the data of the scaling list is present, and is “1” when the data of the scaling list is present, and is “0” otherwise.
  • scalingListDataPresent may be a value decoded from the syntax element of the sequence parameter or picture parameter included in the bitstream. ((ScalingListDataPresent)? Tmp: 0) indicates that when scalingListDataPresent is 1, it has a value of tmp, and when scalingListDataPresent is 0, it has a value of "0”.
  • “Beta_offset_div2” is a syntax element corresponding to a part of the first offset value, and can take a value of ⁇ 6 to 6, for example.
  • tc_offset_div2 is a syntax element corresponding to a part of the second offset value, and can take a value of ⁇ 6 to 6, for example.
  • is a left shift operator, which means to shift the value expressed in binary number to the left, and to double the value in decimal number expression.
  • ave (ScryingListtData) is a function that outputs the average value of the quantization parameter corresponding to each element in the scaling list.
  • a part of the offset value is explicitly acquired according to the syntax element, and the remaining part of the offset value is a quantization parameter corresponding to each element in the scaling list. It is possible to obtain implicitly according to the average value of. Further, according to Expressions 6 to 8 described above, unlike the specific example 1, the range of the syntax elements beta_offset_div2 and tc_offset_div2 is not expanded from ⁇ 6 to 6 to ⁇ 12 to 12, so the compression efficiency of the bitstream is reduced. There is an advantage that the decrease of
  • the first offset value and the second offset value are not limited to the average value of the quantization parameter corresponding to each element in the scaling list, and, for example, the quantization parameter corresponding to each element in the scaling list. May be obtained according to the median value of, or the average of the maximum value and the minimum value, or the like.
  • FIG. 7 is a flowchart for explaining an example of a process flow performed by the filter device 100.
  • step S701 the determination unit 111 determines the deblocking parameter corresponding to the average value of the quantization parameter at the block boundary using the lookup table. Then, it progresses to step S703.
  • step S703 the acquisition unit 113 acquires the offset value of the average value of the quantization parameter. Then, it progresses to step S705.
  • step S705 the correction unit 115 uses the lookup table to determine the deblocking parameter corresponding to the value obtained by adding the offset value to the average value of the quantization parameter as the corrected deblocking. Then, it progresses to step S707.
  • step S707 the filter processing unit 120 uses the corrected deblocking parameter to perform the filtering process on the block boundary, and ends the process illustrated in FIG. 7.
  • Video encoding device 800 The filter device 100 described above can be applied to, for example, a video encoding device 800 as shown in FIG.
  • FIG. 8 is a block diagram showing a schematic configuration of the video encoding device 800.
  • the video encoding device 800 includes a block division unit 801, a conversion / quantization unit 802, a variable length coding unit 803, an inverse quantization / inverse conversion unit 804, a deblocking filter 805, and a pixel application offset.
  • a unit 806, a buffer 807, an intra-screen prediction unit 808, and a motion compensation prediction unit 809 are provided.
  • the block division unit 801 divides the input image signal into blocks.
  • the conversion / quantization unit 802 frequency-converts the prediction error image obtained by subtracting the prediction image signal output from the intra-picture prediction unit 808 or the motion compensation prediction unit 809 from the input image signal, and the frequency-converted prediction error image (conversion Coefficient) is quantized.
  • the variable-length encoding unit 803 entropy-encodes the quantized transform quantized value and difference information of the block based on, for example, CABAC (Context-based Adaptive Binary Arithmetic Coding), and outputs it as a bitstream.
  • CABAC Context-based Adaptive Binary Arithmetic Coding
  • the inverse quantization / inverse transform unit 804 inversely quantizes the quantized block, and inverse frequency transforms the inversely quantized frequency transform coefficient.
  • the reconstructed image signal obtained by adding the predicted image signal to the prediction error image signal subjected to the inverse frequency conversion is supplied to the deblocking filter 805 and the intra-frame prediction unit 808.
  • the intra-screen prediction unit 808 performs intra-screen prediction processing on the reconstructed image signal and outputs it as the above-mentioned predicted image signal.
  • the deblocking filter 805 incorporates the filter device 100 described above and applies deblocking filter processing to the reconstructed image signal.
  • the pixel application offset unit 806 performs pixel application offset processing on the reconstructed image signal to which the deblocking filter processing has been applied, and supplies the processed reconstructed image signal to the buffer 807.
  • the motion compensation prediction unit 809 performs motion compensation prediction processing on the input image using the reconstructed image signal stored in the buffer 807, and outputs it as the above-described predicted image signal.
  • the video encoding device 800 that generates a bitstream by the above-described operation can appropriately perform the filter processing regarding the block boundary by the filter device 100 incorporated in the deblocking filter 805.
  • Video decoding device 900 The filter device 100 described above can be applied to, for example, a video decoding device 900 as shown in FIG.
  • FIG. 9 is a block diagram showing a schematic configuration of the video decoding device 900.
  • the video decoding device 900 includes a variable length decoding unit 901, an inverse quantization / inverse conversion unit 902, a deblocking filter 903, a pixel application offset unit 904, a buffer 905, an intra-screen prediction unit 906, and a motion.
  • the compensation prediction unit 907 is provided.
  • variable length decoding unit 901 entropy-decodes the codeword extracted from the bitstream based on, for example, CABAC.
  • the transform quantization value entropy-decoded by the variable length decoding unit 901 is supplied to the dequantization / inverse transformation unit 902. Further, the difference information and the like are supplied to the intra-screen prediction unit 906 and the motion compensation prediction unit 907.
  • the inverse quantization / inverse transformation unit 902 inversely quantizes the transformed quantized value in the quantization step. Further, the inverse quantization / inverse transform unit 902 inverse frequency transforms the dequantized frequency transform coefficient.
  • the reconstructed image signal in which the prediction image signal is added to the prediction error signal subjected to the inverse frequency conversion is supplied to the deblocking filter 903 and the intra-screen prediction unit 906.
  • the deblocking filter 903 incorporates the filter device 100 described above and applies deblocking filter processing to the reconstructed image signal.
  • the pixel application offset unit 904 performs pixel application offset processing on the reconstructed image signal to which the deblocking filter processing has been applied, and outputs the processed reconstructed image signal to the outside and supplies it to the buffer 905.
  • the in-screen prediction unit 906 performs in-screen prediction processing on the reconstructed image signal and outputs it as a predicted image signal. Further, the motion compensation prediction unit 907 uses the reconstructed image signal stored in the buffer 905 to perform motion compensation prediction processing on the input image, and outputs it as the above-described predicted image signal.
  • the video decoding device 900 that decodes a bitstream by the above-described operation can appropriately perform the filter processing regarding the block boundary by the filter device 100 incorporated in the deblocking filter 903.
  • Information processing system 1000 The filter device 100 described above may be realized by an information processing system 1000 as shown in FIG. 10, for example.
  • FIG. 10 is a block diagram showing a schematic configuration of an information processing system 1000 to which the filter device 100 is applied.
  • the information processing system 1000 includes a processor 1001, a program memory 1002, a storage medium 1003 for storing video data, and a storage medium 1004 for storing a bitstream.
  • the storage medium 1003 and the storage medium 1004 may be separate storage media or may be storage areas formed of the same storage medium.
  • a magnetic storage medium such as a hard disk can be used as the storage medium.
  • the information processing system 1000 can appropriately perform the filter processing on the block boundary by installing a computer program that realizes the function of the filter device 100 in the program memory 1002.
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value and a deblocking parameter candidate range that corresponds to the candidate range for the quantization parameter.
  • a deblocking parameter candidate range that corresponds to the candidate range for the quantization parameter.
  • the range that the offset value can take may be expanded. That is, the correction width of the deblocking parameter based on the offset value varies depending on the possible value of the quantization parameter corresponding to each element in the scaling list applied to the block boundary. May be enlarged so that
  • FIG. 11 is a block diagram showing an example of a schematic configuration of a video encoding device 1100 according to the second embodiment.
  • the video encoding device 1100 includes a determination unit 1110 and a filter processing unit 1120.
  • FIG. 12 is a block diagram showing an example of a schematic configuration of a video decoding device 1200 according to the second embodiment.
  • the video decoding device 1200 includes a determination unit 1210 and a filter processing unit 1220.
  • the video encoding device 1100 uses a look-up table showing a correspondence relationship between the candidate value related to the quantization parameter and the candidate value of the deblocking parameter to determine the block boundary of the image. Determine a deblocking parameter that corresponds to a value for the quantization parameter. Then, the video encoding device 1100 (filter processing unit 1120) uses the deblocking parameter to perform the filtering process on the block boundary.
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • the video encoding device 1100 may operate the filter device 100 according to the first embodiment.
  • the video decoding device 1200 uses a lookup table showing the correspondence between the candidate values for the quantization parameter and the candidate values for the deblocking parameter to determine the value for the quantization parameter at the block boundary in the image. Determine the corresponding deblocking parameters. Then, the video decoding device 1200 (filter processing unit 1220) performs the filtering process on the block boundary using the deblocking parameter.
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • the video decoding device 1200 may perform the operation of the filter device 100 according to the first embodiment.
  • the second embodiment has been described. According to the second embodiment, for example, it becomes possible to appropriately perform the filtering process on the block boundary.
  • the steps in the processing described in this specification do not necessarily have to be executed in time series in the order described in the sequence diagram.
  • the steps in the processing may be executed in an order different from the order described as the sequence diagram or may be executed in parallel.
  • some of the steps in the process may be deleted and additional steps may be added to the process.
  • a method may also be provided that includes processing of the components of the apparatus described herein (e.g., the determining unit, the obtaining unit, the correcting unit, and / or the filtering unit), and the processing of the above components may be performed by a processor.
  • a program may be provided for execution by the.
  • a non-transitory computer readable medium in which the program is recorded and which can be read by a computer may be provided.
  • such devices, modules, methods, programs, and computer-readable non-transitory recording media are also included in the present invention.
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value, and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • the deblocking parameter includes a first parameter for adjusting how easily the filtering process is performed on the block boundary
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than 51, and a candidate range for the first parameter that corresponds to the candidate range for the quantization parameter that includes a candidate value larger than 51.
  • the deblocking parameters include a second parameter for adjusting the strength of the filtering on the block boundaries
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value greater than 53, and a candidate range for the second parameter that corresponds to the candidate range for the quantization parameter greater than 53.
  • (Appendix 4) The video encoding or decoding device according to any one of appendices 1 to 3, wherein the candidate value range regarding the quantization parameter includes a candidate value that is 1 to 12 larger than the predetermined candidate value.
  • An acquisition unit that acquires an offset value of a value related to the quantization parameter at the block boundary, A correction unit that corrects the deblocking parameter corresponding to the value related to the quantization parameter of the block boundary based on the offset value,
  • the correction width of the deblocking parameter based on the offset value is a value according to the deblocking parameter that varies depending on the quantization parameter corresponding to each element in the scaling list applied to the block boundary, Appendix 1 to 5.
  • Appendix 7 The video encoding or decoding apparatus according to appendix 6, wherein the acquisition unit acquires the offset value by decoding a syntax element included in a bitstream.
  • Appendix 8 The video encoding or decoding device according to appendix 6, wherein the acquisition unit acquires the offset value by determining the offset value according to a quantization parameter corresponding to each element in the scaling list.
  • (Appendix 11) Determining the deblocking parameter corresponding to the value related to the quantization parameter of the block boundary in the image using a lookup table showing the correspondence between the candidate value related to the quantization parameter and the candidate value of the deblocking parameter, Filtering with respect to the block boundary using the deblocking parameter,
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value, and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • (Appendix 12) Determining the deblocking parameter corresponding to the value related to the quantization parameter of the block boundary in the image using a lookup table showing the correspondence between the candidate value related to the quantization parameter and the candidate value of the deblocking parameter, Filtering with respect to the block boundary using the deblocking parameter,
  • the lookup table includes a candidate range for a quantization parameter that includes a candidate value larger than a predetermined candidate value, and a candidate range for a deblocking parameter that corresponds to the candidate range for the quantization parameter.
  • a computer-readable non-transitory recording medium recording a program for causing a computer to execute a process.
  • the determination unit that determines the deblocking parameter corresponding to the value of the quantization parameter of the block boundary in the image,
  • An acquisition unit that acquires an offset value of a value related to the quantization parameter at the block boundary,
  • a correction unit that corrects the deblocking parameter corresponding to the value related to the quantization parameter at the block boundary based on the offset value;
  • a filter processing unit that performs a filter process on the block boundary using the corrected deblocking parameter,
  • the correction width of the deblocking parameter based on the offset value is a value according to the deblocking parameter that varies depending on the quantization parameter corresponding to each element in the scaling list applied to the block boundary, video encoding Or a decoding device.
  • (Appendix 14) Determining the deblocking parameter corresponding to the value related to the quantization parameter of the block boundary in the image using a lookup table showing the correspondence between the candidate value related to the quantization parameter and the candidate value of the deblocking parameter, Obtaining an offset value of a value for the quantization parameter at the block boundary, Correcting the deblocking parameter corresponding to a value for the quantization parameter at the block boundary based on the offset value; Performing filtering on the block boundaries using the corrected deblocking parameters, The correction width of the deblocking parameter based on the offset value is a value according to the deblocking parameter that varies depending on the quantization parameter corresponding to each element in the scaling list applied to the block boundary, video encoding Or a decryption method.
  • Filter Device 110 Deblocking Parameter Processing Unit 111, 1110, 1210 Determination Unit 113 Acquisition Unit 115 Correction Unit 120, 1120, 1220 Filter Processing Unit 800, 1100 Video Encoding Device 900, 1200 Video Decoding Device

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

【課題】適切にブロックノイズを低減することを可能にすること。 【解決手段】フィルタ装置100は、ルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部111と、上記デブロッキングパラメータを用いて上記ブロック境界に関するフィルタ処理を行うフィルタ処理部120と、を備え、上記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む。

Description

映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体
 本発明は、映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体に関する。
 例えば映像符号化装置や映像復号装置などにおいて、量子化雑音に起因するブロックノイズを低減するデブロッキングフィルタが用いられている(例えば、特許文献1を参照。)。
特開2018-026837号公報
 しかしながら、映像符号化又は復号処理においては、上述した特許文献1に記載された技術などと比べて、より適切にブロックノイズを低減することが望まれる。
 本発明の目的は、適切にブロックノイズを低減することを可能にする映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体を提供することにある。
 本発明の一つの態様によれば、映像符号化又は復号装置は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行う処理部と、を備え、前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域と、を含む。
 本発明の一つの態様によれば、映像符号化又は復号方法は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域と、を含む。
 本発明の一つの態様によれば、プログラムは、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させる。
 本発明の一つの態様によれば、記録媒体は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体である。
 本発明の一つの態様によれば、映像符号化又は復号装置は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得する取得部と、前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正する補正部と、前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うフィルタ処理部と、を備え、前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である。
 本発明の一つの態様によれば、映像符号化又は復号方法は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である。
 本発明の一つの態様によれば、プログラムは、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させる。
 本発明の一つの態様によれば、記録媒体は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
 前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体である。
 本発明の一つの態様によれば、適切にブロックノイズを低減することが可能になる。なお、本発明により、当該効果の代わりに、又は当該効果とともに、他の効果が奏されてもよい。
図1は、第1の実施形態に係るフィルタ装置100の概略的な構成の一例を示す説明図である。 図2は、スケーリングリストの具体例を示す図である。 図3(a)は、比較例に係る第1のルックアップテーブルの具体例を示す図である。また、図3(b)は、第1の実施形態に係る第1のルックアップテーブルの具体例を示す図である。 図4は、比較例及び第1の実施形態に係る第1のルックアップテーブルの具体的な数値の例を示す図である。 図5(a)は、比較例に係る第2のルックアップテーブルの具体例を示す図である。また、図5(b)は、第1の実施形態に係る第2のルックアップテーブルの具体例を示す図である。 図6は、比較例及び第1の実施形態に係る第2のルックアップテーブルの具体的な数値の例を示す図である。 図7は、フィルタ装置100により行われる処理の流れの例を説明するためのフローチャートである。 図8は、映像符号化装置800の概略的な構成を示すブロック図である。 図9は、映像復号装置900の概略的な構成を示すブロック図である。 図10は、フィルタ装置100が適用される情報処理システム1000の概略的な構成を示すブロック図である。 図11は、第2の実施形態に係る映像符号化装置1100の概略的な構成の例を示すブロック図である。 図12は、第2の実施形態に係る映像復号装置1200の概略的な構成の例を示すブロック図である。
 以下、添付の図面を参照して本発明の実施形態を詳細に説明する。なお、本明細書及び図面において、同様に説明されることが可能な要素については、同一の符号を付することにより重複説明が省略され得る。
 説明は、以下の順序で行われる。
 1.実施形態の概要
 2.第1の実施形態
  2.1.フィルタ装置100の構成
  2.2.技術的特徴
  2.3.適用例
  2.4.変形例
 3.第2の実施形態
  3.1.構成
  3.2.技術的特徴
 4.他の形態
 <<1.実施形態の概要>>
 まず、本発明の実施形態の概要を説明する。
 (1)技術的課題
 例えば映像符号化装置や映像復号装置などにおいて、量子化雑音に起因するブロックノイズを低減するデブロッキングフィルタが用いられている(例えば、特許文献1を参照。)。しかしながら、上述した特許文献1に記載された技術などと比べて、より適切にブロックノイズを低減することが望まれる。
 本実施形態の目的は、適切にブロックノイズを低減することを可能にすることにある。
 (2)技術的特徴
 本発明の一態様である実施形態では、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定し、上記デブロッキングパラメータを用いて上記ブロック境界に関するフィルタ処理を行う。ここで、上記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む。
 これにより、例えば、適切にブロックノイズを低減することが可能になる。なお、上述した技術的特徴は本発明の実施形態の具体的な一例であり、当然ながら、本発明の実施形態は上述した技術的特徴に限定されない。
 <<2.第1の実施形態>>
 図1~図10を参照して、本発明の第1の実施形態を説明する。
 <2.1.フィルタ装置100の構成>
 図1を参照して、第1の実施形態に係るフィルタ装置100の構成の例を説明する。図1は、第1の実施形態に係るフィルタ装置100の概略的な構成の一例を示す説明図である。図1を参照すると、フィルタ装置100は、デブロッキングパラメータ処理部110、及びフィルタ処理部120を含む。また、デブロッキングパラメータ処理部110は、決定部111、取得部113、及び補正部115を含む。
 以上のような構成を備えるフィルタ装置100は、例えば映像符号化又は復号処理において行われる逆量子化された再構築画像におけるブロック境界に対してフィルタ処理を行い、当該フィルタ処理を行った画像を出力画像として出力する。
 <2.2.技術的特徴>
 次に、第1の実施形態に係る技術的特徴を説明する。
 フィルタ装置100(決定部111)は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、上記再構築画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する。そして、フィルタ装置(フィルタ処理部120)は、デブロッキングパラメータを用いて上記ブロック境界に関するフィルタ処理を行う。
 上記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む。
 このようにして、フィルタ装置100によれば、上記所定の候補値(例えば所定の上限候補値)よりも大きな候補値に対応するデブロッキングパラメータの候補値域が上記ルックアップテーブルに含まれることにより、適切にデブロッキングパラメータを調整することが可能になる。より具体的には、例えば、量子化パラメータの下限値側と上記所定の上限候補値側との両方に対応するようにデブロッキングパラメータの候補値域を拡大する場合に比べて次のような利点がある。すなわち、ルックアップテーブルのデータ容量の増加を抑えながら適切にフィルタ処理を行うことが可能になる。
 (1)量子化パラメータ
 上記量子化パラメータは、量子化の際の除数を示す量子化ステップの大きさを表現するためのパラメータである。具体的に、周波数成分(i,j)に対応する直交変換係数cijの量子化係数qijを求める量子化処理は、次の式1~式3に従って計算される。
 qij=Int[cij/Qstep] ・・・ (式1)
 Qstep=(mij・2qbit)/(Qscale(qP%6)) ・・・ (式2)
 qbit=25+qP/BitDepth-logN ・・・ (式3)
 ここで、Int[]は入力を整数値化する関数である。Qscaleは量子化ステップ係数である。mijは量子化重み付け係数である。qP%6はqPを6で割った剰余である。logNは2を底とするNの対数である。BitDepthは処理対象信号の画素ビット精度である。Nは直交変換のサイズを示す。
 上述した式1~式3によれば、量子化パラメータが6増えるごとに、量子化ステップが2倍になるように量子化処理が行われる。
 -スケーリングリスト
 また、量子化処理では、周波数成分ごとの量子化重み付け(スケーリングリスト)が用いられる場合がある。図2は、スケーリングリストの具体例を示す図である。図2に示すように、上記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化重み付け係数の候補値域は、1~255である。
 たとえば、上述した式1~式3に基づけば、量子化パラメータQpと量子化ステップサイズQstep(i,j,Qp)との関係は次のようにして簡略化して表すことができる。
 まず、スケーリングリストのデータが存在しない場合には、例えば、上記式2のmijが16に固定されるため、量子化パラメータと量子化ステップとの関係は、次の式4のように表すことができる。
 qstep(i,j,Qp)=(16/16)×2QP/6 ・・・ (式4)
 一方、スケーリングリストのデータが存在する場合には、上記式2のmijが1~255の値を取り得るため、量子化パラメータと量子化ステップとの関係は、次の式5のように表すことができる。
 qstep(i,j,Qp)=(16/mij)×2QP/6 ・・・ (式5)
 つまり、スケーリングリストのデータが存在する場合、スケーリングリストにおける各要素の重み付け係数に応じて、量子化パラメータに対応する量子化ステップサイズが1/16倍から16倍にまで変動しうる。
 -量子化パラメータに関する値
 上記量子化パラメータに関する値は、具体的には、対象領域(例えば上記ブロック境界の隣接ブロックなど)の量子化パラメータの平均値が用いられる。すなわち、上記ルックアップテーブルは、上記対象領域の量子化パラメータの平均値の候補値と上記デブロッキングパラメータの候補値との対応関係を示す。また、フィルタ装置100(決定部111)は、上記対象領域の量子化パラメータの平均値を算出して、上記ルックアップテーブルを参照して当該量子化パラメータの平均値に対応するデブロッキングパラメータを決定する。
 本実施形態において、上記量子化パラメータに関する値は、上記対象領域の量子化パラメータの平均値に当たることを前提として以下の通り説明するが、この前提に限定されるものではない。例えば、上記量子化パラメータに関する値は、例えば上記対象領域の量子化パラメータの中間値、最小値、又は最大値などが用いられてもよい。
 (2)上記ブロック境界に関するフィルタ処理
 上記ブロック境界に関するフィルタ処理は、例えば、予測モード、動きベクトル、変換係数の有無、及び画素変動量などの解析結果に基づいて、上記ブロック境界での予測画像のずれ、及び変換係数の量子化(量子化雑音)に起因するブロック状の歪を緩和するための処理である。上記ブロック境界に関するフィルタ処理は、例えばHEVC(High-Efficiency Video Coding)/H.265に規定するデブロッキングフィルタ処理に相当するが、これに限定されるものではない。
 上述したように、量子化雑音が量子化ステップから決まるため、上記ブロック境界に関するフィルタ処理では、量子化ステップに比例してフィルタ処理の特性(かかりやすさ、強度など)が調整される。
 (2-1)デブロッキングパラメータ
 また、上記デブロッキングパラメータは、具体的には、上記ブロック境界に関するフィルタ処理の特性を調整するためのパラメータである。また、以下の通り、上記デブロッキングパラメータは、例えば次のような2種類のパラメータを含む。
 -第1のパラメータβ
 上記デブロッキングパラメータは、上記ブロック境界に関する上記フィルタ処理のかかりやすさを調整するための第1のパラメータβを含む。例えば、上記第1のパラメータβは、HEVC(High-Efficiency Video Coding)/H.265に規定されるデブロッキングパラメータであるβに相当しうるが、これに限定されるものではない。
 上記デブロッキングパラメータが上記第1のパラメータβを含む場合、上記ルックアップテーブルは、上記対象領域の量子化パラメータの平均値QAVEの候補値と上記第1のパラメータβの候補値との対応関係を示す第1のルックアップテーブルを含む。
 図3(a)は、比較例に係る第1のルックアップテーブルの具体例を示す図である。また、図3(b)は、第1の実施形態に係る第1のルックアップテーブルの具体例を示す図である。また、図4は、比較例及び第1の実施形態に係る第1のルックアップテーブルの具体的な数値の例を示す図である。
 まず、図3(a)及び図4に示すように、比較例に係る第1のルックアップテーブルにおいて、量子化パラメータの平均値QAVEの候補値は0~51であり、上記第1のパラメータβの候補値は、平均値QAVEの候補値に応じて単調増加する。
 一方、第1の実施形態に係る第1のルックアップテーブルは、上記比較例に係る第1のルックアップテーブルで取り得る量子化パラメータの平均値QAVEの候補値および上記第1のパラメータβの候補値に加えて、図3(b)及び図4に示すように、次のような候補値域を更に含む。
 すなわち、第1の実施形態に係る第1のルックアップテーブルは、51(上記所定の候補値)よりも大きな候補値を含む量子化パラメータの平均値QAVEの候補値域と、上記51よりも大きな候補値を含む上記量子化パラメータの平均値QAVEの上記候補値域に対応する上記第1のパラメータβの候補値域とを含む。
 具体的に、51よりも大きな候補値を含む量子化パラメータの平均値QAVEの候補値域は、51よりも1~12大きな候補値(52≦QAVE≦63)を含む。
 このようにして、第1の実施形態に係る第1のルックアップテーブルによれば、量子化パラメータの平均値QAVEの候補値を63まで拡大することにより、デブロッキングフィルタのかかりやすさの上限値が、上記比較例に係る第1のルックアップテーブルに比べて4倍高くなる。
 また、図3(a)、図3(b)、及び図4に示すように、量子化パラメータの平均値QAVEを下げる側(上記第1のパラメータβの下限値側)では、上記第1のパラメータβが0に収束するので、上記第1のパラメータβの候補値域を更に拡大する必要性が乏しいことが明らかである。
 したがって、第1の実施形態に係る第1のルックアップテーブルによれば、量子化パラメータの下限値側と上記所定の上限候補値側との両方に対応するように、デブロッキングパラメータの候補値域を拡大する場合に比べて次のような利点がある。すなわち、第1のルックアップテーブルのデータ容量の増加を抑えながら上記第1のパラメータβを適切に調整することが可能になる。
 -第2のパラメータtc
 上記デブロッキングパラメータは、上記ブロック境界に関する上記フィルタ処理の強度を調整するための第2のパラメータtcを含む。例えば、上記第2のパラメータtcは、HEVC(High-Efficiency Video Coding)/H.265に規定されるデブロッキングパラメータであるtcに相当しうるが、これに限定されるものではない。
 上記デブロッキングパラメータが上記第2のパラメータtcを含む場合には、上記ルックアップテーブルは、上記対象領域の量子化パラメータの平均値QAVEの候補値と上記第2のパラメータtcの候補値との対応関係を示す第2のルックアップテーブルを含む。
 図5(a)は、比較例に係る第2のルックアップテーブルの具体例を示す図である。また、図5(b)は、第1の実施形態に係る第2のルックアップテーブルの具体例を示す図である。また、図6は、比較例及び第1の実施形態に係る第2のルックアップテーブルの具体的な数値の例を示す図である。
 まず、図5(a)及び図6に示すように、比較例に係る第2のルックアップテーブルにおいて、量子化パラメータの平均値QAVEの候補値は0~53であり、上記第2のパラメータtcの候補値は、平均値QAVEの候補値に応じて単調増加する。
 一方、第1の実施形態に係る上記第2のルックアップテーブルは、上記比較例に係る第2のルックアップテーブルで取り得る量子化パラメータの平均値QAVEの候補値および上記第2のパラメータtcの候補値に加えて、図5(b)及び図6に示すように次のような候補値域を更に含む。
 すなわち、第1の実施形態に係る第2のルックアップテーブルは、53(上記所定の候補値)よりも大きな候補値を含む量子化パラメータの平均値QAVEの候補値域と、上記53よりも大きな候補値を含む上記量子化パラメータの平均値QAVEの上記候補値域に対応する上記第2のパラメータβの候補値域とを含む。
 具体的に、53よりも大きな候補値を含む量子化パラメータの平均値QAVEの候補値域は、53よりも1~12大きな候補値(54≦QAVE≦65)を含む。
 このようにして、第1の実施形態に係る第2のルックアップテーブルによれば、量子化パラメータの平均値QAVEの候補値を65まで拡大することにより、デブロッキングフィルタの強度の上限値が、上記比較例に係る上記第2のルックアップテーブルに比べて4倍高くなる。
 また、図5(a)、図5(b)、及び図6に示すように、量子化パラメータの平均値QAVEを下げる側(上記第2のパラメータtcの下限値側)では、上記第2のパラメータtcが0に収束するので、上記第2のパラメータtcの候補値域を拡大する必要性が乏しいことが明らかである。
 したがって、第1の実施形態に係る第2のルックアップテーブルによれば、量子化パラメータの下限値側と上記所定の上限候補値側との両方に対応するように、デブロッキングパラメータの候補値域を拡大する場合に比べて次のような利点がある。すなわち、第2のルックアップテーブルのデータ容量の増加を抑えながら上記第2のパラメータβを適切に調整することが可能になる。
 (2-2)オフセット値
 また、フィルタ装置100は、決定部111により決定された上記デブロッキングパラメータを下記のようなオフセット値に基づいて補正してもよい。
 この場合、フィルタ装置100(取得部113)は、上記ブロック境界の量子化パラメータの平均値のオフセット値を取得する。
 そして、フィルタ装置100(補正部115)は、上記オフセット値に基づいて、上記ブロック境界の量子化パラメータの平均値に対応するデブロッキングパラメータを補正する。具体的には、フィルタ装置100(補正部115)は、上記ブロック境界の量子化パラメータの平均値に上記オフセット値を加算し、上記ルックアップテーブルを用いて上記加算した値に対応するデブロッキングパラメータを、補正後のデブロッキングパラメータとして決定する。このようにして、上記オフセット値は、上記デブロッキングパラメータを補正するための値、すなわち、デブロッキングパラメータのオフセット値として捉えることができる。
 上記オフセット値は、上記第1のパラメータβを補正するために用いられるオフセット値(以下、第1のオフセット値とも呼ぶ)と、上記第2のパラメータtcを補正するために用いられるオフセット値(以下、第2のオフセット値とも呼ぶ)と、を含む。
 -デブロッキングパラメータの補正幅
 上記オフセット値に基づいた上記デブロッキングパラメータの補正幅は、具体的には後述するように、上記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動するデブロッキングパラメータに応じた値が用いられる。
 例えば、スケーリングリストのデータが存在する場合、上述したように量子化ステップが1/16倍から16倍にまで変動しうる。このため、上記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータにより、上記デブロッキングパラメータに応じた値も1/16倍から16倍まで変動する。
 また、上述したように、量子化パラメータが6増えるごとに量子化ステップが2倍になるような量子化処理が行われるため、上記オフセット値の取り得る範囲は、-24~24であることが好ましい。これにより、上記デブロッキングパラメータの補正範囲が1/16倍から16倍となる。
 例えば比較例として、例えばHEVC(High-Efficiency Video Coding)/H.265に規定するデブロッキングフィルタ処理では、上記オフセット値に相当する値の取り得る範囲が-12~12である。この場合は、上記デブロッキングパラメータの補正範囲が1/4倍から4倍に制限される。
 一方、第1の実施形態によれば、上述したように、上記ルックアップテーブルにおける候補値域が拡大するとともに、オフセット値の取り得る範囲も上記比較例に対して2倍拡大することにより、スケーリングリストにおける各要素に対応する量子化パラメータの取り得る値を考慮してデブロッキングフィルタ処理をより適切に行うことが可能になる。
 -オフセット値の取得
 (具体例1:明示的な取得)
 例えば、フィルタ装置100(取得部113)は、ビットストリームに含まれるシンタクス要素を解読することにより、上記オフセット値を取得してもよい。
 例えば、ビットストリームのスライスヘッダに上記オフセット値/2を特定するシンタクス要素が含まれている場合には、フィルタ装置100(取得部113)は、当該シンタクス要素から解読されるシンタクス要素を2倍した値を、上記オフセット値として取得することができる。
 上述したように上記オフセット値の取り得る範囲が-24~24である場合、上記第1のオフセット値に対応するシンタクス要素beta_offset_div2と、上記第2のオフセット値に対応するシンタクス要素tc_offset_div2は、例えば以下のように定義される。
 beta_offset_div2 and tc_offset_div2 specify the default deblocking parameter offsets for β and tC (divided by 2) that are applied for pictures referring to the picture parameter set unless the default deblocking parameter offsets are overridden by the deblocking parameter offsets present in the slice header for pictures referring to the picture parameter set. The values of beta_offset_div2 and tc_offset_div2 shall both be in the range of -12 to 12, inclusive.
 (具体例2:暗黙的な取得)
 代替的に、フィルタ装置100(取得部113)は、上記スケーリングリストにおける各要素に対応する量子化パラメータに応じて上記オフセット値を決定することにより、上記オフセット値を取得してもよい。
 例えば、フィルタ装置100(取得部113)は、上記スケーリングリストにおける各要素に対応する量子化パラメータの平均値に応じて上記オフセット値を決定することにより、上記オフセット値を取得してもよい。
 より具体的には、上記第1のオフセット値及び上記第2のオフセット値は、それぞれビットストリームを解読することにより得られるシンタクス要素と、上記スケーリングリストにおける各要素に対応する量子化パラメータの平均値との両方に基づいて取得されてもよい。
 この場合には、例えば下記の式6~式8に従って上記第1のオフセット値beta_offset及び上記第2のオフセット値tc_offsetが算出される。
 beta_offset=((scalingListDataPresent)?tmp:0)+(beta_offset_div2<<1) ・・・ (式6)
 tc_offset=((scalingListDataPresent)?tmp:0)+(tc_offset_div2<<1) ・・・ (式7)
 tmp=log2(ave(SclingListtData)/16)/6 ・・・ (式8)
 ここで、scalingListDataPresentは、スケーリングリストのデータが存在するか否かを示す値であって、スケーリングリストのデータが存在する場合には「1」であり、そうではない場合には「0」を示す。例えば、scalingListDataPresentは、ビットストリームに含まれるシーケンスパラメータやピクチャパラメータのシンタクス要素から解読される値であってもよい。
 ((scalingListDataPresent)?tmp:0)は、scalingListDataPresentが1のときはtmpの値となり、scalingListDataPresentが0のときは「0」の値となることを表す。
 「beta_offset_div2」は、上記第1のオフセット値の一部分に対応するシンタクス要素であって、例えば-6~6の値を取り得る。また、「tc_offset_div2」は、上記第2のオフセット値の一部分に対応するシンタクス要素であって、例えば-6~6の値を取り得る。
 「<<」は、左シフト演算子であり、2進数表現された値を左シフトすること、10進数表現では値を2倍にすることである。
 ave(SclingListtData)は、スケーリングリスト内の各要素に対応する量子化パラメータの平均値を出力する関数である。
 上述した式6~式8によれば、例えば、上記オフセット値の一部分をシンタクス要素に応じて明示的に取得し、上記オフセット値の残りの部分を上記スケーリングリストにおける各要素に対応する量子化パラメータの平均値に応じて暗黙的に取得することが可能になる。また、上述した式6~式8によれば、上記具体例1のように、シンタクス要素beta_offset_div2とtc_offset_div2の範囲を-6~6から-12~12に拡大することないため、ビットストリームの圧縮効率の低下も抑制できるという利点がある。
 なお、上記第1のオフセット値及び上記第2のオフセット値は、上記スケーリングリストにおける各要素に対応する量子化パラメータの平均値に限らず、例えば、上記スケーリングリストにおける各要素に対応する量子化パラメータの中央値、又は最大値と最小値との平均などに応じて取得されてもよい。
 (3)フィルタ装置100により行われる処理の流れ
 図7は、フィルタ装置100により行われる処理の流れの例を説明するためのフローチャートである。
 ステップS701において、決定部111は、上記ルックアップテーブルを用いて上記ブロック境界の量子化パラメータの平均値に対応する上記デブロッキングパラメータを決定する。続いて、ステップS703に進む。
 ステップS703において、取得部113は、上記量子化パラメータの平均値のオフセット値を取得する。続いて、ステップS705に進む。
 ステップS705において、補正部115は、上記ルックアップテーブルを用いて、上記量子化パラメータの平均値に上記オフセット値を加えた値に対応する上記デブロッキングパラメータを、補正後のデブロッキングとして決定する。続いて、ステップS707に進む。
 ステップS707では、フィルタ処理部120は、上記補正後のデブロッキングパラメータを用いて上記ブロック境界に関する上記フィルタ処理を行い、図7に示す処理を終了する。
 <2.3.適用例>
 (1)映像符号化装置800
 上述したフィルタ装置100は、例えば、図8に示すような映像符号化装置800に適用することができる。
 図8は、映像符号化装置800の概略的な構成を示すブロック図である。図8に示すように、映像符号化装置800は、ブロック分割部801、変換/量子化部802、可変長符号化部803、逆量子化/逆変換部804、デブロッキングフィルタ805、画素適用オフセット部806、バッファ807、画面内予測部808、及び動き補償予測部809を備える。
 ブロック分割部801は、入力画像信号をブロック単位に分割する。変換/量子化部802は、入力画像信号から、画面内予測部808又は動き補償予測部809から出力される予測画像信号を減じた予測誤差画像を周波数変換し、周波数変換した予測誤差画像(変換係数)を量子化する。可変長符号化部803は、量子化されたブロックの変換量子化値および差分情報などを、例えばCABAC(Context-based Adaptive Binary Arithmetic Coding)に基づいてエントロピー符号化し、ビットストリームとして出力する。
 また、逆量子化/逆変換部804は、量子化されたブロックを逆量子化し、逆量子化された周波数変換係数を逆周波数変換する。逆周波数変換された予測誤差画像信号に予測画像信号が加えられた再構築画像信号は、デブロッキングフィルタ805及び画面内予測部808に供給される。
 画面内予測部808は、再構築画像信号に対して画面内予測処理を行い、上述した予測画像信号として出力する。
 デブロッキングフィルタ805は、上述したフィルタ装置100が組み込まれ、再構築画像信号に対してデブロッキングフィルタ処理を適用する。画素適用オフセット部806は、デブロッキングフィルタ処理が適用された再構築画像信号に対して画素適用オフセット処理を行い、処理後の再構築画像信号をバッファ807に供給する。
 動き補償予測部809は、バッファ807に格納された再構築画像信号を用いて、入力画像に対して動き補償予測処理を行い、上述した予測画像信号として出力する。
 上述した動作によってビットストリームを生成する映像符号化装置800は、デブロッキングフィルタ805に組み込まれたフィルタ装置100により、上記ブロック境界に関するフィルタ処理を適切に行うことができる。
 (2)映像復号装置900
 上述したフィルタ装置100は、例えば、図9に示すような映像復号装置900に適用することができる。
 図9は、映像復号装置900の概略的な構成を示すブロック図である。図9に示すように、映像復号装置900は、可変長復号部901、逆量子化/逆変換部902、デブロッキングフィルタ903、画素適用オフセット部904、バッファ905、画面内予測部906、及び動き補償予測部907を備える。
 可変長復号部901は、ビットストリームから抽出される符号語を、例えばCABACに基づいてエントロピー復号する。可変長復号部901によりエントロピー復号された変換量子化値は、逆量子化/逆変換部902に供給される。また、差分情報などは画面内予測部906や動き補償予測部907に供給される。
 逆量子化/逆変換部902は、量子化ステップで変換量子化値を逆量子化する。さらに、逆量子化/逆変換部902は、逆量子化した周波数変換係数を逆周波数変換する。逆周波数変換された予測誤差信号に予測画像信号が加えられた再構築画像信号は、デブロッキングフィルタ903及び画面内予測部906に供給される。
 デブロッキングフィルタ903は、上述したフィルタ装置100が組み込まれ、再構築画像信号に対してデブロッキングフィルタ処理を適用する。画素適用オフセット部904は、デブロッキングフィルタ処理が適用された再構築画像信号に対して画素適用オフセット処理を行い、処理後の再構築画像信号を外部に出力するとともにバッファ905に供給する。
 画面内予測部906は、再構築画像信号に対して画面内予測処理を行い、予測画像信号として出力する。また、動き補償予測部907は、バッファ905に格納された再構築画像信号を用いて、入力画像に対して動き補償予測処理を行い、上述した予測画像信号として出力する。
 上述した動作によってビットストリームを復号する映像復号装置900は、デブロッキングフィルタ903に組み込まれたフィルタ装置100により、上記ブロック境界に関するフィルタ処理を適切に行うことができる。
 (3)情報処理システム1000
 上述したフィルタ装置100は、例えば図10に示すような情報処理システム1000により実現してもよい。
 図10は、フィルタ装置100が適用される情報処理システム1000の概略的な構成を示すブロック図である。
 情報処理システム1000は、図10に示すように、プロセッサ1001、プログラムメモリ1002、映像データを格納するための記憶媒体1003およびビットストリームを格納するための記憶媒体1004を備える。記憶媒体1003と記憶媒体1004とは、別個の記憶媒体であってもよいし、同一の記憶媒体からなる記憶領域であってもよい。記憶媒体として、ハードディスク等の磁気記憶媒体を用いることができる。
 情報処理システム1000は、フィルタ装置100の機能を実現するコンピュータプログラムをプログラムメモリ1002にインストールすることで、上記ブロック境界に関するフィルタ処理を適切に行うことができる。
 <2.4.変形例>
 本実施形態では、上記ルックアップテーブルが、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む場合に限定されない。例えば、上記オフセット値が取り得る範囲のみが拡大されてもよい。つまり、上記オフセット値に基づいた上記デブロッキングパラメータの補正幅が、上記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータの取り得る値によって変動する上記デブロッキングパラメータに応じた値となるように拡大されてもよい。
 <<3.第2の実施形態>>
 続いて、図11及び図12を参照して、本発明の第2の実施形態を説明する。上述した第1の実施形態は、具体的な実施形態であるが、第2の実施形態は、より一般化された実施形態である。
 <3.1.構成>
 図11は、第2の実施形態に係る映像符号化装置1100の概略的な構成の例を示すブロック図である。図11を参照すると、映像符号化装置1100は、決定部1110、及びフィルタ処理部1120を備える。
 図12は、第2の実施形態に係る映像復号装置1200の概略的な構成の例を示すブロック図である。図12を参照すると、映像復号装置1200は、決定部1210、及びフィルタ処理部1220を備える。
 <3.2.技術的特徴>
 次に、第2の実施形態の技術的特徴を説明する。
 第2の実施形態では、映像符号化装置1100(決定部1110)は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する。そして、映像符号化装置1100(フィルタ処理部1120)は、デブロッキングパラメータを用いて上記ブロック境界に関するフィルタ処理を行う。
 上記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む。
 例えば、映像符号化装置1100は、第1の実施形態に係るフィルタ装置100の動作を行ってもよい。
 また、映像復号装置1200(決定部1210)は、量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する。そして、映像復号装置1200(フィルタ処理部1220)は、デブロッキングパラメータを用いて上記ブロック境界に関するフィルタ処理を行う。
 上記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、上記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む。
 例えば、映像復号装置1200は、第1の実施形態に係るフィルタ装置100の動作を行ってもよい。
 以上、第2の実施形態を説明した。第2の実施形態によれば、例えば、適切に上記ブロック境界に関するフィルタ処理を行うことが可能になる。
 <<4.他の形態>>
 以上、本発明の実施形態を説明したが、本発明はこれらの実施形態に限定されるものではない。これらの実施形態は例示にすぎないということ、及び、本発明のスコープ及び精神から逸脱することなく様々な変形が可能であるということは、当業者に理解されるであろう。
 例えば、本明細書に記載されている処理におけるステップは、必ずしもシーケンス図に記載された順序に沿って時系列に実行されなくてよい。例えば、処理におけるステップは、シーケンス図として記載した順序と異なる順序で実行されても、並列的に実行されてもよい。また、処理におけるステップの一部が削除されてもよく、さらなるステップが処理に追加されてもよい。
 また、本明細書において説明した装置の構成要素(例えば、決定部、取得部、補正部、及び/又はフィルタ処理部)の処理を含む方法が提供されてもよく、上記構成要素の処理をプロセッサに実行させるためのプログラムが提供されてもよい。また、当該プログラムを記録したコンピュータに読み取り可能な非一時的記録媒体(Non-transitory computer readable medium)が提供されてもよい。当然ながら、このような装置、モジュール、方法、プログラム、及びコンピュータに読み取り可能な非一時的記録媒体も本発明に含まれる。
 上記実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。
(付記1)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、
 前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うフィルタ処理部と、を備え、
 前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号装置。
(付記2)
 前記デブロッキングパラメータは、前記ブロック境界に関する前記フィルタ処理のかかりやすさを調整するための第1のパラメータを含み、
 前記ルックアップテーブルは、51よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記51よりも大きな候補値を含む前記量子化パラメータに関する前記候補値域に対応する前記第1のパラメータの候補値域とを含む、付記1記載の映像符号化又は復号装置。
(付記3)
 前記デブロッキングパラメータは、前記ブロック境界に関する前記フィルタ処理の強度を調整するための第2のパラメータを含み、
 前記ルックアップテーブルは、53よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記53よりも大きな前記量子化パラメータに関する前記候補値域に対応する前記第2のパラメータの候補値域とを含む、付記1又は2記載の映像符号化又は復号装置。
(付記4)
 前記量子化パラメータに関する前記候補値域は、前記所定の候補値よりも1~12大きな候補値を含む、付記1乃至3のうち何れか1項記載の映像符号化又は復号装置。
(付記5)
 前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化重み付け係数の候補値域は1~255である、付記1乃至4のうち何れか1項記載の映像符号化又は復号装置。
(付記6)
 前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得する取得部と、
 前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正する補正部と、を更に備え、
 前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、付記1乃至5のうち何れか1項記載の映像符号化又は復号装置。
(付記7)
 前記取得部は、ビットストリームに含まれるシンタクス要素を解読することにより、前記オフセット値を取得する、付記6記載の映像符号化又は復号装置。
(付記8)
 前記取得部は、前記スケーリングリストにおける各要素に対応する量子化パラメータに応じて前記オフセット値を決定することにより、前記オフセット値を取得する、付記6記載の映像符号化又は復号装置。
(付記9)
 前記オフセット値の取り得る範囲は、-24~24である、付記6乃至8のうち何れか1項記載の映像符号化又は復号装置。
(付記10)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
 前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号方法。
(付記11)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
 前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させるためのプログラム。
(付記12)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
 前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体。
(付記13)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、
 前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得する取得部と、
 前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正する補正部と、
 前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うフィルタ処理部と、を備え、
 前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号装置。
(付記14)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
 前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
 前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
 前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号方法。
(付記15)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
 前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
 前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
 前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させるためのプログラム。
(付記16)
 量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
 前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
 前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
 前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
 前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体。
 この出願は、2018年10月23日に出願された日本出願特願2018-199028を基礎とする優先権を主張し、その開示の全てをここに取り込む。
 映像を符号化または復号するシステムにおいて、ブロック境界に関するフィルタ処理を適切に行うことが可能になる。
 100 フィルタ装置
 110 デブロッキングパラメータ処理部
 111、1110、1210 決定部
 113 取得部
 115 補正部
 120、1120、1220 フィルタ処理部
 800、1100 映像符号化装置
 900、1200 映像復号装置

 

Claims (16)

  1.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、
     前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うフィルタ処理部と、を備え、
     前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号装置。
  2.  前記デブロッキングパラメータは、前記ブロック境界に関する前記フィルタ処理のかかりやすさを調整するための第1のパラメータを含み、
     前記ルックアップテーブルは、51よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記51よりも大きな候補値を含む前記量子化パラメータに関する前記候補値域に対応する前記第1のパラメータの候補値域とを含む、請求項1記載の映像符号化又は復号装置。
  3.  前記デブロッキングパラメータは、前記ブロック境界に関する前記フィルタ処理の強度を調整するための第2のパラメータを含み、
     前記ルックアップテーブルは、53よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記53よりも大きな前記量子化パラメータに関する前記候補値域に対応する前記第2のパラメータの候補値域とを含む、請求項1又は2記載の映像符号化又は復号装置。
  4.  前記量子化パラメータに関する前記候補値域は、前記所定の候補値よりも1~12大きな候補値を含む、請求項1乃至3のうち何れか1項記載の映像符号化又は復号装置。
  5.  前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化重み付け係数の候補値域は1~255である、請求項1乃至4のうち何れか1項記載の映像符号化又は復号装置。
  6.  前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得する取得部と、
     前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正する補正部と、を更に備え、
     前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、請求項1乃至5のうち何れか1項記載の映像符号化又は復号装置。
  7.  前記取得部は、ビットストリームに含まれるシンタクス要素を解読することにより、前記オフセット値を取得する、請求項6記載の映像符号化又は復号装置。
  8.  前記取得部は、前記スケーリングリストにおける各要素に対応する量子化パラメータに応じて前記オフセット値を決定することにより、前記オフセット値を取得する、請求項6記載の映像符号化又は復号装置。
  9.  前記オフセット値の取り得る範囲は、-24~24である、請求項6乃至8のうち何れか1項記載の映像符号化又は復号装置。
  10.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
     前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号方法。
  11.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
     前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させるためのプログラム。
  12.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記デブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を含み、
     前記ルックアップテーブルは、所定の候補値よりも大きな候補値を含む量子化パラメータに関する候補値域と、前記量子化パラメータに関する候補値域に対応するデブロッキングパラメータの候補値域とを含む、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体。
  13.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定する決定部と、
     前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得する取得部と、
     前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正する補正部と、
     前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うフィルタ処理部と、を備え、
     前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号装置。
  14.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
     前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
     前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
     前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号方法。
  15.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
     前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
     前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
     前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させるためのプログラム。
  16.  量子化パラメータに関する候補値とデブロッキングパラメータの候補値との対応関係を示すルックアップテーブルを用いて、画像におけるブロック境界の量子化パラメータに関する値に対応するデブロッキングパラメータを決定することと、
     前記ブロック境界の前記量子化パラメータに関する値のオフセット値を取得することと、
     前記オフセット値に基づいて、前記ブロック境界の前記量子化パラメータに関する値に対応する前記デブロッキングパラメータを補正することと、
     前記補正されたデブロッキングパラメータを用いて前記ブロック境界に関するフィルタ処理を行うことと、を備え、
     前記オフセット値に基づいた前記デブロッキングパラメータの補正幅は、前記ブロック境界に適用されるスケーリングリストにおける各要素に対応する量子化パラメータによって変動する前記デブロッキングパラメータに応じた値である、映像符号化又は復号処理をコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な非一時的記録媒体。

     
PCT/JP2019/035171 2018-10-23 2019-09-06 映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体 WO2020084929A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-199028 2018-10-23
JP2018199028 2018-10-23

Publications (1)

Publication Number Publication Date
WO2020084929A1 true WO2020084929A1 (ja) 2020-04-30

Family

ID=70330982

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/035171 WO2020084929A1 (ja) 2018-10-23 2019-09-06 映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体

Country Status (1)

Country Link
WO (1) WO2020084929A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009050897A1 (ja) * 2007-10-19 2009-04-23 Panasonic Corporation 符号化レート変換装置、符号化レート変換方法および集積回路
JP2015516754A (ja) * 2012-04-16 2015-06-11 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像符号化/復号化方法及び装置
US20150249842A1 (en) * 2012-10-04 2015-09-03 Telefonaktiebolaget L M Ericsson (Publ) Hierarchical Deblocking Parameter Adaptation
JP2018026837A (ja) * 2012-04-06 2018-02-15 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009050897A1 (ja) * 2007-10-19 2009-04-23 Panasonic Corporation 符号化レート変換装置、符号化レート変換方法および集積回路
JP2018026837A (ja) * 2012-04-06 2018-02-15 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2015516754A (ja) * 2012-04-16 2015-06-11 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 映像符号化/復号化方法及び装置
US20150249842A1 (en) * 2012-10-04 2015-09-03 Telefonaktiebolaget L M Ericsson (Publ) Hierarchical Deblocking Parameter Adaptation

Similar Documents

Publication Publication Date Title
US11356665B2 (en) Method for determining color difference component quantization parameter and device using the method
US20200288127A1 (en) Sample adaptive offset control
US10373295B2 (en) Image processing apparatus and image processing method
US9282329B2 (en) Methods and devices for data compression using offset-based adaptive reconstruction levels
US9872019B2 (en) Method and device for deblocking-filtering, and method and device for encoding and decoding using same
US9813715B2 (en) Method, apparatus and system for encoding and decoding video data
KR101919394B1 (ko) 무손실 인트라 hevc 코딩을 위한 지수-골룸 이진화에 대한 파라미터 결정
CN110024387B (zh) 编码装置、解码装置、编码方法和解码方法
US20130259141A1 (en) Chroma slice-level qp offset and deblocking
WO2009133844A1 (ja) エッジを考慮したフィルタリング機能を備えた動画像符号化/復号化方法及び装置
DK2834980T3 (en) Sample adaptive filtering with offsets
US20130279569A1 (en) Binarization Scheme for Intra Prediction Residuals and Improved Intra Prediction in Lossless Coding in HEVC
JP5059728B2 (ja) 画像符号化装置及び方法
KR20090113103A (ko) 영상의 복호화 방법 및 장치
WO2014002446A1 (en) Coding method and decoding mehtod of a quantization matrix
KR102413038B1 (ko) 예측 화상 보정 장치, 화상 부호화 장치, 화상 복호 장치, 및 프로그램
WO2020084929A1 (ja) 映像符号化又は復号装置、映像符号化又は復号方法、プログラム、及び記録媒体
US20220201288A1 (en) Image encoding device, image encoding method, image decoding device, image decoding method, and non-transitory computer-readable storage medium
US11570433B2 (en) Image encoding apparatus, image encoding method, image decoding apparatus, image decoding method, and non-transitory computer-readable storage medium
US11924429B2 (en) Information processing device and information processing method for determination of optimum quantization coefficients
KR20220133321A (ko) 디블로킹 필터 제어 장치 및 프로그램
WO2013145174A1 (ja) 動画像符号化方法、動画像復号方法、動画像符号化装置及び動画像復号装置
JP7357481B2 (ja) デブロッキングフィルタ制御装置及びプログラム
CN114051727B (zh) 编码装置、解码装置和计算机可读存储介质
US20220201287A1 (en) Image encoding device, image encoding method, and program, image decoding device, image decoding method, and non-transitory computer-readable storage medium

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19874962

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19874962

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: JP