WO2012008130A1 - 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム - Google Patents

映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム Download PDF

Info

Publication number
WO2012008130A1
WO2012008130A1 PCT/JP2011/003927 JP2011003927W WO2012008130A1 WO 2012008130 A1 WO2012008130 A1 WO 2012008130A1 JP 2011003927 W JP2011003927 W JP 2011003927W WO 2012008130 A1 WO2012008130 A1 WO 2012008130A1
Authority
WO
WIPO (PCT)
Prior art keywords
bit length
pixel bit
data
decoding
entropy
Prior art date
Application number
PCT/JP2011/003927
Other languages
English (en)
French (fr)
Inventor
慶一 蝶野
裕三 仙田
純二 田治米
啓史 青木
健太 先崎
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to BR122020015660-0A priority Critical patent/BR122020015660B1/pt
Priority to KR1020147024227A priority patent/KR101538362B1/ko
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to BR122020015661-9A priority patent/BR122020015661B1/pt
Priority to BR122022001404-6A priority patent/BR122022001404B1/pt
Priority to KR1020147008017A priority patent/KR101513507B1/ko
Priority to BR122022001405-4A priority patent/BR122022001405B1/pt
Priority to EP11806465.8A priority patent/EP2595379B1/en
Priority to JP2012524445A priority patent/JP5807638B2/ja
Priority to KR1020127029824A priority patent/KR101435095B1/ko
Priority to US13/695,461 priority patent/US9210427B2/en
Priority to PL11806465T priority patent/PL2595379T3/pl
Priority to BR112013000579-3A priority patent/BR112013000579B1/pt
Priority to EP20194967.4A priority patent/EP3787286A1/en
Priority to CN201180034498.8A priority patent/CN103004191B/zh
Publication of WO2012008130A1 publication Critical patent/WO2012008130A1/ja
Priority to HK13109649.1A priority patent/HK1182563A1/zh
Priority to US14/931,305 priority patent/US9936212B2/en
Priority to US14/931,181 priority patent/US9532073B2/en
Priority to US14/931,271 priority patent/US9510011B2/en
Priority to US15/344,635 priority patent/US10097847B2/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13—Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/156—Availability of hardware or computational resources, e.g. encoding based on power-saving criteria
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Definitions

  • the present invention relates to a video encoding device and a video decoding device that use pixel bit length increase and non-compression encoding.
  • Non-Patent Document 2 There is an ISO / IEC 14496-10 Advanced Video Coding (AVC) standard encoding method described in Non-Patent Document 2 as a video encoding method for the purpose of transmitting and storing video information with high efficiency. Further, in Non-Patent Document 1, the accuracy of calculation for intra-frame prediction (intra prediction) and motion compensation prediction (inter-frame prediction) is increased by extending (increasing) the pixel bit length of an input image during video encoding. Thus, it has been proposed to improve the compression efficiency of video coding.
  • AVC ISO / IEC 14496-10 Advanced Video Coding
  • Patent Document 1 by switching between entropy encoding and non-compression encoding (PCM encoding) in a predetermined encoding unit, a certain processing time in the video encoding device or the video decoding device is guaranteed. It has been proposed.
  • FIG. 16 is a block diagram showing a video encoding device obtained by simply combining the technique described in Non-Patent Document 1 and the technique described in Patent Document 1.
  • the video encoding device shown in FIG. 16 is referred to as a general video encoding device.
  • 16 includes a pixel bit length increaser 101, a transform / quantizer 102, an entropy encoder 103, an inverse transform / inverse quantizer 104, a buffer 105, a predictor 106, and a PCM encoder. 107, a PCM decoder 108, a multiplexed data selector 109, a multiplexer 110, a switch 121, and a switch 122.
  • the video encoding apparatus shown in FIG. 16 divides a frame into blocks of 16 ⁇ 16 pixel size called MB (Macro Block), and encodes each MB in order from the upper left of the frame.
  • MB Micro Block
  • the MB is further divided into blocks of 4 ⁇ 4 pixel size, and each 4 ⁇ 4 block is encoded.
  • FIG. 17 is an explanatory diagram showing an example of block division when the spatial resolution of the frame is QCIF (Quarter Common Intermediate Format).
  • QCIF Quadrater Common Intermediate Format
  • the pixel bit length increaser 101 increases the pixel bit length of the input image divided into blocks based on the pixel bit length increase information set from the outside. If the pixel bit length of the input video is bit_depth_luma and the pixel bit length increase information (increasing pixel bit length) is incremented_bit_depth_luma, the pixel bit length increaser 101 shifts each pixel value of the input video left by incremented_bit_depth_luma bits. Therefore, the pixel bit length of the output data of the pixel bit length increaser 101 is bit_depth_luma + increased_bit_depth_luma bits.
  • the pixel bit length increased image output from the pixel bit length increaser 101 is input to the transformer / quantizer 102 after the prediction signal supplied from the predictor 106 is subtracted.
  • prediction signals There are two types of prediction signals: intra prediction signals and inter-frame prediction signals. Each prediction signal will be described.
  • the intra prediction signal is a prediction signal generated based on the image of the reconstructed picture having the same display time as the current picture stored in the buffer 105.
  • Intra_4 ⁇ 4 and Intra_8 ⁇ 8 are intra predictions of 4 ⁇ 4 block size and 8 ⁇ 8 block size, respectively.
  • circles ( ⁇ ) in the figure indicate reference pixels used for intra prediction, that is, pixels of a reconstructed picture having the same display time as the current picture.
  • Intra_4 ⁇ 4 intra prediction the reconstructed neighboring pixels are used as reference pixels as they are, and the prediction pixels are padded (extrapolated) in nine types of directions shown in FIG.
  • Intra_8 ⁇ 8 intra prediction pixels obtained by smoothing the peripheral pixels of the reconstructed picture using the low-pass filters (1/2, 1/4, 1/2) described below the right arrow in FIG. Is used as a reference pixel, and a prediction signal is formed by extrapolating the reference pixel in nine types of directions shown in FIG.
  • Intra — 16 ⁇ 16 is intra prediction of 16 ⁇ 16 block size.
  • the circle ( ⁇ ) in the figure is a reference pixel used for intra prediction, that is, a pixel of a reconstructed picture having the same display time as the current picture.
  • Intra_16 ⁇ 16 intra prediction the surrounding pixels of the reconstructed image are directly used as reference pixels, and the prediction pixels are extrapolated in four types of directions shown in FIG. 19B.
  • an MB encoded using an intra prediction signal is referred to as an intra MB.
  • the block size of intra prediction is called an intra prediction mode.
  • the extrapolation direction is referred to as an intra prediction direction.
  • the inter-frame prediction signal is a prediction signal generated from an image of a reconstructed picture having a display time different from that of the current picture stored in the buffer 105.
  • an MB encoded using an inter-frame prediction signal is referred to as an inter MB.
  • 16 ⁇ 16, 16 ⁇ 8, 8 ⁇ 16, 8 ⁇ 8, 8 ⁇ 4, 4 ⁇ 8, 4 ⁇ 4 can be selected as the inter MB block size.
  • FIG. 20 is an explanatory diagram illustrating an example of inter-frame prediction using a 16 ⁇ 16 block size as an example.
  • a motion vector MV (mv x , mv y ) illustrated in FIG. 20 is one of prediction parameters for inter-frame prediction indicating the amount of translation of the inter-frame prediction block (inter-frame prediction signal) of the reference picture with respect to the encoding target block.
  • AVC in order to identify the reference picture used for the inter-frame prediction of the encoding target block in addition to the inter-frame prediction direction indicating the direction of the reference picture of the inter-frame prediction signal with respect to the encoding target picture of the encoding target block.
  • the reference picture index is also a prediction parameter for inter-frame prediction. This is because in AVC, a plurality of reference pictures stored in the buffer 105 can be used for inter-frame prediction.
  • inter MB an MB encoded using an inter-frame prediction signal
  • inter prediction mode The block size for inter-frame prediction
  • inter prediction direction the direction of inter-frame prediction
  • a picture encoded only with an intra MB is called an I picture.
  • a picture coded including not only an intra MB but also an inter MB is called a P picture.
  • a picture that is encoded including inter MBs that use not only one reference picture but also two reference pictures at the same time for inter-frame prediction is called a B picture.
  • the reference picture direction of the inter-frame prediction signal with respect to the encoding target picture of the encoding target block is the forward prediction with respect to the past inter-frame prediction
  • the inter-frame prediction signal with respect to the encoding target picture of the encoding target block Inter-frame prediction in which the direction of the reference picture is the future is referred to as backward prediction, and inter-frame prediction including the past and future is referred to as bidirectional prediction.
  • the transform / quantizer 102 performs frequency conversion on the image with the pixel bit length increased (prediction error image) from which the prediction signal is reduced.
  • the quantized frequency transform coefficient is referred to as a transform quantization value.
  • the entropy encoder 103 entropy encodes the prediction parameter and the transform quantization value.
  • the prediction parameter is information related to MB prediction, such as the above-described intra MB / inter MB, intra prediction mode, intra prediction direction, inter MB block size, and motion vector.
  • the inverse transform / inverse quantizer 104 inverse quantizes the transform quantization value with a quantization step width corresponding to the pixel bit length increased_bit_depth_luma increased by the pixel bit length increaser 101. Further, the inverse transform / inverse quantizer 104 performs inverse frequency transform on the frequency transform coefficient obtained by inverse quantization. The reconstructed prediction error image subjected to the inverse frequency conversion is supplied with a prediction signal and supplied to the switch 122.
  • the multiplexed data selector 109 monitors the input data amount of a predetermined encoding unit (for example, macroblock) to the entropy encoder 103.
  • a predetermined encoding unit for example, macroblock
  • the multiplexed data selector 109 selects the output data of the entropy encoder 103.
  • the switch 121 is controlled.
  • the output data of the entropy encoder 103 is supplied to the multiplexer 110 via the switch 121.
  • the multiplexed data selector 109 controls the switch 122 so as to select the output data of the inverse transformer / quantizer 104.
  • the output data of the inverse transformer / quantizer 104 is supplied to the buffer 105 via the switch 122.
  • the multiplexed data selector 109 selects the switch 121 so as to select the output data of the PCM encoder 107 obtained by PCM encoding the output data of the pixel bit length increaser 101. To control. As a result, the output data of the PCM encoder 107 is supplied to the multiplexer 110 via the switch 121. Further, the multiplexed data selector 109 controls the switch 122 so as to select the output data of the PCM decoder 108 obtained by PCM decoding the output data of the PCM encoder 107. As a result, the output data of the PCM decoder 108 is supplied to the buffer 105 via the switch 122.
  • the buffer 105 stores the reconstructed image supplied via the switch 122.
  • a reconstructed image for one frame is called a reconstructed picture.
  • the multiplexer 110 multiplexes the pixel bit length increase information, the output data of the entropy encoder 103 and the output data of the PCM encoder 107 and outputs the result.
  • a general video encoding device Based on the above-described operation, a general video encoding device generates a bit stream.
  • the calculation accuracy of intra prediction and inter-frame prediction is improved by extending the pixel bit length, and a certain processing time is ensured for the video encoding device and the video decoding device. And both.
  • an object of the present invention is to suppress an increase in output data of PCM encoding in video encoding based on an increase in pixel bit length and PCM encoding.
  • a video encoding apparatus comprises a pixel bit length increasing means for increasing a pixel bit length of an input image based on pixel bit length increase information, a converting means for converting output data of the pixel bit length increasing means, and a converting means
  • Entropy encoding means for entropy encoding the output data, uncompressed encoding means for non-compression encoding of the input data, and multiplexing for selecting output data of either the entropy encoding means or the uncompressed encoding means
  • a data selection unit and a multiplexing unit that multiplexes the pixel bit length increase information into the bit stream, and the pixel bit lengths of the images corresponding to the output data of the entropy encoding unit and the non-compression encoding unit are different from each other It is characterized by that.
  • a video decoding apparatus includes a demultiplexing unit that demultiplexes a bitstream including at least pixel bit length increase information, an entropy decoding unit that entropy decodes conversion data of an image included in the bitstream, and entropy-decoded.
  • Inverse conversion means for inversely converting image conversion data
  • non-compression decoding means for non-compression decoding of uncompressed encoded data of an image included in a bitstream
  • decoding control means for controlling entropy decoding means and non-compression decoding means
  • the pixel bit lengths of the images corresponding to the input data of the entropy decoding means and the non-compression decoding means are different from each other.
  • the video encoding method converts data in which the pixel bit length of an input image is increased based on pixel bit length increase information, entropy encodes the converted data, uncompresses the input data, and generates entropy code.
  • Pixel data of the image corresponding to each of the entropy encoded data and the uncompressed encoded data by selecting either the encoded data or the uncompressed encoded data and multiplexing the pixel bit length increase information into the bitstream The length is different from each other.
  • the video decoding method demultiplexes a bitstream including at least pixel bit length increase information, entropy-decodes conversion data of an image included in the bitstream, inversely converts the conversion data of the entropy-decoded image,
  • the pixel bit length of the image corresponding to each of the converted data of the image included in the bit stream and the uncompressed encoded data of the image included in the bit stream by uncompressing the uncompressed encoded data of the image included in the bit stream Are different from each other.
  • a video encoding program includes a computer that converts data obtained by increasing the pixel bit length of an input image based on pixel bit length increase information, processing that entropy encodes the converted data, and input data.
  • Entropy coding is performed by performing a process for uncompressing encoding, a process for selecting either entropy encoded data or uncompressed encoded data, and a process for multiplexing pixel bit length increase information into a bitstream.
  • the pixel bit lengths of the images corresponding to the converted data and the non-compressed encoded data are different from each other.
  • a video decoding program includes a computer that performs a process of demultiplexing a bitstream including at least pixel bit length increase information, a process of entropy decoding the conversion data of an image included in the bitstream, and an entropy decoded image
  • a process of inversely transforming the converted data and a process of uncompressing and decoding the uncompressed encoded data of the image included in the bit stream are executed, and the converted data of the image included in the bit stream and the image included in the bit stream are processed.
  • the pixel bit lengths of the images corresponding to the respective uncompressed encoded data are different from each other.
  • an increase in output data of PCM encoding can be suppressed in video encoding based on an increase in pixel bit length and PCM encoding.
  • FIG. The video encoding apparatus of the present embodiment is a means for differentiating pixel bit lengths of images corresponding to output data of entropy encoding and output data of PCM encoding, and PCM decoding based on pixel bit length increase information.
  • the video encoding apparatus includes a pixel bit length increaser 101, a transform / quantizer 102, an entropy included in the general video encoding apparatus shown in FIG. Encoder 103, inverse transform / inverse quantizer 104, buffer 105, predictor 106, PCM encoder 107, PCM decoder 108, multiplexed data selector 109, multiplexer 110, switch 121, and switch 122
  • a pixel bit length increaser 111 for increasing the pixel bit length of the decoded image of the PCM decoder 108 based on the pixel bit length increase information is provided.
  • the video encoding apparatus is different in that the pixel bit lengths of the images corresponding to the entropy-encoded output data and the PCM-encoded output data are different from each other.
  • the input image before the pixel bit length is increased is supplied to the PCM encoder 107.
  • the image corresponding to the output data of the entropy encoding is an image of an input video with an increased pixel bit length supplied to the transform / quantizer 102 and an image supplied from the inverse transform / inverse quantizer 104. This is a reconstructed image of the input video image with the pixel bit length increased.
  • the image corresponding to the output data of the PCM encoding is an image of the input video that has not been increased in pixel bit length supplied to the PCM encoder 107, and the pixel bit supplied from the PCM decoder 108. It is a PCM decoded image of an input video that has not been increased in length.
  • the pixel bit length increaser 101 increases the pixel bit length of the input image divided into blocks based on the pixel bit length increase information set from the outside.
  • the pixel bit length increaser 101 increments each pixel value of the luminance of the input video to the left by increasing_bit_depth_luma Bit shift. Therefore, the pixel bit length of the output data of the pixel bit length increaser 101 is bit_depth_luma + increased_bit_depth_luma bits.
  • the pixel bit length increaser 101 Each pixel value is shifted incremented_bit_depth_luma bits to the left.
  • the pixel bit length increased image output from the pixel bit length increaser 101 is input to the transformer / quantizer 102 after the prediction signal supplied from the predictor 106 is subtracted.
  • the transformer / quantizer 102 converts the frequency of the pixel bit length increased image (prediction error image) from which the prediction signal is reduced.
  • the quantized frequency transform coefficient is referred to as a transform quantization value.
  • the entropy encoder 103 entropy-encodes the prediction parameter supplied from the predictor 106 and the transform quantization value supplied from the transform / quantizer 102.
  • the prediction parameter is information related to macroblock prediction, such as intra MB / inter MB, intra prediction mode, intra prediction direction, inter MB block size, and motion vector.
  • the inverse transform / inverse quantizer 104 inversely quantizes the transform quantized value with a quantization step width corresponding to the pixel bit length increased_bit_depth_luma and increased_bit_depth_chroma increased by the pixel bit length increaser 101. Further, the inverse transform / inverse quantizer 104 performs inverse frequency transform on the frequency transform coefficient obtained by inverse quantization. The reconstructed prediction error image subjected to the inverse frequency conversion is supplied with a prediction signal and supplied to the switch 122.
  • the PCM encoder 107 performs PCM encoding on the input image before increasing the pixel bit length.
  • the luminance output data pcm_sample_luma [i] of the PCM encoder 107 is the pixel bit length bit_depth_luma of the luminance of the input video.
  • i (0 ⁇ i ⁇ 255) is an index in the raster scan order in the macroblock.
  • the color difference output data pcm_sample_chroma [i] (i: 0 ⁇ i ⁇ 127) of the PCM encoder 107 becomes the pixel bit length bit_depth_chroma of the color difference of the input video.
  • the PCM decoder 108 performs PCM decoding on pcm_sample_luma [i] and pcm_sample_croma [i].
  • PCM decoding may be referred to as PCM data reading.
  • the pixel bit length increaser 111 shifts pcm_sample_luma [i] read from the PCM data by incremented_bit_depth_luma bits to the left. Therefore, the reconstructed image obtained via the PCM decoder 108 is supplied to the switch 122 as bit_depth_luma + increased_bit_depth_luma bits. Similarly, PCM data read pcm_sample_chroma [i] is shifted to the left by incremented_bit_depth_chroma bits and supplied to the switch 122.
  • the multiplexed data selector 109 monitors the input data amount of a predetermined encoding unit (for example, macroblock) to the entropy encoder 103.
  • a predetermined encoding unit for example, macroblock
  • the multiplexed data selector 109 selects the output data of the entropy encoder 103.
  • the switch 121 is controlled.
  • the output data of the entropy encoder 103 is supplied to the multiplexer 110 via the switch 121.
  • the multiplexed data selector 109 controls the switch 122 so as to select the output data of the inverse transformer / quantizer 104.
  • the output data of the inverse transformer / quantizer 104 is supplied to the buffer 105 via the switch 122.
  • the multiplexed data selector 109 first causes the entropy encoder 103 to encode and output information indicating that the macroblock is an intra MB of PCM. Specifically, according to 7.3.5 Macroblock layer syntax of Non-Patent Literature 2, entropy coding is output with mb_type as I_PCM.
  • the output bits of the entropy encoder 103 are byte aligned.
  • the entropy encoder 103 supplies a predetermined amount of pcm_alignment_zero_bit to the multiplexer 110.
  • the entropy encoder 103 initializes the encoding engine for subsequent encoding.
  • the multiplexed data selector 109 controls the switch 121 so that the output data of the PCM encoder 107 is selected. As a result, the output data of the PCM encoder 107 is supplied to the multiplexer 110 via the switch 121.
  • the multiplexed data selector 109 controls the switch 122 so as to select the output data of the pixel bit length increaser 111.
  • the output data of the pixel bit length increaser 111 is supplied to the buffer 105 via the switch 122.
  • the pixel bit length increaser 111 shifts the output data pcm_sample_luma [i] of the PCM decoder 108 that has read the output data pcm_sample_luma [i] of the PCM encoder 107 to the left by increasing_bit_depth_luma bits to increase the number of bits. .
  • the pixel bit length increaser 111 shifts the output data pcm_sample_ chroma [i] of the PCM decoder 108 that has read the output data pcm_sample_chroma [i] of the PCM encoder 107 to the left by increasing_bit_depth_chroma bits to increase the number of bits. ing.
  • the multiplexer 110 multiplexes the pixel bit length increase information, the output data of the entropy encoder 103 and the output data of the PCM encoder 107 and outputs the result.
  • pixel bit length increase information increased_bit_depth_luma_increaschromed_luma_increaschromed) ) May be multiplexed.
  • bit_depth_luma_minus8 is a value obtained by subtracting 8 from the pixel bit length of the luminance of the input video bit_depth_luma
  • bit_depth_chroma_minus8 is a value obtained by subtracting 8 from the pixel bit length of the color difference of the input video bit_depth_chroma
  • incrementedbit_depth_luma is an increase pixel bit length of the brightness
  • C and “Descriptor”) in the list shown in FIG. 2 conforms to, for example, 7.2 Specification of syntax functions, categories, and descriptors of Non-Patent Document 2.
  • the video encoding device of this embodiment Based on the above-described operation, the video encoding device of this embodiment generates a bit stream.
  • step S101 the entropy encoder 103 entropy-encodes the mb_type as I_PCM to the multiplexer 110 so as to guarantee a certain processing time in the video encoding device and the video decoding device. Supply.
  • step S102 the entropy encoder 103 supplies pcm_alignment_zero_bit to the multiplexer 110 in order to byte-align the output bits.
  • step S103 the entropy encoder 103 initializes the encoding engine for subsequent entropy encoding.
  • step S104 the PCM encoder 107 PCM-encodes the input image before increasing the pixel bit length and supplies it to the multiplexer 110 so as not to increase the output data of PCM encoding.
  • step S105 the PCM decoder 108 performs PCM decoding (PCM data reading) on the PCM encoding results pcm_sample_luma [i] and pcm_sample_chroma [i].
  • step S106 in order to improve the calculation accuracy of the subsequent intra prediction and inter-frame prediction, the pixel bit length increaser 111 sets pcm_sample_luma [i] and pcm_sample_chroma [i] read by the PCM decoder 108 to the left, respectively. Bit-shift with increased_bit_depth_luma and increased_bit_depth_chroma.
  • the input image before the pixel bit length is increased in order to make the pixel bit lengths of the images corresponding to the output data of entropy encoding and the output data of PCM encoding differ from each other. Is supplied to the PCM encoder 107. Based on such a configuration, an increase in output data of PCM encoding can be suppressed in video encoding based on an increase in pixel bit length and non-compression encoding.
  • the video encoding device of this embodiment includes a pixel bit length increaser 111 that increases the pixel bit length of the decoded image of PCM decoding based on the pixel bit length increase information.
  • the pixel bit length increaser 111 it is possible to suppress a decrease in the calculation accuracy of intra prediction and interframe prediction caused by changing the pixel bit length.
  • the multiplexer 110 multiplexes the pixel bit length increase information into the bit stream in order to increase the pixel bit length of the decoded image of PCM decoding in the video decoding as well. . Based on such a configuration, the interoperability between the video encoding device and the video decoding device can be improved. That is, the video encoding device and the video decoding device can work together to suppress an increase in PCM encoding in the system, and it is possible to suppress a reduction in calculation accuracy of intra prediction and inter-frame prediction.
  • Embodiment 2 bit streams having different pixel bit lengths of images corresponding to input data of the entropy decoding unit and the PCM decoding unit are decoded.
  • the image corresponding to the input data of the entropy decoding means is a reconstructed image of an input video image with an increased pixel bit length supplied from an inverse transform / inverse quantizer 206 described later.
  • the image corresponding to the input data of the PCM decoding means is a PCM decoded image of an input video that has not been increased in pixel bit length and is supplied from a PCM decoder 203 described later.
  • the video decoding apparatus includes a demultiplexer 201, a decoding controller 202, a PCM decoder 203, an entropy decoder 204, a pixel bit length increaser 205, an inverse transform / inverse quantum. And a predictor 207, a buffer 208, a pixel bit length reducer 209, a switch 221, and a switch 222.
  • the demultiplexer 201 demultiplexes the input bitstream, and extracts the pixel bit length increase information and the video bitstream that has been entropy encoded or PCM encoded.
  • pixel bit length increase information increased_bit_depth_luma
  • depth_chroma_depth_bit_ which follow the sequence parameters bit_depth_luma_minus8 and bit_depth_chroma_minus8, as described in the list shown in FIG. Extract.
  • the entropy decoder 204 entropy decodes the video bitstream. If the mb_type of the macroblock is not I_PCM (PCM coding), the entropy decoder 204 entropy-decodes the prediction parameter and transform quantization value of the macroblock, and performs inverse transform / inverse quantizer 206 and prediction. To the container 207.
  • the inverse transform / inverse quantizer 206 inversely quantizes the transform quantized values of luminance and chrominance with a quantization step width corresponding to the pixel bit length increase information increased_bit_depth_luma and increased_bit_depth_chroma extracted by demultiplexing. Further, the inverse transform / inverse quantizer 206 performs inverse frequency transform on the frequency transform coefficient obtained by inverse quantization.
  • the predictor 207 generates a prediction signal using the reconstructed picture image stored in the buffer 208 based on the entropy-decoded prediction parameter.
  • the reconstructed prediction error image subjected to inverse frequency conversion by the inverse transform / inverse quantizer 206 is supplied to the switch 222 after the prediction signal supplied from the predictor 207 is added.
  • the decoding controller 202 switches the switch 222 so that the reconstructed prediction error image to which the prediction signal is added is supplied to the buffer 208 as a reconstructed image.
  • the decoding controller 202 causes the demultiplexer 201 to byte-align the video bitstream in the middle of entropy decoding.
  • the demultiplexer 201 reads pcm_alignment_zero_bit until the video bitstream is byte aligned.
  • the decoding controller 202 initializes the decoding engine of the entropy decoder 204.
  • An example of decoding engine initialization is described in Non-Patent Document 2 in 9.3.1.2 “Initialization” process “for” the “arithmetic” decoding “engine”.
  • the decoding controller 202 switches the switch 221 so that the byte-aligned video bitstream is supplied to the PCM decoder 203.
  • the PCM decoder 203 performs PCM decoding (PCM data reading) on PCM-encoded luminance data pcm_sample_luma [i] and color difference data pcm_sample_chroma [i] from the byte-aligned video bitstream.
  • the pixel bit length increaser 205 bit-shifts pcm_sample_luma [i] and pcm_sample_chroma [i] read from the PCM data to the left in accordance with pixel_length_increased_bit_depth_luma and increased_bit_depth_chroma extracted by demultiplexing.
  • PCM decoded luminance image S′L and PCM decoded color difference images S′Cb and S′Cr are expressed by the following equation (8-154 ′) and Calculated by the equation (8-155 ′).
  • the decoding controller 202 switches the switch 222 so that the PCM decoded image whose pixel bit length is increased is supplied to the buffer 208 as a reconstructed image.
  • the decoding controller 202 switches the switch 221 so that the output data of the demultiplexer 201 is supplied to the entropy decoder 204.
  • the pixel bit length reducer 209 decreases the pixel bit length of the reconstructed picture stored in the buffer 208 according to the pixel bit length increase information increased_bit_depth_luma and increased_bit_depth_chroma extracted by demultiplexing and outputs the result.
  • the video decoding apparatus Based on the above-described operation, the video decoding apparatus according to the present embodiment generates a decoded image.
  • step S201 the demultiplexer 201 reads pcm_alignment_zero_bit to byte-align the video bitstream in the middle of entropy decoding.
  • step S202 the entropy decoder 204 initializes the decoding engine for subsequent entropy decoding.
  • step S203 the PCM decoder 203 performs PCM decoding (PCM data reading) on the PCM encoding results pcm_sample_luma [i] and pcm_sample_chroma [i].
  • step S204 in order to improve the calculation accuracy of the subsequent intra prediction and inter-frame prediction, the pixel bit length increaser 205 sets the PCM data read pcm_sample_luma [i] and pcm_sample_chroma [i] to the left by incremented_bit_depth_luma and increased_bit_depth_chroma, respectively. shift.
  • the operations of the decoding controller 202, the entropy decoder 204, the PCM decoder 203, and the pixel bit length increaser 205 are executed.
  • the video decoding apparatus includes a pixel bit length increaser 205 that increases the pixel bit length of a decoded image of PCM decoding based on pixel bit length increase information extracted by demultiplexing.
  • a pixel bit length increaser 205 By providing the pixel bit length increaser 205, it is possible to suppress a decrease in the calculation accuracy of intra prediction and inter-frame prediction caused by different pixel bit lengths of images corresponding to the inputs of the entropy decoding unit and the PCM decoding unit. it can.
  • the interoperability between the video encoding device and the video decoding device can be improved. That is, the video encoding device and the video decoding device can work together to suppress an increase in PCM encoding in the system, and it is possible to suppress a reduction in calculation accuracy of intra prediction and inter-frame prediction.
  • the video encoding apparatus uses a pixel bit length in order to make the pixel bit lengths of images corresponding to output data of entropy encoding and output data of PCM encoding different from each other.
  • This is a video encoding device that supplies the input image before the increase to the PCM encoder 107.
  • FIG. 6 is a block diagram showing a video encoding device having another configuration that achieves the same effect as the video encoding device shown in FIG.
  • a pixel bit length reducer 112 is added to the video encoding device shown in FIG. That is, in the video encoding device shown in FIG. 6, the pixel bit length reducer 112 that receives an image with an increased pixel bit length inputs the image with the pixel bit length decreased based on the pixel bit length increase information. It is the composition which supplies to. Similar to the first embodiment, the video encoding apparatus shown in FIG. 6 can suppress an increase in output data of PCM encoding and perform intra prediction and inter-frame prediction due to different pixel bit lengths. Reduction in calculation accuracy can be suppressed.
  • the pixel of the reconstructed picture is a pixel whose pixel bit length is increased.
  • an embodiment using the above-described pixel bit length increaser and pixel bit length decreaser for input / output of the buffer is also conceivable. Even in such an embodiment, according to the present invention, it is possible to achieve both suppression of increase in output data of PCM encoding and suppression of reduction in calculation accuracy of intra prediction caused by making the pixel bit lengths different from each other.
  • the PCM decoder and the pixel bit length increaser are independent functional blocks. However, it is also possible to integrate the PCM decoder and the pixel bit length increaser into one functional block so that it can be easily inferred from the equations (8-154 ′) and (8-155 ′). .
  • the video encoding device multiplexes incremented_bit_depth_luma and increased_bit_depth_chroma into a bitstream following bit_depth_luma_minus8bit and bit_depth_chroma_minus8 to explicitly signal the pixel bit length increase information to the video decoding device. (See FIG. 2). However, in order to implicitly signal the pixel bit length increase information to the video decoding device, the video encoding device multiplexes the pixel bit length information after the pixel bit length increase as it is into the bit stream as the pixel bit length increase information. (However, in the video encoding device and the video decoding device, the original pixel bit length of the input video is assumed to be, for example, 8 bits).
  • the video encoding apparatus multiplexes the pixel bit length increase information (internal_bit_depth_luma_minus8 and internal_bit_depth_chroma_minus8) shown in FIG. 7 into the sequence parameters instead of the sequence parameters bit_depth_luma_minus8 and bit_depth_chroma_minus8.
  • internal_bit_depth_luma_minus8 is the value of increased_bit_depth_luma
  • internal_bit_depth_chroma_minus8 is the value of increased_bit_depth_chroma.
  • the PCM encoder 107 When the pixel bit length increase information shown in FIG. 7 is multiplexed with the sequence parameter, the PCM encoder 107 performs PCM encoding on the input image before increasing the pixel bit length. That is, the PCM encoder 107 PCM-encodes 8-bit pcm_sample_luma [i] and pcm_sample_croma [i]. The PCM decoder 108 performs PCM decoding of 8-bit pcm_sample_luma [i] and pcm_sample_croma [i].
  • the pixel bit length increaser 111 bit-shifts PCM-decoded pcm_sample_luma [i] and pcm_sample_chroma [i] to the left by incremented_bit_depth_luma and increased_bit_depth_chroma, respectively.
  • the video decoding apparatus corresponding to the case where the pixel bit length increase information shown in FIG. 7 is multiplexed with the sequence parameter demultiplexes the pixel bit length increase information (internal_bit_depth_luma_minus8 and internal_bit_depth_chroma_minus8) from the sequence parameter, Calculate as follows.
  • the video decoding apparatus can demultiplex the pixel bit length increase information implicitly signaled by the video encoding apparatus.
  • the video encoding device described above implicitly signals pixel bit length increase information to the video decoding device, if the original pixel bit length of the input video is longer than 8 bits, PCM encoding can be performed without distortion. There is a problem that disappears. For example, when the original pixel bit length of the input video is 10 bits, quantization distortion occurs in 8-bit pcm_sample_luma [i] and pcm_sample_croma [i].
  • the PCM bit length is increased by the pixel bit length.
  • a flag pcm_sample_bit_depth_is_internal_bit_depth_flag indicating whether or not the pixel bit length is later may be added to the sequence parameter.
  • the PCM encoder 107 performs PCM encoding on the input image before increasing the pixel bit length. That is, the PCM encoder 107 PCM-encodes 8-bit pcm_sample_luma [i] and pcm_sample_croma [i]. The PCM decoder 108 performs PCM decoding of 8-bit pcm_sample_luma [i] and pcm_sample_croma [i].
  • the PCM encoder 107 PCM-encodes an image with an increased pixel bit length. That is, the PCM encoder 107 performs PCM encoding on N bits (internal_bit_depth_luma_minus8 + 8 bits) of pcm_sample_luma [i] and N bits (internal_bit_depth_chroma_minus8 + 8 bits) of pcm_sample_croma [i].
  • the PCM decoder 108 performs PCM decoding on N-bit pcm_sample_luma [i] and N-bit pcm_sample_croma [i].
  • the pixel bit length increaser 111 bit-shifts PCM-decoded pcm_sample_luma [i] and pcm_sample_chroma [i] by 0 bits to the left (that is, does not perform bit shift to the left).
  • the PCM encoder 107 encodes pcm_sample_bit_depth_luma_minus8 + 8 bits of pcm_sample_luma [i] and pcm_sample_bit_depth_chroma_minpcm_8_bit_sample_chroma_minpcm_8
  • the PCM decoder 108 corresponding to the case where pcm_sample_bit_depth_luma_minus8 and pcm_sample_bit_depth_chroma_minus8 are added to the sequence parameter decodes pcm_sample_bit_depth_luma_minus8 + 8 bits of pcm_sample_luma [i] and pcm_sample_bit_depth_chroma_minc8_8_cc In
  • each of the above embodiments can be configured by hardware, it can also be realized by a computer program.
  • the information processing system illustrated in FIG. 10 includes a processor 1001, a program memory 1002, a storage medium 1003 for storing video data, and a storage medium 1004 for storing a bitstream.
  • the storage medium 1003 and the storage medium 1004 may be separate storage media, or may be storage areas composed of the same storage medium.
  • a magnetic storage medium such as a hard disk can be used as the storage medium.
  • the program memory 1002 stores a program for realizing the function of each block (excluding the block of the buffer) shown in each of FIGS. Is done.
  • the processor 1001 implements the functions of the video encoding device or the video decoding device shown in FIGS. 1, 4, and 6 by executing processing according to the program stored in the program memory 1002. .
  • FIG. 11 is a block diagram showing the main part of the video encoding apparatus according to the present invention.
  • the video encoding apparatus according to the present invention includes a pixel bit length increasing means 1 for increasing the pixel bit length of the input image based on the pixel bit length increase information (for example, the pixel bit length shown in FIG. An increaser 101), a conversion unit 2 (for example, the conversion / quantization unit 102 shown in FIG. 1) for converting the output data of the pixel bit length increase unit 1, and an entropy for entropy encoding the output data of the conversion unit 2.
  • Encoding means 3 for example, entropy encoder 103 shown in FIG.
  • uncompressed encoding means 7 for example, PCM encoder 107 for encoding input data
  • entropy encoding means 3 and the uncompressed encoding means 7 for selecting the output data of the multiplexed data selection means 8 (for example, the switch 121), and the bit length increase information as bits.
  • a multiplexing unit 10 for example, a multiplexer 110 that multiplexes the streams is provided, and the pixel bit lengths of the images corresponding to the output data of the entropy encoding unit 3 and the uncompressed encoding unit 7 are different. ing.
  • FIG. 12 is a block diagram showing the main part of another video encoding apparatus according to the present invention.
  • another video encoding apparatus according to the present invention includes a pixel bit length reducing means 9 (one example) for reducing the pixel bit length based on the pixel bit length increase information. 6 is provided, and the input data of the uncompressed encoding means 7 is the output data of the pixel bit length reducing means 9.
  • FIG. 13 is a block diagram showing the main part of another video encoding apparatus according to the present invention.
  • another video encoding device includes a prediction unit 10 (for example, a predictor 106 shown in FIG. 1) for predicting an image, and a conversion unit.
  • Inverse transforming means 12 inverse transform / inverse quantizer 104 shown in FIG. 1 as an example
  • uncompressed decoding means 13 for decoding output data from uncompressed encoding means 7 (example)
  • the uncompressed decoding means 13 increases the pixel bit length of the uncompressed decoded image based on at least the pixel bit length increase information.
  • FIG. 14 is a block diagram showing the main part of the video decoding apparatus according to the present invention.
  • the video decoding apparatus according to the present invention includes demultiplexing means 21 (for example, demultiplexer 201 shown in FIG. 4) for demultiplexing a bitstream including at least pixel bit length increase information.
  • An entropy decoding unit 24 (entropy decoder 204 shown in FIG. 4 as an example) and an inverse conversion unit 26 (in an example) that inversely converts the entropy-decoded image conversion data.
  • the inverse transform / inverse quantizer 206) and the non-compression decoding means 23 for example, the PCM decoder shown in FIG.
  • a decoding control means 22 for controlling the entropy decoding means 24 and the uncompressed decoding means 23 (for example, FIG. And a to the decoding control section 202), the pixel bit length of the image corresponding to each of the input data with the entropy decoding unit 24 uncompressed decoding unit 23 are different from each other.
  • FIG. 15 is a block diagram showing a main part of another video decoding apparatus according to the present invention.
  • another video decoding apparatus according to the present invention includes a prediction unit 27 (an example predictor 207 shown in FIG. 4) that predicts an image in addition to the configuration shown in FIG. 14.
  • the present invention in video coding based on increase in pixel bit length and non-compression coding, pixel bit lengths of images corresponding to output data of entropy coding and non-compression coding are mutually set. Providing a different means. Then, the present invention achieves both the improvement of the calculation accuracy of intra prediction and inter-frame prediction by extending the pixel bit length and guaranteeing a certain processing time to the video encoding device and the video decoding device, The problem that the output data of PCM encoding increases by the bit length increase can be solved.
  • Data obtained by increasing the pixel bit length of the input image is converted based on the pixel bit length increase information, the converted data is entropy encoded, the input data is non-compressed, and the entropy encoded data
  • a video encoding method that selects any one of compression-encoded data and multiplexes pixel bit length increase information into a bitstream, and is an image corresponding to each of entropy-encoded data and uncompressed-encoded data.
  • the pixel bit lengths are different from each other, and the pixel bit length is decreased based on the pixel bit length increase information for the data in which the pixel bit length is increased, and the pixel bit length is decreased as uncompressed input data.
  • (Supplementary note 7) Processing for converting data in which the pixel bit length of the input image is increased based on the pixel bit length increase information to the computer, processing for entropy encoding the converted data, and uncompressed encoding of the input data Processing, selecting either entropy encoded data or uncompressed encoded data, and processing for multiplexing pixel bit length increase information into the bitstream, and The processing of reducing the pixel bit length based on the pixel bit length increase information for the data with the pixel bit lengths of the images corresponding to each of the compression encoded data being different from each other and further increasing the pixel bit length is performed on the computer.
  • Video coding program that uses data with reduced pixel bit length as input data for uncompressed coding Grams.
  • the computer demultiplexes a bitstream including at least pixel bit length increase information, entropy-decodes image conversion data included in the bitstream, and reverses the entropy-decoded image conversion data.
  • a process of converting and a process of uncompressing and decoding uncompressed encoded data of the image included in the bitstream are executed, and the converted data of the image included in the bitstream and the uncompressed encoding of the image included in the bitstream are performed.
  • Video decoding that causes the computer to execute a process for increasing the pixel bit length of a decoded image that has been uncompressed based on at least the pixel bit length increase information when performing uncompressed decoding, since the pixel bit lengths of the images corresponding to each of the data are different from each other program.
  • a computer demultiplexes a bitstream including at least pixel bit length increase information, entropy decodes image conversion data included in the bitstream, and reverses the entropy decoded image conversion data.
  • a process of converting and a process of uncompressing and decoding uncompressed encoded data of the image included in the bitstream are executed, and the converted data of the image included in the bitstream and the uncompressed encoding of the image included in the bitstream are performed.
  • a video decoding program for causing a computer to execute a prediction process in which pixel bit lengths of images corresponding to each of data are different from each other and predict an image.

Abstract

　映像符号化装置は、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させる画素ビット長増加手段と、画素ビット長増加手段の出力データを変換する変換手段と、変換手段の出力データをエントロピー符号化するエントロピー符号化手段と、入力データを非圧縮符号化する非圧縮符号化手段と、エントロピー符号化手段と非圧縮符号化手段のいずれかの出力データを選択する多重化データ選択手段と、画素ビット長増加情報をビットストリームに多重化する多重化手段とを備え、エントロピー符号化手段と非圧縮符号化手段のそれぞれの出力データに対応する画像の画素ビット長が異なる。

Description

映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム
　本発明は、画素ビット長増加と非圧縮符号化を用いる映像符号化装置及び映像復号装置に関する。
　映像情報を高い効率で伝送したり蓄積することを目的とした映像符号化方式として非特許文献２に記載されたＩＳＯ／ＩＥＣ　１４４９６－１０　Ａｄｖａｎｃｅｄ　Ｖｉｄｅｏ　Ｃｏｄｉｎｇ（ＡＶＣ）規格の符号化方式がある。また、非特許文献１では、映像符号化に際して、入力画像の画素ビット長を拡張させる（増加させる）ことによって、画面内予測（イントラ予測）や動き補償予測（フレーム間予測）の演算精度を高めて映像符号化の圧縮効率を向上させることが提案されている。
　また、特許文献１では、所定の符号化単位で、エントロピー符号化と非圧縮符号化（ＰＣＭ符号化）とを切り替えることによって、映像符号化装置や映像復号装置にある一定の処理時間を保証させることが提案されている。
特開２００４－１３５２５１号公報
野田玲子、中條健、"画素ビット長拡張による動画像符号化効率改善方式"，情報科学技術フォーラム　2006 J-009，2006年 ＩＳＯ／ＩＥＣ　１４４９６－１０　Ａｄｖａｎｃｅｄ　Ｖｉｄｅｏ　Ｃｏｄｉｎｇ
　図１６は、非特許文献１に記載された技術と特許文献１に記載された技術とを単純に組み合わせて得られる映像符号化装置を示すブロック図である。以下、図１６に示す映像符号化装置を一般的な映像符号化装置と呼ぶ。
　図１６を参照して、ディジタル化された映像の各フレームを入力としてビットストリームを出力する一般的な映像符号化装置の構成と動作を説明する。
　図１６に示す映像符号化装置は、画素ビット長増加器１０１、変換／量子化器１０２、エントロピー符号化器１０３、逆変換／逆量子化器１０４、バッファ１０５、予測器１０６、ＰＣＭ符号化器１０７、ＰＣＭ復号器１０８、多重化データ選択器１０９、多重化器１１０、スイッチ１２１、およびスイッチ１２２を備える。
　図１６に示す映像符号化装置は、フレームをＭＢ（Macro Block ：マクロブロック）と呼ばれる１６×１６画素サイズのブロックに分割し、フレームの左上から順に各ＭＢを符号化する。非特許文献２に記載されているＡＶＣにおいては、ＭＢをさらに４×４画素サイズのブロックにブロック分割し、各４×４ブロックを符号化する。
　図１７は、フレームの空間解像度がＱＣＩＦ（Quarter Common Intermediate Format）の場合のブロック分割の例を示す説明図である。以下、説明の簡略化のために、輝度の画素値のみに着目して各構成要素の動作を説明する。
　画素ビット長増加器１０１は、外部から設定される画素ビット長増加情報に基づいて、ブロック分割された入力映像の画素ビット長を増加させる。入力映像の画素ビット長をbit_depth_luma、画素ビット長増加情報（増加する画素ビット長）をincreased_bit_depth_lumaとすると、画素ビット長増加器１０１は、入力映像の各画素値を左にincreased_bit_depth_lumaビットシフトする。よって、画素ビット長増加器１０１の出力データの画素ビット長は、bit_depth_luma+increased_bit_depth_lumaビットとなる。
　画素ビット長増加器１０１から出力される画素ビット長増加済み画像は、予測器１０６から供給される予測信号が減じられた後、変換／量子化器１０２に入力される。予測信号には、イントラ予測信号とフレーム間予測信号の２種類がある。それぞれの予測信号を説明する。
　イントラ予測信号は、バッファ１０５に格納された現在のピクチャと表示時刻が同一である再構築ピクチャの画像に基づいて生成される予測信号である。非特許文献２の8.3.1 Intra_４×４ prediction process for luma sample、8.3.2 Intra_８×８ prediction process for luma samples 、及び8.3.3 Intra_１６×１６ prediction process for luma samplesを引用すると、イントラ予測については、３種類のブロックサイズのイントラ予測モードIntra_４×４、Intra_８×８、Intra_１６×１６がある。
　図１８（ａ），（ｃ）を参照すると、Intra_４×４とIntra_８×８は、それぞれ４×４ブロックサイズと８×８ブロックサイズのイントラ予測であることが分かる。ただし、図中の丸（○）はイントラ予測に用いる参照画素、つまり、前記現在のピクチャと表示時刻が同一である再構築ピクチャの画素を示す。
　Intra_４×４のイントラ予測では、再構築した周辺画素をそのまま参照画素とし、図１８（ｂ）に示す９種類の方向に参照画素をパディング（外挿）して予測信号が形成される。Intra_８×８のイントラ予測では、図１８（ｃ）における右矢印の下に記載のローパスフィルタ（１／２、１／４、１／２）によって再構築ピクチャの画像の周辺画素を平滑化した画素を参照画素として、図１８（ｂ）に示す９種類の方向に参照画素を外挿して予測信号が形成される。
　図１９（ａ）を参照すると、Intra_１６×１６は、１６×１６ブロックサイズのイントラ予測であることが分かる。図１８に示された例と同様に、図１９において、図中の丸（○）はイントラ予測に用いる参照画素、つまり、前記現在のピクチャと表示時刻が同一である再構築ピクチャの画素である。Intra_１６×１６のイントラ予測では、再構築画像の周辺画素をそのまま参照画素として、図１９（ｂ）に示す４種類の方向に参照画素を外挿して予測信号が形成される。
　以下、イントラ予測信号を用いて符号化されるＭＢをイントラＭＢと呼ぶ。イントラ予測のブロックサイズをイントラ予測モードと呼ぶ。また、外挿の方向をイントラ予測方向と呼ぶ。
　フレーム間予測信号は、バッファ１０５に格納された現在のピクチャと表示時刻が異なる再構築ピクチャの画像から生成される予測信号である。以下、フレーム間予測信号を用いて符号化されるＭＢをインターＭＢと呼ぶ。インターＭＢのブロックサイズとして、例えば、１６×１６、１６×８、 ８×１６、 ８×８、８×４、４×８、４×４を選択することができる。
　図２０は、１６×１６のブロックサイズを例にしたフレーム間予測の例を示す説明図である。図２０に示す動きベクトルＭＶ＝（ｍｖｘ，ｍｖｙ）は、符号化対象ブロックに対する参照ピクチャのフレーム間予測ブロック（フレーム間予測信号）の平行移動量を示す、フレーム間予測の予測パラメータの一つである。ＡＶＣにおいては、符号化対象ブロックの符号化対象ピクチャに対するフレーム間予測信号の参照ピクチャの方向を表すフレーム間予測の方向に加えて、符号化対象ブロックのフレーム間予測に用いる参照ピクチャを同定するための参照ピクチャインデックスもフレーム間予測の予測パラメータである。ＡＶＣにおいて、バッファ１０５に格納された複数枚の参照ピクチャをフレーム間予測に利用できるからである。
　なお、フレーム間予測のより詳細な説明が、非特許文献２の8.4 Inter prediction processに記載されている。
　以下、フレーム間予測信号を用いて符号化されるＭＢをインターＭＢと呼ぶ。フレーム間予測のブロックサイズをインター予測モードという。また、フレーム間予測の方向をインター予測方向と呼ぶ。
　なお、イントラＭＢのみで符号化されたピクチャはＩピクチャと呼ばれる。イントラＭＢだけでなくインターＭＢも含めて符号化されたピクチャはＰピクチャと呼ばれる。フレーム間予測に１枚の参照ピクチャだけでなく、さらに同時に２枚の参照ピクチャを用いるインターＭＢを含めて符号化されたピクチャはＢピクチャと呼ばれる。また、Ｂピクチャにおいて、符号化対象ブロックの符号化対象ピクチャに対するフレーム間予測信号の参照ピクチャの方向が過去のフレーム間予測を前方向予測、符号化対象ブロックの符号化対象ピクチャに対するフレーム間予測信号の参照ピクチャの方向が未来のフレーム間予測を後方向予測、過去と未来を含むフレーム間予測を双方向予測と呼ぶ。
　変換／量子化器１０２は、予測信号が減じられた画素ビット長増加済み画像（予測誤差画像）を周波数変換する。
　さらに、変換／量子化器１０２は、画素ビット長増加器１０１が増加させた画素ビット長increased_bit_depth_lumaに応じた量子化ステップ幅Ｑs で、周波数変換した予測誤差画像（周波数変換係数）を量子化する。通常の量子化ステップ幅をＱsluma とすると、例えば、Ｑs ＝Ｑsluma ＊２increased_bit_depth_lumaとする。以下、量子化された周波数変換係数を変換量子化値と呼ぶ。
　エントロピー符号化器１０３は、予測パラメータと変換量子化値をエントロピー符号化する。予測パラメータとは、上述したイントラＭＢ／インターＭＢ、イントラ予測モード、イントラ予測方向、インターＭＢブロックサイズ、および動きベクトルなど、ＭＢの予測に関連した情報である。
　逆変換／逆量子化器１０４は、画素ビット長増加器１０１が増加させた画素ビット長increased_bit_depth_lumaに応じた量子化ステップ幅で、変換量子化値を逆量子化する。さらに、逆変換／逆量子化器１０４は、逆量子化した周波数変換係数を逆周波数変換する。逆周波数変換された再構築予測誤差画像は、予測信号が加えられて、スイッチ１２２に供給される。
　多重化データ選択器１０９は、エントロピー符号化器１０３に対する所定の符号化単位（例えば、マクロブロック）の入力データ量を監視する。所定の符号化単位に対応する処理時間内でエントロピー符号化器１０３がその入力データをエントロピー符号化可能な場合には、多重化データ選択器１０９は、エントロピー符号化器１０３の出力データを選択するようにスイッチ１２１を制御する。その結果、エントロピー符号化器１０３の出力データが、スイッチ１２１を介して多重化器１１０に供給される。さらに、多重化データ選択器１０９は、逆変換／量子化器１０４の出力データを選択するようにスイッチ１２２を制御する。その結果、逆変換／量子化器１０４の出力データが、スイッチ１２２を介してバッファ１０５に供給される。
　処理時間内でエントロピー符号化可能でない場合には、多重化データ選択器１０９は、画素ビット長増加器１０１の出力データをＰＣＭ符号化したＰＣＭ符号化器１０７の出力データを選択するようにスイッチ１２１を制御する。その結果、ＰＣＭ符号化器１０７の出力データが、スイッチ１２１を介して多重化器１１０に供給される。さらに、多重化データ選択器１０９は、ＰＣＭ符号化器１０７の出力データをＰＣＭ復号したＰＣＭ復号器１０８の出力データを選択するようにスイッチ１２２を制御する。その結果、ＰＣＭ復号器１０８の出力データが、スイッチ１２２を介してバッファ１０５に供給される。
　バッファ１０５は、スイッチ１２２を介して供給される再構築画像を格納する。1フレーム分の再構築画像を再構築ピクチャと呼ぶ。
　多重化器１１０は、画素ビット長増加情報、およびエントロピー符号化器１０３の出力データとＰＣＭ符号化器１０７の出力データを多重化して出力する。
　上述した動作に基づいて、一般的な映像符号化装置はビットストリームを生成する。
　上述した、一般的な技術を用いた場合に、イントラ予測やフレーム間予測の演算精度を画素ビット長拡張によって高めることと、映像符号化装置や映像復号装置がある一定の処理時間を保証することとを両立できる。
　しかし、上述した一般的な技術においては、画素ビット長増加させた画像をＰＣＭ符号化する。すると、ＰＳＮＲ（Peak Signal to Noise Ratio ）改善が得られないにも関わらず、画素ビット長増加分だけＰＣＭ符号化の出力データが増加するという課題がある。例えば、bit_depth_lumaが８ビット、increased_bit_depth_lumaが８ビットである場合、ＰＣＭ符号化の出力データ量は入力画像８ビットの２倍の１６ビットになる。
　そこで、本発明は、画素ビット長増加とＰＣＭ符号化に基づいた映像符号化において、ＰＣＭ符号化の出力データの増加を抑制することを目的とする。
　本発明による映像符号化装置は、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させる画素ビット長増加手段と、画素ビット長増加手段の出力データを変換する変換手段と、変換手段の出力データをエントロピー符号化するエントロピー符号化手段と、入力データを非圧縮符号化する非圧縮符号化手段と、エントロピー符号化手段と非圧縮符号化手段のいずれかの出力データを選択する多重化データ選択手段と、画素ビット長増加情報をビットストリームに多重化する多重化手段とを備え、エントロピー符号化手段と非圧縮符号化手段のそれぞれの出力データに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明による映像復号装置は、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する多重化解除手段と、ビットストリームに含まれる画像の変換データをエントロピー復号するエントロピー復号手段と、エントロピー復号した画像の変換データを逆変換する逆変換手段と、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する非圧縮復号手段と、エントロピー復号手段および非圧縮復号手段を制御する復号制御手段とを備え、エントロピー復号手段と非圧縮復号手段のそれぞれの入力データに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明による映像符号化方法は、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換し、変換したデータをエントロピー符号化し、入力データを非圧縮符号化し、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択し、画素ビット長増加情報をビットストリームに多重化し、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明による映像復号方法は、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除し、ビットストリームに含まれる画像の変換データをエントロピー復号し、エントロピー復号した画像の変換データを逆変換し、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号し、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明による映像符号化プログラムは、コンピュータに、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換する処理と、変換したデータをエントロピー符号化する処理と、入力データを非圧縮符号化する処理と、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択する処理と、画素ビット長増加情報をビットストリームに多重化する処理とを実行させ、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明による映像復号プログラムは、コンピュータに、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する処理と、ビットストリームに含まれる画像の変換データをエントロピー復号する処理と、エントロピー復号した画像の変換データを逆変換する処理と、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号するする処理とを実行させ、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする。
　本発明によれば、画素ビット長増加とＰＣＭ符号化に基づいた映像符号化において、ＰＣＭ符号化の出力データの増加を抑制することができる。
第１の実施形態の映像符号化装置のブロック図である。 シーケンスパラメータにおける画素ビット長増加情報を示す説明図である。 第１の実施形態の映像符号化装置の処理を示すフローチャートである。 第２の実施形態の映像復号装置のブロック図である。 第２の実施形態の映像復号装置の処理を示すフローチャートである。 他の実施形態の映像符号化装置のブロック図である。 シーケンスパラメータにおける画素ビット長増加情報の他の例を示す説明図である。 シーケンスパラメータにおける画素ビット長増加情報のさらに他の例を示す説明図である。 シーケンスパラメータにおける画素ビット長増加情報の別の例を示す説明図である。 本発明による映像符号化装置および映像復号装置の機能を実現可能な情報処理システムの構成例を示すブロック図である。 本発明による映像符号化装置の主要部を示すブロック図である。 本発明による他の映像符号化装置の主要部を示すブロック図である。 本発明によるさらに他の映像符号化装置の主要部を示すブロック図である。 本発明による映像復号装置の主要部を示すブロック図である。 本発明による他の映像復号装置の主要部を示すブロック図である。 一般的な映像符号化装置を示すブロック図である。 ブロック分割の例を示す説明図である。 予測の種類を説明するための説明図である。 予測の種類を説明するための説明図である。 １６×１６のブロックサイズを例にしたフレーム間予測の例を示す説明図である。
実施形態１．
　本実施形態の映像符号化装置は、エントロピー符号化の出力データとＰＣＭ符号化の出力データのそれぞれに対応する画像の画素ビット長を互いに異ならせる手段、画素ビット長増加情報に基づいてＰＣＭ復号の復号画像の画素ビット長を増加させる手段、および画素ビット長増加情報をビットストリームに多重化する手段を備える。
　図１に示すように、本実施の形態の映像符号化装置は、図１６に示された一般的な映像符号化装置が備えていた画素ビット長増加器１０１、変換／量子化器１０２、エントロピー符号化器１０３、逆変換／逆量子化器１０４、バッファ１０５、予測器１０６、ＰＣＭ符号化器１０７、ＰＣＭ復号器１０８、多重化データ選択器１０９、多重化器１１０、スイッチ１２１、およびスイッチ１２２に加えて、画素ビット長増加情報に基づいてＰＣＭ復号器１０８の復号画像の画素ビット長を増加させるための画素ビット長増加器１１１を備える。
　また、図１と図１６とを比較すると、本実施形態の映像符号化装置は、エントロピー符号化の出力データとＰＣＭ符号化の出力データのそれぞれに対応する画像の画素ビット長を互いに異ならせるために、画素ビット長を増加させる前の入力画像をＰＣＭ符号化器１０７に供給することが分かる。なお、前記エントロピー符号化の出力データに対応する画像とは、変換／量子化器１０２に供給される画素ビット長増加された入力映像の画像、および、逆変換／逆量子化器１０４から供給される前記画素ビット長増加された入力映像の画像の再構築画像である。また、前記ＰＣＭ符号化の出力データに対応する画像とは、ＰＣＭ符号化器１０７に供給される画素ビット長増加されていない入力映像の画像、および、ＰＣＭ復号器１０８から供給される前記画素ビット長増加されていない入力映像のＰＣＭ復号画像である。
　画素ビット長増加器１０１は、外部から設定される画素ビット長増加情報に基づいて、ブロック分割された入力映像の画素ビット長を増加させる。
　入力映像の輝度の画素ビット長をbit_depth_luma、輝度の画素ビット長増加情報（増加する画素ビット長）をincreased_bit_depth_lumaとすると、画素ビット長増加器１０１は、入力映像の輝度の各画素値を左にincreased_bit_depth_lumaビットシフトする。よって、画素ビット長増加器１０１の出力データの画素ビット長は、bit_depth_luma+increased_bit_depth_lumaビットとなる。同様に、色差（CbとCrの成分）については、入力映像の色差の画素ビット長をbit_depth_chroma、色差の画素ビット長増加情報をincreased_bit_depth_chromaとすると、画素ビット長増加器１０１は、入力映像の色差の各画素値を左にincreased_bit_depth_lumaビットシフトする。
　画素ビット長増加器１０１から出力される画素ビット長増加済み画像は、予測器１０６から供給される予測信号が減じられて、変換／量子化器１０２に入力される。変換／量子化器１０２は、予測信号が減じられた画素ビット長増加済み画像（予測誤差画像）を周波数変換する。
　さらに、変換／量子化器１０２は、画素ビット長増加器１０１が増加させた画素ビット長increased_bit_depth_lumaおよびincreased_bit_depth_chromaに応じた量子化ステップ幅Ｑs で、周波数変換した予測誤差画像（周波数変換係数）を量子化する。通常の輝度の量子化ステップ幅をＱsluma とすると、例えば、Ｑs ＝Ｑsluma ＊２increased_bit_depth_lumaとする。以後、量子化された周波数変換係数を変換量子化値と呼ぶ。
　エントロピー符号化器１０３は、予測器１０６から供給される予測パラメータと変換／量子化器１０２から供給される変換量子化値をエントロピー符号化する。予測パラメータとは、イントラＭＢ／インターＭＢ、イントラ予測モード、イントラ予測方向、インターＭＢブロックサイズ、および、動きベクトルなど、マクロブロックの予測に関連した情報である。
　逆変換／逆量子化器１０４は、画素ビット長増加器１０１が増加させた画素ビット長increased_bit_depth_lumaおよびincreased_bit_depth_chromaに応じた量子化ステップ幅で、変換量子化値を逆量子化する。さらに、逆変換／逆量子化器１０４は、逆量子化した周波数変換係数を逆周波数変換する。逆周波数変換された再構築予測誤差画像は、予測信号が加えられて、スイッチ１２２に供給される。
　ＰＣＭ符号化器１０７は、画素ビット長を増加させる前の入力画像をＰＣＭ符号化する。ＰＣＭ符号化器１０７の輝度の出力データpcm_sample_luma[i]は、入力映像の輝度の画素ビット長bit_depth_lumaとなる。ただし、ｉ（０≦ｉ≦２５５）は該マクロブロック内のラスタスキャン順でのインデックスである。同様に、ＰＣＭ符号化器１０７の色差の出力データpcm_sample_chroma[i] （ｉ：０≦ｉ≦１２７）は、入力映像の色差の画素ビット長bit_depth_chromaとなる。
　ＰＣＭ復号器１０８は、pcm_sample_luma[i]およびpcm_sample_croma[i] をＰＣＭ復号する。以下、ＰＣＭ復号を、ＰＣＭデータ読み込みと呼ぶことがある。
　画素ビット長増加器１１１は、ＰＣＭデータ読み込みしたpcm_sample_luma[i]を左にincreased_bit_depth_lumaビットシフトする。よって、ＰＣＭ復号器１０８を介して得られた再構築画像は、bit_depth_luma+increased_bit_depth_lumaビットとなって、スイッチ１２２に供給される。同様に、ＰＣＭデータ読み込みしたpcm_sample_chroma[i]は左にincreased_bit_depth_chromaビットシフトされて、スイッチ１２２に供給される。
　多重化データ選択器１０９は、エントロピー符号化器１０３に対する所定の符号化単位（例えば、マクロブロック）の入力データ量を監視する。所定の符号化単位に対応する処理時間内でエントロピー符号化器１０３がその入力データをエントロピー符号化可能な場合には、多重化データ選択器１０９は、エントロピー符号化器１０３の出力データを選択するようにスイッチ１２１を制御する。その結果、エントロピー符号化器１０３の出力データが、スイッチ１２１を介して多重化器１１０に供給される。さらに、多重化データ選択器１０９は、逆変換／量子化器１０４の出力データを選択するようにスイッチ１２２を制御する。その結果、逆変換／量子化器１０４の出力データが、スイッチ１２２を介してバッファ１０５に供給される。
　処理時間内でエントロピー符号化可能でない場合には、多重化データ選択器１０９は、まず、該マクブロックがＰＣＭのイントラＭＢであることを示す情報をエントロピー符号化器１０３に符号化出力させる。具体的には、非特許文献２の7.3.5 Macroblock layer syntax に従うと、mb_type をI_PCM としてエントロピー符号化出力させる。
　続いて、エントロピー符号化器１０３の出力ビットをバイトアラインする。具体的には、非特許文献２の7.3.5 Macroblock layer syntax に従うと、エントロピー符号化器１０３が、所定量のpcm_alignment_zero_bitを多重化器１１０に供給する。また、以後の符号化のために、エントロピー符号化器１０３が符号化エンジンを初期化する。
　なお、符号化エンジン初期化の一例が、非特許文献２の9.3.4.1 Initialization process for the arithmetic encoding engine （informative ）に記載されている。
　さらに、多重化データ選択器１０９は、ＰＣＭ符号化器１０７の出力データを選択するようにスイッチ１２１を制御する。その結果、ＰＣＭ符号化器１０７の出力データが、スイッチ１２１を介して多重化器１１０に供給される。
　最後に、多重化データ選択器１０９は、画素ビット長増加器１１１の出力データを選択するようにスイッチ１２２を制御する。その結果、画素ビット長増加器１１１の出力データが、スイッチ１２２を介してバッファ１０５に供給される。なお、画素ビット長増加器１１１は、ＰＣＭ符号化器１０７の出力データpcm_sample_luma[i]を読み込んだＰＣＭ復号器１０８の出力データpcm_sample_luma[i]を左にincreased_bit_depth_lumaビットシフトしてビット数を増やしている。同様に、画素ビット長増加器１１１は、ＰＣＭ符号化器１０７の出力データpcm_sample_chroma[i]を読み込んだＰＣＭ復号器１０８の出力データpcm_sample_ chroma [i]を左にincreased_bit_depth_chromaビットシフトしてビット数を増やしている。
　多重化器１１０は、画素ビット長増加情報、およびエントロピー符号化器１０３の出力データとＰＣＭ符号化器１０７の出力データを多重化して出力する。非特許文献２のSpecification of syntax functions, categories, and descriptorsに従うと、図２に示すリストに記載されているように、シーケンスパラメータのbit_depth_luma_minus8 とbit_depth_chroma_minus8 に後続させて、画素ビット長増加情報（increased_bit_depth_lumaおよびincreased_bit_depth_chroma）を多重化することが考えられる。ただし、bit_depth_luma_minus8 は入力映像の輝度の画素ビット長bit_depth_lumaから８を減じた値、bit_depth_chroma_minus8 は入力映像の色差の画素ビット長bit_depth_chromaから８を減じた値、increased_bit_depth_lumaは輝度の増加画素ビット長、そして、increased_bit_depth_chromaは色差の増加画素ビット長である。
　なお、図２に示すリストにおける表記（”C”や”Descriptor”）については、例えば、非特許文献２の7.2 Specification of syntax functions, categories, and descriptorsに従うとする。
　上述した動作に基づいて、本実施形態の映像符号化装置はビットストリームを生成する。
　次に、本発明の特徴である処理時間内でエントロピー符号化することが可能でない場合のエントロピー符号化器１０３、ＰＣＭ符号化器１０７、ＰＣＭ復号器１０８および画素ビット長増加器１１１の動作を図３のフローチャートを参照して説明する。
　図３に示すように、ステップＳ１０１では、映像符号化装置や映像復号装置にある一定の処理時間を保証させるために、エントロピー符号化器１０３が、mb_typeをI_PCMとしてエントロピー符号化し多重化器１１０に供給する。
　ステップＳ１０２では、エントロピー符号化器１０３が、出力ビットをバイトアラインさせるために、pcm_alignment_zero_bitを多重化器１１０に供給する。
　ステップＳ１０３では、以降のエントロピー符号化のために、エントロピー符号化器１０３が符号化エンジンを初期化する。
　ステップＳ１０４では、ＰＣＭ符号化の出力データを増加させないように、画素ビット長を増加させる前の入力画像をＰＣＭ符号化器１０７がＰＣＭ符号化し多重化器１１０に供給する。
　ステップＳ１０５では、ＰＣＭ復号器１０８が、ＰＣＭ符号化の結果pcm_sample_luma[i]およびpcm_sample_chroma[i]をＰＣＭ復号（ＰＣＭデータ読み込み）する。
　ステップＳ１０６では、以降のイントラ予測やフレーム間予測の演算精度を高めるために、画素ビット長増加器１１１が、ＰＣＭ復号器１０８がＰＣＭデータ読み込みしたpcm_sample_luma[i]とpcm_sample_chroma[i]を左にそれぞれincreased_bit_depth_lumaとincreased_bit_depth_chromaでビットシフトする。
　以上のように、所定の符号化単位に対応する処理時間内でエントロピー符号化を行うことが可能でない場合において、エントロピー符号化器１０３およびＰＣＭ符号化器１０７の動作が実行される。
　本実施形態の映像符号化装置では、エントロピー符号化の出力データとＰＣＭ符号化の出力データのそれぞれに対応する画像の画素ビット長を互いに異ならせるために、画素ビット長を増加させる前の入力画像がＰＣＭ符号化器１０７に供給される。そのような構成に基づいて、画素ビット長増加と非圧縮符号化とに基づいた映像符号化において、ＰＣＭ符号化の出力データの増加を抑制できる。
　また、本実施形態の映像符号化装置は、画素ビット長増加情報に基づいて、ＰＣＭ復号の復号画像の画素ビット長を増加させる画素ビット長増加器１１１を備える。画素ビット長増加器１１１によって、画素ビット長を異ならせることに起因する、イントラ予測やフレーム間予測の演算精度低下を抑制できる。
　さらに、本実施形態の映像符号化装置では、多重化器１１０は、映像復号でも同様にＰＣＭ復号の復号画像の画素ビット長を増加させるために、画素ビット長増加情報をビットストリームに多重化する。そのような構成に基づいて、映像符号化装置と映像復号装置の相互運用性を高めることができる。すなわち、映像符号化装置と映像復号装置とが共動して、システムにおけるＰＣＭ符号化の増加を抑制できるとともに、イントラ予測やフレーム間予測の演算精度低下を抑制できる。
実施形態２．
　本実施形態の映像復号装置では、エントロピー復号手段とＰＣＭ復号手段のそれぞれの入力データに対応する画像の画素ビット長が互いに異なるビットストリームを復号する。なお、前記エントロピー復号手段の入力データに対応する画像とは、後述する逆変換／逆量子化器２０６から供給される画素ビット長増加された入力映像の画像の再構築画像である。また、前記ＰＣＭ復号手段の入力データに対応する画像とは、後述するＰＣＭ復号器２０３から供給される画素ビット長増加されていない入力映像のＰＣＭ復号画像である。
　図４に示すように、本実施の形態の映像復号装置は、多重化解除器２０１、復号制御器２０２、ＰＣＭ復号器２０３、エントロピー復号器２０４、画素ビット長増加器２０５、逆変換／逆量子化器２０６、予測器２０７、バッファ２０８、画素ビット長減少器２０９、スイッチ２２１、およびスイッチ２２２を備える。
　多重化解除器２０１は、入力されるビットストリームを多重化解除して、画素ビット長増加情報、およびエントロピー符号化もしくはＰＣＭ符号化された映像ビットストリームを抽出する。非特許文献２のSpecification of syntax functions, categories, and descriptorsに従うと、図２に示すリストに記載されているようにシーケンスパラメータのbit_depth_luma_minus8 とbit_depth_chroma_minus8 に後続する、画素ビット長増加情報（increased_bit_depth_lumaおよびincreased_bit_depth_chroma）を抽出する。
　エントロピー復号器２０４は、映像ビットストリームをエントロピー復号する。マクロブロックのmb_type がI_PCM （ＰＣＭ符号化）ではない場合には、エントロピー復号器２０４は、該マクロブロックの予測パラメータおよび変換量子化値をエントロピー復号して、逆変換／逆量子化器２０６および予測器２０７に供給する。
　逆変換／逆量子化器２０６は、多重化解除によって抽出した画素ビット長増加情報increased_bit_depth_lumaおよびincreased_bit_depth_chromaに応じた量子化ステップ幅で、輝度および色差の変換量子化値を逆量子化する。さらに、逆変換／逆量子化器２０６は、逆量子化した周波数変換係数を逆周波数変換する。
　予測器２０７は、エントロピー復号した予測パラメータに基づいて、バッファ２０８に格納された再構築ピクチャの画像を用いて予測信号を生成する。
　逆変換／逆量子化器２０６で逆周波数変換された再構築予測誤差画像は、予測器２０７から供給される予測信号が加えられた後、スイッチ２２２に供給される。
　復号制御器２０２は、予測信号が加えられた再構築予測誤差画像が再構築画像としてバッファ２０８に供給されるようにスイッチ２２２を切り替える。
　マクロブロックのmb_type がＰＣＭ符号化の場合、復号制御器２０２は、多重化解除器２０１に、エントロピー復号途中の映像ビットストリームをバイトアラインさせる。非特許文献２の7.3.5 Macroblock layer syntaxに従うと、多重化解除器２０１に、映像ビットストリームがバイトアラインするまでpcm_alignment_zero_bitを読み出させる。
　次に、復号制御器２０２は、エントロピー復号器２０４の復号エンジンを初期化させる。なお、復号エンジン初期化の一例が、非特許文献２の9.3.1.2 Initialization process for the arithmetic decoding engineに記載されている。
　続いて、復号制御器２０２は、バイトアラインした映像ビットストリームがＰＣＭ復号器２０３に供給されるようにスイッチ２２１を切り替える。
　ＰＣＭ復号器２０３は、バイトアラインした映像ビットストリームからＰＣＭ符号化された輝度データpcm_sample_luma[i]および色差データpcm_sample_chroma[i]をＰＣＭ復号（ＰＣＭデータ読み込み）する。
　画素ビット長増加器２０５は、多重化解除によって抽出された画素ビット長増加情報increased_bit_depth_lumaとincreased_bit_depth_chromaに従って、ＰＣＭデータ読み込みしたpcm_sample_luma[i]とpcm_sample_chroma[i]をそれぞれ左にビットシフトする。非特許文献２の8.3.5 Sample construction process for I_PCM macroblocks の記述に従うと、ＰＣＭ復号輝度画像S'LおよびＰＣＭ復号色差画像S'CbとS'Crは、以下の式（8-154’）および式（8-155’）によって計算される。
　for(i = 0; i < 256; i++ )
S'L[ xP + ( i % 16), yP + dy * ( i / 16)) ] = (pcm_sample_luma[ i ]<<increased_bit_depth_luma)                   （8-154'）
　for( i = 0; i < MbWidthC * MbHeightC; i++ ) {
S'Cb[ ( xP / SubWidthC ) + ( i % MbWidthC ), ( ( yP + SubHeightC － 1) / SubHeightC ) + dy * ( i / MbWidthC ) ] =
(pcm_sample_chroma[ i ]<< increased_bit_depth_chroma)
S'Cr[ ( xP / SubWidthC ) + ( i % MbWidthC ),( ( yP + SubHeightC － 1 ) / SubHeightC ) + dy * ( i / MbWidthC ) ] =
(pcm_sample_chroma[ i + MbWidthC * MbHeightC ]<< increased_bit_depth_chroma) 
}                           （8-155’）
　復号制御器２０２は、画素ビット長を増加させたＰＣＭ復号画像が再構築画像としてバッファ２０８に供給されるようにスイッチ２２２を切り替える。次マクロブロックの復号のために、復号制御器２０２は、多重化解除器２０１の出力データがエントロピー復号器２０４に供給されるようにスイッチ２２１を切り替える。
　画素ビット長減少器２０９は、多重化解除によって抽出された画素ビット長増加情報increased_bit_depth_lumaおよびincreased_bit_depth_chromaに従って、バッファ２０８に格納された再構築ピクチャの画素ビット長を減少させて出力する。
　上述した動作に基づいて、本実施形態の映像復号装置はデコード画像を生成する。
　次に、発明の特徴であるマクロブロックのmb_type がＰＣＭ符号化の場合での復号制御器２０２、エントロピー復号器２０４、ＰＣＭ復号器２０３および画素ビット長増加器２０５の動作を図５のフローチャートを参照して説明する。
　ステップＳ２０１では、多重化解除器２０１は、エントロピー復号途中の映像ビットストリームをバイトアラインさせるため、pcm_alignment_zero_bitを読み取る。
　ステップＳ２０２では、以降のエントロピー復号のために、エントロピー復号器２０４が復号エンジンを初期化する。
　ステップＳ２０３では、ＰＣＭ復号器２０３が、ＰＣＭ符号化の結果pcm_sample_luma[i]およびpcm_sample_chroma[i]をＰＣＭ復号（ＰＣＭデータ読み込み）する。
　ステップＳ２０４では、以降のイントラ予測やフレーム間予測の演算精度を高めるために、画素ビット長増加器２０５が、ＰＣＭデータ読み込みしたpcm_sample_luma[i]とpcm_sample_chroma[i]を左にそれぞれincreased_bit_depth_lumaとincreased_bit_depth_chromaでビットシフトする。
　以上のように、マクロブロックのmb_type がＰＣＭ符号化の場合において、復号制御器２０２、エントロピー復号器２０４、ＰＣＭ復号器２０３および画素ビット長増加器２０５の動作が実行される。
　本実施形態の映像復号装置は、多重化解除によって抽出された画素ビット長増加情報に基づいて、ＰＣＭ復号の復号画像の画素ビット長を増加させる画素ビット長増加器２０５を備える。画素ビット長増加器２０５を備えることによって、エントロピー復号手段とＰＣＭ復号手段のそれぞれの入力に対応する画像の画素ビット長を異ならせることに起因する、イントラ予測やフレーム間予測の演算精度低下を抑制できる。また、映像復号と同一の再構築画像が得られるので、映像符号化装置と映像復号装置の相互運用性を高めることができる。すなわち、映像符号化装置と映像復号装置とが共動して、システムにおけるＰＣＭ符号化の増加を抑制できるとともに、イントラ予測やフレーム間予測の演算精度低下を抑制できる。
　図１に示された第１実施形態の映像符号化装置は、エントロピー符号化の出力データとＰＣＭ符号化の出力データのそれぞれに対応する画像の画素ビット長を互いに異ならせるために、画素ビット長を増加させる前の入力画像をＰＣＭ符号化器１０７に供給する映像符号化装置であった。
　図６は、図１に示された映像符号化装置と同等の効果を奏する他の構成の映像符号化装置を示すブロック図である。
　図１に示された映像符号化装置と比較すると、図６に示す映像符号化装置には、画素ビット長減少器１１２が追加されている。すなわち、図６に示す映像符号化装置では、画素ビット長増加した画像を入力する画素ビット長減少器１１２が、画素ビット長増加情報に基づいて画素ビット長減少させた画像をＰＣＭ符号化器１０７に供給する構成となっている。第１の実施形態と同様に、図６に示す映像符号化装置は、ＰＣＭ符号化の出力データの増加を抑制でき、かつ、画素ビット長を異ならせることに起因するイントラ予測やフレーム間予測の演算精度低下を抑制できる。
　また、上記の各実施形態では、再構築ピクチャの画素は画素ビット長増加された画素である。しかし、再構築ピクチャを格納するバッファサイズを削減するために、バッファの入出力に上記の画素ビット長増加器および画素ビット長減少器を利用する実施形態も考えられる。そのような実施形態においても、本発明によれば、ＰＣＭ符号化の出力データの増加抑制、及び、前記画素ビット長を互いに異ならせることに起因する、イントラ予測の演算精度低下抑制を両立できる。
　また、上記の各実施形態では、ＰＣＭ復号器と画素ビット長増加器とは独立した機能ブロックであった。しかし、式（8-154’）および式（8-155’）から容易に類推できるように、ＰＣＭ復号器と画素ビット長増加器とを統合して一つの機能ブロックとすることも可能である。
　また、上記の各実施形態では、映像符号化装置は、明示的に画素ビット長増加情報を映像復号装置にシグナリングするために、bit_depth_luma_minus8 とbit_depth_chroma_minus8 に後続して、increased_bit_depth_lumaおよびincreased_bit_depth_chromaをビットストリームに多重化した（図２参照）。しかし、映像符号化装置は、暗黙的に画素ビット長増加情報を映像復号装置にシグナリングするために、画素ビット長増加情報として画素ビット長増加後の画素ビット長情報をそのままビットストリームに多重化することも可能である（ただし、映像符号化装置と映像復号装置において、入力映像の元の画素ビット長を例えば８ビットと想定する。）。
　この場合、映像符号化装置は、シーケンスパラメータのbit_depth_luma_minus8 とbit_depth_chroma_minus8 の代わりに、図７に示す画素ビット長増加情報（internal_bit_depth_luma_minus8およびinternal_bit_depth_chroma_minus8）をシーケンスパラメータに多重化する。ただし、internal_bit_depth_luma_minus8 はincreased_bit_depth_lumaの値、internal_bit_depth_chroma_minus8 はincreased_bit_depth_chromaの値である。
　図７に示す画素ビット長増加情報をシーケンスパラメータに多重化する場合、ＰＣＭ符号化器１０７は、画素ビット長を増加させる前の入力画像をＰＣＭ符号化する。すなわち、ＰＣＭ符号化器１０７は、８ビットのpcm_sample_luma[i]およびpcm_sample_croma[i] をＰＣＭ符号化する。ＰＣＭ復号器１０８は、８ビットのpcm_sample_luma[i]およびpcm_sample_croma[i] をＰＣＭ復号する。画素ビット長増加器１１１は、ＰＣＭ復号したpcm_sample_luma[i]とpcm_sample_chroma[i]をそれぞれincreased_bit_depth_lumaとincreased_bit_depth_chromaだけ左にビットシフトする。
　図７に示す画素ビット長増加情報をシーケンスパラメータに多重化する場合に対応する映像復号装置は、画素ビット長増加情報（internal_bit_depth_luma_minus8およびinternal_bit_depth_chroma_minus8）をシーケンスパラメータから多重化解除し、increased_bit_depth_lumaおよびincreased_bit_depth_chromaを以下のように計算する。
　increased_bit_depth_luma = internal_bit_depth_luma_minus8 
　increased_bit_depth_chroma = internal_bit_depth_chroma_minus8 
　上記の計算によって、映像復号装置は、映像符号化装置が暗黙的にシグナリングした画素ビット長増加情報を多重化解除できる。
　なお、上述した映像符号化装置が暗黙的に画素ビット長増加情報を映像復号装置にシグナリングする場合において、入力映像の元の画素ビット長が８ビットよりも長い場合に無歪みでＰＣＭ符号化できなくなる問題がある。例えば、入力映像の元の画素ビット長が１０ビットである場合に８ビットのpcm_sample_luma[i]およびpcm_sample_croma[i] では量子化歪みが発生する。
　入力映像の元の画素ビット長がＮビット（Ｎ＞８）である場合に量子化歪みなしのＰＣＭ符号化をサポートするために、図８に示すように、ＰＣＭのビット長が画素ビット長増加後の画素ビット長であるか否かを示すフラグpcm_sample_bit_depth_is_internal_bit_depth_flag をシーケンスパラメータに追加してもよい。
　pcm_sample_bit_depth_is_internal_bit_depth_flag が０の場合、ＰＣＭ符号化器１０７は、画素ビット長を増加させる前の入力画像をＰＣＭ符号化する。すなわち、ＰＣＭ符号化器１０７は、８ビットのpcm_sample_luma[i]およびpcm_sample_croma[i]　をＰＣＭ符号化する。ＰＣＭ復号器１０８は、８ビットのpcm_sample_luma[i]およびpcm_sample_croma[i] をＰＣＭ復号する。また、画素ビット長増加器１１１は、ＰＣＭ復号したpcm_sample_luma[i]とpcm_sample_chroma[i]をそれぞれincreased_bit_depth_luma（＝internal_bit_depth_luma_minus8）とincreased_bit_depth_chroma（＝internal_bit_depth_chroma_minus8 ）だけ左にビットシフトする。
　pcm_sample_bit_depth_is_internal_bit_depth_flag が１の場合、ＰＣＭ符号化器１０７は、画素ビット長を増加した画像をＰＣＭ符号化する。すなわち、ＰＣＭ符号化器１０７は、Ｎビット（internal_bit_depth_luma_minus8＋８ビット）のpcm_sample_luma[i]およびＮビット（internal_bit_depth_chroma_minus8＋８ビット）のpcm_sample_croma[i] をＰＣＭ符号化する。ＰＣＭ復号器１０８は、Ｎビットのpcm_sample_luma[i]およびＮビットのpcm_sample_croma[i]をＰＣＭ復号する。また、画素ビット長増加器１１１は、ＰＣＭ復号したpcm_sample_luma[i]とpcm_sample_chroma[i] を０ビットだけ左にビットシフトする（すなわち、左にビットシフトをしない）。
　また、入力映像の元の画素ビット長がＮビット（Ｎ＞８）である場合に量子化歪みなしのＰＣＭ符号化をサポートするために、pcm_sample_bit_depth_is_internal_bit_depth_flag の代わりに、図９に示すように、輝度および色差それぞれのＰＣＭのビット長pcm_sample_bit_depth_luma_minus8およびpcm_sample_bit_depth_chroma_minus8をシーケンスパラメータに追加してもよい。
　pcm_sample_bit_depth_luma_minus8およびpcm_sample_bit_depth_chroma_minus8をシーケンスパラメータに追加する場合、ＰＣＭ符号化器１０７は、pcm_sample_bit_depth_luma_minus8＋８ ビットのpcm_sample_luma[i]およびpcm_sample_bit_depth_chroma_minus8＋８ ビットのpcm_sample_croma[i] をＰＣＭ符号化する。pcm_sample_bit_depth_luma_minus8およびpcm_sample_bit_depth_chroma_minus8をシーケンスパラメータに追加する場合に対応するＰＣＭ復号器１０８は、pcm_sample_bit_depth_luma_minus8＋８ビットのpcm_sample_luma[i]およびpcm_sample_bit_depth_chroma_minus8＋８ビットのpcm_sample_croma[i] をＰＣＭ復号する。また、画素ビット長増加器１１１は、ＰＣＭ復号したpcm_sample_luma[i]とpcm_sample_chroma[i]をそれぞれincreased_bit_depth_lumaとincreased_bit_depth_chromaビットだけ左にビットシフトする。ただし、increased_bit_depth_lumaおよびincreased_bit_depth_chromaを以下のように計算する。
　increased_bit_depth_luma = internal_bit_depth_luma_minus8 - pcm_sample_bit_depth_luma_minus8
　increased_bit_depth_chroma = internal_bit_depth_chroma_minus8 - pcm_sample_bit_depth_chroma_minus8
　上記の計算から明らかなように、increased_bit_depth_lumaが０よりも大きく、かつ、internal_bit_depth_luma_minus8＋８がＮ未満である場合、映像符号化装置が暗黙的に画素ビット長増加情報を映像復号装置にシグナリングしたことを意味する。同様に、internal_bit_depth_chroma_minus8＋８がＮ未満である場合、映像符号化装置が暗黙的に画素ビット長増加情報を映像復号装置にシグナリングしたことを意味する。
　また、上記の各実施形態を、ハードウェアで構成することも可能であるが、コンピュータプログラムにより実現することも可能である。
　図１０に示す情報処理システムは、プロセッサ１００１、プログラムメモリ１００２、映像データを格納するための記憶媒体１００３およびビットストリームを格納するための記憶媒体１００４を備える。記憶媒体１００３と記憶媒体１００４とは、別個の記憶媒体であってもよいし、同一の記憶媒体からなる記憶領域であってもよい。記憶媒体として、ハードディスク等の磁気記憶媒体を用いることができる。
　図１０に示された情報処理システムにおいて、プログラムメモリ１００２には、図１，図４，図６のそれぞれに示された各ブロック（バッファのブロックを除く）の機能を実現するためのプログラムが格納される。そして、プロセッサ１００１は、プログラムメモリ１００２に格納されているプログラムに従って処理を実行することによって、図１，図４，図６のそれぞれに示された映像符号化装置または映像復号装置の機能を実現する。
　図１１は、本発明による映像符号化装置の主要部を示すブロック図である。図１１に示すように、本発明による映像符号化装置は、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させる画素ビット長増加手段１（一例として、図１に示す画素ビット長増加器１０１）と、画素ビット長増加手段１の出力データを変換する変換手段２（一例として、図１に示す変換／量子化器１０２）と、変換手段２の出力データをエントロピー符号化するエントロピー符号化手段３（一例として、図１に示すエントロピー符号化器１０３）と、入力データを非圧縮符号化する非圧縮符号化手段７（一例として、ＰＣＭ符号化器１０７）と、エントロピー符号化手段３と非圧縮符号化手段７のいずれかの出力データを選択する多重化データ選択手段８（一例として、スイッチ１２１）と、画素ビット長増加情報をビットストリームに多重化する多重化手段１０（一例として、多重化器１１０）とを備え、エントロピー符号化手段３と非圧縮符号化手段７のそれぞれの出力データに対応する画像の画素ビット長は、異なっている。
　画素ビット長を互いに異ならせるために、一例として、画素ビット長を増加させる前の入力画像を非圧縮符号化手段７に供給させる手段を備える。そのように構成されている場合には、画素ビット長増加されていない入力画像をそのまま非圧縮符号化（例えば、ＰＣＭ符号化）する。
　図１２は、本発明による他の映像符号化装置の主要部を示すブロック図である。図１２に示すように、本発明による他の映像符号化装置は、図１１に示す構成に加えて、画素ビット長増加情報に基づいて、画素ビット長を減少させる画素ビット長減少手段９（一例として、図６に示す画素ビット長減少器１１２）を備え、非圧縮符号化手段７の入力データは画素ビット長減少手段９の出力データである。
　図１３は、本発明による別の映像符号化装置の主要部を示すブロック図である。図１３に示すように、本発明による別の映像符号化装置は、図１１に示す構成に加えて、画像を予測する予測手段１０（一例として、図１に示す予測器１０６）と、変換手段２の出力データを逆変換する逆変換手段１２（一例として、図１に示す逆変換／逆量子化器１０４）と、非圧縮符号化手段７の出力データを復号する非圧縮復号手段１３（一例として、図１に示すＰＣＭ復号器１０８）とを備え、非圧縮復号手段１３は、少なくとも画素ビット長増加情報に基づいて、非圧縮復号した復号画像を画素ビット長増加させる。
　図１４は、本発明による映像復号装置の主要部を示すブロック図である。図１４に示すように、本発明による映像復号装置は、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する多重化解除手段２１（一例として、図４に示す多重化解除器２０１）と、ビットストリームに含まれる画像の変換データをエントロピー復号するエントロピー復号手段２４（一例として、図４に示すエントロピー復号器２０４）と、エントロピー復号した画像の変換データを逆変換する逆変換手段２６（一例として、図４に示す逆変換／逆量子化器２０６）と、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する非圧縮復号手段２３（一例として、図４に示すＰＣＭ復号器２０３）と、エントロピー復号手段２４および非圧縮復号手段２３を制御する復号制御手段２２（一例として、図４に示す復号制御部２０２）とを備え、エントロピー復号手段２４と非圧縮復号手段２３のそれぞれの入力データに対応する画像の画素ビット長が互いに異なっている。
　図１５は、本発明による他の映像復号装置の主要部を示すブロック図である。図１５に示すように、本発明による他の映像復号装置は、図１４に示す構成に加えて、画像を予測する予測手段２７（一例として、図４に示す予測器２０７）を備えている。
　以上に説明したように、本発明は、画素ビット長増加と非圧縮符号化に基づいた映像符号化において、エントロピー符号化と非圧縮符号化のそれぞれ出力データに対応する画像の画素ビット長を互いに異ならせる手段を提供する。そして、本発明は、イントラ予測やフレーム間予測の演算精度を画素ビット長拡張によって高めることと、ある一定の処理時間を映像符号化装置や映像復号装置に保証することとを両立しながら、画素ビット長増加分だけＰＣＭ符号化の出力データが増加する課題を解決できる。
　上記の実施形態の一部または全部は以下の付記のようにも記載されうるが、本発明の構成は以下の構成に限定されない。
（付記１）画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換し、変換したデータをエントロピー符号化し、入力データを非圧縮符号化し、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択し、画素ビット長増加情報をビットストリームに多重化する映像符号化方法であって、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、非圧縮符号化の入力データとして画素ビット長を増加させる前の入力画像を用いる映像符号化方法。
（付記２）画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換し、変換したデータをエントロピー符号化し、入力データを非圧縮符号化し、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択し、画素ビット長増加情報をビットストリームに多重化する映像符号化方法であって、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、さらに、画素ビット長を増加させたデータを対象として画素ビット長増加情報に基づいて画素ビット長を減少させ、非圧縮符号化の入力データとして、画素ビット長を減少させたデータを用いる映像符号化方法。
（付記３）画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換し、変換したデータをエントロピー符号化し、入力データを非圧縮符号化し、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択し、画素ビット長増加情報をビットストリームに多重化する映像符号化方法であって、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、さらに、変換したデータを逆変換し、非圧縮符号化したデータを復号し、復号するときに少なくとも画素ビット長増加情報に基づいて非圧縮復号した復号画像を画素ビット長増加させる映像符号化方法。
（付記４）少なくとも画素ビット長増加情報を含むビットストリームを多重化解除し、ビットストリームに含まれる画像の変換データをエントロピー復号し、エントロピー復号した画像の変換データを逆変換し、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する映像復号方法であって、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なり、非圧縮復号するときに少なくとも画素ビット長増加情報に基づいて非圧縮復号した復号画像を画素ビット長増加させる映像復号方法。
（付記５）少なくとも画素ビット長増加情報を含むビットストリームを多重化解除し、ビットストリームに含まれる画像の変換データをエントロピー復号し、エントロピー復号した画像の変換データを逆変換し、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する映像復号方法であって、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なり、画像を予測する予測処理を実行する映像復号方法。
（付記６）コンピュータに、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換する処理と、変換したデータをエントロピー符号化する処理と、入力データを非圧縮符号化する処理と、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択する処理と、画素ビット長増加情報をビットストリームに多重化する処理とを実行させ、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、非圧縮符号化の入力データとして画素ビット長を増加させる前の入力画像を用いる映像符号化プログラム。
（付記７）コンピュータに、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換する処理と、変換したデータをエントロピー符号化する処理と、入力データを非圧縮符号化する処理と、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択する処理と、画素ビット長増加情報をビットストリームに多重化する処理とを実行させ、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、さらに、画素ビット長を増加させたデータを対象として画素ビット長増加情報に基づいて画素ビット長を減少させる処理をコンピュータに実行させ、非圧縮符号化の入力データとして、画素ビット長を減少させたデータを用いる映像符号化プログラム。
（付記８）コンピュータに、画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換する処理と、変換したデータをエントロピー符号化する処理と、入力データを非圧縮符号化する処理と、エントロピー符号化したデータと非圧縮符号化したデータのいずれかを選択する処理と、画素ビット長増加情報をビットストリームに多重化する処理とを実行させ、エントロピー符号化したデータと非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なり、さらに、コンピュータに、変換したデータを逆変換する処理と、非圧縮符号化したデータを復号する処理とを実行させ、復号するときに少なくとも画素ビット長増加情報に基づいて非圧縮復号した復号画像を画素ビット長増加させる処理をコンピュータに実行させる映像符号化プログラム。
（付記９）コンピュータに、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する処理と、ビットストリームに含まれる画像の変換データをエントロピー復号する処理と、エントロピー復号した画像の変換データを逆変換する処理と、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号するする処理とを実行させ、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なり、非圧縮復号するときに少なくとも画素ビット長増加情報に基づいて非圧縮復号した復号画像を画素ビット長増加させる処理をコンピュータに実行させる映像復号プログラム。
（付記１０）コンピュータに、少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する処理と、ビットストリームに含まれる画像の変換データをエントロピー復号する処理と、エントロピー復号した画像の変換データを逆変換する処理と、ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号するする処理とを実行させ、ビットストリームに含まれる画像の変換データとビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なり、画像を予測する予測処理をコンピュータに実行させる映像復号プログラム。
　以上、実施形態および実施例を参照して本願発明を説明したが、本願発明は上記実施形態および実施例に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
　この出願は、２０１０年７月１３日に出願された日本特許出願２０１０－１５９０５９および２０１１年２月２５日に出願された日本特許出願２０１１－０４０５３０を基礎とする優先権を主張し、その開示の全てをここに取り込む。
　１　　　画素ビット長増加手段
　２　　　変換手段
　３　　　エントロピー符号化手段
　７　　　非圧縮符号化手段
　８　　　多重化データ選択手段
　９　　　画素ビット長減少手段
　１０　　多重化手段
　１１　　予測手段
　１２　　逆変換手段
　１３　　非圧縮復号手段
　２１　　多重化解除手段
　２２　　復号制御手段
　２３　　非圧縮復号手段
　２４　　エントロピー復号手段
　２６　　逆変換手段
　２７　　予測手段
　１０１　画素ビット長増加器
　１０２　変換／量子化器
　１０３　エントロピー符号化器
　１０４　逆変換／逆量子化器
　１０５　バッファ
　１０６　予測器
　１０７　ＰＣＭ符号化器
　１０８　ＰＣＭ復号器
　１０９　多重化データ選択器
　１１０　多重化器
　１１１　画素ビット長増加器
　１１２　画素ビット長減少器
　１２１　スイッチ
　１２２　スイッチ
　２０１　多重化解除器
　２０２　復号制御部
　２０３　ＰＣＭ復号器
　２０４　エントロピー復号器
　２０５　画素ビット長増加器
　２０６　逆変換／逆量子化器
　２０７　予測器
　２０８　バッファ
　２０９　画素ビット長減少器
　２２１　スイッチ
　２２２　スイッチ
　１００１　プロセッサ
　１００２　プログラムメモリ
　１００３　記憶媒体
　１００４　記憶媒体

Claims (11)

  1. 　画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させる画素ビット長増加手段と、
    　前記画素ビット長増加手段の出力データを変換する変換手段と、
    　前記変換手段の出力データをエントロピー符号化するエントロピー符号化手段と、
    　入力データを非圧縮符号化する非圧縮符号化手段と、
    　前記エントロピー符号化手段と前記非圧縮符号化手段のいずれかの出力データを選択する多重化データ選択手段と、
    　前記画素ビット長増加情報をビットストリームに多重化する多重化手段とを備える映像符号化装置であって、
    　前記エントロピー符号化手段と前記非圧縮符号化手段のそれぞれの出力データに対応する画像の画素ビット長が互いに異なることを特徴とする映像符号化装置。
  2. 　前記非圧縮符号化手段の入力データは画素ビット長を増加させる前の入力画像であることを特徴とする請求項１記載の映像符号化装置。
  3. 　前記画素ビット長増加情報に基づいて画素ビット長を減少させる画素ビット長減少手段を備え、
    　前記非圧縮符号化手段の入力データは前記画素ビット長減少手段の出力データであることを特徴とする請求項１記載の映像符号化装置。
  4. 　画像を予測する予測手段と、
    　前記変換手段の出力データを逆変換する逆変換手段と、
    　前記非圧縮符号化手段の出力データを復号する非圧縮復号手段とを備え、
    　前記非圧縮復号手段は、少なくとも前記画素ビット長増加情報に基づいて、非圧縮復号した復号画像を画素ビット長増加させることを特徴とする請求項１から請求項３のうちのいずれか１項に記載の映像符号化装置。
  5. 　少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する多重化解除手段と、
    　前記ビットストリームに含まれる画像の変換データをエントロピー復号するエントロピー復号手段と、
    　前記エントロピー復号した画像の変換データを逆変換する逆変換手段と、
    　前記ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する非圧縮復号手段と、
    　前記エントロピー復号手段および前記非圧縮復号手段を制御する復号制御手段とを備える映像復号装置であって、
    　前記エントロピー復号手段と前記非圧縮復号手段のそれぞれの入力データに対応する画像の画素ビット長が互いに異なることを特徴とする映像復号装置。
  6. 　前記非圧縮復号手段は、少なくとも前記画素ビット長増加情報に基づいて、非圧縮復号した復号画像を画素ビット長増加させることを特徴とする請求項５記載の映像復号装置。
  7. 　画像を予測する予測手段を備えることを特徴とする請求項６記載の映像復号装置。
  8. 　画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換し、
    　変換した前記データをエントロピー符号化し、
    　入力データを非圧縮符号化し、
    　前記エントロピー符号化したデータと前記非圧縮符号化したデータのいずれかを選択し、
    　前記画素ビット長増加情報をビットストリームに多重化する映像符号化方法であって、
    　前記エントロピー符号化したデータと前記非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする映像符号化方法。
  9. 　少なくとも画素ビット長増加情報を含むビットストリームを多重化解除し、
    　前記ビットストリームに含まれる画像の変換データをエントロピー復号し、
    　前記エントロピー復号した画像の変換データを逆変換し、
    　前記ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号する映像復号方法であって、
    　前記ビットストリームに含まれる画像の変換データと前記ビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする映像復号方法。
  10. 　コンピュータに、
    　画素ビット長増加情報に基づいて入力画像の画素ビット長を増加させたデータを変換する処理と、
    　変換した前記データをエントロピー符号化する処理と、
    　入力データを非圧縮符号化する処理と、
    　前記エントロピー符号化したデータと前記非圧縮符号化したデータのいずれかを選択する処理と、
    　前記画素ビット長増加情報をビットストリームに多重化する処理とを実行させるための映像符号化プログラムであって、
    　前記エントロピー符号化したデータと前記非圧縮符号化したデータのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする映像符号化プログラム。
  11. 　コンピュータに、
    　少なくとも画素ビット長増加情報を含むビットストリームを多重化解除する処理と、
    　前記ビットストリームに含まれる画像の変換データをエントロピー復号する処理と、
    　前記エントロピー復号した画像の変換データを逆変換する処理と、
    　前記ビットストリームに含まれる画像の非圧縮符号化データを非圧縮復号するする処理とを実行させるための映像復号プログラムであって、
    　前記ビットストリームに含まれる画像の変換データと前記ビットストリームに含まれる画像の非圧縮符号化データのそれぞれに対応する画像の画素ビット長が互いに異なることを特徴とする映像復号プログラム。
PCT/JP2011/003927 2010-07-13 2011-07-08 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム WO2012008130A1 (ja)

Priority Applications (19)

Application Number Priority Date Filing Date Title
PL11806465T PL2595379T3 (pl) 2010-07-13 2011-07-08 Dekoder wideo, sposób dekodowania wideo i program do dekodowania wideo
US13/695,461 US9210427B2 (en) 2010-07-13 2011-07-08 Video encoding device, video decoding device, video encoding method, video decoding method, and program
BR112013000579-3A BR112013000579B1 (pt) 2010-07-13 2011-07-08 Dispositivo de decodificação de vídeo e método de decodificação de vídeo
KR1020147024227A KR101538362B1 (ko) 2010-07-13 2011-07-08 영상 복호 장치, 영상 복호 방법 및 영상 복호 프로그램을 저장한 컴퓨터 판독 가능한 저장 매체
KR1020147008017A KR101513507B1 (ko) 2010-07-13 2011-07-08 영상 복호 장치, 영상 복호 방법 및 프로그램을 저장한 컴퓨터 판독가능한 정보 기록 매체
BR122022001405-4A BR122022001405B1 (pt) 2010-07-13 2011-07-08 Dispositivo de decodificação de vídeo e método de decodificação de vídeo
EP11806465.8A EP2595379B1 (en) 2010-07-13 2011-07-08 Video decoder, video decoding method, and video decoding program
JP2012524445A JP5807638B2 (ja) 2010-07-13 2011-07-08 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム
KR1020127029824A KR101435095B1 (ko) 2010-07-13 2011-07-08 영상 부호화 장치, 영상 복호 장치, 영상 부호화 방법, 영상 복호 방법 및 프로그램을 기록한 컴퓨터 판독 가능한 정보 기록 매체
BR122020015660-0A BR122020015660B1 (pt) 2010-07-13 2011-07-08 Dispositivo de decodificação de vídeo e método de decodificação de vídeo
BR122022001404-6A BR122022001404B1 (pt) 2010-07-13 2011-07-08 Dispositivo de decodificação de vídeo e método de decodificação de vídeo
BR122020015661-9A BR122020015661B1 (pt) 2010-07-13 2011-07-08 Dispositivo de decodificação de vídeo e método de decodificação de vídeo
EP20194967.4A EP3787286A1 (en) 2010-07-13 2011-07-08 Video decoder, video decoding method, and program with variable pixel bit length information
CN201180034498.8A CN103004191B (zh) 2010-07-13 2011-07-08 视频编码装置、视频解码装置、视频编码方法、视频解码方法以及程序
HK13109649.1A HK1182563A1 (zh) 2010-07-13 2013-08-19 視頻編碼裝置、視頻解碼裝置、視頻編碼方法、視頻解碼方法以及程序
US14/931,305 US9936212B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video encoding method, video decoding method, and program
US14/931,181 US9532073B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video decoding method, video decoding method, and program
US14/931,271 US9510011B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video encoding method, video decoding method, and program
US15/344,635 US10097847B2 (en) 2010-07-13 2016-11-07 Video encoding device, video decoding device, video encoding method, video decoding method, and program

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2010159059 2010-07-13
JP2010-159059 2010-07-13
JP2011040530 2011-02-25
JP2011-040530 2011-02-25

Related Child Applications (4)

Application Number Title Priority Date Filing Date
US13/695,461 A-371-Of-International US9210427B2 (en) 2010-07-13 2011-07-08 Video encoding device, video decoding device, video encoding method, video decoding method, and program
US14/931,181 Continuation US9532073B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video decoding method, video decoding method, and program
US14/931,271 Continuation US9510011B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video encoding method, video decoding method, and program
US14/931,305 Continuation US9936212B2 (en) 2010-07-13 2015-11-03 Video encoding device, video decoding device, video encoding method, video decoding method, and program

Publications (1)

Publication Number Publication Date
WO2012008130A1 true WO2012008130A1 (ja) 2012-01-19

Family

ID=45469148

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/003927 WO2012008130A1 (ja) 2010-07-13 2011-07-08 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム

Country Status (9)

Country Link
US (5) US9210427B2 (ja)
EP (2) EP2595379B1 (ja)
JP (5) JP5807638B2 (ja)
KR (3) KR101435095B1 (ja)
CN (6) CN105847813B (ja)
BR (5) BR122022001405B1 (ja)
HK (4) HK1220842A1 (ja)
PL (1) PL2595379T3 (ja)
WO (1) WO2012008130A1 (ja)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012096201A1 (ja) * 2011-01-11 2012-07-19 ソニー株式会社 画像処理装置および方法
WO2012114724A1 (ja) * 2011-02-22 2012-08-30 パナソニック株式会社 フィルタ方法、動画像符号化装置、動画像復号装置及び動画像符号化復号装置
WO2012114725A1 (ja) * 2011-02-22 2012-08-30 パナソニック株式会社 画像符号化方法、画像復号化方法、画像符号化装置、画像復号化装置および画像符号化復号化装置
JP2014511649A (ja) * 2011-03-04 2014-05-15 クゥアルコム・インコーポレイテッド ビデオコーディングにおける量子化パルスコード変調
JP2014099895A (ja) * 2014-01-10 2014-05-29 Sony Corp 画像処理装置および方法
US8787467B2 (en) 2011-07-19 2014-07-22 Panasonic Corporation Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
JP2016054533A (ja) * 2015-11-25 2016-04-14 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2016067022A (ja) * 2015-11-25 2016-04-28 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2017135727A (ja) * 2017-03-03 2017-08-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2017135728A (ja) * 2017-03-03 2017-08-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
US9948956B2 (en) 2014-06-16 2018-04-17 Thomson Licensing Method for encoding and decoding image block, encoder and decoder

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
PL2595379T3 (pl) 2010-07-13 2021-05-04 Nec Corporation Dekoder wideo, sposób dekodowania wideo i program do dekodowania wideo
WO2013064548A2 (en) * 2011-11-03 2013-05-10 Panasonic Corporation Quantization parameter for blocks coded in the pcm mode
WO2014002385A1 (ja) * 2012-06-25 2014-01-03 日本電気株式会社 映像符号化／復号装置、方法、プログラム
US9978156B2 (en) * 2012-10-03 2018-05-22 Avago Technologies General Ip (Singapore) Pte. Ltd. High-throughput image and video compression
US9501864B2 (en) * 2013-12-27 2016-11-22 Intel Corporation Adaptive depth offset compression
US9571468B2 (en) * 2014-01-05 2017-02-14 Whovoo, Inc. Encoding data using a variable number of pixels and bits based on entropy
US10171823B2 (en) * 2014-05-26 2019-01-01 Sharp Kabushiki Kaisha Image decoding device and image coding device
KR101638154B1 (ko) 2014-07-29 2016-07-12 주식회사 더즈텍 레퍼런스 클럭으로 동작하는 클럭 데이터 복원 회로, 데이터 수신 장치 및 그 방법
KR101654767B1 (ko) 2015-05-29 2016-09-07 주식회사 더즈텍 온 칩 레퍼런스 클럭으로 동작하는 위상 고정 루프, 클럭 데이터 복원 회로, 및 데이터 수신 장치
WO2018123801A1 (ja) * 2016-12-28 2018-07-05 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 三次元モデル配信方法、三次元モデル受信方法、三次元モデル配信装置及び三次元モデル受信装置
DE102018122297A1 (de) * 2018-09-12 2020-03-12 Arnold & Richter Cine Technik Gmbh & Co. Betriebs Kg Verfahren zur Kompression und Dekompression von Bilddaten

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004135251A (ja) 2002-10-10 2004-04-30 Sony Corp 画像情報符号化方法及び画像情報復号方法
WO2007116551A1 (ja) * 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
JP2008022383A (ja) * 2006-07-13 2008-01-31 Matsushita Electric Ind Co Ltd 画像符号化装置
WO2009031648A1 (ja) * 2007-09-06 2009-03-12 Nec Corporation 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、映像符号化あるいは復号プログラム
WO2010038587A1 (ja) * 2008-10-01 2010-04-08 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、動画像復号プログラム、及び動画像符号化・復号システム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4861335A (en) 1985-07-26 1989-08-29 Duoject Medical Systems Inc. Syringe
JP4214440B2 (ja) * 2000-10-19 2009-01-28 ソニー株式会社 データ処理装置およびデータ処理方法、並びに記録媒体
US20060126744A1 (en) * 2004-12-10 2006-06-15 Liang Peng Two pass architecture for H.264 CABAC decoding process
JP4440863B2 (ja) * 2005-09-13 2010-03-24 パナソニック株式会社 符号化復号化装置、符号化復号化方法、符号化復号化集積回路、および符号化復号化プログラム
CN100466741C (zh) * 2005-11-11 2009-03-04 北京微视讯通数字技术有限公司 利用视频信号帧间相关性进行编码的方法和装置
US20070122045A1 (en) * 2005-11-29 2007-05-31 Jiun-Yuan Wu System for scaling a picture unit from a first video resolution format to a second video resolution format
JP4384130B2 (ja) 2006-03-28 2009-12-16 株式会社東芝 動画像復号方法及び装置
CN101589625B (zh) * 2006-10-25 2011-09-21 弗劳恩霍夫应用研究促进协会 质量可缩放编码
KR100837410B1 (ko) * 2006-11-30 2008-06-12 삼성전자주식회사 주관적인 무손실 이미지 데이터 압축 방법 및 장치
US8107751B2 (en) * 2007-03-16 2012-01-31 Sharp Laboratories Of America, Inc. DPCM with adaptive range and PCM escape mode
JP4829836B2 (ja) 2007-04-26 2011-12-07 キヤノン株式会社 画像符号化装置、画像符号化装置の制御方法、コンピュータプログラム、復号装置、及びコンピュータ可読記憶媒体
JP4983415B2 (ja) * 2007-06-11 2012-07-25 ソニー株式会社 画像信号処理装置、画像信号処理方法及びプログラム
EP2051527A1 (en) * 2007-10-15 2009-04-22 Thomson Licensing Enhancement layer residual prediction for bit depth scalability using hierarchical LUTs
JP2010159059A (ja) 2009-01-06 2010-07-22 Asahi Kogyo Kk 包装容器
JP5408655B2 (ja) 2009-08-10 2014-02-05 米沢ダイヤエレクトロニクス株式会社 プリント配線板及びその製造方法
PL2595379T3 (pl) * 2010-07-13 2021-05-04 Nec Corporation Dekoder wideo, sposób dekodowania wideo i program do dekodowania wideo
US20120087411A1 (en) * 2010-10-12 2012-04-12 Apple Inc. Internal bit depth increase in deblocking filters and ordered dither
US8923389B1 (en) * 2011-01-13 2014-12-30 Zenverge, Inc. Unified scaling with differential coding for internal bit depth extension and reference frame compression

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004135251A (ja) 2002-10-10 2004-04-30 Sony Corp 画像情報符号化方法及び画像情報復号方法
WO2007116551A1 (ja) * 2006-03-30 2007-10-18 Kabushiki Kaisha Toshiba 画像符号化装置及び画像符号化方法並びに画像復号化装置及び画像復号化方法
JP2008022383A (ja) * 2006-07-13 2008-01-31 Matsushita Electric Ind Co Ltd 画像符号化装置
WO2009031648A1 (ja) * 2007-09-06 2009-03-12 Nec Corporation 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法、映像符号化あるいは復号プログラム
WO2010038587A1 (ja) * 2008-10-01 2010-04-08 株式会社エヌ・ティ・ティ・ドコモ 動画像符号化装置、動画像復号装置、動画像符号化方法、動画像復号方法、動画像符号化プログラム、動画像復号プログラム、及び動画像符号化・復号システム

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
REIKO NODA; TAKESHI CHUJOH: "Improving Video Coding Efficiency by Pixel Bit-depth Increase", FORUM ON INFORMATION TECHNOLOGY, vol. J-009, 2006, pages 2006
See also references of EP2595379A4

Cited By (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9270987B2 (en) 2011-01-11 2016-02-23 Sony Corporation Image processing apparatus and method
JP2012147191A (ja) * 2011-01-11 2012-08-02 Sony Corp 画像処理装置および方法
US10979739B2 (en) 2011-01-11 2021-04-13 Velos Media, Llc Image processing apparatus and method
US10432976B2 (en) 2011-01-11 2019-10-01 Velos Media, Llc Image processing apparatus and method
US10027987B2 (en) 2011-01-11 2018-07-17 Sony Corporation Image processing apparatus and method
US9894387B2 (en) 2011-01-11 2018-02-13 Sony Corporation Image processing apparatus and method
WO2012096201A1 (ja) * 2011-01-11 2012-07-19 ソニー株式会社 画像処理装置および方法
US9489749B2 (en) 2011-02-22 2016-11-08 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
US9961352B2 (en) 2011-02-22 2018-05-01 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
US8660375B2 (en) 2011-02-22 2014-02-25 Panasonic Corporation Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
WO2012114724A1 (ja) * 2011-02-22 2012-08-30 パナソニック株式会社 フィルタ方法、動画像符号化装置、動画像復号装置及び動画像符号化復号装置
US10798391B2 (en) 2011-02-22 2020-10-06 Tagivan Ii Llc Filtering method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus
US10602159B2 (en) 2011-02-22 2020-03-24 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
US8855435B2 (en) 2011-02-22 2014-10-07 Panasonic Intellectual Property Corporation Of America Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
US8917946B2 (en) 2011-02-22 2014-12-23 Panasonic Intellectual Property Corporation Of America Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
JP2014003660A (ja) * 2011-02-22 2014-01-09 Panasonic Corp 画像復号方法及び画像復号装置
US10511844B2 (en) 2011-02-22 2019-12-17 Tagivan Ii Llc Filtering method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus
WO2012114725A1 (ja) * 2011-02-22 2012-08-30 パナソニック株式会社 画像符号化方法、画像復号化方法、画像符号化装置、画像復号化装置および画像符号化復号化装置
JP2014003659A (ja) * 2011-02-22 2014-01-09 Panasonic Corp 画像符号化復号装置
US10237562B2 (en) 2011-02-22 2019-03-19 Sun Patent Trust Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus
JP5341277B2 (ja) * 2011-02-22 2013-11-13 パナソニック株式会社 画像符号化方法および画像符号化装置
US10015498B2 (en) 2011-02-22 2018-07-03 Tagivan Ii Llc Filtering method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus
JP2014017847A (ja) * 2011-02-22 2014-01-30 Panasonic Corp 画像を復号する装置、システム及び画像視聴方法
US9729874B2 (en) 2011-02-22 2017-08-08 Tagivan Ii Llc Filtering method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus
JP5342069B2 (ja) * 2011-02-22 2013-11-13 パナソニック株式会社 フィルタ方法、画像符号化方法、画像処理システム及び画像符号化装置
US9826230B2 (en) 2011-02-22 2017-11-21 Tagivan Ii Llc Encoding method and encoding apparatus
JP2014511649A (ja) * 2011-03-04 2014-05-15 クゥアルコム・インコーポレイテッド ビデオコーディングにおける量子化パルスコード変調
US10200689B2 (en) 2011-03-04 2019-02-05 Qualcomm Incorporated Quantized pulse code modulation in video coding
US9774888B2 (en) 2011-07-19 2017-09-26 Tagivan Ii Llc Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
US9930367B2 (en) 2011-07-19 2018-03-27 Tagivan Ii Llc Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
US9667968B2 (en) 2011-07-19 2017-05-30 Tagivan Ii Llc Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
US9544585B2 (en) 2011-07-19 2017-01-10 Tagivan Ii Llc Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
US8787467B2 (en) 2011-07-19 2014-07-22 Panasonic Corporation Filtering method for performing deblocking filtering on a boundary between an intra pulse code modulation block and a non-intra pulse code modulation block which are adjacent to each other in an image
JP2014099895A (ja) * 2014-01-10 2014-05-29 Sony Corp 画像処理装置および方法
US9948956B2 (en) 2014-06-16 2018-04-17 Thomson Licensing Method for encoding and decoding image block, encoder and decoder
JP2016054533A (ja) * 2015-11-25 2016-04-14 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2016067022A (ja) * 2015-11-25 2016-04-28 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2017135727A (ja) * 2017-03-03 2017-08-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
JP2017135728A (ja) * 2017-03-03 2017-08-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体

Also Published As

Publication number Publication date
BR122022001405B1 (pt) 2023-01-10
EP3787286A1 (en) 2021-03-03
EP2595379A4 (en) 2014-12-31
JPWO2012008130A1 (ja) 2013-09-05
CN105828078A (zh) 2016-08-03
US20160057455A1 (en) 2016-02-25
CN105847812A (zh) 2016-08-10
BR122022001404B1 (pt) 2023-01-10
US20170054992A1 (en) 2017-02-23
US10097847B2 (en) 2018-10-09
EP2595379B1 (en) 2020-10-21
PL2595379T3 (pl) 2021-05-04
KR20140114459A (ko) 2014-09-26
KR101513507B1 (ko) 2015-04-21
JP2014239531A (ja) 2014-12-18
US9510011B2 (en) 2016-11-29
US9532073B2 (en) 2016-12-27
KR101538362B1 (ko) 2015-07-22
CN105430405A (zh) 2016-03-23
CN105847813B (zh) 2018-11-06
CN103004191A (zh) 2013-03-27
US20160057443A1 (en) 2016-02-25
CN105430405B (zh) 2018-11-02
CN105491382B (zh) 2017-07-04
JP2016067043A (ja) 2016-04-28
CN105847812B (zh) 2019-05-17
JP6274299B2 (ja) 2018-02-07
JP5861800B2 (ja) 2016-02-16
BR122020015661B1 (pt) 2023-01-10
EP2595379A1 (en) 2013-05-22
US9210427B2 (en) 2015-12-08
US9936212B2 (en) 2018-04-03
CN105847813A (zh) 2016-08-10
HK1224471A1 (zh) 2017-08-18
CN105828078B (zh) 2018-12-28
KR101435095B1 (ko) 2014-08-28
KR20130029394A (ko) 2013-03-22
US20130101037A1 (en) 2013-04-25
HK1220841A1 (zh) 2017-05-12
CN103004191B (zh) 2016-06-01
BR112013000579B1 (pt) 2023-01-10
JP2017077018A (ja) 2017-04-20
CN105491382A (zh) 2016-04-13
BR112013000579A2 (pt) 2016-05-24
JP2016007085A (ja) 2016-01-14
US20160057442A1 (en) 2016-02-25
HK1182563A1 (zh) 2013-11-29
JP5807638B2 (ja) 2015-11-10
JP5861752B2 (ja) 2016-02-16
KR20140045598A (ko) 2014-04-16
JP6065095B2 (ja) 2017-01-25
BR122020015660B1 (pt) 2023-01-10
HK1220842A1 (zh) 2017-05-12

Similar Documents

Publication Publication Date Title
JP6274299B2 (ja) 映像復号装置及び映像復号方法
JP6183502B2 (ja) 映像復号装置、映像復号方法及びプログラム
JP4991699B2 (ja) ビデオ信号のスケーラブルなエンコーディング方法およびデコーディング方法
EP2319241B1 (en) Skip modes for inter-layer residual video coding and decoding
JP7357736B2 (ja) 符号化装置、復号装置、及びプログラム
KR20140081681A (ko) 영상의 부호화 방법 및 이를 이용하는 장치
JP4924708B2 (ja) 復号装置及び方法
JP7366216B2 (ja) 符号化装置、復号装置、及びプログラム
WO2021201222A1 (ja) 符号化装置、復号装置、及びプログラム
WO2022044267A1 (ja) 映像符号化装置、映像復号装置、映像符号化方法および映像復号方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11806465

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2012524445

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 2011806465

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20127029824

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 13695461

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

REG Reference to national code

Ref country code: BR

Ref legal event code: B01A

Ref document number: 112013000579

Country of ref document: BR

ENP Entry into the national phase

Ref document number: 112013000579

Country of ref document: BR

Kind code of ref document: A2

Effective date: 20130109