WO2009119721A1 - 映像トランスコーダ監視装置、その方法及びその監視プログラム - Google Patents

映像トランスコーダ監視装置、その方法及びその監視プログラム Download PDF

Info

Publication number
WO2009119721A1
WO2009119721A1 PCT/JP2009/056080 JP2009056080W WO2009119721A1 WO 2009119721 A1 WO2009119721 A1 WO 2009119721A1 JP 2009056080 W JP2009056080 W JP 2009056080W WO 2009119721 A1 WO2009119721 A1 WO 2009119721A1
Authority
WO
WIPO (PCT)
Prior art keywords
transcoder
image
code amount
frame
monitoring
Prior art date
Application number
PCT/JP2009/056080
Other languages
English (en)
French (fr)
Inventor
尚司 谷内田
木本　崇博
山田　徹
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2010505759A priority Critical patent/JPWO2009119721A1/ja
Publication of WO2009119721A1 publication Critical patent/WO2009119721A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/48—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using compressed domain processing techniques other than decoding, e.g. modification of transform coefficients, variable length coding [VLC] data or run-length data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Definitions

  • the present invention relates to an apparatus, a method, and a program for determining a failure of a transcoder that is a part of a transmission facility, and a program thereof, and more particularly, an operation monitoring apparatus for a transcoder that re-encodes compressed image data, a method thereof
  • An apparatus for detecting an abnormality of a transcoder by performing estimation evaluation without decoding input compressed image data and output recompressed image data after transcoding into an original image, a method thereof, and a program thereof An apparatus for detecting an abnormality of a transcoder by performing estimation evaluation without decoding input compressed image data and output recompressed image data after transcoding into an original image, a method thereof, and a program thereof .
  • the NGN network will be used as a means to smoothly transition to terrestrial digital broadcasting toward 2011 when terrestrial analog broadcasting stops, and to make the coverage of digital terrestrial broadcasting 100% of the terrestrial analog broadcasting viewable area. Utilized IPTV broadcasting (terrestrial digital IP retransmission) is considered.
  • the band that can be used in one channel is narrower than the band used in broadcast waves.
  • JP 2003-174647 A Japanese Patent Laying-Open No. 2005-066469 JP 2006-080832 A JP 2007-096800 A JP 2007-274445 A JP 2007-295468 A JP 2007-306363 A JP 2008-005197 A JP 2008-035538 A
  • the input compressed image data is once decoded and returned to the image signal, and the output recompressed image data is further decoded and returned to the image signal, and then the two image data are compared.
  • image quality degradation of the transcoder and abnormal operation within the transcoder were detected.
  • the H.264 transcoder 2 receives input compressed image data (MPEG-2 stream) 1, transcodes it to output recompressed image data (H.624 stream) 4, and outputs it.
  • the transcoder monitoring device 3 inputs the input compressed image data 1 and the output recompressed image data 4 and converts them into the MPEG-2 decoder 31 and the H.264 decoder, respectively.
  • the H.264 decoder 33 decodes the original image data 3a and the evaluation image data 3b, and outputs the original image data 3a and the evaluation image data 3b. Between the original image data 3a and evaluation image data 3b, H.
  • T all T 1 + T 2 ⁇ T 3 (1)
  • the original image data 3e after the delay processing is generated via the image memory 37 in order to delay the time by T all . Therefore, the delayed original image data 3e is compared with the evaluation image data 3b instead of the original image data 3a.
  • the image comparison / monitoring unit 32 detects a transcode abnormality by image comparison processing of the evaluation image data 3b and the original image data 3e after the delay processing, and outputs image error information 5. The image comparison process will be specifically described.
  • Image error information 5 is calculated by a method of outputting PSNR (Peak Signal to Noise Ratio) of the input image and outputting image error information 5 when it falls below a prescribed threshold, or by an evaluation method based on the double stimulus continuous quality scale method. The output method was used.
  • PSNR Peak Signal to Noise Ratio
  • an HDTV image requires about 25 Mbits of memory per screen, a large amount of memory is required to delay input image data by a delay time due to transcoding, and the circuit scale of the image memory 37 increases. It was. Further, detailed information such as image quality is not necessary during actual operation, and redundant information is output.
  • None of the cited references 1 to 9 describes detecting an abnormality of a transcoder based on image information indicating characteristics of image data, not image data itself.
  • the present invention provides a transcoder abnormality monitoring apparatus, a method thereof, and a program thereof capable of detecting an operation abnormality in the transcoder and a deterioration in image quality of the transcoder without decoding input compressed image data and output recompressed image data, respectively. Objective.
  • a transcoder monitoring apparatus that monitors the operation of a transcoder that performs recompression coding of an encoded image stream, the first encoded image stream being input, and variable length decoding First variable length decoding means for performing encoding, second variable length decoding means for performing variable length decoding by inputting a second image stream that has been recompressed and encoded, and first variable length decoding
  • the transcoder operates by inputting the first image information output from the converting means and the second image information output from the second variable length decoding means, and comparing and evaluating the two pieces of image information.
  • a transcoder monitoring device comprising data comparison monitoring means for detecting an abnormality.
  • a transcoder monitoring method for monitoring an operation of a transcoder that performs recompression encoding of an encoded image stream, wherein the encoded first image stream is input and variable.
  • a first variable length decoding step for performing long decoding a second variable length decoding step for performing variable length decoding by inputting a second image stream that has been recompressed and encoded, and a first variable
  • the transcoder is operated by inputting the first image information output from the long decoding means and the second image information output from the second variable length decoding means, and comparing and evaluating these two pieces of image information.
  • a data comparison and monitoring step for detecting the abnormal operation of the transcoder.
  • a transcoder monitoring program for causing a computer to execute a transcoder monitoring method for monitoring an operation of a transcoder that performs recompression encoding of an encoded image stream
  • the transcoder monitoring program comprising: The monitoring method inputs a first encoded image stream, inputs a first variable length decoding step that performs variable length decoding, and inputs a second image stream that is recompressed and encoded.
  • a data comparison and monitoring step of detecting an abnormal operation of the transcoder by comparing and evaluating these two pieces of image information.
  • variable length decoding process only the variable length decoding process is performed and the feature amount of the image data is compared, so that the required memory amount is greatly reduced, and other functional blocks are reduced to use only a part of the functions of the decoder. can do.
  • FIG. 9 is a flowchart (1/2) showing the operation of the synchronization processing / comparison processing unit shown in FIG. 8.
  • FIG. 9 is a flowchart (2/2) showing the operation of the synchronization processing / comparison processing unit shown in FIG. 8.
  • FIG. It is a block diagram which shows the 3rd transcoder monitoring part by embodiment of this invention connected to the transcoder and this transcoder. It is a block diagram which shows the structure of the data comparison monitoring part shown in FIG.
  • H.264 Decrypted data after inverse DCT 3j H.264 intra prediction data 3k H.264 H.264 output image decoding data (evaluation image data) 35a MPEG-2 code amount 35b MPEG-2 quantized average value 35c MPEG-2 DC component variance 35d H.264 code amount 35e H.264. H.264 quantization average value 35f MPEG-2 I picture variance value 35g H.264 H.264 I-slice variance
  • an encoded image stream is described as an image stream that is compression-encoded according to the ISO / IEC13818-2 (MPEG-2 Video) standard.
  • IEC10918-1 JPEG
  • ISO / IEC117172-2 MPEG-1 Video
  • ISO / IEC14496-2 MPEG-4 Visual
  • ISO / IEC144960-10 MPEG-4 AVC / H. H.264
  • an image stream that has been compression-encoded according to another image encoding method such as a standard.
  • a compression encoding method conforming to the ISO / IEC 144960-10 (MPEG-4 AVC / H.264) standard is used as an encoding method when performing recompression encoding.
  • the present invention can also be applied using a method.
  • FIG. 2 is a block diagram of a transcoder abnormality monitoring apparatus according to an embodiment of the present invention.
  • the MPEG-2 video stream 1 is input to the transcoder 2 and H.264. H.264 video stream 4 is converted. The operation of the transcoder 2 will be described.
  • the MPEG-2 video stream 1 is expanded to a baseband video signal 2a by the MPEG-2 decoder 21.
  • the baseband video signal 2a is H.264. H.264 encoder 22 H.264 video stream 4 is encoded.
  • the configuration of the transcoder 2 in FIG. H.264 encoder 22 is connected in tandem, but MPEG-2 data is not completely decoded without being decoded.
  • a transcoder that converts to H.264 data may be used.
  • the transcoder monitoring unit 3 inputs the MPEG-2 video stream 1, and the MPEG-2 variable length decoding unit 34 performs variable length decoding on the MPEG-2 video stream 1, and the header information and encoding information obtained thereby are recorded.
  • the data 3c is supplied to the data comparison / monitoring unit 35. At this time, if the MPEG-2 variable length decoding unit 34 cannot normally decode the MPEG-2 video stream 1, an MPEG-2 stream error 6 is output.
  • the transcoder monitoring unit 3 outputs the H.264 output from the transcoder 2.
  • H.264 video stream 4 is input.
  • H.264 variable length decoding unit 36 H.264 video stream 4 is subjected to variable length decoding, and data 3 d such as header information and encoding information obtained thereby is supplied to the data comparison monitoring unit 35.
  • data 3 d such as header information and encoding information obtained thereby is supplied to the data comparison monitoring unit 35.
  • H.C. H.264 video stream 4 If the H.264 variable length decoding unit 36 cannot decode normally, the H.264 variable length decoding unit 36 H.264 stream error 7 is output.
  • the data comparison / monitoring unit 35 outputs image error information 5 such as an input image error or an output image error by comparing and evaluating the data 3c and 3d such as the input header information and encoding information.
  • FIG. 3 is a block diagram of an apparatus for performing the data comparison and monitoring method according to an embodiment of the present invention.
  • the MPEG-2 code amount statistical processing unit 351 counts the code amount in units of frames from the data 3c including the header information and encoding information of the MPEG-2 video stream 1, and outputs the MPEG-2 code amount 35a.
  • FIG. 4 shows an example in which the transition of the MPEG-2 stream in which the code amount is counted in units of pictures is graphed.
  • the transition of the code amount of a general image signal is characterized by gradually decreasing in the order of I picture, P picture, and B picture depending on the picture type.
  • the MPEG-2 quantized value average processing unit 352 calculates an average value of quantized values (average value of Q scale values for each macroblock) for each picture, and outputs an MPEG-2 quantized average value 35b.
  • the MPEG-2 DC component dispersion processing unit 353 obtains and outputs the DC component dispersion value 35c of the DCT coefficient of the luminance signal of the entire screen when the picture type is I picture, and when the picture type is P picture or B picture.
  • the intra macro block and the inter macro block are divided, and the DC component variance 35c of each DCT coefficient is obtained and output. Further, the MPEG-2 DC component dispersion processing unit 353 obtains and outputs not only the luminance component but also the dispersion value 35c of the color difference component.
  • H. H.264 code amount statistical processing 355 H.264 video stream 4 header information and encoding amount of data 3d including encoding information is counted for each picture.
  • H.264 code amount 35d is output.
  • FIG. It is an example which made the transition which carried out the statistical process of the code amount for a H.264 stream in the slice unit on the graph. As shown in FIG. 5, the transition of the code amount of a general image signal is characterized by gradually decreasing in the order of I slice, P slice, and B slice depending on the slice type.
  • H.264 quantized value average processing unit 356 calculates the average value of quantized values (average value of Q scale values for each macroblock) for each picture. H.264 quantization average value 35e is output.
  • the synchronization processing / comparison processing unit 354 takes into account the re-encoding delay time by the transcoder 2, the code amount 35 a obtained from the MPEG-2 stream, the quantized average value 35 b, and the H.
  • the synchronization processing is performed so that the code amount 35d obtained from the H.264 stream and the quantized average value 35e become data obtained from the same video frame, the transition of the generated code amount 35a is compared with the transition of the generated code amount 35d, and quantization is performed.
  • the transition of the average value 35b and the transition of the quantized average value 35e are compared, and when a clearly different transition is detected, it is determined that there is some abnormality in the transcoder and the image error information 5 is output.
  • the H.264 codec For example, despite the fact that the average value of the MPEG-2 code amount 35a is substantially constant and the variance of the MPEG-2 quantized average value 35b during that time is also a small value, the H.264 codec.
  • the average value of the H.264 code amount 35d is extremely small (for example, 1 ⁇ 2 or less) as compared with the target code amount.
  • the H.264 quantization average value 35e is an extremely small value (for example, 10 or less), it is determined that there is an abnormality inside the transcoder.
  • the average value of the MPEG-2 code amount 35a is smaller than the prescribed code amount and the MPEG-2 quantized average value 35b between them is also a small value, the input MPEG-2 image is flat. It is possible to predict that the image is a correct image.
  • the average value of the H.264 code amount 35d is close to the target code amount. When the H.264 quantized average value 35e indicates a large value, it is determined that there is an abnormality in the transcoder.
  • MPEG-2 motion vector information and H.264 H.264 motion vector information, the direction and magnitude of the MPEG-2 motion vector, The direction and size of H.264 motion vectors are compared. If the match rate (match rate in the predicted vector direction) falls below a threshold value (for example, 50%), a sign of image quality deterioration is detected by wrong prediction, and the transcoder internal Judge as abnormal.
  • a threshold value for example, 50%
  • This series of processing makes it easy to distinguish between errors that have occurred in the transcoder 2 and errors that already exist on the input side.
  • calculation processing such as calculation of a quantized average value and DC component variance
  • the processing is stopped and the state of the entire screen is estimated from the transition of the code amount thereafter.
  • the calculation processing time can be shortened.
  • FIGS. 6A and 6B are flowcharts for explaining operations related to the synchronization processing / comparison processing unit 354 in the data comparison monitoring unit of the transcoder abnormality monitoring apparatus according to the embodiment of the present invention.
  • This flow chart includes MPEG-2 parameters and H.264 for simplicity of explanation. Although the synchronization processing of H.264 parameters is not included, the synchronization processing is actually performed.
  • MPEG-2 parameters are input (step 601), and the synchronization processing / comparison processing unit 354 determines whether the average value of the MPEG-2 code amount 35a is smaller than 1 ⁇ 2 of the MPEG-2 transmission band (step). 602). If so (YES in step 602), it is determined that there is a possibility that the entire screen of the MPEG-2 image data is monotonous.
  • the synchronization / comparison processing unit 354 further determines whether or not the MPEG-2 quantized average value 35b is equal to or less than a threshold (10 as an example) (step 603). If YES in step 603, it is determined that there is a possibility that the MPEG-2 image data may be monotonous on the entire screen.
  • the synchronization processing / comparison processing unit 354 further determines whether or not the MPEG-2 DC component dispersion value is equal to or less than a threshold value (100 as an example) (step 604). If YES in step 604, the synchronization / comparison processing unit 354 determines that the MPEG-2 image data is monotonic data for the entire screen (step 605).
  • step 604 If NO in step 602, NO in step 603, or NO in step 604, the synchronization / comparison processing unit 354 determines that the MPEG-2 image data is not monotonic data for the entire screen. (Step 614).
  • step 604 may be omitted, and if the determination in step 602 and step 603 is YES, the MPEG-2 image may be determined to be monotonous data for the entire screen. If step 604 is omitted, this corresponds to this, and if NO in step 602 or NO in step 603, the MPEG-2 image data is determined not to be monotonous data on the entire screen (step 614).
  • step 603 and step 604 are omitted and only YES in step 602, the MPEG-2 image may be determined to be monotonous data for the entire screen. If step 603 and step 604 are omitted, this corresponds to this, and if NO in step 602, it is determined that the MPEG-2 image data is not monotonic data on the entire screen (step 614).
  • H. H.264 parameters are input, and the synchronization processing / comparison processing unit 354 receives the H.264 parameters.
  • the average value of the H.264 code amount 35d is H.264. It is determined whether it is smaller than 1 ⁇ 2 of the H.264 transmission band (step 607). If so (YES in step 607), It is determined that there is a possibility that the H.264 image data is monotonous data on the entire screen.
  • the H.264 quantized value average processing unit 356 is an It is determined whether or not the H.264 quantization average value 35e is equal to or less than a threshold value (10 as an example) (step 608). If so (YES in step 608), the synchronization / comparison processing unit 354 determines that the It is determined that the H.264 image data is monotonous data for the entire screen (step 609).
  • step 607 the synchronization / comparison processing unit 354 determines whether the It is determined that the H.264 image data is not monotonous data on the entire screen (step 615).
  • step 608 is omitted and YES in step 607, H.
  • the H.264 image may be determined to be monotonous data for the entire screen. When step 608 is omitted, this corresponds to this, and when NO at step 607, H.H. It is determined that the H.264 image data is not monotonous data on the entire screen (step 615).
  • the synchronization processing / comparison processing unit 354 determines that the MPEG-2 image data is monotonous data for the entire screen (YES in step 610). If the H.264 image data is data whose entire screen is not monotonous (NO in step 611), it is determined that there is an abnormality in the transcoder.
  • the synchronization / comparison processing unit 354 although the MPEG-2 image data is data whose whole screen is not monotonous (NO in step 610), Even when the H.264 image data is data whose entire screen is monotonous (YES in step 616), it is determined that there is an abnormality in the transcoder, and image error information 5 is output (step 612).
  • the MPEG-2 image data is monotonous data for the entire screen (YES in step 610).
  • the H.264 image data is monotonous data for the entire screen (YES in step 611). If the number of frames continues for a predetermined number or more (for example, 30 frames or more), it is determined that there is some abnormality in the MPEG-2 stream.
  • Information 5 is output.
  • the first image information is a code amount and motion vector information for each frame of the first image stream
  • the second image information is a code amount and motion vector information for each frame of the second image stream.
  • the data comparison / monitoring unit may determine a transcoder abnormality from the code amount and motion vector information for each frame of the first image stream and the code amount and motion vector information for each frame of the second image stream.
  • a comparative monitoring method using motion vectors is described.
  • the first image information is a P picture or a B picture
  • a variance value and an average value of vertical and horizontal components of motion vector information are calculated.
  • the maximum value of the motion prediction range for example, 256
  • the second image is a P picture or a B picture
  • a variance value and an average value of vertical and horizontal components of motion vector information are calculated.
  • the maximum value of the motion prediction range for example, 256
  • the vertical dispersion value of the first motion vector information is twice or 1/2 of the vertical dispersion value of the second motion vector information
  • the horizontal dispersion value of the first motion vector information is the second. If it is twice or 1/2 of the horizontal dispersion value of the motion vector information, it is determined that the transcoder is abnormal.
  • the horizontal average value of the first motion vector information is 10 times or 1/10 of the horizontal average value of the second motion vector information
  • the vertical average value of the first motion vector information is When it is 10 times or 1/10 of the average value of the second motion vector in the vertical direction, it is determined that the transcoder is abnormal.
  • the first image information is a code amount for each frame of the first image stream, a DC component of the DCT coefficient, and motion vector information
  • the second image information is a code amount for each frame of the second image stream. It is motion vector information
  • the data comparison / monitoring unit converts the code amount for each frame of the first image stream, the DC component of the DCT coefficient and the motion vector information, and the code amount for each frame of the second image stream and the motion vector information.
  • a coder abnormality may be determined.
  • the first image information is the code amount, the quantization value, and the motion vector information for each frame of the first image stream
  • the second image information is the code amount, the quantization, for each frame of the second image stream.
  • Value and motion vector information, and the data comparison and monitoring unit includes a code amount, quantized value, and motion vector information for each frame of the first image stream and a code amount, quantized value, and motion for each frame of the second image stream. You may make it determine the abnormality of a transcoder from vector information.
  • the first image information is a code amount for each frame of the first image stream, a DC component of a DCT coefficient, a quantization value, and motion vector information
  • the second image information is for each frame of the second image stream.
  • Code comparison amount, quantization value, and motion vector information, and the data comparison and monitoring unit sets the code amount for each frame of the first image stream, the DC component of the DCT coefficient, the quantization value and motion vector information, and the second image stream.
  • the transcoder abnormality may be determined from the code amount, quantized value, and motion vector information for each frame.
  • FIG. 7 is a block diagram of a transcoder abnormality monitoring apparatus according to an embodiment of the present invention.
  • the transcoder monitoring unit 3 performs variable length decoding of the MPEG-2 stream 1 by the MPEG-2 variable length decoding unit 34, and the data 3c such as header information and encoding information obtained thereby is compared with the data comparison monitoring unit 35 and the MPEG. -2 is supplied to the inverse quantization unit 38. At this time, if the MPEG-2 variable length decoding unit 34 cannot decode normally, an MPEG-2 stream error 6 is output.
  • the MPEG-2 inverse quantization unit 38 selects intra-coded data from the data 3c, performs inverse quantization, and outputs DCT coefficient data 3f.
  • the MPEG-2 inverse DCT unit 39 supplies image data 3g obtained by inverse DCT conversion from the DCT coefficient data 3f to the data comparison monitoring unit 35.
  • the image data 3g does not include a motion compensation function necessary for a normal decoding operation, only intra-coded data can be decoded.
  • the data comparison / monitoring unit 35 receives the H.264 output from the transcoder 2.
  • H.264 video stream 4 is supplied.
  • the H.264 variable length decoding unit 36 performs variable length decoding, and supplies the data 3 d such as header information and encoding information obtained thereby to the data comparison monitoring unit 35. At this time, H.C. If the H.264 variable length decoding unit 36 cannot decode normally, the H.264 variable length decoding unit 36 H.264 stream error 7 is output.
  • the data comparison monitoring unit 35 compares and evaluates the input data 3c and 3d such as header information and encoding information and the image data 3g obtained by decoding the intra-encoded frame.
  • Image error information 5 such as an image error or an output image error is output.
  • FIG. 8 is a block diagram of the data comparison monitoring unit 35 according to an embodiment of the present invention.
  • the data 3c including the header information and encoding information of the MPEG-2 video stream 1 supplied to the data comparison / monitoring unit 35 is converted into an MPEG-2 code amount statistical processing unit 351 and an MPEG-2 quantized value average processing unit 352. And supplied to the MPEG-2 DC component dispersion processing unit 353.
  • the MPEG-2 code amount statistical processing unit 351 counts the code amount of the data 3c including the header information and encoding information of the MPEG-2 video stream 1 for each frame, and outputs the MPEG-2 code amount 35a.
  • the MPEG-2 quantized value average processing unit 352 calculates an average value of quantized values for each picture from the quantized values set in units of macroblocks, and outputs an MPEG-2 quantized average value 35b.
  • the MPEG-2 DC component dispersion processing unit 353 obtains and outputs the DC component dispersion value 35c of the DCT coefficient of the luminance signal of the entire screen, and the picture type is P picture or B picture.
  • the intra macro block and the inter macro block are divided, and the dispersion value 35c of the DC component of each DCT coefficient is obtained and output.
  • the MPEG-2 DC component dispersion processing unit 353 may obtain the dispersion value of the DC component of the color difference signal in addition to the dispersion value of the DC component of the DCT coefficient of the luminance signal of the entire screen.
  • the MPEG-2 baseband processing unit 357 obtains the variance between the pixels of the luminance component and the color difference component of the image data obtained by decoding the I picture, and outputs a pixel variance value 35f.
  • the data 3d including the header information and encoding information of the H.264 video stream 4 is H.264.
  • H.264 code amount statistical processing unit 355 counts the code amount in units of frames. H.264 code amount 35d is output.
  • H.264 quantized value average processing unit 356 calculates an average value for each picture of the quantized values set in units of macroblocks. H.264 quantization average value 35e is output.
  • the synchronization processing / comparison processing unit 354 considers the re-encoding delay time by the transcoder 2 and processes data 35a, 35b, 35c, 35f obtained from the MPEG-2 stream, and the H.264 after transcoding.
  • the synchronization processing is performed so that the processing data 35d and 35e obtained from the H.264 stream become data obtained from the same video data, the transition of the generated code amount 35a is compared with the transition of the generated code amount 35d, and the quantization average value
  • the transition of 35b is compared with the transition of the quantized average value 35e, and when a clearly different transition is detected, it is determined that there is some abnormality in the transcoder 2, and the image error information 5 is output.
  • the average value of the MPEG-2 code amount 35a is substantially constant and the variance of the MPEG-2 quantized average value 35b during that time is also a small value
  • the average value of the H.264 code amount 35d is extremely small (for example, 1 ⁇ 2 or less) as compared with the target code amount.
  • the H.264 quantization average value 35e is an extremely small value (for example, 10 or less)
  • the input MPEG-2 image is flat. It can be predicted that the image is an image.
  • the average value of the H.264 code amount 35d is close to the target code amount. Even when the H.264 quantization average value 35e shows a large value, it is determined that an abnormality has occurred inside the transcoder 2, and the image error information 5 is output.
  • a threshold for example, 50%
  • a monitoring system can be provided.
  • FIGS. 9A and 9B are flowcharts for explaining the operation related to the comparison processing unit in the data comparison monitoring unit of the transcoder abnormality monitoring apparatus according to the embodiment of the present invention.
  • MPEG-2 parameters and H.264 It is assumed that H.264 parameter synchronization processing has already been performed.
  • MPEG-2 parameters are input (step 901), and it is determined whether the current picture is an MPEG-2 intra picture (step 902).
  • the MPEG-2 pixel variance value is compared with a threshold value (eg, 10) (step 903).
  • the comparison processing unit 354 determines that the MPEG-2 image data is a flat image, sets the Flat Flag indicating that it is flat image data to “1” (step 904), and if it is equal to or greater than the threshold value (NO in step 903), Flat Flag indicating that the image is flat is set to “0” (step 905).
  • the flow advances to H.264 parameter input processing (step 911).
  • the synchronization processing / comparison processing unit 354 determines whether the MPEG-2 average code amount 35a is 1 ⁇ 2 of the target code amount. (Step 906).
  • step 906 If the MPEG-2 average code amount is 1 ⁇ 2 of the target code amount (YES in step 906), the process proceeds to step 907; otherwise (NO in step 906), the process proceeds to step 910.
  • step 907 the synchronization processing / comparison processing unit 354 determines whether or not the MPEG-2 quantization average value is equal to or less than a threshold value (for example, 10). If the MPEG-2 quantized average value is less than or equal to the threshold value (YES in step 907), the process proceeds to step 908. Otherwise (NO in step 907), the process proceeds to step 910.
  • a threshold value for example, 10
  • step 908 the synchronization processing / comparison processing unit 354 determines whether or not the MPEG-2 DC component dispersion value is less than or equal to a threshold value (for example, 100). If the MPEG-2 DC component variance is less than or equal to the threshold (YES in step 908), the synchronization / comparison processing unit 354 determines that the MPEG-2 image data is a flat image, and proceeds to step 909. Therefore, the Flat Flag is set to “1”. If not (NO in step 908), the process proceeds to step 910.
  • a threshold value for example, 100
  • step 910 the synchronization processing / comparison processing unit 354 sets the Flat Flag to “0”.
  • step 905 step 909 or step 910, H. H.264 parameters are input (step 911).
  • the synchronization processing / comparison processing unit 354 performs H.264 processing.
  • the average value of the H.264 code amount is H.264. It is determined whether it is smaller than 1 ⁇ 2 of the H.264 transmission band (step 912). If YES in step 912, H.264 is entered. It is determined that there is a possibility that the entire H.264 image data is monotonous data, and the process proceeds to step 913. On the other hand, if NO at step 912, the process proceeds to step 915.
  • step 913 the synchronization processing / comparison processing unit 354 performs the H.264 processing. It is determined whether the H.264 quantization average value is equal to or less than a threshold value (for example, 10). If so (YES in step 913), The H.264 image data is determined to be monotonous data on the entire screen, and the process proceeds to step 914. Set H.264 Flat Flag to “1”. On the other hand, if NO at step 913, the process proceeds to step 915.
  • a threshold value for example, 10
  • step 915 the synchronization processing / comparison processing unit 354 performs the H.264 processing. Set H.264 Flat Flag to “0”.
  • step 916 subsequent to step 914 or step 915, the synchronization processing / comparison processing unit 354 performs MPEG-2 Flat Flag and H.264. It is determined whether or not H.264 Flat Flag matches. If they match (YES in step 916), it is determined that there is no abnormality in the transcoder, and the process proceeds to step 918. On the other hand, MPEG-2 Flat Flag and H.264. When the H.264 Flat Flag does not match (NO in Step 916), the synchronization processing / comparison processing unit 354 determines that the transcoder is abnormal, and in Step 917, the synchronization processing / comparison processing unit 354 The image error information 5 is output and the process proceeds to Step 918.
  • step 918 if the next MPEG-2 parameter is input, the process returns to the process 901, and if all the parameter processes are completed, the end process is performed.
  • FIG. 10 is a block diagram of a transcoder abnormality monitoring apparatus according to an embodiment of the present invention.
  • the transcoder monitoring block 3 receives the MPEG-2 stream 1 and performs variable length decoding by the MPEG-2 variable length decoding unit 34, and the data 3c such as header information and encoding information obtained thereby is the data comparison monitoring unit 35. And input to the MPEG-2 inverse quantization unit 38.
  • the MPEG-2 inverse quantization unit 38 selects intra-coded data from the data 3c, performs inverse quantization, and outputs DCT coefficient data 3f.
  • the MPEG-2 inverse DCT unit 39 performs inverse DCT conversion on the DCT coefficient data 3 f and supplies the image data 3 g obtained thereby to the data comparison monitoring unit 35.
  • an MPEG-2 stream error 6 is output.
  • the data comparison / monitoring unit 35 receives the H.264 output from the transcoder 2.
  • H.264 video stream 4 is provided.
  • the H.264 variable length decoding unit 36 is an H.264 variable length decoding unit.
  • H.264 video stream 4 is subjected to variable length decoding, and data 3d such as header information and encoding information obtained thereby is converted into data comparison monitor 35 and H.264.
  • H.264 is supplied to the inverse quantization unit 40.
  • the H.264 inverse quantization unit 40 selects intra-coded data from the data 3d, performs inverse quantization, and outputs orthogonal transform coefficient data 3h.
  • the H.264 inverse orthogonal transform unit 41 supplies the image data 3i obtained by performing the inverse orthogonal transform on the orthogonal transform coefficient data 3h to the data adding unit 43.
  • the data adder 43 is an H.264 signal.
  • the data predicted by the H.264 intra prediction unit 42 and the image data 3i are combined and processed, so H.264 image data 3k is obtained and supplied to the data comparison / monitoring unit 35. At this time, H.C.
  • the H.264 variable length decoding unit 36 cannot decode normally, the H.264 variable length decoding unit 36 H.264 stream error 7 is output.
  • the data comparison / monitoring unit 35 compares and evaluates the input data 3c and 3d such as header information and encoding information and the image data 3g and 3k obtained by decoding the intra-encoded frame, and the input image error or Output image error information 5 such as an output image error.
  • FIG. 11 is a block diagram of a data comparison and monitoring device according to an embodiment of the present invention.
  • the data 3c including the header information and encoding information of the MPEG-2 video stream 1 supplied to the data comparison / monitoring unit 35 is converted into an MPEG-2 code amount statistical processing unit 351 and an MPEG-2 quantized value average processing unit 352. And supplied to the MPEG-2 DC component dispersion processing unit 353.
  • the MPEG-2 code amount statistical processing unit 351 counts the code amount of the data 3c including the header information and encoding information of the MPEG-2 video stream 1 for each frame, and outputs the MPEG-2 code amount 35a.
  • the MPEG-2 quantized value average processing unit 352 averages the quantized values of the picture type I picture and outputs an MPEG-2 quantized average value 35b.
  • the MPEG-2 DC component dispersion processing unit 353 obtains and outputs a dispersion value 35c of the DC component of the DCT coefficient of the luminance signal of the entire picture in which the picture type is I picture.
  • the MPEG-2 DC component dispersion processing unit 353 may obtain the dispersion value of the DC component of the color difference signal in addition to the dispersion value of the DC component of the DCT coefficient of the luminance signal of the entire screen.
  • the MPEG-2 baseband processing unit 357 obtains the variance between the luminance component and the color difference component of the image data obtained by decoding the I picture, and outputs a pixel variance value 35f.
  • the data 3d including the header information and encoding information of the H.264 video stream 4 is H.264.
  • the H.264 code amount statistical processing unit 355 is an H.264 code quantity statistical processing unit 355.
  • the code amount of the data 3d including the header information and encoding information of the H.264 video stream 4 is counted for each frame, and the H.264 video stream 4 H.264 code amount 35d is output.
  • H.264 quantized value average processing unit 356 averages the quantized values of the picture type I picture.
  • H.264 quantization average value 35e is output.
  • H. H.264 baseband processing unit 358 decodes an I picture
  • the variance between the pixels of the luminance component and the color difference component of the data is obtained and a pixel variance value 35g is output.
  • the synchronization processing / comparison processing unit 354 considers the re-encoding delay time by the transcoder 2 and processes data 35a, 35b, 35c, 35f obtained from the MPEG-2 stream, and the H.264 after transcoding.
  • the synchronization processing is performed so that the processing data 35d, 35e, and 35g obtained from the H.264 stream become data obtained from the same video data, the transition of the generated code amount 35a is compared with the transition of the generated code amount 35d, and the quantized average value
  • the transition of 35b is compared with the transition of the quantized average value 35e, and when a clearly different transition is detected, it is determined that there is some abnormality in the transcoder and the image error information 5 is output.
  • the average value of the MPEG-2 code amount 35a is substantially constant and the variance of the MPEG-2 quantized average value 35b is also a small value
  • the average value of the H.264 code amount 35d is extremely small (1/2 or less) as compared with the target code amount.
  • the H.264 quantization average value 35e is an extremely small value (10 or less)
  • the input MPEG-2 image is flat. It can be predicted that the image is an image.
  • the average value of the H.264 code amount 35d is close to the target code amount.
  • the H.264 quantization average value 35e indicates a large value, it is determined that an abnormality has occurred in the transcoder, and the image error information 5 is output.
  • Image error information 5 is output.
  • FIG. 12 is a block diagram of a data comparison and monitoring device according to an embodiment of the present invention.
  • the input MPEG-2 streams are 1-1, 1-2, 1-n, which are input to transcoders 2-1, 2-2, 2-n, respectively.
  • H.264 streams 4-1, 4-2, 4-n are converted and output.
  • the transcoder monitoring device 3 transmits the MPEG-2 streams 1-1, 1-2, 1-n and H.264.
  • H.264 streams 4-1, 4-2, 4-n are input to monitor a plurality of stream information.
  • the MPEG-2 streams 1-1, 1-2, and 1-n are respectively input to the MPEG-2 variable length decoding units 34-1, 34-2, and 34-n to perform variable length decoding processing.
  • the data 3c subjected to the variable length decoding is input to the data comparison monitoring unit 35. Further, the data of picture type I picture in the data 3c is temporarily stored in the memory 46 and input to the MPEG-2 inverse quantization unit 38 via the SW 44.
  • the selected input stream data is dequantized by the MPEG-2 dequantization unit 38, and DCT coefficient data 3f is output.
  • the DCT coefficient data 3f is inverse orthogonal transformed by the MPEG-2 inverse DCT transform unit 39 and output as baseband data 3g.
  • the MPEG-2 variable length decoding units 34-1, 34-2, 34-n perform variable length decoding, and header information and encoding information of the MPEG-2 video streams 1-1, 1-2, 1-n.
  • the MPEG-2 code amount obtained by counting the code amount including the frame unit is calculated and input to the data comparison monitoring unit 35.
  • n is an arbitrary integer, and 1-n may not exist when data processing for two channels is performed.
  • 1-n indicates 1-3 and 1-4.
  • H. H.264 streams 4-1, 4-2, 4-n are respectively H.264 streams.
  • H.264 variable length decoding units 36-1, 36-2, and 36-n are subjected to variable length decoding processing.
  • the variable length decoded data 3d is supplied to the data comparison monitoring unit 35. Further, in the data 3d, the data whose slice type is I slice is H.264 via SW45. H.264 is supplied to the inverse quantization unit 40.
  • the selected output stream data is H.264.
  • the H.264 inverse quantization unit 40 performs inverse quantization and outputs the orthogonal transformation coefficient data 3h.
  • the orthogonal transformation coefficient data 3h is H.264.
  • the H.264 inverse orthogonal transform unit 41 performs inverse orthogonal transform and outputs the transform coefficient data 3i.
  • the conversion coefficient data 3i is H.264.
  • the arithmetic unit 43 performs arithmetic processing together with the prediction data 3j output from the H.264 intra prediction unit 42, and outputs the baseband data 3k.
  • H. H.264 variable length decoding units 36-1, 36-2, 36-n perform variable length decoding.
  • the H.264 code amount is calculated and input to the data comparison monitoring unit 35.
  • the data comparison / monitoring unit 35 detects an abnormality caused by the transcoder by comparing the transition of the input code amount and the quantization value and the baseband data obtained by decoding the intra picture, and outputs the image error information 5.
  • the data 3c including the header information and encoding information of the MPEG-2 video stream 1 supplied to the data comparison / monitoring unit 35 is H.264.
  • the H.264 video stream 4 is compared and evaluated with data 3d including header information and encoding information.
  • the transition of the code amount according to the MPEG-2 encoding system The transition of the code amount according to the H.264 encoding method is compared and evaluated, and when the code amount distribution is significantly different between the two, it is determined that a code amount control error has occurred during transcoding.
  • MPEG-2 motion vectors and H.264 The tendency of the encoded image is determined by comparing the H.264 motion vectors.
  • FIG. 13 is a block diagram of a data comparison and monitoring method according to an embodiment of the present invention.
  • the input MPEG-2 streams are 1-1, 1-2, 1-n, which are input to transcoders 2-1, 2-2, 2-n, respectively.
  • H.264 streams 4-1, 4-2, 4-n are converted and output.
  • the transcoder monitoring device 3 transmits the MPEG-2 streams 1-1, 1-2, 1-n and H.264.
  • H.264 streams 4-1, 4-2, 4-n are input to monitor a plurality of stream information.
  • the MPEG-2 streams 1-1, 1-2, 1-n are stored in the memories 46-1, 46-2, 46-n, respectively.
  • an MPEG-2 header decoding function capable of detecting the picture type at the input stage of the memory may be provided, and only the image data of the intra picture may be stored in the memory.
  • the stream read from each memory is supplied to the switching MPEG-2 variable length decoding unit 34 and subjected to variable length decoding processing.
  • Data 3c obtained by the variable length decoding is supplied to the data comparison / monitoring unit 35.
  • data of picture type I picture is supplied to the MPEG-2 inverse quantization unit 38.
  • the selected input stream data is dequantized by the MPEG-2 dequantization unit 38 and output as DCT coefficient data 3f.
  • the DCT coefficient data 3f is inverse orthogonal transformed by the MPEG-2 inverse DCT transform unit 39 and output as baseband data 3g.
  • H. H.264 streams 4-1, 4-2, 4-n are stored in the memories 47-1, 47-2, 47-n, respectively.
  • the slice type can be detected at the input stage of the memory in order to control the memory.
  • An H.264 simple decoding function may be provided, and memory usage may be reduced by storing only intra-slice image data in the memory.
  • the stream read from each memory is switched by SW45, and then H.264 is switched.
  • H.264 variable length decoding unit 36 is supplied and subjected to variable length decoding processing.
  • the data 3d obtained by variable length decoding is supplied to the data comparison / monitoring unit 35.
  • the intra slice data is H.264.
  • H.264 is supplied to the inverse quantization unit 40.
  • the selected output stream data is H.264.
  • the H.264 inverse quantization unit 40 performs inverse quantization and outputs the orthogonal transformation coefficient data 3h.
  • the orthogonal transformation coefficient data 3h is H.264.
  • the H.264 inverse orthogonal transform unit 41 performs inverse orthogonal transform and outputs the image data 3i.
  • the prediction data 3j output from the H.264 intra prediction unit 42 is subjected to arithmetic processing by the arithmetic unit 43, whereby the baseband data 3k is output.
  • the data comparison / monitoring unit 35 detects image error information 5 by detecting an abnormality caused by the transcoder by comparing the input code amount and the quantized value, and comparing the baseband data obtained by decoding the intra picture. Output.
  • the data 3c including the header information and encoding information of the MPEG-2 video stream 1 supplied to the data comparison / monitoring unit 35 is H.264.
  • the H.264 video stream 4 is compared with data 3d including header information and encoding information.
  • the transition of the code amount according to the MPEG-2 encoding system The transition of the code amount according to the H.264 encoding method is compared and evaluated, and when the code amount distribution is significantly different between the two, it is determined that a code amount control error has occurred during transcoding.
  • MPEG-2 motion vectors and H.264 The tendency of the encoded image is determined by comparing the H.264 motion vectors.
  • FIG. 14A and FIG. 14B are flowcharts for explaining operations related to the comparison processing unit in the data comparison monitoring unit 35 of the transcoder abnormality monitoring apparatus according to the embodiment of the present invention.
  • This flowchart describes a method of comparing only intra pictures in order to monitor stream abnormality by a plurality of transcoder processes.
  • MPEG-2 parameters and H.264 It is assumed that the H.264 parameter synchronization processing has already been performed.
  • the comparison processing unit 35 inputs MPEG-2 parameters (step 1401), determines whether or not it is the start of an intra picture by examining the MPEG-2 header (step 1402). (NO in step 1402), the process is continued until an intra picture header is input (step 1401). If the picture is an intra picture (YES in step 1402), the comparison processing unit 35 obtains a dispersion value between pixels of the luminance component of the intra-decoded image data and a dispersion value of the color difference component, and the dispersion value is a threshold value (for example, 100) or less (YES in step 1403), the comparison processing unit 35 sets MPEG-2 Flat Flag to “1” (step 1404). If the variance value exceeds the threshold (NO in step 1403), the comparison processing unit 35 sets MPEG-2 Flat Flag to “0” (step 1405).
  • MPEG-2 Flat Flag for example, 100
  • step 1404 or step 1405 the comparison processing unit 35 determines whether or not the average value of the MPEG-2 code amount 35a is smaller than 1 ⁇ 2 of the MPEG-2 transmission band (step 1406). In this case (YES in step 1406), the comparison processing unit 35 determines that there is a possibility that the MPEG-2 image data is monotonous data on the entire screen, and the process proceeds to step 1407. In step 1407, the comparison processing unit 35 determines whether or not the MPEG-2 quantized average value 35b is equal to or less than a threshold value (for example, 10). If so (YES in step 1407), the comparison processing unit 35 determines that there is a possibility that the MPEG-2 image data is monotonous on the entire screen, and the flow advances to step 1408.
  • a threshold value for example, 10
  • step 1408 the comparison processing unit 35 determines whether or not the MPEG-2 DC component dispersion value is equal to or less than a threshold value (100 as an example). If so (YES in step 1408), the comparison processing unit 35 proceeds to step 1409, where it is determined that the MPEG-2 image data is monotonic data for the entire screen, and the MPEG-2 Flat Flag is set. Set to “1”.
  • step 1408 If NO in step 1406, NO in step 1407, or NO in step 1408, the comparison processing unit 35 sets the MPEG-2 Flat Flag to “0”.
  • the comparison processing unit 35 performs an H.264 operation.
  • H.264 parameters are input (step 1411). By checking the H.264 header, it is determined that it is the start of the intra slice. If it is not the intra slice (NO in step 1412), the processing is continued until the intra slice header is input (step 1411). If the slice is an intra slice (YES in step 1412), the comparison processing unit 35 obtains a variance value between the pixels of the luminance component of the intra-decoded image data and a variance value of the color difference component, and the variance value is a threshold value (for example, 100) or less (YES in step 1413), the comparison processing unit 35 determines that the H.264 Flat Flag is set to “1” (step 1414). When the variance value exceeds the threshold value (NO in step 1413), the comparison processing unit 35 determines that the H.264 is H.264. H.264 Flat Flag is set to “0” (step 1415).
  • the comparison processing unit 35 performs an H.264 operation.
  • the average value of the H.264 code amount 35d is H.264. It is determined whether it is smaller than 1 ⁇ 2 of the H.264 transmission band (step 1416). If so (YES in step 1416), the comparison processing unit 35 determines that the It is determined that there is a possibility that the entire H.264 image data is monotonous data, and the process proceeds to step 1417.
  • the comparison processing unit 35 determines that the H.264 It is determined whether the H.264 quantized average value 35e is equal to or less than a threshold value (for example, 10). If so (YES in step 1417), the comparison processing unit 35 determines that the H.264 image data is determined to be monotonous data for the entire screen.
  • H.264 Flat Flag is set to “1” (step 1418).
  • step 1416 determines whether the H.264 Flat Flag is set to “0” (step 1419).
  • step 1418 the comparison processing unit 35 performs MPEG-2 Flat Flag and H.264 in step 1420. It is determined whether the H.264 Flat Flag is the same. If they are different (NO in step 1420), the comparison processing unit 35 determines that there is a transcoder error and outputs image error information 5 (step 1421).
  • MPEG-2 Flat Flag and H.264
  • the comparison processing unit 35 determines that there is some abnormality in the MPEG-2 stream and outputs the image error information 5.
  • This series of processing makes it easy to distinguish between errors that have occurred in the transcoder 2 and errors that already exist on the input side.
  • the first image information is a code amount and motion vector information for each frame of the first image stream
  • the second image information is a code amount and motion vector information for each frame of the second image stream.
  • the data comparison / monitoring unit may determine a transcoder abnormality from the code amount and motion vector information for each frame of the first image stream and the code amount and motion vector information for each frame of the second image stream.
  • the first image information is a code amount for each frame of the first image stream, a DC component of the DCT coefficient, and motion vector information
  • the second image information is a code amount for each frame of the second image stream. It is motion vector information
  • the data comparison / monitoring unit converts the code amount for each frame of the first image stream, the DC component of the DCT coefficient and the motion vector information, and the code amount for each frame of the second image stream and the motion vector information.
  • a coder abnormality may be determined.
  • the first image information is the code amount, the quantization value, and the motion vector information for each frame of the first image stream
  • the second image information is the code amount, the quantization, for each frame of the second image stream.
  • Value and motion vector information, and the data comparison and monitoring unit includes a code amount, quantized value, and motion vector information for each frame of the first image stream and a code amount, quantized value, and motion for each frame of the second image stream. You may make it determine the abnormality of a transcoder from vector information.
  • the first image information is a code amount for each frame of the first image stream, a DC component of a DCT coefficient, a quantization value, and motion vector information
  • the second image information is for each frame of the second image stream.
  • Code comparison amount, quantization value, and motion vector information, and the data comparison and monitoring unit sets the code amount for each frame of the first image stream, the DC component of the DCT coefficient, the quantization value and motion vector information, and the second image stream.
  • the transcoder abnormality may be determined from the code amount, quantized value, and motion vector information for each frame.
  • transcoder monitoring apparatus can be realized by hardware, software, or a combination thereof.
  • the present invention can be used for detecting abnormalities in a transcoder.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

入力圧縮画像データ及び出力再圧縮画像データをそれぞれデコードすることなく、トランスコーダ内の動作異常やトランスコーダの画質劣化を検出できるトランスコーダ異常監視装置を提供する。 符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視装置であって、符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化手段と、再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化手段と、第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視手段と、を備える。

Description

映像トランスコーダ監視装置、その方法及びその監視プログラム
　本発明は送信設備の一部であるトランスコーダの故障を判断し警告を発する装置、その方法及びそのプログラムに関し、特に、圧縮画像データの再符号化を行うトランスコーダの動作監視装置、その方法及びそのプログラムであって、入力圧縮画像データとトランスコード後の出力再圧縮画像データを原画像に復号化することなく推定評価を行うことによりトランスコーダの異常を検出する装置、その方法及びそのプログラムに関する。
　地上アナログ放送が停波する２０１１年に向けて円滑に地上デジタル放送に移行させ、且つ地上アナログ放送の視聴可能エリアに対し地上デジタル放送のカバー率を１００％にするための一手段としてＮＧＮ網を利用したＩＰＴＶ放送（地デジＩＰ再送信）が考えられている。
　このとき、ＩＰ網で数多くのユーザーに対応するため、１チャンネルで使用できる帯域が放送波における使用帯域と比較して狭帯域になる。
　そのため、放送で規定されている映像符号化方式であるＩＳＯ／ＩＥＣ１３８１８－２（ＭＰＥＧ－２）方式と比較して符号化効率の高いＩＳＯ／ＩＥＣ１４４９６－１０　（Ｈ．２６４）方式に符号化方式変換（トランスコード）を行いサービスすることが検討されている。
　また、Ｑｕａｌｉｔｙ　ｏｆ　Ｓｅｒｖｉｃｅｓ（ＱｏＳ）の観点から、地デジＩＰ再送信を行う場合、送信設備等に異常監視装置を設置する必要があり、トランスコーダを含む送信設備内の不具合箇所の特定を容易にする異常監視装置が求められている。
　画像異常等は直接放送事故につながるため早急な異常場所の特定と、予備系への切り替えの判断が必要となる。
特開２００３－１７４６４７号公報 特開２００５－０６４５６９号公報 特開２００６－０８０８３２号公報 特開２００７－０９６８００号公報 特開２００７－２７４４４５号公報 特開２００７－２９５４６８号公報 特開２００７－３０６３６３号公報 特開２００８－００５１９７号公報 特開２００８－０３５５３８号公報
　しかしながら、本発明に関連したトランスコーダ異常監視装置では、入力圧縮画像データを一旦復号し画像信号に戻し、更に出力再圧縮画像データを復号し画像信号に戻した後、２枚の画像データの比較評価を行うことでトランスコーダの画質劣化やトランスコーダ内の動作異常を検出していた。
　本発明に関連した方法に関し図１を用いて説明する。ＭＰＥＧ－２／Ｈ．２６４トランスコーダ２は入力圧縮画像データ（ＭＰＥＧ－２ストリーム）１を入力し、これを出力再圧縮画像データ（Ｈ．６２４ストリーム）４にトランスコードし出力する。トランスコーダ監視装置３は入力圧縮画像データ１と出力再圧縮画像データ４を入力し、これらをそれぞれＭＰＥＧ－２デコーダ３１とＨ．２６４デコーダ３３で原画像データ３ａと評価画像データ３ｂに復号化し、原画像データ３ａと評価画像データ３ｂを出力する。原画像データ３ａと評価画像データ３ｂとの間には、トランスコーダ２による処理遅延時間Ｔ１とＨ．２６４デコーダ３３による処理遅延時間Ｔ２の加えた遅延時間から、ＭＰＥＧ－２デコーダ３１の処理遅延時間Ｔ３を引いた、システムにおける処理遅延時間Ｔａｌｌがある。式１に処理遅延時間の計算式を示す。
　　　Ｔａｌｌ＝Ｔ１＋Ｔ２－Ｔ３　　　（１）
　従って、原画像データ３ａと評価画像データ３ｂとを比較するために、Ｔａｌｌの時間分遅延させるために画像メモリ３７を介して遅延処理後の原画像データ３ｅを生成する。従って、原画像データ３ａの代わりに、遅延後の原画像データ３ｅが評価画像データ３ｂと比較される。画像比較監視部３２は評価画像データ３ｂと遅延処理後の原画像データ３ｅの画像比較処理によりトランスコード異常を検出し、画像エラー情報５を出力する。画像比較処理を具体的に説明する。入力画像のＰＳＮＲ(Peak Signal to Noise Ratio)を算出し規定の閾値を下回った場合に画像エラー情報５を出力する方法や、二重刺激連続品質尺度法に基づいた評価方法により画像エラー情報５を出力する方法が使用されていた。
　そのため、例えばＨＤＴＶ画像であれば１画面に約２５Ｍビットのメモリが必要で、トランスコードによる遅延時間分入力画像データを遅らせるためには大きなメモリ量を必要とし、画像メモリ３７の回路規模が大きくなっていた。更に、実運用時に画像品質などの詳細情報は必要でなく冗長な情報が出力されていた。
　引用文献１乃至９のいずれにも、画像データそのものではなく、画像データの特性を示す画像情報に基づいてトランスコーダの異常を検出することは記載されていない。
　本発明では、入力圧縮画像データ及び出力再圧縮画像データをそれぞれデコードすることなく、トランスコーダ内の動作異常やトランスコーダの画質劣化を検出できるトランスコーダ異常監視装置、その方法及びそのプログラムの提供を目的とする。
　本発明によれば、符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視装置であって、符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化手段と、再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化手段と、第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視手段と、を備えることを特徴とするトランスコーダ監視装置が提供される。
　また、本発明によれば、符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視方法であって、符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化ステップと、再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化ステップと、第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視ステップと、を備えることを特徴とするトランスコーダ監視方法が提供される。
　更に、本発明によれば、符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視方法をコンピュータに実行させるためのトランスコーダ監視プログラムであって、前記トランスコーダ監視方法は、符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化ステップと、再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化ステップと、第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視ステップと、を備えることを特徴とするトランスコーダ監視プログラムが提供される。
　本発明によれば、可変長復号処理のみを行い画像データの特徴量を比較することにより、必要なメモリ量を大幅に削減し、デコーダの一部機能のみ使用するためにその他の機能ブロックを削減することができる。
本発明に関連したトランスコーダ異常監視装置の構成を示すブロック図である。 トランスコーダ及び該トランスコーダに接続された本発明の実施形態による第１のトランスコーダ監視部を示すブロック図である。 図２に示すデータ比較監視部の構成を示すブロック図である。 ピクチャタイプ毎の発生符号量を示すグラフである。 スライスタイプ毎の発生符号量を示すグラフである。 図３に示す同期処理／比較処理部の動作を示すフローチャート（１／２）である。 図２に示す同期処理／比較処理部の動作を示すフローチャート（２／２）である。 トランスコーダ及び該トランスコーダに接続された本発明の実施形態による第２のトランスコーダ監視部を示すブロック図である。 図７に示すデータ比較監視部の構成を示すブロック図である。 図８に示す同期処理／比較処理部の動作を示すフローチャート（１／２）である。 図８に示す同期処理／比較処理部の動作を示すフローチャート（２／２）である。 トランスコーダ及び該トランスコーダに接続された本発明の実施形態による第３のトランスコーダ監視部を示すブロック図である。 図１０に示すデータ比較監視部の構成を示すブロック図である。 トランスコーダ及び該トランスコーダに接続された本発明の実施形態による第４のトランスコーダ監視部を示すブロック図である。 トランスコーダ及び該トランスコーダに接続された本発明の実施形態による第５のトランスコーダ監視部を示すブロック図である。 図１３に示すトランスコーダ異常監視装置のデータ比較監視部内の比較処理部の動作を示すフローチャート（１／２）である。 図１３に示すトランスコーダ異常監視装置のデータ比較監視部内の比較処理部の動作を示すフローチャート（２／２）である。
符号の説明
　１　入力圧縮符号化データ（ＭＰＥＧ－２ストリーム）
　２　トランスコーダ部（ＭＰＥＧ－２→Ｈ．２６４トランスコーダ）
　３　トランスコーダ監視部
　４　出力再圧縮符号化データ（Ｈ．２６４ストリーム）
　５　画像エラー情報
　６　ＭＰＥＧ－２ストリームエラー
　７　Ｈ．２６４ストリームエラー
　２１　ＭＰＥＧ－２デコーダ部
　２２　Ｈ．２６４エンコーダ部
　３１　ＭＰＥＧ－２デコーダ部
　３２　画像比較監視部
　３３　Ｈ．２６４デコーダ部
　３４　ＭＰＥＧ－２可変長復号部
　３５　データ比較監視部
　３６　Ｈ．２６４可変長復号部
　３７　画像メモリ部
　３８　ＭＰＥＧ－２逆量子化部
　３９　ＭＰＥＧ－２逆ＤＣＴ部
　４０　Ｈ．２６４逆量子化部
　４１　Ｈ．２６４逆ＤＣＴ部
　４２　Ｈ．２６４イントラ予測部
　４３　加算部
　４４　切り替えＳＷ部
　４５　切り替えＳＷ部
　４６　メモリ部
　４７　メモリ部
　３５１　ＭＰＥＧ－２符号量統計処理部
　３５２　ＭＰＥＧ－２量子化値平均処理部
　３５３　ＭＰＥＧ－２　ＤＣ成分分散処理部
　３５４　同期処理／比較処理部
　３５５　Ｈ．２６４符号量統計処理部
　３５６　Ｈ．２６４量子化値平均処理部
　３５７　ＭＰＥＧ－２ベースバンド処理部
　３５８　Ｈ．２６４ベースバンド処理部
　２ａ　入力画像復号データ（原画像データ）
　３ａ　入力画像復号データ（原画像データ）
　３ｂ　出力画像復号データ（評価画像データ）
　３ｃ　ＭＰＥＧ－２ヘッダ情報や符号化情報などのデータ
　３ｄ　Ｈ．２６４ヘッダ情報や符号化情報などのデータ
　３ｅ　遅延処理後の入力画像復号データ（原画像データ）
　３ｆ　ＭＰＥＧ－２　ＤＣＴ係数データ
　３ｇ　ＭＰＥＧ－２入力画像復号データ
　３ｈ　Ｈ．２６４逆量子化後のＤＣＴ係数データ
　３ｉ　Ｈ．２６４逆ＤＣＴ後の復号データ
　３ｊ　Ｈ．２６４イントラ予測データ
　３ｋ　Ｈ．２６４の出力画像復号データ（評価画像データ）
　３５ａ　ＭＰＥＧ－２符号量
　３５ｂ　ＭＰＥＧ－２量子化平均値
　３５ｃ　ＭＰＥＧ－２　ＤＣ成分分散値
　３５ｄ　Ｈ．２６４符号量
　３５ｅ　Ｈ．２６４量子化平均値
　３５ｆ　ＭＰＥＧ－２　Ｉピクチャ分散値
　３５ｇ　Ｈ．２６４　Ｉスライス分散値
　以下、図面を参照して本発明を実施するための最良の形態について詳細に説明する。
　本発明の実施形態では、符号化された画像ストリームをＩＳＯ／ＩＥＣ１３８１８－２　（ＭＰＥＧ－２　Ｖｉｄｅｏ）規格に準じて圧縮符号化された画像ストリームとして述べるが、符号化された画像ストリームは、ＩＳＯ／ＩＥＣ１０９１８－１　（ＪＰＥＧ）規格や、ＩＳＯ／ＩＥＣ１１１７２－２　（ＭＰＥＧ－１　Ｖｉｄｅｏ）規格や、ＩＳＯ／ＩＥＣ１４４９６－２　（ＭＰＥＧ－４　Ｖｉｓｕａｌ）規格や、ＩＳＯ／ＩＥＣ１４４９６０－１０　（ＭＰＥＧ－４　ＡＶＣ／Ｈ．２６４）規格等の他の画像符号化方式に準じて圧縮符号化された画像ストリームであっても良い。さらに再圧縮符号化を行う際の符号化方式として、ＩＳＯ／ＩＥＣ１４４９６０－１０　（ＭＰＥＧ－４　ＡＶＣ／Ｈ．２６４）規格に準じた圧縮符号化方式を利用することとするが、他の画像符号化方式を利用しても本発明を適用できる。
　図２は本発明の一実施形態に係るトランスコーダ異常監視装置のブロック構成図である。ＭＰＥＧ－２ビデオストリーム１はトランスコーダ２に入力されＨ．２６４ビデオストリーム４に変換される。トランスコーダ２の動作に関して説明する。ＭＰＥＧ－２ビデオストリーム１は、ＭＰＥＧ－２デコーダ２１によりベースバンド映像信号２ａに伸張される。ベースバンド映像信号２ａはＨ．２６４エンコーダ２２によりＨ．２６４ビデオストリーム４に符号化される。ここで、図２におけるトランスコーダ２の構成は、一例でありＭＰＥＧ－２デコーダ２１とＨ．２６４エンコーダ２２をタンデム接続しているが、ＭＰＥＧ－２データを完全にデコードしないままＨ．２６４データに変換するトランスコーダでも良い。
　トランスコーダ監視部３はＭＰＥＧ－２ビデオストリーム１を入力し、ＭＰＥＧ－２可変長復号部３４でＭＰＥＧ－２ビデオストリーム１を可変長復号し、それにより得られたヘッダ情報や符号化情報等のデータ３ｃをデータ比較監視部３５に供給する。このとき、ＭＰＥＧ－２可変長復号部３４でＭＰＥＧ－２ビデオストリーム１を正常に復号できない場合にはＭＰＥＧ－２ストリームエラー６を出力する。
　また、トランスコーダ監視部３はトランスコーダ２から出力されたＨ．２６４ビデオストリーム４を入力し、Ｈ．２６４可変長復号部３６でＨ．２６４ビデオストリーム４を可変長復号し、それにより得られたヘッダ情報や符号化情報などのデータ３ｄをデータ比較監視部３５に供給する。このとき、Ｈ．２６４ビデオストリーム４をＨ．２６４可変長復号部３６で正常に復号できない場合にはＨ．２６４ストリームエラー７を出力する。
　データ比較監視部３５は、入力されたヘッダ情報や符号化情報などのデータ３ｃ、３ｄを比較評価することにより、入力画像エラー又は出力画像エラーといった画像エラー情報５を出力する。
　図３は本発明の一実施形態に係るデータ比較監視方法を実施する装置のブロック図である。
　ＭＰＥＧ－２符号量統計処理部３５１はＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃからフレーム単位での符号量をカウントし、ＭＰＥＧ－２符号量３５ａを出力する。図４にＭＰＥＧ－２ストリームをピクチャ単位で符号量をカウントした推移をグラフにした一例を示す。一般的な画像信号の符号量の推移は、ピクチャタイプによりＩピクチャ、Ｐピクチャ、Ｂピクチャの順で徐々に減少するのが特徴となっている。
　ＭＰＥＧ－２量子化値平均処理部３５２はピクチャ毎に量子化値の平均値（マクロブロック毎のＱスケール値の平均値）を算出し、ＭＰＥＧ－２量子化平均値３５ｂを出力する。
　ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、ピクチャタイプがＩピクチャの場合には画面内全体の輝度信号のＤＣＴ係数のＤＣ成分の分散値３５ｃを求め出力し、ＰピクチャやＢピクチャの場合にはイントラマクロブロックとインターマクロブロックを分け、それぞれのＤＣＴ係数のＤＣ成分の分散値３５ｃを求め出力する。さらに、ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、輝度成分のみではなく色差成分の分散値３５ｃを求め出力する。
　Ｈ．２６４符号量部統計処理３５５はＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄの符号量をピクチャ単位にカウントし、Ｈ．２６４符号量３５ｄを出力する。図５はＨ．２６４ストリームをスライス単位で符号量を統計処理した推移をグラフにした一例である。一般的な画像信号の符号量の推移は、図５に示すようにスライスタイプによりＩスライス、Ｐスライス、Ｂスライスの順で徐々に減少するのが特徴となっている。
　Ｈ．２６４量子化値平均処理部３５６はピクチャ毎に量子化値の平均値（マクロブロック毎のＱスケール値の平均値）を算出し、Ｈ．２６４量子化平均値３５ｅを出力する。
　同期処理／比較処理部３５４は、トランスコーダ２による再符号化遅延時間を考慮して、ＭＰＥＧ－２ストリームから得られる符号量３５ａ及び量子化平均値３５ｂと、トランスコード後のＨ．２６４ストリームから得られる符号量３５ｄ及び量子化平均値３５ｅが同じ映像フレームから得られるデータになるよう同期処理を行ない、発生符号量３５ａの推移と発生符号量３５ｄの推移とを比較し、量子化平均値３５ｂの推移と量子化平均値３５ｅの推移とを比較し、明らかに異なる推移が検出された場合、トランスコーダに何らかの異常があると判定し画像エラー情報５を出力する。例えばＭＰＥＧ－２符号量３５ａの平均値がほぼ一定で推移し、その間のＭＰＥＧ－２量子化平均値３５ｂの分散も小さな値で推移しているにもかかわらず、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量と比較して極端に（例えば、１／２以下）小さな値であり、またＨ．２６４量子化平均値３５ｅが極端に小さな値（例えば、１０以下）である場合には、トランスコーダ内部での異常と判定する。
　もしくは、ＭＰＥＧ－２符号量３５ａの平均値が規定の符号量と比較して小さな値で、その間のＭＰＥＧ－２量子化平均値３５ｂも小さな値である場合には、入力ＭＰＥＧ－２画像が平坦な画像であることが予測できるが、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量に近い値となり、Ｈ．２６４量子化平均値３５ｅが大きな値を示している場合には、トランスコーダ内部での異常と判定する。
　また、ＭＰＥＧ－２の動きベクトル情報と、Ｈ．２６４の動きベクトル情報から、ＭＰＥＧ－２の動きベクトルの方向及び大きさと、Ｈ．２６４の動きベクトルの方向及び大きさを比較し、一致率（予測ベクトル方向の一致率）が閾値（例えば５０％）を下回る場合には間違った予測で画質劣化の兆候を検出しトランスコーダ内部の異常と判定する。
　これら一連の処理によりトランスコーダ２内部で発生したエラーと、入力側で既に存在したエラーとの切り分けを容易にすることが可能となる。
　また、量子化平均値の算出やＤＣ成分の分散値などの演算処理に関しては、例えば画像全体の１／３以上演算したところで処理を停止させ以降の符号量の推移から画面全体の状態を推定することにより演算処理時間の短縮が可能である。
　図６Ａ、図６Ｂに本発明の一実施形態に係るトランスコーダ異常監視装置のデータ比較監視部内の同期処理／比較処理部３５４に関する動作を説明するためのフローチャートを示す。このフローチャートには、説明を簡単にするために、ＭＰＥＧ－２パラメータとＨ．２６４パラメータの同期処理を含めていないが、実際には、同期処理は行われている。
　まずＭＰＥＧ－２パラメータを入力し（ステップ６０１）、同期処理／比較処理部３５４が、ＭＰＥＧ－２符号量３５ａの平均値がＭＰＥＧ－２伝送帯域の１／２より小さいかどうかを判断する（ステップ６０２）。そうであ場合には（ステップ６０２でＹＥＳ）、ＭＰＥＧ－２画像データは画面全体が単調なデータの可能性があると判断する。
　ステップ６０２でＹＥＳである場合には、更に、同期処理／比較処理部３５４が、ＭＰＥＧ－２量子化平均値３５ｂが閾値（一例として１０）以下であるかどうかを判断する（ステップ６０３）。ステップ６０３でＹＥＳである場合には、ＭＰＥＧ－２画像データは画面全体が単調なデータの可能性があると判断する。
　ステップ６０３でＹＥＳである場合には、更に、同期処理／比較処理部３５４が、ＭＰＥＧ－２　ＤＣ成分分散値が閾値（一例として１００）以下であるかどうかを判断する（ステップ６０４）。ステップ６０４でＹＥＳである場合には、同期処理／比較処理部３５４が、ＭＰＥＧ－２画像データは画面全体が単調なデータであると判定する（ステップ６０５）。
　ステップ６０２でＮＯである場合、ステップ６０３でＮＯである場合又はステップ６０４でＮＯである場合には、同期処理／比較処理部３５４が、ＭＰＥＧ－２画像データは画面全体が単調なデータでないと判断する（ステップ６１４）。
　なお、ステップ６０４を省略し、ステップ６０２及びステップ６０３でＹＥＳである場合に、ＭＰＥＧ－２画像は画面全体が単調なデータであると判定してもよい。ステップ６０４を省略した場合には、これに対応し、ステップ６０２でＮＯである場合又はステップ６０３でＮＯである場合には、ＭＰＥＧ－２画像データは画面全体が単調なデータでないと判断する（ステップ６１４）。
　更に、ステップ６０３及びステップ６０４を省略し、ステップ６０２のみでＹＥＳである場合に、ＭＰＥＧ－２画像は画面全体が単調なデータであると判定してもよい。ステップ６０３及びステップ６０４を省略した場合には、これに対応し、ステップ６０２でＮＯである場合には、ＭＰＥＧ－２画像データは画面全体が単調なデータでないと判断する（ステップ６１４）。
　ステップ６０５又はステップ６１４の次に、Ｈ．２６４パラメータを入力し、同期処理／比較処理部３５４が、Ｈ．２６４符号量３５ｄの平均値がＨ．２６４伝送帯域の１／２より小さいかどうかを判断する（ステップ６０７）。そうである場合には（ステップ６０７でＹＥＳ）、Ｈ．２６４画像データは画面全体が単調なデータの可能性があると判断する。
　ステップ６０７でＹＥＳである場合には、更に、Ｈ．２６４量子化値平均処理部３５６は、Ｈ．２６４量子化平均値３５ｅが閾値（一例として１０）以下であるかどうかを判断する（ステップ６０８）。そうである場合には（ステップ６０８でＹＥＳ）、同期処理／比較処理部３５４が、Ｈ．２６４画像データは画面全体が単調なデータであると判定する（ステップ６０９）。
　ステップ６０７でＮＯである場合又はステップ６０８でＮＯである場合には、同期処理／比較処理部３５４が、Ｈ．２６４画像データは画面全体が単調なデータでないと判断する（ステップ６１５）。
　なお、ステップ６０８を省略し、ステップ６０７でＹＥＳである場合に、Ｈ．２６４画像は画面全体が単調なデータであると判定してもよい。ステップ６０８を省略した場合には、これに対応し、ステップ６０７でＮＯである場合には、Ｈ．２６４画像データは画面全体が単調なデータでないと判断する（ステップ６１５）。
　次に、同期処理／比較処理部３５４は、ＭＰＥＧ－２画像データは画面全体が単調なデータであるが（ステップ６１０でＹＥＳ）、Ｈ．２６４画像データは画面全体が単調でないデータである場合（ステップ６１１でＮＯ）には、トランスコーダに異常があると判断する。
　また、これとは逆に、同期処理／比較処理部３５４は、ＭＰＥＧ－２画像データは画面全体が単調でないデータであるが（ステップ６１０でＮＯ）、Ｈ．２６４画像データは画面全体が単調であるデータである場合（ステップ６１６でＹＥＳ）にも、トランスコーダに異常があると判断し、画像エラー情報５を出力する（ステップ６１２）。
　更に、図示しないが、ＭＰＥＧ－２画像データは画面全体が単調なデータであり（ステップ６１０でＹＥＳ）、Ｈ．２６４画像データは画面全体が単調なデータである（ステップ６１１でＹＥＳ）フレームが所定数以上（例えば、３０フレーム以上）連続する場合にはＭＰＥＧ－２ストリームに何らかの異常があると判断し、画像エラー情報５を出力する。
　従って、トランスコーダ２の異常と入力ＭＰＥＧ－２ストリームの異常との区別をつけることができる。
　また、第一の画像情報は第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　一例として、動きベクトルを利用した比較監視方法を述べる。第一の画像情報がＰピクチャもしくはＢピクチャの場合、動きベクトル情報の垂直成分と水平成分の分散値及び平均値を計算する。この時イントラ予測を行なっているマクロブロックに関しては動き予測範囲の最大値(例えば256)を代入して計算する。次に第二の画像がＰピクチャもしくはＢピクチャの場合、動きベクトル情報の垂直成分と水平成分の分散値及び平均値を計算する。この時、イントラ予測を行なっている第二の動きベクトルのマクロブロックに関しては動き予測範囲の最大値(例えば２５６)を代入して計算する。第一の動きベクトル情報の垂直方向の分散値が第二の動きベクトル情報の垂直方向の分散値の２倍もしくは１／２であり、第一の動きベクトル情報の水平方向の分散値が第二の動きベクトル情報の水平方向の分散値の２倍もしくは１／２である場合には、トランスコーダの異常と判定する。もしくは、第一の動きベクトル情報の水平方向の平均値が第二の動きベクトル情報の水平方向の平均値の１０倍もしくは１／１０であり、第一の動きベクトルの垂直方向の平均値が第二の動きベクトルの垂直方向の平均値の１０倍もしくは１／１０である場合には、トランスコーダの異常と判定する。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　図７に本発明の一実施形態に係るトランスコーダ異常監視装置のブロック構成図を示す。
　トランスコーダ監視部３は、ＭＰＥＧ－２可変長復号部３４によりＭＰＥＧ－２ストリーム１を可変長復号し、これにより得られたヘッダ情報や符号化情報などのデータ３ｃをデータ比較監視部３５及びＭＰＥＧ－２逆量子化部３８に供給する。このとき、ＭＰＥＧ－２可変長復号部３４で正常に復号できない場合にはＭＰＥＧ－２ストリームエラー６を出力する。
　ＭＰＥＧ－２逆量子化部３８は、データ３ｃからイントラ符号化されたデータを選択し、逆量子化しＤＣＴ係数データ３ｆを出力する。
　ＭＰＥＧ－２逆ＤＣＴ部３９は、ＤＣＴ係数データ３ｆから逆ＤＣＴ変換した画像データ３ｇをデータ比較監視部３５に供給する。
　このとき画像データ３ｇは通常のデコード動作に必要な動き補償機能が含まれていないため、イントラ符号化されたデータのみデコード可能である。
　また、データ比較監視部３５には、トランスコーダ２から出力されたＨ．２６４ビデオストリーム４を供給し、Ｈ．２６４可変長復号部３６で可変長復号し、これにより得られたヘッダ情報や符号化情報などのデータ３ｄをデータ比較監視部３５に供給する。このとき、Ｈ．２６４可変長復号部３６で正常に復号できない場合にはＨ．２６４ストリームエラー７を出力する。
　データ比較監視部３５では、入力されたヘッダ情報や符号化情報などのデータ３ｃ、３ｄ及びイントラ符号化されたフレームを復号化して得た画像データ３ｇを比較評価し、評価結果が悪ければ、入力画像エラーもしくは出力画像エラーといった画像エラー情報５を出力する。
　図８は本発明の一実施形態に係るデータ比較監視部３５のブロック図である。
　データ比較監視部３５に供給されたＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃは、ＭＰＥＧ－２符号量統計処理部３５１と、ＭＰＥＧ－２量子化値平均処理部３５２と、ＭＰＥＧ－２　ＤＣ成分分散処理部３５３に供給される。
　ＭＰＥＧ－２符号量統計処理部３５１はＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃの符号量をフレーム単位にカウントしＭＰＥＧ－２符号量３５ａを出力する。
　ＭＰＥＧ－２量子化値平均処理部３５２はマクロブロック単位で設定されている量子化値からピクチャ毎に量子化値の平均値を算出し、ＭＰＥＧ－２量子化平均値３５ｂを出力する。
　ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、ピクチャタイプがＩピクチャの場合には画面内全体の輝度信号のＤＣＴ係数のＤＣ成分の分散値３５ｃを求め出力し、ピクチャタイプがＰピクチャやＢピクチャの場合にはイントラマクロブロックとインターマクロブロックを分け、それぞれのＤＣＴ係数のＤＣ成分の分散値３５ｃを求め出力する。
　また、ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、画面全体の輝度信号のＤＣＴ係数のＤＣ成分の分散値の他に色差信号のＤＣ成分の分散値を求めても良い。
　ＭＰＥＧ－２ベースバンド処理部３５７はＩピクチャを復号化して得た画像データの輝度成分及び色差成分の画素間の分散を求め画素分散値３５ｆを出力する。
　また、データ比較監視部３５に供給されたＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄは、Ｈ．２６４符号量統計処理部３５５と、Ｈ．２６４量子化値平均処理部３５６に供給される。
　Ｈ．２６４符号量統計処理部３５５はフレーム単位で符号量をカウントし、Ｈ．２６４符号量３５ｄを出力する。
　Ｈ．２６４量子化値平均処理部３５６はマクロブロック単位で設定されている量子化値のピクチャ毎の平均値を算出し、Ｈ．２６４量子化平均値３５ｅを出力する。
　同期処理／比較処理部３５４は、トランスコーダ２による再符号化遅延時間を考慮して、ＭＰＥＧ－２ストリームから得られる処理データ３５ａ、３５ｂ、３５ｃ、３５ｆと、トランスコード後のＨ．２６４ストリームから得られる処理データ３５ｄ、３５ｅが同じ映像データから得られるデータになるよう同期処理を行ない、発生符号量３５ａの推移と発生符号量３５ｄの推移とを比較し、また、量子化平均値３５ｂの推移と量子化平均値３５ｅの推移とを比較し、明らかに異なる推移が検出された場合、トランスコーダ２に何らかの異常があると判定し画像エラー情報５を出力する。
　例えばＭＰＥＧ－２符号量３５ａの平均値がほぼ一定で推移し、その間のＭＰＥＧ－２量子化平均値３５ｂの分散も小さな値で推移している場合に、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量と比較して極端に（例えば、１／２以下）小さな値であり、またＨ．２６４量子化平均値３５ｅが極端に小さな値（例えば、１０以下）である場合には、トランスコーダ２の内部で異常が発生したと判定し、画像エラー情報５を出力する。また、ＭＰＥＧ－２符号量３５ａの平均値が規定の符号量と比較して小さな値で、その間のＭＰＥＧ－２量子化平均値３５ｂも小さな値である場合に、入力ＭＰＥＧ－２画像が平坦な画像であることが予測できるが、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量に近い値となり、Ｈ．２６４量子化平均値３５ｅが大きな値を示している場合にも、トランスコーダ２の内部で異常が発生したと判定し、画像エラー情報５を出力する。
　また、ＭＰＥＧ－２の動きベクトル情報と、Ｈ．２６４の動きベクトル情報から、ＭＰＥＧ－２の動きベクトルの方向及び大きさと、Ｈ．２６４の動きベクトルの方向及び大きさを比較し、一致率（予測ベクトル方向の一致率）が閾値（例えば５０％）を下回る場合には間違った予測で画質劣化の兆候を検出し画像エラー情報５を出力する。
　更に、Ｉピクチャの画像データから得られた画像情報３５ｆから入力画像が真っ黒の状態であるとかブルーバックであるなどの情報を得ることが可能となり、入力画像エラーの種別を判定でき、精度の高い監視システムを提供することが可能となる。
　図９Ａ及び図９Ｂに本発明の一実施形態に係るトランスコーダ異常監視装置のデータ比較監視部内の比較処理部に関する動作を説明するためのフローチャートを示す。このフローチャートではＭＰＥＧ－２パラメータとＨ．２６４パラメータの同期処理は既に行われているものとしている。まずＭＰＥＧ－２パラメータを入力し（ステップ９０１）、現在のピクチャがＭＰＥＧ－２　イントラピクチャであるか判断する（ステップ９０２）。
　イントラピクチャである場合には（ステップ９０２でＹＥＳ）、ＭＰＥＧ－２画素分散値を閾値（例えば、１０）と比較し（ステップ９０３）、閾値以下の場合には（ステップ９０３でＹＥＳ）、同期処理／比較処理部３５４が、ＭＰＥＧ－２画像データが平坦な画像であると判断し、平坦な画像データであることを示すＦｌａｔ　Ｆｌａｇを”１”にセットし（ステップ９０４）、閾値以上の場合には（ステップ９０３でＮＯ）、平坦な画像であることを示すＦｌａｔ　Ｆｌａｇを”０”にセットし（ステップ９０５）、Ｈ．２６４パラメータ入力処理（ステップ９１１）に進む。
　インターピクチャ（Ｐピクチャ又はＢピクチャ）である場合には（ステップ９０２でＮＯ）、同期処理／比較処理部３５４が、ＭＰＥＧ－２平均符号量３５ａが目標符号量の１／２であるか判断する（ステップ９０６）。
　ＭＰＥＧ－２平均符号量が目標符号量の１／２である場合には（ステップ９０６でＹＥＳ）、ステップ９０７に進み、そうでない場合には（ステップ９０６でＮＯ）、ステップ９１０に進む。
　ステップ９０７では、同期処理／比較処理部３５４が、ＭＰＥＧ－２量子化平均値が閾値（例えば、１０）以下であるかどうかを判断する。ＭＰＥＧ－２量子化平均値が閾値以下の場合には（ステップ９０７でＹＥＳ）、ステップ９０８に進み、そうでない場合には（ステップ９０７でＮＯ）、ステップ９１０に進む。
　ステップ９０８では、同期処理／比較処理部３５４が、ＭＰＥＧ－２　ＤＣ成分分散値が閾値（例えば、１００）以下であるかどうかを判断する。ＭＰＥＧ－２　ＤＣ成分分散値が閾値以下である場合には（ステップ９０８でＹＥＳ）、同期処理／比較処理部３５４が、ＭＰＥＧ－２画像データが平坦な画像であると判断し、ステップ９０９に進み、そこでＦｌａｔ　Ｆｌａｇを”１”にセットする。そうでない場合には（ステップ９０８でＮＯ）、ステップ９１０に進む。
　ステップ９１０では、同期処理／比較処理部３５４が、Ｆｌａｔ　Ｆｌａｇを”０”にセットする。
　ステップ９０４、ステップ９０５、ステップ９０９又はステップ９１０の次に、Ｈ．２６４パラメータを入力する（ステップ９１１）。
　次に、同期処理／比較処理部３５４が、Ｈ．２６４符号量の平均値がＨ．２６４伝送帯域の１／２より小さいかどうかを判断する（ステップ９１２）。ステップ９１２でＹＥＳである場合には、Ｈ．２６４画像データは画面全体が単調なデータの可能性があると判断して、ステップ９１３に進む。他方、ステップ９１２でＮＯである場合には、ステップ９１５に進む。
　ステップ９１３では、同期処理／比較処理部３５４が、Ｈ．２６４量子化平均値が閾値（例えば、１０）以下であるかどうかを判断する。そうである場合には（ステップ９１３でＹＥＳ）、Ｈ．２６４画像データは画面全体が単調なデータであると判定し、ステップ９１４に進み、そこで、同期処理／比較処理部３５４が、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”１”にセットする。他方、ステップ９１３でＮＯである場合には、ステップ９１５に進む。
　ステップ９１５では、同期処理／比較処理部３５４が、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”０”にセットする。
　ステップ９１４又はステップ９１５の次のステップ９１６にて、同期処理／比較処理部３５４が、ＭＰＥＧ－２　Ｆｌａｔ　ＦｌａｇとＨ．２６４　Ｆｌａｔ　Ｆｌａｇが一致したかどうかを判断する。一致した場合には（ステップ９１６でＹＥＳ）、トランスコーダの異常がなかったと判断し、ステップ９１８に進む。他方、ＭＰＥＧ－２　Ｆｌａｔ　ＦｌａｇとＨ．２６４　Ｆｌａｔ　Ｆｌａｇが一致しなかった場合には（ステップ９１６でＮＯ）、同期処理／比較処理部３５４が、トランスコーダに異常があると判断し、ステップ９１７で、同期処理／比較処理部３５４が、画像エラー情報５を出力し、ステップ９１８に進む。
　ステップ９１８では、次のＭＰＥＧ－２パラメータが入力されれば処理９０１に戻り、全てのパラメータ処理が終了すれば終了処理を行なう。
　図１０は本発明の一実施形態に係るトランスコーダ異常監視装置のブロック構成図である。
　トランスコーダ監視ブロック３は、ＭＰＥＧ－２ストリーム１を入力し、ＭＰＥＧ－２可変長復号部３４で可変長復号し、それにより得られるヘッダ情報や符号化情報などのデータ３ｃをデータ比較監視部３５及びＭＰＥＧ－２逆量子化部３８に供給入力する。ＭＰＥＧ－２逆量子化部３８は、データ３ｃからイントラ符号化されたデータを選択し、逆量子化しＤＣＴ係数データ３ｆを出力する。ＭＰＥＧ－２逆ＤＣＴ部３９は、ＤＣＴ係数データ３ｆを逆ＤＣＴ変換して、これにより得られる画像データ３ｇをデータ比較監視部３５に供給する。このとき、ＭＰＥＧ－２可変長復号部３４で正常に復号ができない場合にはＭＰＥＧ－２ストリームエラー６を出力する。
　また、データ比較監視部３５には、トランスコーダ２から出力されたＨ．２６４ビデオストリーム４が供給される。Ｈ．２６４可変長復号部３６は、Ｈ．２６４ビデオストリーム４を可変長復号し、これにより得られるヘッダ情報や符号化情報などのデータ３ｄをデータ比較監視部３５及びＨ．２６４逆量子化部４０に供給する。Ｈ．２６４逆量子化部４０は、データ３ｄからイントラ符号化されたデータを選択し、逆量子化し直交変換係数データ３ｈを出力する。Ｈ．２６４逆直交変換部４１は、直交変換係数データ３ｈを逆直交変換することにより得た画像データ３ｉをデータ加算部４３に供給する。データ加算部４３は、Ｈ．２６４イントラ予測部４２にて予測されたデータと画像データ３ｉとを合わせて演算処理することにより、Ｈ．２６４画像データ３ｋを得て、これをデータ比較監視部３５に供給する。このとき、Ｈ．２６４可変長復号部３６で正常に復号ができない場合にはＨ．２６４ストリームエラー７を出力する。
　データ比較監視部３５は、入力されたヘッダ情報や符号化情報などのデータ３ｃ、３ｄ及びイントラ符号化されたフレームを復号することにより得た画像データ３ｇ、３ｋを比較評価し、入力画像エラーもしくは出力画像エラーといった画像エラー情報５を出力する。
　図１１は本発明の一実施形態に係るデータ比較監視装置のブロック図である。
　データ比較監視部３５に供給されたＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃは、ＭＰＥＧ－２符号量統計処理部３５１と、ＭＰＥＧ－２量子化値平均処理部３５２と、ＭＰＥＧ－２　ＤＣ成分分散処理部３５３に供給される。
　ＭＰＥＧ－２符号量統計処理部３５１はＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃの符号量をフレーム単位にカウントしＭＰＥＧ－２符号量３５ａを出力する。
　ＭＰＥＧ－２量子化値平均処理部３５２はピクチャタイプがＩピクチャの量子化値を平均し、ＭＰＥＧ－２量子化平均値３５ｂを出力する。ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、ピクチャタイプがＩピクチャの画面内全体の輝度信号のＤＣＴ係数のＤＣ成分の分散値３５ｃを求め出力する。
　また、ＭＰＥＧ－２　ＤＣ成分分散処理部３５３は、画面全体の輝度信号のＤＣＴ係数のＤＣ成分の分散値の他に色差信号のＤＣ成分の分散値を求めても良い。
　ＭＰＥＧ－２ベースバンド処理部３５７はＩピクチャを復号化した画像データの輝度成分及び色差成分の画素間の分散を求め画素分散値３５ｆを出力する。
　また、データ比較監視部３５に供給されたＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄは、Ｈ．２６４符号量統計処理部３５５と、Ｈ．２６４量子化値平均処理部３５６に供給される。
　Ｈ．２６４符号量統計処理部３５５はＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄの符号量をフレーム単位で符号量をカウントしＨ．２６４符号量３５ｄを出力する。
　Ｈ．２６４量子化値平均処理部３５６はピクチャタイプがＩピクチャの量子化値を平均し、Ｈ．２６４量子化平均値３５ｅを出力する。
　また、Ｈ．２６４ベースバンド処理部３５８はＩピクチャを復号化した画像
データの輝度成分及び色差成分の画素間の分散を求め画素分散値３５ｇを出力する。
　同期処理／比較処理部３５４は、トランスコーダ２による再符号化遅延時間を考慮して、ＭＰＥＧ－２ストリームから得られる処理データ３５ａ、３５ｂ、３５ｃ、３５ｆと、トランスコード後のＨ．２６４ストリームから得られる処理データ３５ｄ、３５ｅ、３５ｇが同じ映像データから得られるデータになるよう同期処理を行ない、発生符号量３５ａの推移と発生符号量３５ｄの推移とを比較し、量子化平均値３５ｂの推移と量子化平均値３５ｅの推移とを比較し、明らかに異なる推移が検出された場合、トランスコーダに何らかの異常があると判定し画像エラー情報５を出力する。例えばＭＰＥＧ－２符号量３５ａの平均値がほぼ一定で推移し、その間のＭＰＥＧ－２量子化平均値３５ｂの分散も小さな値で推移している場合に、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量と比較して極端に（１／２以下）小さな値であり、またＨ．２６４量子化平均値３５ｅが極端に小さな値（１０以下）である場合には、トランスコーダ内部で異常が発生したと判定しアラーム５を出力する。また、ＭＰＥＧ－２符号量３５ａの平均値が規定の符号量と比較して小さな値で、その間のＭＰＥＧ－２量子化平均値３５ｂも小さな値である場合に、入力ＭＰＥＧ－２画像が平坦な画像であることが予測できるが、Ｈ．２６４符号量３５ｄの平均値が目標とする符号量に近い値となり、Ｈ．２６４量子化平均値３５ｅが大きな値を示している場合には、トランスコーダ内部で異常が発生していると判定し画像エラー情報５を出力する。
　また、ＭＰＥＧ－２の動きベクトル情報と、Ｈ．２６４の動きベクトル情報から、ＭＰＥＧ－２の動きベクトルの方向及び大きさと、Ｈ．２６４の動きベクトルの方向及び大きさを比較し、一致率（予測ベクトル方向の一致率）が閾値（例えば５０％）を下回る場合には間違った予測で画質が劣化する兆候があることを検出し画像エラー情報５を出力する。
　更に、Ｉピクチャの画像データから得られた画像情報３５ｆ、３５ｇから入出力画像が真っ黒の状態であるとかブルーバックであるなどの情報を得ることが可能となり、入出力で画像は平坦であるが、一目で異なる画像あることが判定できる場合などに対しても、精度の高い監視システムを提供することが可能となる。
　図１２は本発明の一実施形態に係るデータ比較監視装置のブロック図である。
　図１２の構成に示すようにトランスコードを行なう画像データが２つ以上の複数の画像データを扱っている場合、複数の画像データを一つの監視装置で監視する方法に関し説明する。入力するＭＰＥＧ－２ストリームを１－１、１－２、１－ｎとし、それぞれがトランスコーダ２－１、２－２、２－ｎに入力され、トランスコード後のＨ．２６４ストリーム４－１、４－２、４－ｎに変換され出力される。このとき、トランスコーダ監視装置３は、ＭＰＥＧ－２ストリーム１－１、１－２、１－ｎ及びＨ．２６４ストリーム４－１、４－２、４－ｎを入力し複数のストリーム情報の監視処理を行なう。ＭＰＥＧ－２ストリーム１－１、１－２、１－ｎはそれぞれＭＰＥＧ－２可変長復号部３４－１、３４－２、３４－ｎに入力し可変長復号処理を行なう。可変長復号を行なったデータ３ｃはデータ比較監視部３５に入力される。更に、データ３ｃの中でピクチャタイプがＩピクチャのデータはメモリ４６に一時蓄積され、ＳＷ４４を介してＭＰＥＧ－２逆量子化部３８に入力される。選択された入力ストリームデータはＭＰＥＧ－２逆量子化部３８で逆量子化され、ＤＣＴ係数データ３ｆを出力される。ＤＣＴ係数データ３ｆはＭＰＥＧ－２逆ＤＣＴ変換部３９で逆直交変換されベースバンドデータ３ｇとして出力される。尚、ＭＰＥＧ－２可変長復号部３４－１、３４－２、３４－ｎで可変長復号を行ない、ＭＰＥＧ－２ビデオストリーム１－１、１－２、１－ｎのヘッダ情報や符号化情報を含んだ符号量をフレーム単位にカウントしたＭＰＥＧ－２符号量を算出し、データ比較監視部３５に入力する。ここで、ｎは、任意の整数であり２チャンネル分のデータ処理を行なう際には１－ｎは存在しなくても良い。また、４チャンネル分のデータ処理を行なう際には１－ｎは１－３と１－４を示す。
　Ｈ．２６４ストリーム４－１、４－２、４－ｎはそれぞれＨ．２６４可変長復号部３６－１、３６－２、３６－ｎに入力され、可変長復号処理をされる。可変長復号されたデータ３ｄはデータ比較監視部３５に供給される。また、データ３ｄの中でスライスタイプがＩスライスのデータはＳＷ４５を介してＨ．２６４逆量子化部４０に供給される。選択された出力ストリームデータはＨ．２６４逆量子化部４０で逆量子化され、直交変換係数データ３ｈとして出力される。直交変換係数データ３ｈはＨ．２６４逆直交変換部４１で逆直交変換され変換係数データ３ｉとして出力される。このとき、変換係数データ３ｉは、Ｈ．２６４イントラ予測部４２より出力された予測データ３ｊと共に演算器４３により演算処理を施され、ベースバンドデータ３ｋと出力される。尚、Ｈ．２６４可変長復号部３６－１、３６－２、３６－ｎで可変長復号を行ない、Ｈ．２６４ストリーム４－１、４－２、４－ｎのヘッダ情報や符号化情報を含んだ符号量をフレーム単位にカウントしたＨ．２６４符号量を算出し、データ比較監視部３５に入力する。データ比較監視部３５は、入力された符号量と量子化値の推移や、イントラピクチャをデコードしたベースバンドデータの比較によりトランスコーダによる異常を検出して画像エラー情報５を出力する。
　データ比較監視部３５に供給されたＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃは、それぞれＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄと比較評価される。例えば、ＭＰＥＧ－２符号化方式による符号量の推移と、Ｈ．２６４符号化方式による符号量の推移を比較評価し、符号量配分が両者で著しく異なる場合にはトランスコード時に符号量制御エラーが発生していると判定する。更にＭＰＥＧ－２の動きベクトルとＨ．２６４の動きベクトルを比較することで、符号化画像の傾向を判定する。
　また、Ｉピクチャの画像データから得られた画像情報３ｇ、３ｋから入出力画像が真っ黒の状態であるとかブルーバックであるなどの情報を得ることが可能となり、入出力で画像は平坦であるが、一目で異なる画像あることが判定できる場合などに対しても、精度の高い監視システムを提供することが可能となる。Ｉピクチャ画像を画面上に提供することで、目視による監視も可能となる。
　図１３は本発明の一実施形態に係るデータ比較監視方法のブロック図である。
　図１３の構成に示すようにトランスコードを行なう画像データが２つ以上の複数の画像データを扱っている場合、複数の画像データを一つの監視装置で監視する方法に関し説明する。入力するＭＰＥＧ－２ストリームを１－１、１－２、１－ｎとし、それぞれがトランスコーダ２－１、２－２、２－ｎに入力され、トランスコード後のＨ．２６４ストリーム４－１、４－２、４－ｎに変換され出力される。このとき、トランスコーダ監視装置３は、ＭＰＥＧ－２ストリーム１－１、１－２、１－ｎ及びＨ．２６４ストリーム４－１、４－２、４－ｎを入力し複数のストリーム情報の監視処理を行なう。ＭＰＥＧ－２ストリーム１－１、１－２、１－ｎはそれぞれメモリ４６－１、４６－２、４６－ｎに格納される。このとき、メモリを制御する際にメモリの入力段にピクチャタイプを検出することが出来るＭＰＥＧ－２ヘッダデコード機能をもち、イントラピクチャの画像データのみメモリに記憶させておいても良い。次にＳＷ４４で、それぞれのメモリから読み出したストリームを切り替えＭＰＥＧ－２可変長復号部３４に供給し、可変長復号処理に施す。可変長復号により得られたデータ３ｃはデータ比較監視部３５に供給される。データ３ｃの中でピクチャタイプがＩピクチャのデータはＭＰＥＧ－２逆量子化部３８に供給される。選択された入力ストリームデータはＭＰＥＧ－２逆量子化部３８で逆量子化され、ＤＣＴ係数データ３ｆとして出力される。ＤＣＴ係数データ３ｆはＭＰＥＧ－２逆ＤＣＴ変換部３９で逆直交変換されベースバンドデータ３ｇとして出力される。Ｈ．２６４ストリーム４－１、４－２、４－ｎはそれぞれメモリ４７－１、４７－２、４７－ｎに格納される。このときメモリを制御するためにメモリの入力段にスライスタイプを検出することが出来るＨ．２６４簡易デコード機能を持ち、イントラスライスの画像データのみメモリに記憶させることでメモリ使用量を削減しても良い。次に、それぞれのメモリから読み出されたストリームは、ＳＷ４５で切り替えてられから、Ｈ．２６４可変長復号部３６に供給され、可変長復号処理を施される。可変長復号により得られたデータ３ｄはデータ比較監視部３５に供給される。また、データ３ｄの中でイントラスライスデータはＨ．２６４逆量子化部４０に供給される。選択された出力ストリームデータはＨ．２６４逆量子化部４０で逆量子化され、直交変換係数データ３ｈとして出力される。直交変換係数データ３ｈはＨ．２６４逆直交変換部４１で逆直交変換され、画像データ３ｉとして出力される。このとき、画像データ３ｉとＨ．２６４イントラ予測部４２より出力された予測データ３ｊとは、演算器４３による演算処理にかけられ、これによりベースバンドデータ３ｋが出力される。データ比較監視部３５は、入力された符号量と量子化値の推移や、イントラピクチャをデコードすることにより得られたベースバンドデータ同士の比較によりトランスコーダによる異常を検出して画像エラー情報５を出力する。
　データ比較監視部３５に供給されたＭＰＥＧ－２ビデオストリーム１のヘッダ情報や符号化情報を含んだデータ３ｃは、それぞれＨ．２６４ビデオストリーム４のヘッダ情報や符号化情報を含んだデータ３ｄと比較される。例えば、ＭＰＥＧ－２符号化方式による符号量の推移と、Ｈ．２６４符号化方式による符号量の推移を比較評価し、符号量配分が両者で著しく異なる場合にはトランスコード時に符号量制御エラーが発生していると判定する。更にＭＰＥＧ－２の動きベクトルとＨ．２６４の動きベクトルを比較することで、符号化画像の傾向を判定する。
　また、Ｉピクチャの画像データから得られた画像情報３ｇ、３ｋから入出力画像が真っ黒の状態であるとかブルーバックであるなどの情報を得ることが可能となり、入出力で画像は平坦であるが、一目で異なる画像であることが判定できる場合などに対しても、精度の高い監視システムを提供することが可能となる。Ｉピクチャ画像を画面上に提供することで、目視による監視も可能となる。
　図１４Ａ及び図１４Ｂに本発明の一実施形態に係るトランスコーダ異常監視装置のデータ比較監視部３５内の比較処理部に関する動作を説明するためのフローチャートを示す。このフローチャートでは複数のトランスコーダ処理によるストリームの異常監視を行うためにイントラピクチャのみを比較する方法を説明している。ＭＰＥＧ－２パラメータとＨ．２６４パラメータの同期処理は、すでに行われているものとする。
　まず、比較処理部３５が、ＭＰＥＧ－２パラメータを入力し（ステップ１４０１）、ＭＰＥＧ－２ヘッダを調べることによりイントラピクチャの開始であるか否か判定し（ステップ１４０２）、イントラピクチャでない場合には（ステップ１４０２でＮＯ）、イントラピクチャヘッダが入力されるまで処理を続ける（ステップ１４０１）。イントラピクチャである場合には（ステップ１４０２でＹＥＳ）、比較処理部３５が、イントラデコードした画像データの輝度成分の画素間の分散値及び色差成分の分散値を求め、この分散値が閾値（例えば、１００）以下である場合には（ステップ１４０３でＹＥＳ）、比較処理部３５が、ＭＰＥＧ－２　Ｆｌａｔ　Ｆｌａｇを”１”にセットする（ステップ１４０４）。分散値が閾値を越えるような場合には（ステップ１４０３でＮＯ）、比較処理部３５が、ＭＰＥＧ－２　Ｆｌａｔ　Ｆｌａｇを”０”にセットする（ステップ１４０５）。
　ステップ１４０４又はステップ１４０５の次に、比較処理部３５が、ＭＰＥＧ－２符号量３５ａの平均値がＭＰＥＧ－２伝送帯域の１／２より小さいか否かを判断する（ステップ１４０６）、そうである場合には（ステップ１４０６でＹＥＳ）、比較処理部３５が、ＭＰＥＧ－２画像データは画面全体が単調なデータの可能性があると判断してステップ１４０７に進む。ステップ１４０７では、比較処理部３５が、ＭＰＥＧ－２量子化平均値３５ｂが閾値（例えば、１０）以下であるか否かを判断する。そうである場合には（ステップ１４０７でＹＥＳ）、比較処理部３５が、ＭＰＥＧ－２画像データは画面全体が単調なデータの可能性があると判断してステップ１４０８に進む。ステップ１４０８では、比較処理部３５が、ＭＰＥＧ－２　ＤＣ成分分散値が閾値（一例として１００）以下であるかどうかを判断する。そうである場合には（ステップ１４０８でＹＥＳ）、比較処理部３５が、ステップ１４０９に進み、ここでＭＰＥＧ－２画像データは画面全体が単調なデータであると判定し、ＭＰＥＧ－２　Ｆｌａｔ　Ｆｌａｇを”１”にセットする。
　ステップ１４０６でＮＯである場合、ステップ１４０７でＮＯである場合又はステップ１４０８でＮＯである場合には、比較処理部３５が、ＭＰＥＧ－２　Ｆｌａｔ　Ｆｌａｇを”０”にセットする。
　ステップ１４０９又はステップ１４１０の次に、比較処理部３５が、Ｈ．２６４パラメータを入力し（ステップ１４１１）、ステップ１４１２でＨ．２６４ヘッダをみることにより、イントラスライスの開始であることを判定し、イントラスライスでない場合には（ステップ１４１２でＮＯ）、イントラスライスヘッダが入力されるまで処理を続ける（ステップ１４１１）。イントラスライスである場合には（ステップ１４１２でＹＥＳ）、比較処理部３５が、イントラデコードした画像データの輝度成分の画素間の分散値及び色差成分の分散値を求め、この分散値が閾値（例えば、１００）以下である場合には（ステップ１４１３でＹＥＳ）、比較処理部３５が、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”１”にセットする（ステップ１４１４）。分散値が閾値を越えるような場合には（ステップ１４１３でＮＯ）、比較処理部３５が、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”０”にセットする（ステップ１４１５）。
　ステップ１４１４又はステップ１４１５の次に、比較処理部３５が、Ｈ．２６４符号量３５ｄの平均値がＨ．２６４伝送帯域の１／２より小さいかどうかを判断する（ステップ１４１６）。そうである場合には（ステップ１４１６でＹＥＳ）、比較処理部３５が、Ｈ．２６４画像データは画面全体が単調なデータの可能性があると判断し、ステップ１４１７に進む。ステップ１４１７では、比較処理部３５が、Ｈ．２６４量子化平均値３５ｅが閾値（例えば、１０）以下であるかどうかを判断する。そうである場合には（ステップ１４１７でＹＥＳ）、比較処理部３５が、Ｈ．２６４画像データは画面全体が単調なデータであると判定し、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”１”にセットする（ステップ１４１８）。
　ステップ１４１６でＮＯである場合又はステップ１４１７でＮＯである場合には、比較処理部３５が、Ｈ．２６４　Ｆｌａｔ　Ｆｌａｇを”０”にセットする（ステップ１４１９）。
　ステップ１４１８又はステップ１４１９の次に、比較処理部３５が、ステップ１４２０にて、ＭＰＥＧ－２　Ｆｌａｔ　ＦｌａｇとＨ．２６４　Ｆｌａｔ　Ｆｌａｇが同一かどうかを判断する。異なっている場合には（ステップ１４２０でＮＯ）、比較処理部３５が、トランスコーダエラーと判断し画像エラー情報５を出力する（ステップ１４２１）。
　また、図示しないが、ＭＰＥＧ－２　Ｆｌａｔ　Ｆｌａｇ及びＨ．２６４　Ｆｌａｔ　Ｆｌａｇとも”１”である状態が少なくとも３０フレーム以上連続する場合には、比較処理部３５が、ＭＰＥＧ－２ストリームに何らかの異常があると判断し、画像エラー情報５を出力する。
　これら一連の処理によりトランスコーダ２内部で発生したエラーと、入力側で既に存在したエラーとの切り分けを容易にすることが可能となる。
　また、第一の画像情報は第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　更に、第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報であり、第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、データ比較監視部は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定するようにしてもよい。
　なお、本発明の実施形態によるトランスコーダ監視装置は、ハードウェア、ソフトウェア又はこれらの組合せにより実現することができる。
　本願は、日本の特願２００８－０８０２４８（２００８年３月２６日）及び特願２００８－０８７１１４（２００８年３月２８日）に基づいたものであり、又、特願２００８－０８０２４８及び特願２００８－０８７１１４に基づくパリ条約の優先権を主張するものである。特願２００８－０８０２４８及び特願２００８－０８７１１４の開示内容は、特願２００８－０８０２４８及び特願２００８－０８７１１４を参照することにより本発明に援用される。
　本発明の代表的な実施形態が詳細に述べられたが、様々な変更(changes)、置き換え(substitutions)及び選択(alternatives)が請求項で定義された発明の精神と範囲から逸脱することなくされることが理解されるべきである。また、仮にクレームが出願手続きにおいて補正されたとしても、クレームされた発明の均等の範囲は維持されるものと発明者は意図する。
　本発明は、トランスコーダの異常検出に利用することができる。

Claims (18)

  1. 　符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視装置であって、
    　符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化手段と、
    　再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化手段と、
    　第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視手段と、
    　を備えることを特徴とするトランスコーダ監視装置。
  2. 　請求項１に記載のトランスコーダ監視装置において、
    　前記第一の画像ストリームの画面内圧縮符号化された画像データをデコードする第１のデコード手段を更に備え、
    　前記データ比較監視手段は、
    　前記第一のデコード手段によりデコードされた第１の画像データと前記第一の可変長復号化手段より出力される第一の画像情報と前記第二の可変長復号化手段より出力される第二の画像情報とを入力し、前記第一の画像データの特徴と前記第一の画像情報と第二の画像情報との比較評価を行い、出力画像データの劣化を推定することによりトランスコーダの動作異常を検出することを備えることを特徴とするトランスコーダ監視装置。
  3. 　請求項２に記載のトランスコーダ監視装置において、
    　前記第一の画像データの特徴は少なくとも輝度信号の分散値を含み、
    　前記第一の画像情報は少なくとも前記第一の画像ストリームのフレーム毎の符号量を含み、
    　前記第二の画像情報は少なくとも前記第二の画像ストリームのフレーム毎の符号量を含み、
    　前記データ比較監視手段は前記輝度信号の分散値と、前記第一の画像ストリームのフレーム毎の符号量と、第二の画像ストリームのフレーム毎の符号量から前記トランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  4. 　請求項２に記載のトランスコーダ監視装置において、
    　前記第一の画像データの特徴は少なくとも輝度信号の平均値及び分散値を含み、
    　前記第一の画像情報は少なくとも前記第一の画像ストリームのフレーム毎の符号量を含み、
    　前記第二の画像情報は少なくとも前記第二の画像ストリームのフレーム毎の符号量を含み、
    　前記データ比較監視手段は前記第一の画像データの平均値及び分散値が２フレーム以上にわたり等しい値であるか否かをみることにより前記第一の画像ストリームの異常を判定し、前記第一の画像データの符号量と、前記第二の画像データの符号量から前記トランスコーダにより生じた前記第二の画像ストリームの異常を判定することを特徴とするトランスコーダ監視装置。
  5. 　請求項２に記載のトランスコーダ監視装置において、
    　前記第一の画像データの特徴は輝度信号の分散値及び色差信号の分散値を含み、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量を含み、
    　前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量を含み、
    　前記データ比較監視手段は前記第一の画像データの輝度成分の分散値及び色差成分の分散値と、前記第一の画像ストリームのフレーム毎の符号量と、前記第二の画像ストリームのフレーム毎の符号量からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  6. 　請求項２に記載のトランスコーダ監視装置において、
    　前記第一の画像データの特徴は輝度信号の平均値及び分散値並びに色差信号の平均値及び分散値を含み、
    　前記第一の画像情報は前記第一の画像ストリームのフレーム毎の符号量を含み、
    　前記第二の画像情報は前記第二の画像ストリームのフレーム毎の符号量を含み、
    　前記データ比較監視手段は前記第一の画像データの輝度成分の平均値及び分散値並びに色差成分の平均値及び分散値が２フレーム以上にわたり等しい値であるか否かをみることにより前記第一の画像ストリームの異常を判定し、前記第一の画像データの符号量と、前記第二の画像データの符号量からトランスコーダにより生じた前記第二の画像ストリームの異常を判定することを特徴とするトランスコーダ監視装置。
  7. 　請求項１に記載のトランスコーダ監視装置において、前記第１の画像情報が示す特性と、前記第２の画像情報が示す特性とが異なる場合に、トランスコーダに動作異常があると判断することを特徴とするトランスコーダ監視装置。
  8. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量と前記第二の画像ストリームのフレーム毎の符号量からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  9. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量及びＤＣＴ係数のＤＣ成分であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量及びＤＣＴ係数のＤＣ成分と前記第二の画像ストリームのフレーム毎の符号量からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  10. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量及び量子化値であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び量子化値であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量及び量子化値と前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び量子化値からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  11. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量、量子化値及びＤＣＴ係数のＤＣ成分であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び量子化値であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量、量子化値及びＤＣＴ係数のＤＣ成分と前記第二の画像ストリームのフレーム毎の符号量及び量子化値からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  12. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームの動きベクトル情報であり、前記第二の画像情報は第二の画像ストリームの動きベクトル情報であり、前記データ比較監視手段は前記第一の動きベクトル情報と前記第二の動きベクトル情報からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  13. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量及び動きベクトル情報と第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  14. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分及び動きベクトル情報と前記第二の画像ストリームのフレーム毎の符号量及び動きベクトル情報からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  15. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報と前記第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  16. 　請求項１に記載のトランスコーダ監視装置であって、
    　前記第一の画像情報は第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報であり、前記第二の画像情報は第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報であり、前記データ比較監視手段は前記第一の画像ストリームのフレーム毎の符号量、ＤＣＴ係数のＤＣ成分、量子化値及び動きベクトル情報と前記第二の画像ストリームのフレーム毎の符号量、量子化値及び動きベクトル情報からトランスコーダの異常を判定することを特徴とするトランスコーダ監視装置。
  17. 　符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視方法であって、
    　符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化ステップと、
    　再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化ステップと、
    　第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視ステップと、
    　を備えることを特徴とするトランスコーダ監視方法。
  18. 　符号化された画像ストリームの再圧縮符号化を行うトランスコーダの動作を監視するトランスコーダ監視方法をコンピュータに実行させるためのトランスコーダ監視プログラムであって、
    　前記トランスコーダ監視方法は、
    　符号化された第一の画像ストリームを入力し、可変長復号化を行う第一の可変長復号化ステップと、
    　再圧縮符号化された第二の画像ストリームを入力し、可変長復号化を行う第二の可変長復号化ステップと、
    　第一の可変長復号化手段より出力される第一の画像情報と第二の可変長復号化手段より出力される第二の画像情報とを入力し、これら２つの画像情報の比較評価を行うことによりトランスコーダの動作異常を検出するデータ比較監視ステップと、
    　を備えることを特徴とするトランスコーダ監視プログラム。
PCT/JP2009/056080 2008-03-26 2009-03-26 映像トランスコーダ監視装置、その方法及びその監視プログラム WO2009119721A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010505759A JPWO2009119721A1 (ja) 2008-03-26 2009-03-26 映像トランスコーダ監視装置、その方法及びその監視プログラム

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2008-080248 2008-03-26
JP2008080248 2008-03-26
JP2008-087114 2008-03-28
JP2008087114 2008-03-28

Publications (1)

Publication Number Publication Date
WO2009119721A1 true WO2009119721A1 (ja) 2009-10-01

Family

ID=41113909

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/056080 WO2009119721A1 (ja) 2008-03-26 2009-03-26 映像トランスコーダ監視装置、その方法及びその監視プログラム

Country Status (2)

Country Link
JP (1) JPWO2009119721A1 (ja)
WO (1) WO2009119721A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2009119807A1 (ja) * 2008-03-28 2011-07-28 日本電気株式会社 映像トランスコーダ監視装置、その方法及びそのプログラム
JP2011205253A (ja) * 2010-03-24 2011-10-13 Nippon Telegr & Teleph Corp <Ntt> トランスコード映像品質客観評価装置及び方法及びプログラム
JP2011244278A (ja) * 2010-05-19 2011-12-01 Ntt Plala Inc 映像比較監視システム、映像比較監視方法、映像比較監視プログラム及び映像比較監視プログラム用記録媒体
JPWO2018051506A1 (ja) * 2016-09-16 2018-11-22 三菱電機株式会社 制御試験装置及び制御試験方法
JPWO2018047322A1 (ja) * 2016-09-12 2018-12-20 三菱電機株式会社 表示制御装置及び表示制御方法
JP2020100388A (ja) * 2018-12-20 2020-07-02 セイコーエプソン株式会社 回路装置、電子機器及び移動体
CN114679592A (zh) * 2022-02-07 2022-06-28 上海哔哩哔哩科技有限公司 边缘集群调度方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08275161A (ja) * 1995-03-30 1996-10-18 Oki Electric Ind Co Ltd 画像変換装置
JP2007243294A (ja) * 2006-03-06 2007-09-20 Kddi Corp 映像品質監視装置
JP2007318455A (ja) * 2006-05-25 2007-12-06 Matsushita Electric Ind Co Ltd トランスコーデック装置

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001160967A (ja) * 1999-12-03 2001-06-12 Nec Corp 画像符号化方式変換装置及び符号化レート変換装置
JP2002010261A (ja) * 2000-06-16 2002-01-11 Nec Corp 画像符号化方式変換装置
JP3918540B2 (ja) * 2001-12-06 2007-05-23 日本電気株式会社 映像符号化装置、映像符号化方法、トランスコーダ装置及びトランスコード方法
JP4403737B2 (ja) * 2003-08-12 2010-01-27 株式会社日立製作所 信号処理装置及びこれを用いた撮像装置
JP2006080832A (ja) * 2004-09-09 2006-03-23 Mitsubishi Electric Corp 画像トランスコーダ
JP4266218B2 (ja) * 2005-09-29 2009-05-20 株式会社東芝 動画像データの再圧縮符号化方法、装置及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08275161A (ja) * 1995-03-30 1996-10-18 Oki Electric Ind Co Ltd 画像変換装置
JP2007243294A (ja) * 2006-03-06 2007-09-20 Kddi Corp 映像品質監視装置
JP2007318455A (ja) * 2006-05-25 2007-12-06 Matsushita Electric Ind Co Ltd トランスコーデック装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2009119807A1 (ja) * 2008-03-28 2011-07-28 日本電気株式会社 映像トランスコーダ監視装置、その方法及びそのプログラム
JP2011205253A (ja) * 2010-03-24 2011-10-13 Nippon Telegr & Teleph Corp <Ntt> トランスコード映像品質客観評価装置及び方法及びプログラム
JP2011244278A (ja) * 2010-05-19 2011-12-01 Ntt Plala Inc 映像比較監視システム、映像比較監視方法、映像比較監視プログラム及び映像比較監視プログラム用記録媒体
JPWO2018047322A1 (ja) * 2016-09-12 2018-12-20 三菱電機株式会社 表示制御装置及び表示制御方法
JPWO2018051506A1 (ja) * 2016-09-16 2018-11-22 三菱電機株式会社 制御試験装置及び制御試験方法
CN109691097A (zh) * 2016-09-16 2019-04-26 三菱电机株式会社 控制试验装置及控制试验方法
CN109691097B (zh) * 2016-09-16 2020-06-19 三菱电机株式会社 控制试验装置及控制试验方法
JP2020100388A (ja) * 2018-12-20 2020-07-02 セイコーエプソン株式会社 回路装置、電子機器及び移動体
JP7419721B2 (ja) 2018-12-20 2024-01-23 セイコーエプソン株式会社 回路装置、電子機器及び移動体
CN114679592A (zh) * 2022-02-07 2022-06-28 上海哔哩哔哩科技有限公司 边缘集群调度方法及装置
WO2023147750A1 (zh) * 2022-02-07 2023-08-10 上海哔哩哔哩科技有限公司 边缘集群调度方法及装置

Also Published As

Publication number Publication date
JPWO2009119721A1 (ja) 2011-07-28

Similar Documents

Publication Publication Date Title
Wang et al. Rate-distortion optimization of rate control for H. 264 with adaptive initial quantization parameter determination
CN104396245B (zh) 用于对图像进行编码或解码的方法和装置
US8428118B2 (en) Technique for transcoding MPEG-2/MPEG-4 bitstream to H.264 bitstream
JP4987322B2 (ja) 動画像復号装置及び動画像復号方法
WO2009119721A1 (ja) 映像トランスコーダ監視装置、その方法及びその監視プログラム
US20100020878A1 (en) Transcoding for Systems Operating Under Plural Video Coding Specifications
EP1662799A2 (en) Video down-sampling transcoding method and device
KR101439484B1 (ko) 잡음을 고려하여 영상을 복호화하는 방법 및 장치
US20050041740A1 (en) Video data conversion device and video data conversion method
US20160373762A1 (en) Methods of and arrangements for processing an encoded bit stream
KR20050074286A (ko) 화상 부호화 장치, 화상 부호화 방법 및 화상 부호화프로그램
US10225561B2 (en) Method and apparatus for syntax signaling in image and video compression
US20170310987A1 (en) Method and Apparatus for Image Compression Using Block Prediction Mode
JP2008219205A (ja) 画像情報符号化装置及び画像情報符号化方法
WO2009119807A1 (ja) 映像トランスコーダ監視装置、その方法及びそのプログラム
US7236529B2 (en) Methods and systems for video transcoding in DCT domain with low complexity
US9094716B2 (en) Methods for coding and decoding a block of picture data, devices for coding and decoding implementing said methods
KR20070081949A (ko) 트랜스코딩 장치 및 방법
US9094669B2 (en) Video encoder bit estimator for macroblock encoding
KR100770873B1 (ko) 영상 부호화시 비트율 제어 방법 및 장치
Deknudt et al. Reduced complexity H. 264/AVC transrating based on frequency selectivity for high-definition streams
KR100733991B1 (ko) Ｍｐｅｇ２에서 ｈ．２６４로의 트랜스코딩 방법
EP1739970A1 (en) Method for encoding and transmission of real-time video conference data
US9247196B1 (en) High efficiency video coding for video with interlaced and progressive content using lookahead
Dumitras et al. Enhancement of direct mode selection in B pictures for bit rate reduction of compressed video sequences

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09725731

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2010505759

Country of ref document: JP

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09725731

Country of ref document: EP

Kind code of ref document: A1