WO2007032058A1 - 復号装置 - Google Patents

復号装置 Download PDF

Info

Publication number
WO2007032058A1
WO2007032058A1 PCT/JP2005/016810 JP2005016810W WO2007032058A1 WO 2007032058 A1 WO2007032058 A1 WO 2007032058A1 JP 2005016810 W JP2005016810 W JP 2005016810W WO 2007032058 A1 WO2007032058 A1 WO 2007032058A1
Authority
WO
WIPO (PCT)
Prior art keywords
decoding
data
signal
error
unit
Prior art date
Application number
PCT/JP2005/016810
Other languages
English (en)
French (fr)
Inventor
Yoshiaki Katou
Koutarou Asai
Tokumichi Murakami
Original Assignee
Mitsubishi Denki Kabushiki Kaisha
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Denki Kabushiki Kaisha filed Critical Mitsubishi Denki Kabushiki Kaisha
Priority to PCT/JP2005/016810 priority Critical patent/WO2007032058A1/ja
Priority to CN2005800511650A priority patent/CN101228793B/zh
Priority to JP2007535341A priority patent/JP4642854B2/ja
Priority to US11/988,240 priority patent/US7992074B2/en
Publication of WO2007032058A1 publication Critical patent/WO2007032058A1/ja

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H04N19/467—Embedding additional information in the video signal during the compression process characterised by the embedded information being invisible, e.g. watermarking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder

Definitions

  • the present invention relates to a decoding apparatus for decoding and displaying encoded image data.
  • Patent Document 1 JP-T 2004-528752 (Pages 14-17, Fig. 3)
  • the present invention has been made to solve the above-described problems. Even if erroneous code data is input to the decoding device, the decoding device includes the video frame within one video frame time. Is restored, and the decoding process of the next video frame is made possible, thereby realizing a decoding device that minimizes the influence of errors in the encoded data. Means for solving the problem
  • the decoding apparatus receives encoded data, outputs encoded data for one video frame, and outputs the following 1 based on reception of a decoding completion signal.
  • a receiving means for outputting the code data of the frame and transmitting an error signal when the decoding completion signal is not received within a predetermined time; and decoding the code data of the receiving means
  • a decoding means for transmitting a decoding completion signal to the receiving means upon completion of decoding and interrupting the decoding process based on reception of a reset signal, and for decoding the reset signal based on reception of the error signal.
  • Error recovery means for outputting to the means.
  • the decoding device of the present invention by providing error recovery means for recovering the decoding operation of the image decoder within one video frame, a video frame that is affected even if there is an error in the code data. There is an effect that normal decoding operation can be continued quickly with the number kept to a minimum.
  • FIG. 1 is a configuration diagram showing a decoding apparatus according to Embodiment 1 of the present invention.
  • FIG. 2 is a diagram for explaining input / output signals of the image decoder 2 in FIG. 1.
  • FIG. 3 is a diagram for explaining input / output signals of the image decoder 2 in FIG. 1, and is an explanatory diagram when there is an error in the code key data.
  • FIG. 4 is a block diagram showing an example of an internal configuration of the receiving unit 1 in FIG. 1.
  • FIG. 5 is a block diagram showing an example of the internal configuration of the image decoder 2 in FIG. 1. BEST MODE FOR CARRYING OUT THE INVENTION
  • FIG. 1 is a block diagram showing the configuration of the decoding apparatus according to Embodiment 1 of the present invention.
  • the decoding device shown in FIG. 1 includes a receiving unit 1 that receives encoded data 11 from a network or a storage medium, an image decoder 2 as a decoding unit that decodes encoded data 12 from the receiving unit 1, and an image An error recovery unit 3 that prompts the decoder 2 to restart the operation is provided, and a display unit 4 that displays an image decoded by the image decoder 2 on a display or a projector.
  • Code key data 11 from a storage medium such as a network node disk is input to the receiver 1 and buffered in a memory or the like inside the receiver 1.
  • the encoded data 12 for one video frame from the receiving unit 1 is read out and input to the image decoder 2, and the decoded image frame 13 decoded by the image decoder 2 is displayed on the display unit 4.
  • the encoded data is intra-frame encoded data such as JPEG (motion JPEG) or MPEG intra frame
  • JPEG motion JPEG
  • MPEG MPEG intra frame
  • the image decoder 2 transmits a decoding completion signal 14 to the receiving unit 1 when the decoding of the code data 12 for one video frame received from the receiving unit 1 is completed.
  • the receiving unit 1 after receiving the decoding completion signal 14, the next one frame of code data 12 is output to the image decoder 2.
  • an error signal 15 is transmitted to the error recovery unit 3.
  • the error recovery unit 3 outputs a decoder reset signal 16 to the image decoder 2 in response to the error signal 15.
  • the decoder reset signal 16 when the decoder reset signal 16 is input, the decoding processing operation of the encoded data 12 is interrupted and prepared for the next input of the encoded data 12.
  • FIG. 2 shows the temporal progress of the code data 12, which is an input / output signal of the image decoder 2, the decoding completion signal 14, and the decoded image frame 13.
  • the horizontal axis indicates the time axis. It is divided into video frame time units.
  • FIG. 2 when encoded data for one video frame of the Nth frame is input as encoded data 12 to the image decoder 2, an image is displayed.
  • the image decoder 2 starts decoding, and the signal of the decoding completion signal 14 is turned off. At this time, the image decoder 2 outputs the video of the (N ⁇ 1) th frame before one video frame as the decoded image frame 13 during the one video frame time.
  • One video frame time is the reciprocal of the number of video frames per second. For example, in the case of 24 video frames per second, one video frame time is approximately 41.67 milliseconds.
  • the decoding completion signal 14 when the decoding of the Nth frame is completed, the decoding completion signal 14 is turned on, and is on until the next N + 1 frame code data is input and decoding is started. Maintain the state.
  • the receiving unit 1 recognizes that the image decoder 2 has successfully decoded the code data 12 of the Nth frame when the decoding completion signal 14 is turned on, and when the next video frame time is reached, the N + 1st The frame sign key data 12 is output to the image decoder 2.
  • the image decoder 2 repeats this operation at the period of the video frame time when the decoding is completed normally with no error in the code key data 12.
  • FIG. 3 also shows the time course of the input / output signals of the image decoder 2.
  • the decoding completion signal 14 is not output.
  • FIG. 3 when an error is included in the code data 12 of the (N + 1) th frame and decoding cannot be performed normally, decoding indicating completion of decoding even if input of encoded data of the (N + 1) th frame is completed Completion signal 14 does not turn on.
  • the receiving unit 1 outputs the error signal 15 to the error recovery unit 3 as described above if the decoding completion signal 14 is not turned on within a predetermined decoding completion range.
  • the decoder reset signal 16 as shown in FIG. 3 is output to the image decoder 2 to recover from the error state of the image decoder 2.
  • the decoding circuit and the processing are forcibly terminated by the input of the decoder reset signal 16 to prepare for the decoding of the code key data 12 of the next N + 2 frame, and the decoding cannot be performed.
  • the image frame 13 of the Nth frame decoded normally immediately before is output for the next video frame time.
  • the image decoder 2 is reset within one video frame time, so that the number of image frames affected by errors can be kept to a minimum.
  • the image decoder that decodes the image has been described as an example.
  • the audio frame time or the text frame time is shorter than the audio decoder or the decoder such as subtitle text data.
  • the decoding completion signal of the image decoder 2 is monitored for each video frame, and if the decoding is not completed within a predetermined time within one video frame time, the image By providing error recovery hand 3 that generates a reset signal to restore the operation of decoder 2, even if there is an error in the decoded data, image decoder 2 is restored within the time of one video frame, and the next video frame Decoding processing can be performed, and the recovery time from the error state of the image decoder 2 can be shortened.
  • the image decoder 2 interrupts the decoding of the code data and outputs the screen that has been normally decoded immediately before as the decoded image.
  • the image decoder 2 interrupts the decoding of the code data and outputs the screen that has been normally decoded immediately before as the decoded image.
  • the code key data 12 of the video frame is displayed.
  • the error signal 15 can also be generated without being output to the image decoder 2.
  • FIG. 4 is a block diagram showing an example of the internal configuration of the receiving unit 1.
  • the receiving unit 1 shown in FIG. 4 includes a data check unit 21 that detects data loss or error in the input encoded data 11, and a code code that has no error input via the data check unit 21. Detection signal from the code data transmission unit 22 that outputs the code data 12 for one video frame based on the input of the data, and the data inspection unit 21 when an error is detected in the encoded data 11 And decoding is not completed by a predetermined time within the video frame time.
  • an error signal generator 23 that generates an error signal 15 based on a signal from the decoding completion detection unit 24 and a decoding completion signal 14 from the image decoder 2 are input to a predetermined time within the video frame time.
  • a signal is output to the error signal generation unit 23, and a decoding completion detection unit 24 that outputs a signal to the code data transmission unit 22 and interrupts output to the image decoder 2 is provided.
  • the read code data 11 is subjected to data loss detection and error detection in the data inspection unit 21.
  • the continuity of the sequence number given to the header part of the code data 11 stored in the packet is inspected to check whether there is a missing packet unit, or CRC (Cyclic Redundancy Check) For example, a bit error due to a parity check (redundancy check code) is detected.
  • CRC Cyclic Redundancy Check
  • the encoded data is sent to the encoded data transmission unit 22, from which code video data 12 for one video frame is transmitted to the image decoder. Sent to 2.
  • a detection signal is sent to the error signal generator 23, and the error signal 15 is sent from the error signal generator 23 to the error recovery unit 3.
  • the decoding completion signal 14 from the image decoder 2 is input to the decoding completion detection unit 24, and if the decoding is not completed by a predetermined time within the video frame time, a signal is sent to the error signal generation unit 23.
  • the error signal 15 is sent to the error recovery unit 3.
  • the image decoder 2 is prevented from sending out the encoded data containing the error, and an image decoder error is generated.
  • the decoding process can be recovered without any problem.
  • the receiving unit 1 detects the error of the input encoded data 11 or the occurrence of data loss and outputs the error signal 15 to the error recovery unit 3, and Since the output of the code key data 12 to the image decoder 2 is interrupted, there is an effect that the error power can be recovered earlier than the occurrence of an error in the image decoder 2.
  • FIG. 5 is a block diagram showing an example of the internal configuration of the image decoder 2.
  • the image decoder 2 shown in FIG. 5 receives the decoder data 12 for one video frame, decodes it, and outputs the decoded image data.
  • the frame memory 32 stores the decoded image data.
  • the decrypted image data power is also extracted in the process of transmission to the display device 4 such as a projector and the digital watermark extracting unit 33 that extracts the electronic permeability of the proof of authenticity and inspects whether the decrypted image data has been tampered with.
  • a digital watermark insertion unit 34 that inserts copyright information (copyright holder, screening date and time, screening location, etc.) into the decrypted image data 13 as electronic transparency for tracking when the usage is performed. Have.
  • the code data 12 for one video frame is input to the decoder unit 31, and the decoder unit 31 performs a series of decoding processes such as variable length decoding, inverse quantization, inverse DCT, and decoded image generation.
  • the decoded image data is sent to the frame memory 32 and input to the digital watermark extraction unit 33.
  • the decrypted image data force is also extracted as an electronic proof of authenticity proof, and the decrypted image is checked for falsification.
  • the code y is a lossless encoding that can completely decode the original image data in which the digital watermark of authenticity is embedded. By making it possible to extract the proof of authenticity only when the same decoded image data is decoded, which is no different from the original image data by 1 bit, it is possible to determine whether it is possible to successfully decode without the difference of 1 bit. Judgment is possible.
  • the digital watermark extraction unit 33 is determined to have successfully decoded. In this case, the decoding completion signal 14 is transmitted to the receiving unit 1.
  • the image data decoded between the image decoder 2 and the display unit 4 is encrypted and transmitted so that the data is not illegally leaked.
  • the digital watermark insertion unit 34 inserts copyright information (copyright owner, screening date, screening location, etc.) into the decrypted image data 13 as electronic transparency.
  • the electronic watermark is output to the image decoder 2 based on the extraction of the electronic permeability embedded in the decoded image, to the reception unit 1. Since the extraction unit 33 is provided and the electronic permeability of the authenticity proof is also extracted from the decrypted image power, it is possible to prove the normal completion of the decryption by correctly transmitting the information and extracting the information.
  • the decoding device monitors the decoding completion signal of the image decoder for each video frame, and restores the operation of the image decoder if the decoding is not completed within a predetermined time within one video frame time. And an error recovery means for issuing a reset signal. As a result, even if there is an error in the decoded data, the image decoder is restored within one video frame time, and the next video frame can be decoded.
  • the code at the preceding stage of the image decoder By detecting an error or loss of the encoded data in the receiving means for receiving the encoded data, it is possible to prevent the error code data from being passed to the image decoder.
  • the decoding processing operation is postponed by recording or outputting to the outside whether or not the video frame has been successfully decoded by the image decoder. Can be confirmed from.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Editing Of Facsimile Originals (AREA)
  • Detection And Prevention Of Errors In Transmission (AREA)

Abstract

　誤った符号化データが復号装置に入力されてもその映像フレームを含む１映像フレーム時間内に復号装置を復旧し、次映像フレームの復号処理を可能とする。 　符号化データ１１を受信して１映像フレーム分の符号化データ１２を出力すると共に、復号完了信号１４の受信に基づいて次の１フレームの符号化データを出力し、かつ前記復号完了信号１４が予め定められた時間内に受信されない場合にエラー信号１５を送信する受信部１と、受信部１からの符号化データ１２を復号すると共に、復号完了時に受信部１に復号完了信号１４を送信し、かつリセット信号１６の受信に基づいて復号処理を中断する画像デコーダ２と、エラー信号１５の受信に基づいてリセット信号１６を画像デコーダ２に出力するエラー回復部３とを備える。

Description

明 細 書
復号装置
技術分野
[0001] この発明は、符号化された画像データを復号して表示するための復号装置に関す る。
背景技術
[0002] 近年の MPEGや JPEGに代表されるデジタル画像圧縮 (符号化)技術の急速な進 歩により、高品質な映像を少ない情報量で効率良くリアルタイムに送受信できるよう になってきた。また、伝送においてもデジタル変復調技術の発展により、衛星ゃ光フ アイバを使った高速なデジタル通信が可能なほか、蓄積メディアにお 、ても大容量の ハードディスクや DVDなどが開発されデジタル画像を伝送または保存する環境が整 つてきている。
[0003] 一方、高効率に圧縮された符号ィ匕データ (ビットストリーム、ビット列）は誤りに弱い ため、誤り訂正技術を用いて伝送路誤りや蓄積媒体力 の読み出し誤りに対する保 護を行っている力 誤り率を完全にゼロにすることはできずデータに誤りが残存する。 誤りが発生した符号ィ匕データを元の画像に復号する際、例え 1ビットの誤りでも復号 画像に対する影響が大きいことがある。このため、エラーに対する復号画像の影響を 軽減する目的でエラーを目立たなくするエラーコンシールメントの技術が知られてお り、エラー発生箇所の正常な画像での差し替えや、灰色画像で置き換えるなどの方 法が提案されている (例えば、特許文献 1参照)。
[0004] 特許文献 1 :特表 2004— 528752号公報（第 14〜17頁、図 3)
発明の開示
発明が解決しょうとする課題
[0005] 従来の画像復号装置では、誤りがある画像データが復号器に入力されると、可変 長復号処理でのルックアップテーブルのマッピングや動きベクトル復号、逆量子化処 理、逆 DCT (離散コサイン変換)処理などの一連の処理過程において、誤った値に 復号されるほ力 場合によっては無限処理ループ処理に入ることがある。この結果、 誤った画像が復号されるほ力、復号処理がいつまでたっても終了しないという問題が 発生する。
[0006] この発明は、上記のような問題点を解決するためになされたもので、誤った符号ィ匕 データが復号装置に入力されてもその映像フレームを含む 1映像フレーム時間内に 復号装置を復旧し、次映像フレームの復号処理が可能となるようにすることで符号化 データの誤りの影響を最小限に留める復号装置を実現する。 課題を解決するための手段
[0007] 上記目的を達成するため、この発明に係る復号装置は、符号化データを受信して 1 映像フレーム分の符号ィ匕データを出力すると共に、復号完了信号の受信に基づい て次の 1フレームの符号ィ匕データを出力し、かつ前記復号完了信号が予め定められ た時間内に受信されな!ヽ場合にエラー信号を送信する受信手段と、前記受信手段 力 の符号ィ匕データを復号すると共に、復号完了時に前記受信手段に復号完了信 号を送信し、かつリセット信号の受信に基づいて復号処理を中断する復号手段と、前 記エラー信号の受信に基づいて前記リセット信号を前記復号手段に出力するエラー 回復手段とを備えたものである。
発明の効果
[0008] この発明に係る復号装置によれば、画像デコーダの復号動作を 1映像フレーム内 に復旧させるエラー回復手段を設けることにより、符号ィ匕データに誤りがあつたとして も影響を受ける映像フレーム数を最小限に留めて早く正常な復号動作が継続できる という効果がある。
図面の簡単な説明
[0009] [図 1]この発明の実施の形態 1に係る復号装置を示す構成図である。
[図 2]図 1の画像デコーダ 2の入出力信号を説明する図である。
[図 3]図 1の画像デコーダ 2の入出力信号を説明するもので、符号ィ匕データにエラー があった場合の説明図である。
[図 4]図 1の受信部 1の内部構成の一例を示したブロック図である。
[図 5]図 1の画像デコーダ 2の内部構成の一例を示したブロック図である。 発明を実施するための最良の形態
[0010] 実施の形態 1.
図 1は、この発明の実施の形態 1に係る復号装置の構成を示すブロック図である。 図 1に示す復号装置は、ネットワークや蓄積媒体からの符号ィ匕データ 11を受け取る 受信部 1と、受信部 1からの符号化データ 12を復号する復号手段としての画像デコ ーダ 2と、画像デコーダ 2に対して再動作を促すエラー回復部 3と、画像デコーダ 2に より復号された画像をディスプレイやプロジェクタなどに表示する表示部 4とを備えて いる。
[0011] 次に動作について説明する。
ネットワークゃノヽードディスクなどの蓄積媒体からの符号ィ匕データ 11が受信部 1に 入力され、受信部 1の内部でメモリなどにー且バッファリングされる。受信部 1からの 1 映像フレーム分の符号化データ 12が読み出されて画像デコーダ 2に入力され、画像 デコーダ 2により復号された復号画像フレーム 13が表示部 4で表示される。符号化デ ータが JPEG (モーション JPEG)や MPEGイントラフレームなどのフレーム内符号化さ れたデータの場合、 1映像フレーム分の符号ィ匕データのみで 1映像フレームを復号 することができる。
[0012] 画像デコーダ 2では、受信部 1から受信した 1映像フレーム分の符号ィ匕データ 12の 復号を完了した際に、復号完了信号 14を受信部 1に送信する。受信部 1では、復号 完了信号 14を受信した後、次の 1フレームの符号ィ匕データ 12を画像デコーダ 2に出 力する。受信部 1において、復号完了信号 14が予め定められた時間内に受信できな い時にはエラー信号 15をエラー回復部 3へ送信する。エラー回復部 3では、エラー 信号 15に対応して画像デコーダ 2に対してデコーダリセット信号 16を出力する。画像 デコーダ 2では、デコーダリセット信号 16の入力により、符号化データ 12の復号処理 動作を中断し、次の符号ィ匕データ 12の入力に備える。
[0013] 図 2は、画像デコーダ 2の入出力信号である符号ィ匕データ 12、復号完了信号 14、 復号画像フレーム 13の時間的な経過を示したもので、横軸に時間軸をとり 1映像フレ ーム時間単位に区切ったものである。図 2において、画像デコーダ 2への符号化デー タ 12として、第 Nフレーム目の 1映像フレーム分の符号化データが入力されると、画 像デコーダ 2で復号開始が行われ、復号完了信号 14の信号はオフになる。このとき、 画像デコーダ 2からは 1映像フレーム前の第 N—1フレームの映像が復号画像フレー ム 13としてその 1映像フレーム時間の間、出力されている。なお、 1映像フレーム時間 は 1秒あたりの映像フレーム数の逆数であり、例えば毎秒 24映像フレームの場合、 1 映像フレーム時間は約 41. 67ミリ秒、となる。
[0014] 画像デコーダ 2において、第 Nフレームが復号完了すると、復号完了信号 14がオン になり、次の第 N+ 1フレームの符号ィ匕データが入力されて復号が開始されるまでの 間、オンの状態を維持する。受信部 1では、復号完了信号 14がオンになることで画像 デコーダ 2が正常に第 Nフレームの符号ィ匕データ 12を復号したことを認識し、次の映 像フレーム時間になると、第 N+ 1フレームの符号ィ匕データ 12を画像デコーダ 2に出 力する。画像デコーダ 2は、符号ィ匕データ 12に誤りがなぐ正常に復号が完了した場 合は、この動作を映像フレーム時間の周期で繰り返す。
[0015] また、図 3は、同じく画像デコーダ 2の入出力信号の時間的な経過を示したものであ る力 符号ィ匕データ 12にエラーや異常などがあり、正常に復号処理が完了せず、復 号完了信号 14が出力されない場合の例である。図 3において、第 N+ 1フレームの 符号ィ匕データ 12にエラーが含まれており、正常に復号できない場合、第 N+ 1フレ ームの符号化データの入力が完了しても復号完了を示す復号完了信号 14がオンに ならない。受信部 1では、予め定められた復号完了範囲の時間内に復号完了信号 1 4がオンにならないと、前述の通り、エラー信号 15をエラー回復部 3に出力する。エラ 一回復部 3では、エラー信号 15が入力されると、図 3に示すようなデコーダリセット信 号 16を画像デコーダ 2に出力し、画像デコーダ 2のエラー状態からの復旧を行う。
[0016] 画像デコーダ 2では、デコーダリセット信号 16の入力によって復号回路や処理の強 制終了を行い、次の第 N+ 2フレームの符号ィ匕データ 12の復号に備えると共に、復 号できなかった第 N+ 1フレームの復号画像フレームに代えて直前に正常に復号さ れた第 Nフレームの画像フレーム 13を次の映像フレーム時間の間、出力する。これ により、復号が完了しな力つた場合、 1映像フレーム時間内に画像デコーダ 2にリセッ トするので、エラーの影響を受ける画像フレームを最小限に留めることができる。
[0017] 特に、デジタルシネマの上演システムでは、リアルタイム伝送、あるいは蓄積された メディアから読み出した符号ィ匕データを復号して映画プロジェクタにより大画面スクリ ーンに表示するため、符号ィ匕データに誤りがあった場合においても早急に復旧して 画質への影響を最小限かつ最短時間に留める必要があり効果がある。
[0018] なお、上記にぉ 、ては、画像を復号する画像デコーダを例に説明したが、オーディ ォデコーダや字幕などのテキストデータなどのデコーダなどに対してオーディオフレ ーム時間やテキストフレーム時間内のデコード完了チェック、及び不具合時のデコー ダリセット処理を行うことでエラーからの復帰時間を最小限に短縮できる同様の効果 が得られる。
[0019] したがって、実施の形態 1によれば、画像デコーダ 2の復号完了信号を映像フレー ム毎に監視し、 1映像フレーム時間内の予め定められた時間内に復号が完了しない 場合には画像デコーダ 2の動作を復旧させるためのリセット信号を発するエラー回復 手部 3を備えることにより、復号データに誤りがあった場合においても 1映像フレーム 時間内に画像デコーダ 2が復旧し、次映像フレームの復号処理が行えるようになり、 画像デコーダ 2のエラー状態からの復帰時間を短縮できるという効果がある。
[0020] また、画像デコーダ 2は、エラー回復部 3からデコーダリセット信号 16が入力された 場合に符号ィ匕データの復号を中断して、直前に正常に復号された画面を復号画像 として出力するようにしたので、エラーがあった際にはエラー画面に替えて正常に復 号された画面を表示することができ、誤りの発生を隠蔽できる効果がある。
[0021] 実施の形態 2.
上述した実施の形態 1に係る受信部 1にお 、て、符号ィ匕データ 11の誤りある ヽはデ ータ欠損の発生や検出をした場合には、その映像フレームの符号ィ匕データ 12を画 像デコーダ 2に出力せずに、エラー信号 15を発生させることもできる。
[0022] 図 4は、受信部 1の内部構成の一例を示したブロック図である。
図 4に示す受信部 1は、入力される符号化データ 11のデータの欠損や誤りの検出 を行うデータ検査部 21と、データ検査部 21を介して入力される誤りがない符号ィ匕デ ータの入力に基づいて 1映像フレーム分の符号ィ匕データ 12を出力する符号ィ匕デ一 タ送出部 22と、符号化データ 11に誤りが検出された場合のデータ検査部 21からの 検出信号および映像フレーム時間内の予め定められた時間までに復号完了しない 場合の復号完了検知部 24からの信号に基づいてエラー信号 15を発生するエラー信 号発生部 23と、画像デコーダ 2からの復号完了信号 14を入力しつつ映像フレーム 時間内の予め定められた時間までに復号が完了しない場合にエラー信号発生部 23 に信号を発すると共に、符号ィ匕データ送出部 22に信号を出力して画像デコーダ 2へ の出力を中断させる復号完了検知部 24とを有する。
[0023] 次に動作について説明する。
ネットワーク力 伝送または蓄積媒体力 読み出された符号ィ匕データ 11は、データ 検査部 21において、データの欠損や誤りの検出が行われる。
検出の方法としては、パケットに格納された符号ィ匕データ 11のヘッダ部に付与され たシーケンス番号の連続性を検査し、パケット単位の欠落がないかを調べたり、 CRC (Cyclic Redundancy Check:巡回冗長検査符号）によるパリティチェックによるビット誤 りを検出するなどがある。
[0024] データ検査部 21において、符号ィ匕データに誤りがない場合は、符号化データは符 号化データ送出部 22に送られ、ここから 1映像フレーム分の符号ィ匕データ 12が画像 デコーダ 2へ送られる。一方、符号ィ匕データ 11に誤りが検出された場合には、エラー 信号発生部 23に検出信号が送られ、エラー信号発生部 23からエラー信号 15がエラ 一回復部 3へ送られる。また、画像デコーダ 2からの復号完了信号 14は復号完了検 知部 24に入力され、映像フレーム時間内の予め定められた時間までに復号が完了 しない場合には、エラー信号発生部 23に信号を発し、エラー信号 15がエラー回復 部 3に送られる。
[0025] これにより、受信部 1の内部で符号化データのエラーや欠損を検知することで、画 像デコーダ 2に誤りの含まれた符号ィ匕データの送出を防ぎ、画像デコーダエラーを 発生させることなく復号処理の回復を行うことができる。
[0026] また、符号ィ匕データ 11が暗号ィ匕されている場合には、データ検査部 21の後段に暗 号解読部がおかれ、暗号解読の過程にぉ 、て解読エラーが発生した場合にはエラ 一信号発生部 23にエラーを知らせる信号が発せられ、エラー信号 15がエラー回復 部 3に送られる。これにより、符号ィ匕データ 11が暗号ィ匕されている場合にも、同様の 効果を得ることができる。 [0027] したがって、実施の形態 2によれば、受信部 1は、入力される符号化データ 11の誤 りあるいはデータ欠損の発生を検知してエラー信号 15をエラー回復部 3に出力する と共に、画像デコーダ 2への符号ィ匕データ 12の出力を中断させるようにしたので、画 像デコーダ 2でのエラー発生よりも早期にエラー力もの回復を行うことができるという 効果がある。
[0028] 実施の形態 3.
上述した実施の形態 1に係る画像デコーダ 2にお 、て、画像の復号が 1ビットの誤り もなく正常に完了したかどうかを真正性証明の電子透力しを用いて判定することが考 えられる。
[0029] 図 5は、画像デコーダ 2の内部構成の一例を示したブロック図である。
図 5に示す画像デコーダ 2は、 1映像フレーム分の符号ィ匕データ 12を入力して復号 処理し、復号された復号画像データを出力するデコーダ部 31と、復号画像データを 記憶するフレームメモリ 32と、復号画像データ力も真正性証明の電子透力しを抽出 し、復号画像データが改竄されていないかを検査する電子透かし抽出部 33と、プロ ジェクタなどの表示装置 4への伝送過程で不正利用が行われた場合の追跡を行うた めに、復号画像データ 13に著作権情報 (著作権者、上映日時、上映場所など)を電 子透力しとして挿入する電子透かし挿入部 34とを有する。
[0030] 次に動作について説明する。
1映像フレーム分の符号ィ匕データ 12がデコーダ部 31に入力され、デコーダ部 31に より、可変長復号、逆量子化、逆 DCT、復号画像生成の一連の復号処理が行われる 。復号された復号画像データはフレームメモリ 32に送られると共に、電子透かし抽出 部 33に入力される。
[0031] 電子透かし抽出部 33では、復号画像データ力も真正性証明の電子透力しが抽出 され、復号画像が改竄されていないかを検査する。ここで、符号ィ匕は、真正性証明の 電子透かしが埋め込まれた原画像データを完全に復号できる可逆符号化とする。原 画像データと 1ビットも異ならず同一の復号画像データが復号された場合のみ真正 性証明の透力しが抽出できるようにすることで、 1ビットの差異もなく正常に復号でき た力どうかの判定ができる。電子透かし抽出部 33は、正常に復号できたと判定された 場合に、復号完了信号 14を受信部 1へ送信する。
[0032] 一方、画像デコーダ 2と表示部 4との間で復号された画像データが不正に流出しな いように、暗号化されて伝送されるが、万が一、流出した場合の流出経路や日時を追 跡できるように、復号画像データ 13に著作権情報 (著作権者、上映日時、上映場所 など）を電子透力しとして電子透かし挿入部 34にて挿入する。
[0033] なお、本実施の形態 3では、復号された画像データの中から電子透かしを抽出する 方法について説明したが、符号ィ匕の過程において非可逆符号ィ匕が行われた場合に は元の画像データが復元されないため、真正性証明の電子透力しを抽出することは できな 、が、画像データの符号ィ匕ドメインに電子透力しの埋め込み (例えば DCT係 数への透力しデータの埋め込み）を利用することによって同様の効果を得ることがで きる。
[0034] したがって、実施の形態 3によれば、画像デコーダ 2に、復号された画像に埋め込 まれた電子透力しの抽出に基づいて復号完了信号を受信部 1に出力する電子透か し抽出部 33を備え、真正性証明の電子透力 を復号画像力も抽出するようにしたの で、正しく透力し情報が抽出できることによって復号の正常完了を証明することが可 會 になる。
[0035] 以上、この発明を要約すると、次に通りである。
この発明に係る復号装置は、画像デコーダの復号完了信号を映像フレーム毎に監 視し、 1映像フレーム時間内の予め定められた時間内に復号が完了しない場合には 画像デコーダの動作を復旧させるためのリセット信号を発するエラー回復手段を備え ることを特徴とする。これにより、復号データに誤りがあった場合においても 1映像フレ ーム時間内に画像デコーダが復旧し、次映像フレームの復号処理が行えるようにな る。
[0036] また、この発明の別の実施の形態に係る復号装置では、エラー回復手段力ものリセ ット信号により画像デコーダからは直前に正常に復号された画像を復号画像として出 力する処理を行うことにより、復号エラーのある映像フレームを出力しないようにする ことができる。
[0037] また、この発明の別の実施の形態に係る復号装置では、画像デコーダの前段の符 号化データを受信する受信手段において符号化データのエラーや欠損を検知する ことにより、画像デコーダに誤りのある符号ィ匕データを渡さないようにすることができる
[0038] また、この発明の別の実施の形態に係る復号装置では、画像デコーダで映像フレ ームが正常に復号できた力否かを記録または外部に出力することにより、復号処理 動作を後から確認できるようにすることができる。
[0039] また、この発明の別の実施の形態に係る復号装置では、埋め込まれた電子透かし を抽出することにより、正常に復号できた力否かを判断することができる。

Claims

請求の範囲
[1] 符号ィ匕データを受信して 1映像フレーム分の符号ィ匕データを出力すると共に、復号 完了信号の受信に基づいて次の 1フレームの符号ィ匕データを出力し、かつ前記復号 完了信号が予め定められた時間内に受信されない場合にエラー信号を送信する受 信手段と、
前記受信手段からの符号化データを復号すると共に、復号完了時に前記受信手 段に復号完了信号を送信し、かつリセット信号の受信に基づいて復号処理を中断す る復号手段と、
前記エラー信号の受信に基づいて前記リセット信号を前記復号手段に出力するェ ラー回復手段と
を備えたことを特徴とする復号装置。
[2] 請求項 1に記載の復号装置にお!、て、
前記復号手段は、前記エラー回復手段からリセット信号が入力された場合に符号 化データの復号を中断し、直前に正常に復号された画面を復号画像として出力する ことを特徴とする復号装置。
[3] 請求項 1に記載の復号装置にお!、て、
前記受信手段は、入力される符号化データの誤りあるいはデータ欠損の発生を検 知してエラー信号を前記エラー回復手段に出力すると共に、前記復号手段への符号 化データの出力を中断させる
ことを特徴とする復号装置。
[4] 請求項 3に記載の復号装置において、
前記受信手段は、
入力される符号ィヒデータの誤りあるいはデータ欠損の検出を行うデータ検査部と、 前記データ検査部を介して入力される符号ィ匕データの入力に基づいて 1映像フレ ーム分の符号化データを出力する符号化データ送出部と、
前記データ検査部に入力される符号ィヒデータに誤りあるいはデータ欠損が検出さ れた場合の検出信号および映像フレーム時間内の予め定められた時間までに復号 完了しない場合の復号完了検知部力 の信号に基づいてエラー信号を発生するェ ラー信号発生部と、
前記復号手段力 の復号完了信号を入力しつつ映像フレーム時間内の予め定め られた時間までに復号が完了しない場合に、前記エラー信号発生部に信号を発する と共に、前記符号化データ送出部に信号を出力して前記復号手段への出力を中断 させる復号完了検知部と
を有することを特徴とする復号装置。
[5] 請求項 1に記載の復号装置にお!、て、
前記復号手段は、復号された画像に埋め込まれた電子透かしの抽出に基づいて 前記復号完了信号を前記受信手段に出力する
ことを特徴とする復号装置。
[6] 請求項 5に記載の復号装置において、
前記復号手段は、
1映像フレーム分の符号化データを入力して復号処理し、復号された復号画像デ ータを出力するデコーダ部と、
前記デコーダ部力 の復号画像データを記憶するフレームメモリと、
前記デコーダ部力 の復号画像データ力 真正性証明の電子透力しの抽出に基 づいて前記復号完了信号を前記受信手段に出力する電子透かし抽出部と
を有することを特徴とする復号装置。
[7] 請求項 6に記載の復号装置において、
前記復号手段は、前記フレームメモリからの復号画像データに著作権情報を電子 透力しとして挿入して復号画像フレームとして出力する電子透かし挿入部をさらに有 することを特徴とする復号装置。
PCT/JP2005/016810 2005-09-13 2005-09-13 復号装置 WO2007032058A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
PCT/JP2005/016810 WO2007032058A1 (ja) 2005-09-13 2005-09-13 復号装置
CN2005800511650A CN101228793B (zh) 2005-09-13 2005-09-13 解码装置
JP2007535341A JP4642854B2 (ja) 2005-09-13 2005-09-13 復号装置
US11/988,240 US7992074B2 (en) 2005-09-13 2005-09-13 Decoding device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2005/016810 WO2007032058A1 (ja) 2005-09-13 2005-09-13 復号装置

Publications (1)

Publication Number Publication Date
WO2007032058A1 true WO2007032058A1 (ja) 2007-03-22

Family

ID=37864664

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2005/016810 WO2007032058A1 (ja) 2005-09-13 2005-09-13 復号装置

Country Status (4)

Country Link
US (1) US7992074B2 (ja)
JP (1) JP4642854B2 (ja)
CN (1) CN101228793B (ja)
WO (1) WO2007032058A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010125616A1 (ja) * 2009-04-27 2010-11-04 パナソニック株式会社 符号化ストリーム復号装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BRPI0811289A2 (pt) * 2007-05-10 2015-01-20 Thomson Lincensing Detecção de falha utilizando marcas d'água embutidas
JP2010041710A (ja) * 2008-07-11 2010-02-18 Ricoh Co Ltd 埋込情報検出装置、埋込情報検出方法、プログラムおよび記録媒体
KR101407311B1 (ko) 2012-10-31 2014-06-13 엘지디스플레이 주식회사 터치표시장치 및 이의 광센서모듈 복구방법
US11756147B1 (en) * 2019-03-27 2023-09-12 United Services Automobile Association (Usaa) Systems and methods for verifying the authenticity of documents
CN114025172B (zh) * 2021-08-20 2024-07-16 北京旷视科技有限公司 视频帧的处理方法、装置和电子系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01106580A (ja) * 1987-10-19 1989-04-24 Canon Inc 復号化装置
JPH10191025A (ja) * 1996-12-26 1998-07-21 Nippon Telegr & Teleph Corp <Ntt> デジタル画像への情報埋め込み装置
JP2000138932A (ja) * 1998-10-30 2000-05-16 Nec Corp 可変長復号化方法及び装置
JP2002185332A (ja) * 2000-12-15 2002-06-28 Sanyo Electric Co Ltd 可変長復号処理装置
JP2005198158A (ja) * 2004-01-09 2005-07-21 Hitachi Kokusai Electric Inc 画像改ざん検出システム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3297293B2 (ja) * 1996-03-07 2002-07-02 三菱電機株式会社 動画像復号方法および動画像復号装置
EP0919953B1 (en) * 1997-11-28 2004-08-18 Matsushita Electric Industrial Co., Ltd Audio-video decoding system
US6697427B1 (en) * 1998-11-03 2004-02-24 Pts Corporation Methods and apparatus for improved motion estimation for video encoding
US6651252B1 (en) * 1999-10-27 2003-11-18 Diva Systems Corporation Method and apparatus for transmitting video and graphics in a compressed form
US6993488B2 (en) * 2000-06-07 2006-01-31 Nokia Corporation Audible error detector and controller utilizing channel quality data and iterative synthesis
US20020149595A1 (en) * 2000-08-25 2002-10-17 Kosuke Kubota Decoding device, electronic device, and decoding method
JP2002223447A (ja) * 2001-01-25 2002-08-09 Matsushita Electric Ind Co Ltd 画像伝送方法及び画像伝送装置
US6876705B2 (en) 2001-03-05 2005-04-05 Intervideo, Inc. Systems and methods for decoding of partially corrupted reversible variable length code (RVLC) intra-coded macroblocks and partial block decoding of corrupted macroblocks in a video decoder
KR100617852B1 (ko) * 2004-01-26 2006-08-28 삼성전자주식회사 엠펙-2 디코딩 시스템 및 그 동작 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01106580A (ja) * 1987-10-19 1989-04-24 Canon Inc 復号化装置
JPH10191025A (ja) * 1996-12-26 1998-07-21 Nippon Telegr & Teleph Corp <Ntt> デジタル画像への情報埋め込み装置
JP2000138932A (ja) * 1998-10-30 2000-05-16 Nec Corp 可変長復号化方法及び装置
JP2002185332A (ja) * 2000-12-15 2002-06-28 Sanyo Electric Co Ltd 可変長復号処理装置
JP2005198158A (ja) * 2004-01-09 2005-07-21 Hitachi Kokusai Electric Inc 画像改ざん検出システム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2010125616A1 (ja) * 2009-04-27 2010-11-04 パナソニック株式会社 符号化ストリーム復号装置

Also Published As

Publication number Publication date
JP4642854B2 (ja) 2011-03-02
JPWO2007032058A1 (ja) 2009-03-19
US20090125791A1 (en) 2009-05-14
CN101228793B (zh) 2011-04-13
US7992074B2 (en) 2011-08-02
CN101228793A (zh) 2008-07-23

Similar Documents

Publication Publication Date Title
CN102144237B (zh) 压缩媒体的有效水印方法
CN100579245C (zh) 使用相机参数编码和产生多视点视频的设备和方法
JP4642854B2 (ja) 復号装置
US6898297B2 (en) Digital watermark embedding method, digital watermark extracting method, recording medium, image recording device, and image replaying device
WO2014139069A1 (zh) 视频文件修复方法及装置
JP2009005146A (ja) データ伝送装置
US7747087B2 (en) Apparatus, method, and article of manufacture used to encode information into an image and to decode information from a captured image
US6944296B1 (en) Video bit scrambling
CN100407797C (zh) 运动图象编码装置以及运动图象译码装置
TW200901708A (en) Method and apparatus for processing a bitstream
JP2000101826A (ja) ウォ―タ―マ―キングを用いてシグナチュア映像を記録しかつ復元するデジタル映像コ―ディング／デコ―ディング装置及び方法
CN107680608B (zh) 一种基于喷泉码的易碎水印自恢复方法
JP4316385B2 (ja) 堅牢な信号符号化
WO2007085632A1 (en) Method of watermarking digital data
JPH0847002A (ja) 立体動画像の復号装置
Mobasseri et al. Lossless watermarking of compressed media using reversibly decodable packets
Sun et al. Signature-based media authentication
JP2000332612A (ja) 情報処理装置およびその方法
KR101558052B1 (ko) 카메라에서 촬영된 이미지 데이터 변환 장치
JP2503556B2 (ja) 画像符号化伝送装置動作試験方式
He et al. Multimedia authentication
JPH07143480A (ja) 画像送受信装置および画像送受信システム
JP2994047B2 (ja) 情報記録再生装置
JPH1185550A (ja) データ伝送方法及びデータ記録／再生装置
He et al. A robust object-based video authentication system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 2007535341

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 11988240

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 200580051165.0

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 05783664

Country of ref document: EP

Kind code of ref document: A1