JP2000032393A - 画像情報処理装置および方法、並びに提供媒体 - Google Patents
画像情報処理装置および方法、並びに提供媒体Info
- Publication number
- JP2000032393A JP2000032393A JP19400698A JP19400698A JP2000032393A JP 2000032393 A JP2000032393 A JP 2000032393A JP 19400698 A JP19400698 A JP 19400698A JP 19400698 A JP19400698 A JP 19400698A JP 2000032393 A JP2000032393 A JP 2000032393A
- Authority
- JP
- Japan
- Prior art keywords
- data
- unit
- decoding
- macroblock
- error
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03M—CODING; DECODING; CODE CONVERSION IN GENERAL
- H03M7/00—Conversion of a code where information is represented by a given sequence or number of digits to a code where the same, similar or subset of information is represented by a different sequence or number of digits
- H03M7/30—Compression; Expansion; Suppression of unnecessary data, e.g. redundancy reduction
- H03M7/40—Conversion to or from variable length codes, e.g. Shannon-Fano code, Huffman code, Morse code
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/124—Quantisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/146—Data rate or code amount at the encoder output
- H04N19/152—Data rate or code amount at the encoder output by measuring the fullness of the transmission buffer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/162—User input
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/164—Feedback from the receiver or from the transmission channel
- H04N19/166—Feedback from the receiver or from the transmission channel concerning the amount of transmission errors, e.g. bit error rate [BER]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/177—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a group of pictures [GOP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/40—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using video transcoding, i.e. partial or full decoding of a coded input stream followed by re-encoding of the decoded output stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/89—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving methods or arrangements for detection of transmission errors at the decoder
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
- H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Algebra (AREA)
- General Physics & Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
グアップを抑止する。 【解決手段】 可変長復号部61は、入力されたデータ
ストリームを復号し、ヘッダとマクロブロックの単位に
分割してメモリ62に出力する。また、可変長復号部6
1は、入力されたデータストリーム中のエラー(復号不
能なエラーマクロブロック)を検出して置換区間制御部
63に通知する。さらに、可変長復号部61は、解読し
たヘッダに記述されている各種パラメータ、および復号
済みマクロブロック数等)を置換区間制御部63および
可変長符号化部66に出力する。置換区間制御部63
は、可変長復号部63からのエラー通知と各種パラメー
タに基づいて、異常箇所を判断してマクロブロックを置
換する区間を決定し、決定結果に対応してマクロブロッ
ク係数系列発生部64、およびスイッチ65を制御す
る。マクロブロック係数系列発生部64は、置換用マク
ロブロックの係数系列を発生する。
Description
処理装置および方法、並びに提供媒体に関し、特に、デ
ータストリームのエラーを修正する画像情報処理装置お
よび方法、並びに提供媒体に関する。
媒体に記録したり伝送したりするためのフォーマットが
数種類提供されている。一般に、デジタル映像信号は、
データ量が極めて多いため、これを記録媒体に長時間記
録する場合、圧縮符号化することが必要である。この圧
縮符号化方法の代表的なものとして、MPEG(Moving Pict
ure Image Coding Experts Group)方式が知られてい
る。MPEG方式は、動き補償予測符号化と離散コサイン変
換(DCT:Discrete Cosine Transform)符号化とを組み合
わせたハイブリット方式である。すなわち、まず最初に
ビデオ信号のフレーム間の差分を取ることにより、時間
軸方向の冗長度を落とした後、離散コサイン変換を用い
て空間軸方向の冗長度を落として能率良く符号化が行わ
れる。
テープ状記録媒体を用いるビデオテープレコーダにおい
ては、回転ヘッドを用い、テープの走行方向に対して斜
めに傾斜したトラック、いわゆるヘリカルトラックを形
成するように記録がなされるている。このようなヘリカ
ルトラックが記録形成されたテープ状記録媒体を、2倍
速、3倍速、あるいはサーチのように、高速でテープを
走行させる場合、回転ヘッドのテープ状での軌跡の角度
が記録トラックの傾き角度とは異なってくるため、ヘリ
カルトラックに記録された信号の全てを再生することが
できなくなる。すなわち、高速再生時には、各ヘリカル
トラックの一部を走査(トレース)するような再生が行
われる。
データをテープ状記録媒体に記録すると、上述したサー
チ等の高速再生を行った場合、各ヘリカルトラックの一
部しかトレースされないので、再生されたデータを有効
に活用して高品質の再生画像を得ることが困難になる。
録媒体の圧縮符号化方式に用いるよりも、高速再生時に
もある程度有効な画像再生が行える圧縮符号化方法を用
いることが好ましい。
MPEG方式と同様に動き補償予測符号化と離散コサイン変
換符号化とを組み合わせたハイブリット方式であり、マ
クロブロックを単位として、マクロブロック内の全DCT
ブロックの各DC係数をまとめ、また全DCTブロックの各A
C係数の低次成分から高次成分までを、それぞれ次数毎
にまとめて順次配列して、テープ状記録媒体に記録する
ことにより、サーチ等の高速再生時、マクロブロック内
の画像再生に重要な全てのDC係数および低次のAC係数を
再生できるようにした圧縮符号化方式の記録フォーマッ
ト(以下、SXフォーマットと記述する)を提案してお
り、SXフォーマットのデータ構造については、例えば特
願平10−091993号に記述されている。
たデータストリームにエラーが混入していた場合、その
データストリームは途中から正常に復号することができ
なくなる。例えば、MPEGにおいては、スライスが1つの
可変長符号系列であるので、スライスの中のあるマクロ
ブロックにエラーが生じた場合、そのマクロブロックか
ら、そのスライスの最後のマクロブロックまでが復号不
可能となることが多い。
復号できてしまうことがある。そのような場合、復号さ
れたデータ系列には、画素の過不足やアドレスの逆行等
の矛盾(エラー)が生じている可能性が極めて高い。
像を乱したり、デコーダの暴走やハングアップを引き起
こす原因となる課題があった。
ものであり、エラーの混入により復号不能となった箇所
を正常な符号系列に置換することにより、再生画像の乱
れや、符号再生時の暴走、またはハングアップを抑止す
ることができるようにするものである。
報処理装置は、データストリームの一部を復号する復号
手段と、データストリームに混入するエラーを検出する
検出手段と、復号手段で復号された情報に基づいて検出
手段が検出したエラーに起因して復号不可能となる範囲
を判定する判定手段と、置換するデータを発生する発生
手段と、判定手段の判定結果に基づいて、少なくとも復
号不可能な範囲のデータを、発生手段が発生したデータ
に置換する置換手段とを備えることを特徴とする。
ータストリームの一部を復号する復号ステップと、デー
タストリームに混入するエラーを検出する検出ステップ
と、復号ステップで復号された情報に基づいて検出ステ
ップで検出したエラーに起因して復号不可能となる範囲
を判定する判定ステップと、置換するデータを発生する
発生ステップと、判定ステップの判定結果に基づいて、
少なくとも復号不可能な範囲のデータを、発生ステップ
で発生したデータに置換する置換ステップとを含むこと
を特徴とする。
リームの一部を復号する復号ステップと、データストリ
ームに混入するエラーを検出する検出ステップと、復号
ステップで復号された情報に基づいて検出ステップで検
出したエラーに起因して復号不可能となる範囲を判定す
る判定ステップと、置換するデータを発生する発生ステ
ップと、判定ステップの判定結果に基づいて、少なくと
も復号不可能な範囲のデータを、発生ステップで発生し
たデータに置換する置換ステップとを含む処理を画像情
報処理装置に実行させるコンピュータが読み取り可能な
プログラムを提供することを特徴とする。
ては、復号手段が、データストリームの一部を復号し、
検出手段が、データストリームに混入するエラーを検出
し、判定手段が、復号手段で復号された情報に基づいて
検出手段が検出したエラーに起因して復号不可能となる
範囲を判定し、発生手段が、置換するデータを発生し、
置換手段が、判定手段の判定結果に基づいて、少なくと
も復号不可能な範囲のデータを、発生手段が発生したデ
ータに置換する。
び請求項6に記載の提供媒体においては、復号ステップ
で、データストリームの一部を復号し、検出ステップ
で、データストリームに混入するエラーを検出し、判定
ステップで、復号ステップで復号された情報に基づいて
検出ステップで検出したエラーに起因して復号不可能と
なる範囲を判定し、発生ステップで、置換するデータを
発生し、置換ステップで、判定ステップの判定結果に基
づいて、少なくとも復号不可能な範囲のデータを、発生
ステップで発生したデータに置換する。
するが、特許請求の範囲に記載の発明の各手段と以下の
実施の形態との対応関係を明らかにするために、各手段
の後の括弧内に、対応する実施の形態(但し一例)を付
加して本発明の特徴を記述すると、次のようになる。
装置は、データストリームの一部を復号する復号手段
(例えば、図17の可変長復号部61)と、データスト
リームに混入するエラーを検出する検出手段(例えば、
図17の可変長復号部61)と、検出手段が検出したエ
ラーに起因して復号不可能となる範囲を判定する判定手
段(例えば、図17の置換区間制御部63)と、置換す
るデータを発生する発生手段(例えば、図17のマクロ
ブロック係数系列発生部64)と、判定手段の判定結果
に基づいて、少なくとも復号不可能な範囲のデータを、
発生手段が発生したデータに置換する置換手段(例え
ば、図17の置換区間制御部63)とを備えることを特
徴とする。
は、置換手段が置換したデータを符号化する符号化手段
(例えば、図17の可変長符号化部66)をさらに備え
ることを特徴とする。
のに限定することを意味するものではない。
の構成について、図1を参照して説明する。はじめにビ
デオカセットレコーダの記録系の構成について説明す
る。シリアルデータ入力部(SDI_IN)1は、ビデオ信号と
オーディオ信号が多重されたシリアル信号SDI Inの入力
を受け付けてパラレル信号に変換し、その入力の位相基
準信号Input Syncをトリガ回路(TG)15に出力するよう
になされている。さらに、入力部1は、変換したパラレ
ル信号からビデオ信号とオーディオ信号を分離して、ビ
デオ信号をSXエンコーダ(SX_ENC)2に出力し、オーディ
オ信号を遅延部(DL)3に出力する。
を、SXフォーマットに基づいて圧縮符号化し、符号化し
た信号SX1をECC(Error Correction Coding)エンコーダ
(ECC_ENC)4に出力する。遅延部3は、ビデオ信号がSX
エンコーダ2において符号化される間、対応するオーデ
ィオ信号AU1を遅延してECCエンコーダ4に出力するよう
になされている。
縮符号化されたビデオ信号SX1と非圧縮のオーディオ信
号AU1を入力信号として、誤り訂正符号化を実行し、出
力信号REC DATAをイコライザ(EQ)5に出力する。イコラ
イザ5は、入力された信号REC DATAを記録信号REC RFに
変換して回転ドラム(DRUM)6に供給する。回転ドラム6
は、取り付けられている記録ヘッド(図示せず)に、入
力された記録信号REC RFを供給し、磁気テープ(TAPE)7
に記録させるようになされている。
構成について説明する。回転ドラム6の再生ヘッド(図
示せず)は、磁気テープ7に記録されている磁気信号を
再生して再生信号PB RFをイコライザ5に出力する。イ
コライザ5は、入力された再生信号PB RFに位相等化処
理を施してECCデコーダ(ECC_DEC)8に出力する。ECCデ
コーダ8は、入力された信号PB DATAに対して、誤り訂
正復号(Error CorrectionDecoding)を実行して、再生ビ
デオ信号SXPBと再生オーディオ信号AUPBを分離するとと
もに、圧縮されている再生ビデオ信号SXPBをSXデコーダ
(SX_DEC)9、シリアルデータ出力部(SDTI)10、および
MPEG変換部11に出力し、再生オーディオ信号AUPBを遅
延部12に出力する。
トの再生ビデオ信号SXPBを復号してシリアルデータ出力
部(SDI_OUT)13に供給する。
信号SXPB(SXフォーマット)をMPEGフォーマットに変換
して、出力部14に出力するようになされている。
信号AUPBを遅延して、対応する再生ビデオ信号SXPBとの
タイミングを合わせ、オーディオ遅延信号AUDL1乃至AUD
L3として、シリアルデータ出力部13、シリアルデータ
出力部10、またはシリアルデータ出力部14に出力す
る。
9から入力されたビデオ信号Videooutと遅延部12から
入力された遅延オーディオ信号AUDL1をマッピングし、
シリアル信号として出力するようになされている。
ダ8から入力された再生ビデオ信号SXPB(SXフォーマッ
ト)と遅延部12から入力された遅延オーディオ信号AU
DL2をマッピングし、シリアル信号として、この情報記
録装置と同じようにSXフォーマットで圧縮符号化された
画像情報を処理することができる他の装置(図示せず)
に出力するようになされている。
11から入力されたMPEGフォーマットのビデオ信号と遅
延部12から入力された遅延オーディオ信号AUDL3をマ
ッピングし、シリアル信号としてMPEGフォーマットの画
像情報を処理することができる他の装置(図示せず)に
出力するようになされている。
部基準信号REF Inから基準信号Reference Syncを抽出
し、抽出した基準信号Reference Sync、または入力部1
から入力された位相基準信号Input Syncのうちの一方の
基準信号に同期して、タイミングパルスを発生して各部
に供給する。システムコントローラ(SYSCON)16、およ
びサーボ回路(SERVO)17は、信号SY_SVを用いて互いに
連携を取りながら、それぞれ制御信号SY_IO,SERVO_IO
を出力して各部を制御するようになされている。
している。ECCデコーダ8からMPEG変換部11に入力さ
れたSXストリーム(再生ビデオ信号(SXPB))は、可変長
復号部21、およびヘッダ付加部24に供給される。可
変長復号部21は、可変長符号化されているSXストリー
ムをDCT係数が得られるまで部分的に復号することによ
り、データの境界を明確にし、データの並び替えが可能
な信号STRM1を変換部22に出力するようになされてい
る。
XフォーマットとMPEGフォーマットとの相違点であるデ
ータの並び等を修正する。さらに、変換部22は、スタ
ッフィング部25から供給される制御信号CUTが”1”
である場合、DCT係数の高次の非ゼロ係数を0に置換し
て出力信号STRM2を生成し、それを可変長符号化部23
に出力する。
うちの可変長符号化されていない部分に対して可変長符
号化を施して出力信号STRM3としてヘッダ付加部24に
出力する。
化部23の処理をまとめると、図3に示すようになる。
変換部22に相当する0置換部32は、制御信号CUTに
基づいて、可変長復号部31(可変長復号部21に相当
する)から入力されたDCT係数の高次の非ゼロ係数を0
に置換して、可変長符号化部33に出力する。0に置換
されたDCT係数は、可変長符号化部33(可変長符号化
部23に対応する)において符号化されるが、その符号
量は、0に置換される以前のDCT係数が符号化されてい
た符号量よりも確実に減少している。
リームの全てを一旦復号することなく、その一部を復号
し、DCT係数の高次の非ゼロ係数を0に置換するだけ
で、容易に任意のビットレートに変換することができ
る。
の符号系列を再生した場合、0への置換によって生ずる
画像劣化は、人間の視覚特性上分かり難いので、実質的
に、画像の劣化を抑止してビットレートを変換すること
ができる。
力されたSXストリームから、入力信号STRM3のタイミン
グ等を検出し、MPEGで規定されている各種のヘッダ情報
(その詳細については後述する)を作成する。その後、
可変長符号化部23から入力された入力信号STRM3に作
成したヘッダ情報を付加し、出力信号STRM4をスタッフ
ィング部25に出力するようになされている。
のGOP(Group Of Picture)単位でのデータ長を計算し、
データ長が所定値に達していない場合、入力信号STRM4
にスタッフィングビット”0”を挿入して、GOP単位の
データ長の平均化を図り、MPEGフォーマットの出力信号
MPEG Streamをシリアルデータ出力部14(図1)に出
力する。反対に、GOP単位のデータ長が所定のデータ長
を越える場合、スタッフィング部25は、制御信号CUT
を”1”にして変換部22に出力する。
は、外部CPUからの制御信号SYSCONInterfaceに基づい
て、可変長復号部21乃至スタッフィング部25を制御
するようになされている。
処理について、図4のフローチャートを参照して説明す
る。この処理は、可変長復号部21から変換部22にビ
デオ信号STRM1が入力されたときに開始される。
変長復号部21から信号の入力が終了したか否かを判定
する。信号の入力が終了したと判定された場合、処理を
終了し、信号の入力が終了していないと判定された場
合、ステップS2に進む。ステップS2において、変換
部22は、DCT係数の最高次からの順番を示すパラメー
タN(Nは0乃至63)を0に初期化する。
T係数の高次からN個の非ゼロ係数を0に置換して、可
変長符号化部23に出力する。可変長符号化部23は、
入力信号のうちの可変長符号化されていない部分に対し
て可変長符号化を施してヘッダ付加部24に出力する。
ヘッダ付加部24は、入力された信号に、予め作成した
ヘッダ情報を付加してスタッフィング部25に出力す
る。
25は、ヘッダ付加部24から入力された信号STRM4の
ビットレートが、予め設定されたビットレート以内であ
るか否かを判定する。ビットレートが予め設定されたビ
ットレート以内ではない(設定されたビットレートを超
えている)と判定された場合、ステップS5に進む。ス
テップS5において、スタッフィング部25は、制御信
号CUTを”1”として変換部22に出力する。この制御
信号CUTに対応して、変換部22は、パラメータNを1
だけインクリメントし、ステップS3に戻る。
ィング部25に入力された信号STRM4のビットレートが
予め設定されたビットレート以内であると判定されるま
で、ステップS3乃至S5の処理が繰り返され、ステッ
プS4において、スタッフィング部25に出力される信
号のビットレートが予め設定されたビットレート以内で
あると判定された場合、ステップS6に進む。
ステムコントローラインタフェース26による制御に基
づいて、パラメータNを1だけデクリメントし、ステッ
プS3に戻る。
25は、入力された信号STRM4のビットレートが予め設
定されたビットレートに達するまで、信号STRM4にスタ
ッフィングビット”0”を挿入する。なお、このスタッ
フィング処理の詳細については、図8を参照して後述す
る。
ミュレーション防止処理について説明する。この処理
は、主にヘッダ付加部24において実行される。上述し
たように、MPEG変換部11は、SXフォーマットのデータ
をMPEGフォーマットのデータに変換する処理を実行して
おり、SXフォーマットに特有な、例えば、画像編集用の
情報は、MPEGフォーマットには規定されていないので、
この情報はMPEGフォーマットのユーザデータフィールド
に記述されている。このMPEGのユーザデータフィールド
は、他のMPEGのデータフィールドとは異なって、特に規
定が存在せず(フリーフォーマットであり)、任意の情
報を記述できるが、その反面、スタートコードエミュレ
ーションを引き起こす可能性がある。
について説明する。MPEGにおいては、各データフィール
ドの先頭を示す特別なデータパターンとして、23ビッ
ト連続する”0”と、それに続く1ビットの”1”との
組み合わせをスタートコードとして規定しており、ユー
ザフィールド以外のデータフィールドにおいては、各フ
ィールドの先頭以外で”0”が23ビット連続すること
を禁止している。しかしながら、ユーザデータフィール
ドにおいては、そこに記述するデータは任意であり、ユ
ーザは、意識的に0が23ビット連続することを避けて
データを記述する必要がある。
ーザデータフィールドに記載されたデータが、偶然にス
タートコードと一致してしまうことであり、これは、画
像破綻を引き起こす可能性が高い致命的なエラーとな
る。
付加部24が、図5に示すように、ユーザデータフィー
ルドの16ビット毎にマーカビット”1”を挿入して、
スタートコードエミュレーションを防止している。
ドエミュレーション防止処理を実施する部分の詳細な構
成を示しており、図7は各部の動作タイミングを示して
いる。バッファ41は、ユーザデータフィールドに記述
するユーザデータを記憶しており、図7に示すように、
クロック信号に同期して、ユーザデータを16ビットず
つレジスタ46に供給する。したがって、バッファ41
の容量は、(最大ユーザデータ長/16)から求められ
る値以上の容量が必要である。
タートコード(0x000001B2)に同期してリセットされる4
ビットのカウンタ43、およびカウント値を1ずつ増加
する加算器44から構成され、その出力を制御信号ctと
してデータ選択部47に出力する。レジスタ45は、バ
ッファ41から供給された16ビットのユーザデータを
記憶しており、クロックに同期して、記憶しているユー
ザデータreg1をレジスタ46、およびデータ選択部47
に出力する。レジスタ46は、レジスタ45から入力さ
れた16ビットのユーザデータを記憶し、クロックに同
期して記憶しているユーザデータreg2(1クロックサイ
クル前のreg1と同一のユーザデータ)をデータ選択部4
7に出力する。
力されたユーザデータreg1、およびレジスタ46から入
力されたユーザデータreg2の32ビット幅のユーザデー
タのうちの所定の15ビットを、ビットずれ測定部42
からの制御信号ctの値に基づいて選択し、出力するよう
になされている。例えば、図7の一点鎖線部分に示すよ
うに、制御信号ctの値が3である場合、データ選択部4
7は、32ビット幅のユーザデータd3[1]乃至d2[16]の
うちの15ビットのユーザデータd3[4]乃至d2[2]を選択
し、制御信号ctの値が4である場合(次のクロックサイ
クルでは)、ユーザデータd4[5]乃至d3[3]を選択する。
マーカビット発生部48は、データ選択部47から15
ビットのユーザデータが出力された後、マーカビット”
1”を出力する。
トを挿入するので、その出力速度は、バッファ41から
の入力速度に比べて遅くなる。すなわち、16回のクロ
ックサイクルに対して15ワードの入力データしか処理
(出力)できない。そこで、バッファ41は、16回の
クロックサイクルに1回の割合で(図7の例では、制御
信号ctが14であるとき)、レジスタ45へのユーザデ
ータの供給を待機するように制御される。
に占めるマーカビットの割合は、6.25(=1/16)%であ
り、23ビット毎にマーカビットを挿入した場合(4.35
(=1/23)%)と比較すると、1.9%だけユーザデータの伝
送効率が低下する。しかしながら、ビデオ信号全体に占
めるユーザデータフィールドの割合は数百分の一である
ので、ビデオ信号のストリーム全体としては、伝送効率
の低下は十分に抑えられる(それほど低下していない)
ということができる。
ング処理について説明する。図8は、スタッフィング部
25の詳細な構成を示している。スタッフィング部25
(図2)に入力されるビットストリーム(図2の出力信
号STRM4に相当する)は、タイミングジェネレータ5
1、ビットレートカウンタ52、および遅延部(DL)57
に供給される。
トリームに含まれている信号であって、図9に示すよう
に、ビットストリーム中に有効なデータが存在しない区
間を示しており、1フレーム毎に存在するV-Blanking信
号(通常のビデオ信号の1フィールド毎に存在する垂直
帰線期間の信号に対応する)を検出する。そして、タイ
ミングジェネレータ51は、V-Blanking信号が解除され
た(有効なデータが現れた)タイミングに同期して、信
号GOP_STARTを発生し、ビットレートカウンタ52に出
力する。ビットレートカウンタ52は、信号GOP_START
に同期してカウンタをリセットし、ビットレートストリ
ームに含まれる有効な符号量をカウントし、その値を比
較部53に出力する。
V-Blanking信号が再度発生した(有効なデータが消え
た)タイミングに同期して、信号GOP_ENDを発生し、比
較部53に出力する(ここでは、1GOP=1ピクチャと
されている)。
タイミングに同期して、ビットレートカウンタ52から
入力された有効な符号量を示すカウント値と、CPUイン
タフェース(CPU_IF)54(図2のシステムコントローラ
インタフェース26に相当する)に予め設定されている
ビットレートTarget_bit_rateとを比較する。カウント
値がビットレートTarget_bit_rateよりも小さい場合、
比較部3は、その差を示す信号Stuffing_valueをスタッ
フィングカウンタ55に出力する。
た差信号Stuffing_valueの値だけカウント動作(計時動
作)を実行し、その間、信号Stuffing_enableをスイッ
チ56に出力する。スイッチ56には、遅延部57によ
り、タイミングジェネレータ51乃至スタッフィングカ
ウンタ55の処理に対応する遅延が施されたビットスト
リーム、およびスタッフィングビット”0”が供給され
ており、スイッチ56は、信号Stuffing_enableが入力
されている間、ビットストリームに”0”をスタッフィ
ングする。
ットレートTarget_bit_rateよりも大きいと判定された
場合、比較部53は制御信号CUTに”1”を立てて変換
部22(図2)に出力する。なお、この制御信号CUTに
対応して変換部22は、上述したように、DCT係数の高
次の非0係数を0に置換する。
像信号に含まれるV-Blanking信号が存在する期間にスタ
ッフィングを行うので、パッキングの必要がない。した
がって、パッキングのためのメモリも必要ない。さら
に、パッキングを行わないので、システムディレイを最
小とする(リアルタイム処理を行う)ことが可能であ
る。
ーム修正処理について説明するが、その前に、MPEGデー
タストリームの構造について、図10および図11を参
照して説明する。
1つの可変長符号系列である。可変長符号系列とは、可
変長符号を復号しなければデータの境界を検出できない
単位である。なお、図中において、個々の可変長符号系
列の境界は、実線で示されており、それ以外の境界は破
線で示されている。
最上層であるシーケンス層は、ヘッダ部と複数のGOPか
ら構成されている。GOP層は、ヘッダ部と複数のピクチ
ャから構成されている。ピクチャ層は、ヘッダ部と複数
のスライスから構成されている。さらに、スライス層
は、ヘッダ部と1つ以上のマクロブロックで構成されて
いる。
イス層、およびマクロブロック層の先頭には、バイト単
位に整列された(バイトアラインされた)識別コードSC
(Start Code)が配される。なお、上述したヘッダ部は、
ヘッダ(header)、拡張データ(extension)、またはユー
ザデータ(extension user data)をまとめて、記述した
ものである。ヘッダ部(ヘッダと拡張データ、またはヘ
ッダとユーザデータ)は、それぞれ可変長符号系列であ
る。
ャ)のサイズ(縦横方向の画素数)が記述されており、
GOP層のヘッダには、タイムコード、およびGOPを構成す
るピクチャ数が記述されている。
数のブロックの集合であり、ブロックの符号系列は、量
子化されたDCT係数の系列を0係数の連続回数(Run)、お
よびその直後の非0係数(Level)を1つの単位として可
変長符号化したものである。マクロブロック、並びにマ
クロブロック内のブロックには、バイトアラインされた
識別コードは付加されない(1つの可変長符号系列では
ない)。
画像(ピクチャ)を16画素×16画素の格子状に分割
したものであり、マクロブロックを水平方向に連結した
ものがスライスである。連続するスライスの前のスライ
スの最後のマクロブロックと、次のスライスの先頭のマ
クロブロックとは、連続しており、スライス間のマクロ
ブロックオーバラップを形成することは許されていな
い。
はスライス層のヘッダに記述されており(図11の例で
は、mb_row=3が記述されており)、スライスの先頭のマ
クロブロックの水平位置(MB Column)は、スライス層の
先頭のマクロブロック層に記述されている(図11の例
では、mb_column=2が記述されている)。画像(ピクチ
ャ)内におけるマクロブロックの絶対位置(マクロブロ
ックアドレス)は、画像の水平方向のマクロブロック数
MB Width(シーケンス層のヘッダの画像サイズ(Vertica
l size,Horizontal size)のHorizontal sizeから計算さ
れる)を用いて、次式のように表すことができる。 マクロブロックアドレス=((MB Row)-1)×(MB Width)+
(MB Column)
マクロブロック層には、直前のマクロブロックとのマク
ロブロックアドレスの差が記述されている(図11の例
では、スライス層の2番目のマクロブロック層には差=
+2が、3番目のマクロブロック層には差=+1が、そ
れぞれ記述されている)。あるマクロブロックにマクロ
ブロックアドレスの差として2以上が記述されていた場
合、それは、直前のマクロブロックとそのマクロブロッ
クとの間のマクロブロックがスキップされたことを意味
している。ただし、スライスの先頭および末尾のマクロ
ブロック(図11のmb_column=2のマクロブロックとmb_
column=8のマクロブロック)はスキップすることが禁止
されている。
のマクロブロック層の水平位置と、次のスライス層の先
頭のマクロブロック層の水平位置の差から、スライス内
のマクロブロックの数を計算することができる。また、
シーケンス層のヘッダに記述された画像サイズ(Vertica
l size,Horizontal size)から、画像内の垂直方向のマ
クロブロックの数(Vertical size)、および水平方向の
マクロブロック数(Horizontal size)を計算することが
できる。このように、符号系列の一部、それもスタート
コードの近傍を復号するだけで、GOPのピクチャ数、画
像内のマクロブロック構成、およびスライス内のマクロ
ブロック数といったデータストリームの骨格を知ること
ができる。
いて説明する。例えば、図12(A)に示すように、スラ
イス層の5番目のマクロブロック層にエラーが混入して
いた場合、そのマクロブロック層の復号は不可能であ
り、同じ可変長符号系列内のそれより後の6番目乃至9
番目のマクロブロック層の復号も不可能となる。しかし
ながら、9番目のマクロブロックに続くスタートコード
(スライススタートコード(SSC))は、バイトアライン
されているため、可変長符号を復号することなく、4バ
イトのパターンマッチングを行うだけで検出される。し
たがって、このスライススタートコード以降のマクロブ
ロックは復号することができる。
を復号して垂直位置MB Rowを取得し、これに続く先頭マ
クロブロックの最初の符号を復号して水平位置MB Colum
nを取得して、そのマクロブロックのマクロブロックア
ドレスを得ることができる。このマクロブロックアドレ
スから、途中のマクロブロックで復号不能となったスラ
イスの先頭マクロブロックのマクロブロックアドレスを
減算すれば、途中のマクロブロックで復号不能となった
スライスに含まれるマクロブロックの総数が得られる。
さらに、この総数から復号不能になる以前に正しく復号
できたマクロブロックの数を減算すれば、復号できなか
ったマクロブロックの数を得ることができる。
クに連続して、シーケンスヘッダコード(SHC)、グルー
プスタートコード(GSC)、またはピクチャスタートコー
ド(PSC)が存在するか、もしくは、復号できないマクロ
ブロックに連続してシーケンスエンドコード(SEC)が存
在する場合、途中のマクロブロックで復号不能となった
スライスで画像が完結しているはずである。そこで、適
宜に、各層のヘッダ部のスタートコードの近傍を復号し
てGOPのピクチャ数、画像内のマクロブロック構成、お
よびスライス内のマクロブロック数を取得し、この全マ
クロブロック数から、スライスの先頭マクロブロックの
マクロブロックアドレスの値、および復号不能となる以
前に正しく復号できたマクロブロックの数を減算すれ
ば、復号できなかったマクロブロックの数を得ることが
できる。
ば、途中のマクロブロックで復号不能となったスライス
の先頭マクロブロックの垂直位置MB Rowが”3”であ
り、そのスライスの先頭マクロブロックの水平位置MB C
olumnが”2”であり、復号できないマクロブロックに
続くスライス層のヘッダに記述された垂直位置MB Row
が”3”であり、それに続く先頭マクロブロックの水平
位置MB Columnが”11”である場合、復号不能となっ
たマクロブロックを含むスライス内のマクロブロック数
は、”9”(=11−2)である。そのうちの4番目の
マクロブロックまで正しく復号できたとすると、復号で
きなかったマクロブロックの数は5となる。
ブロックをMPEGのシンタックスを守る所定のマクロブロ
ックに置換することが、MPEGデータストリ−ム修正処理
である。所定のマクロブロックとしては、例えば、ブラ
ック(輝度信号が0x10であり、色差信号が0x80である)
マクロブロック、発生する符号量が最も少ないグレー
(輝度信号、および色差信号が0x80である)マクロブロ
ック、または平坦な図柄のマクロブロックが考えられ
る。
ったマクロブロックを所定のマクロブロックに置換する
方法を示している。例えば、図12(A)に示すように、
スライス層の先頭から5番目のマクロブロックにエラー
が混入していた場合、図12(B)に示すように、5番目
乃至9番目のマクロブロックを所定のマクロブロックに
置換することができる。または、図12(C)に示すよう
に、5番目乃至8番目のマクロブロックをスキップして
9番目のマクロブロックを所定のマクロブロックに置換
することができる。あるいは、図12(D)に示すよう
に、5番目および9番目のマクロブロックを所定のマク
ロブロックに置換して、6番目乃至8番目のマクロブロ
ックをスキップすることができる。さらに、図12(E)
に示すように、1番目乃至9番目のマクロブロックを所
定のマクロブロックに置換することができる。または、
図12(F)に示すように、1番目および9番目のマクロ
ブロックを所定のマクロブロックに置換して、2番目乃
至8番目のマクロブロックをスキップすることができ
る。
ッダにエラーが混入していた場合、図13(B)に示す例
では、そのスライス層のスタートコードを除く全てのデ
ータが置換されている。図14(A)に示すように、ピク
チャ層のヘッダにエラーが混入していた場合、図14
(B)に示す例では、そのピクチャ層のスタートコードを
除く全てのデータが置換されている。図15(A)に示す
ように、GOP層のヘッダにエラーが混入していた場合、
図15(B)に示す例では、そのGOP層のスタートコードを
除く全てのデータが置換されている。図16(A)に示す
ように、シーケンス層のヘッダにエラーが混入していた
場合、図16(B)に示す例では、そのシーケンス層のス
タートコードを除く全てのデータが置換されている。ま
た、図16(C)に示す例では、そのシーケンス層のシー
ケンススタートコード(SSC)がシーケンスエンドコード
(SEC)に置換されている。
トリーム修正処理を実行する部分の構成例を示してい
る。可変長復号部61は、図2の可変長復号部21に相
当し、メモリ62、置換区間制御部63、マクロブロッ
ク(MB)係数系列発生部64、およびスイッチ65は、図
2の変換部22に相当し、可変長符号化部66は、図2
の可変長符号化部23に相当する。
トリームを復号し、ヘッダとマクロブロックの単位に分
割してメモリ62に出力する。したがって、可変長復号
部61には、スタートコードを検出し、ヘッダを解読し
て、RunとLevelにまで復号できる能力が必要であるが、
DCT係数の系列まで復号する能力は必要ない。
ータストリーム中のエラー(復号不能なエラーマクロブ
ロック)を検出して置換区間制御部63に通知するよう
になされている。さらに、可変長復号部61は、解読し
たヘッダに記述されている各種パラメータ(画像のサイ
ズ、垂直位置MB Row、水平位置MB Column、および復号
済みマクロブロック数等)を置換区間制御部63および
可変長符号化部66に出力する。
からのエラー通知と各種パラメータに基づいて、異常箇
所を判断してマクロブロックを置換する区間を決定し、
決定結果に対応してマクロブロック係数系列発生部6
4、およびスイッチ65を制御する。
ラーマクロブロックと置換するマクロブロックの係数系
列を発生する。例えば、ブラックのマクロブロックに置
換する場合、イントラマクロブロックとして、輝度信号
ブロックに0x10、色差信号ブロックに0x80の係数系列が
発生される。また、最も発生符号量が少ないグレーのマ
クロブロックに置換する場合、イントラマクロブロック
として、輝度信号ブロック、および色差信号ブロックに
0x80の係数系列が発生される。さらに、任意の図柄のマ
クロブロックに置換する場合、前後の影響を受けないイ
ントラマクロブロックとし、DC成分だけで構成される平
坦な図柄が発生される。
るヘッダの符号系列、およびマクロブロックの係数系
列、またはマクロブロック係数系列発生部64から供給
される置換用のマクロブロックの係数系列を、置換区間
制御部63による制御に基づいて切り換え、可変長符号
化部66に出力する。
列を符号化して出力する。なお、このとき、メモリ62
から入力されたヘッダは、既に符号化されているのでそ
のまま流用される。
トリーム修正処理を実行する部分の他の構成例を示して
いる。同図において、可変長符号部61、置換区間制御
部63、およびスイッチ65は、図17に示した構成と
同様であるので、その説明は省略する。
ロック毎に分割された符号系列を記憶する。マクロブロ
ック符号系列発生部74は、置換用マクロブロックの符
号系列を発生する。例えば、ブラックやグレイのイント
ラマクロブロック、単純フレーム間予測であって符号化
不要である(DCT係数を持たない)Pピクチャ用マクロ
ブロック、または1つ前のマクロブロックと予測方向と
動きベクトルが同じである符号化不要のBピクチャ用マ
クロブロックが予め記憶されており、可変長復号部61
から入力されるパラメータに対応して、これらの置換用
マクロブロックの符号系列がスイッチ65に供給され
る。
スイッチ65から入力される符号系列(メモリ72から
供給された符号系列、またはマクロブロック符号系列発
生部74から供給された符号系列)をパッキングして
(8ビットにビットアレイして)出力する。
た実施の形態に対する優位性は、以下の通りである。す
なわち、メモリ72(図18)は、復号される前の、圧
縮された符号系列を記憶するので、係数系列を記憶する
メモリ62よりも、その容量は小さいものでよい。ただ
し、マクロブロックの符号系列とともに、その符号長を
記憶する必要がある。また、マクロブロック単位の符号
系列のパッキングを行うだけなので、再符号化部76
(図18)は、符号化を行う可変長符号化部66(図1
7)よりも、その回路の規模が圧倒的に小さい。マクロ
ブロック符号系列発生部74は、単純フレーム間予測で
あって符号化不要であるPピクチャ用マクロブロック、
または1つ前のマクロブロックと予測方向と動きベクト
ルが同じである符号化不要のBピクチャ用マクロブロッ
ク(スキップされるマクロブロック)を供給できるの
で、実質上、エラーマクロブロック部分をフリーズさせ
て補正することができる。
処理は、可変長符号の復号、および再符号化を実行する
ものの、量子化や逆量子化を経ないので、エラーに関係
しない箇所のマクロブロックの画質の劣化は発生しな
い。
グラムは、磁気ディスク、CD-ROM等の情報記録媒体より
なる提供媒体のほか、インターネット、デジタル衛星な
どのネットワーク提供媒体を介してユーザに提供するこ
とができる。
報処理装置、請求項5に記載の画像情報処理方法、およ
び請求項6に記載の提供媒体によれば、データストリー
ムに混入するエラーを検出し、検出したエラーに起因し
て復号不可能となる範囲を判定して、復号不可能な範囲
のデータを発生したデータに置換するようにしたので、
再生画像の乱れや、再生時の暴走、またはハングアップ
を抑止することが可能となる。
成を示すブロック図である。
ック図である。
するフローチャートである。
ョン防止処理を説明する図である。
ュレーション防止処理に関わる部分の構成を示すブロッ
ク図である。
ョン防止処理を説明する図である。
ック図である。
説明するフローチャートである。
である。
である。
処理を説明する図である。
処理を説明する図である。
処理を説明する図である。
処理を説明する図である。
処理を説明する図である。
処理に関わる部分の構成の一例を示すブロック図であ
る。
処理に関わる部分の構成の他の一例を示すブロック図で
ある。
換部, 23 可変長符号化部, 24 ヘッダ付加
部, 25 スタッフィング部, 26 システムコン
トロールインタフェース, 31 可変長復号部, 3
2 0置換部,33 可変長符号化部, 61 可変長
復号部, 62 メモリ, 63 置換区間制御部,
64 マクロブロック係数系列発生部, 65 スイッ
チ, 66 可変長符号化部, 72 メモリ, 74
マクロブロック符号系列発生部, 76 マクロブロ
ックパッキング部
Claims (6)
- 【請求項1】 画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理装置において、 前記データストリームの一部を復号する復号手段と、 前記データストリームに混入するエラーを検出する検出
手段と、 前記復号手段で復号された情報に基づいて前記検出手段
が検出したエラーに起因して復号不可能となる範囲を判
定する判定手段と、 置換するデータを発生する発生手段と、 前記判定手段の判定結果に基づいて、少なくとも前記復
号不可能な範囲のデータを、前記発生手段が発生したデ
ータに置換する置換手段とを備えることを特徴とする画
像情報処理装置。 - 【請求項2】 前記発生手段は、係数系列を発生するこ
とを特徴とする請求項1に記載の画像情報処理装置。 - 【請求項3】 前記置換手段が置換したデータを符号化
する符号化手段をさらに備えることを特徴とする請求項
2に記載の画像情報処理装置。 - 【請求項4】 前記発生手段は、符号系列を発生するこ
とを特徴とする請求項1に記載の画像情報処理装置。 - 【請求項5】 画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理方法において、 前記データストリームの一部を復号する復号ステップ
と、 前記データストリームに混入するエラーを検出する検出
ステップと、 前記復号ステップで復号された情報に基づいて前記検出
ステップで検出したエラーに起因して復号不可能となる
範囲を判定する判定ステップと、 置換するデータを発生する発生ステップと、 前記判定ステップの判定結果に基づいて、少なくとも前
記復号不可能な範囲のデータを、前記発生ステップで発
生したデータに置換する置換ステップとを含むことを特
徴とする画像情報処理方法。 - 【請求項6】 画像情報が圧縮符号化されたデータスト
リームのエラーを修正する画像情報処理装置に、 前記データストリームの一部を復号する復号ステップ
と、 前記データストリームに混入するエラーを検出する検出
ステップと、 前記復号ステップで復号された情報に基づいて前記検出
ステップで検出したエラーに起因して復号不可能となる
範囲を判定する判定ステップと、 置換するデータを発生する発生ステップと、 前記判定ステップの判定結果に基づいて、少なくとも前
記復号不可能な範囲のデータを、前記発生ステップで発
生したデータに置換する置換ステップとを含む処理を実
行させるコンピュータが読み取り可能なプログラムを提
供することを特徴とする提供媒体。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19400698A JP2000032393A (ja) | 1998-07-09 | 1998-07-09 | 画像情報処理装置および方法、並びに提供媒体 |
GB9915715A GB2341509B (en) | 1998-07-09 | 1999-07-05 | MPEG stream processing apparatus and method |
US09/350,226 US6516034B2 (en) | 1998-07-09 | 1999-07-08 | Stream processing apparatus and method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP19400698A JP2000032393A (ja) | 1998-07-09 | 1998-07-09 | 画像情報処理装置および方法、並びに提供媒体 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000032393A true JP2000032393A (ja) | 2000-01-28 |
JP2000032393A5 JP2000032393A5 (ja) | 2005-09-02 |
Family
ID=16317410
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP19400698A Pending JP2000032393A (ja) | 1998-07-09 | 1998-07-09 | 画像情報処理装置および方法、並びに提供媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US6516034B2 (ja) |
JP (1) | JP2000032393A (ja) |
GB (1) | GB2341509B (ja) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2002045420A1 (en) * | 2000-11-29 | 2002-06-06 | Sony Corporation | Stream processor |
JP2003046944A (ja) * | 2001-08-02 | 2003-02-14 | Sony Corp | 信号処理装置および方法、記録装置および方法、再生装置および方法、記録再生装置および方法、ビデオカメラ、ならびに、映像モニタ装置 |
JP2006502605A (ja) * | 2002-01-22 | 2006-01-19 | マイクロソフト コーポレーション | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
JP2006295910A (ja) * | 2005-03-16 | 2006-10-26 | Victor Co Of Japan Ltd | エラー訂正装置 |
JP2007318455A (ja) * | 2006-05-25 | 2007-12-06 | Matsushita Electric Ind Co Ltd | トランスコーデック装置 |
KR100900607B1 (ko) * | 2002-04-08 | 2009-06-02 | 파나소닉 주식회사 | 멀티미디어 데이터 복호장치 |
US7751691B2 (en) | 2004-02-13 | 2010-07-06 | Canon Kabushiki Kaisha | Reproducing apparatus |
JP2013031007A (ja) * | 2011-07-28 | 2013-02-07 | Fujitsu Ltd | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム |
JP2015149762A (ja) * | 2015-04-13 | 2015-08-20 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム |
US10271069B2 (en) | 2016-08-31 | 2019-04-23 | Microsoft Technology Licensing, Llc | Selective use of start code emulation prevention |
Families Citing this family (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3884172B2 (ja) * | 1997-10-02 | 2007-02-21 | 株式会社東芝 | 可変長復号化装置および復号化方法 |
JP2002204450A (ja) | 2000-12-28 | 2002-07-19 | Sony Corp | データ処理装置および方法 |
WO2001039190A1 (fr) * | 1999-11-25 | 2001-05-31 | Fujitsu Limited | Procede de lecture d'un support de donnees, dispositif de stockage de donnees, procede de reproduction de donnees, systeme de reproduction de donnees et support de donnees utilise a cet effet |
JP2002142192A (ja) * | 2000-11-01 | 2002-05-17 | Sony Corp | 信号処理装置および方法、ならびに、記録装置および方法 |
KR100357266B1 (ko) * | 2000-12-06 | 2002-10-19 | 엘지전자 주식회사 | 데이터 분할 기법을 이용한 영상 부호화 전송방법 |
US6859500B2 (en) * | 2001-03-20 | 2005-02-22 | Telefonaktiebolaget Lm Ericsson | Run-length coding of non-coded macroblocks |
JP3775265B2 (ja) | 2001-08-16 | 2006-05-17 | ソニー株式会社 | 信号処理装置および方法、記録再生装置および方法、ならびに、再生装置および方法 |
US7152197B2 (en) | 2002-01-24 | 2006-12-19 | Koninklijke Philips Electronics, N.V. | Error correction of stream data |
US7657111B2 (en) * | 2003-02-14 | 2010-02-02 | Fujifilm Corporation | Apparatus and program for image processing for obtaining processed compressed moving image data |
JP2005051633A (ja) * | 2003-07-30 | 2005-02-24 | Sony Corp | 編集装置、ビットレート制御方法及びビットレート制御プログラム |
US8565321B2 (en) * | 2004-03-29 | 2013-10-22 | Broadcom Corporation | Method and system for efficient packing of data across queue blocks in a satellite |
CN1681033A (zh) * | 2004-04-06 | 2005-10-12 | 皇家飞利浦电子股份有限公司 | 光盘播放系统的纠错机制 |
US20060045190A1 (en) * | 2004-09-02 | 2006-03-02 | Sharp Laboratories Of America, Inc. | Low-complexity error concealment for real-time video decoder |
US7650031B2 (en) * | 2004-11-23 | 2010-01-19 | Microsoft Corporation | Method and system for detecting black frames in a sequence of frames |
JP4229149B2 (ja) * | 2006-07-13 | 2009-02-25 | ソニー株式会社 | ビデオ信号処理装置およびビデオ信号処理方法、ビデオ信号符号化装置およびビデオ信号符号化方法、並びにプログラム |
WO2008018324A1 (en) * | 2006-08-08 | 2008-02-14 | Panasonic Corporation | Image encoding device, its method, and its integrated circuit |
US20080043832A1 (en) * | 2006-08-16 | 2008-02-21 | Microsoft Corporation | Techniques for variable resolution encoding and decoding of digital video |
US8773494B2 (en) | 2006-08-29 | 2014-07-08 | Microsoft Corporation | Techniques for managing visual compositions for a multimedia conference call |
KR101086434B1 (ko) * | 2007-03-28 | 2011-11-25 | 삼성전자주식회사 | 비디오 데이터 디스플레이 방법 및 장치 |
JP4833923B2 (ja) * | 2007-06-15 | 2011-12-07 | 富士通セミコンダクター株式会社 | トランスコード装置、トランスコーダ、デコーダおよびトランスコード方法 |
JP5050159B2 (ja) * | 2008-03-05 | 2012-10-17 | 株式会社メガチップス | エンコーダ |
JP5512657B2 (ja) * | 2008-04-21 | 2014-06-04 | サムスン エレクトロニクス カンパニー リミテッド | リッチメディアサービスのための端末のユーザインターフェース装置及び方法 |
FR2932636B1 (fr) * | 2008-06-13 | 2010-09-10 | Enensys Technologies | Procede et dispositif de mesure de l'efficacite de transmission d'un flux de donnees numeriques conforme en salve. |
US20100217888A1 (en) * | 2008-07-17 | 2010-08-26 | Panasonic Corporation | Transmission device, reception device, rate control device, transmission method, and reception method |
KR101590633B1 (ko) | 2008-11-11 | 2016-02-02 | 삼성전자주식회사 | 슬라이스 단위로 분할된 동영상을 처리하는 동영상 부호화/복호화장치 및 동영상 부호화/복호화방법 |
US8731152B2 (en) | 2010-06-18 | 2014-05-20 | Microsoft Corporation | Reducing use of periodic key frames in video conferencing |
US20120218292A1 (en) * | 2011-02-10 | 2012-08-30 | Ncomputing Inc. | System and method for multistage optimized jpeg output |
US9654139B2 (en) | 2012-01-19 | 2017-05-16 | Huawei Technologies Co., Ltd. | High throughput binarization (HTB) method for CABAC in HEVC |
US9743116B2 (en) | 2012-01-19 | 2017-08-22 | Huawei Technologies Co., Ltd. | High throughput coding for CABAC in HEVC |
US9860527B2 (en) | 2012-01-19 | 2018-01-02 | Huawei Technologies Co., Ltd. | High throughput residual coding for a transform skipped block for CABAC in HEVC |
US20130188736A1 (en) | 2012-01-19 | 2013-07-25 | Sharp Laboratories Of America, Inc. | High throughput significance map processing for cabac in hevc |
US10616581B2 (en) | 2012-01-19 | 2020-04-07 | Huawei Technologies Co., Ltd. | Modified coding for a transform skipped block for CABAC in HEVC |
US9386326B2 (en) * | 2012-10-05 | 2016-07-05 | Nvidia Corporation | Video decoding error concealment techniques |
WO2018047480A1 (ja) * | 2016-09-12 | 2018-03-15 | ソニー株式会社 | 画像処理装置、画像処理方法、及びプログラム |
GB2579399B (en) | 2018-11-30 | 2020-12-16 | Imagination Tech Ltd | Data compression and storage |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5666461A (en) * | 1992-06-29 | 1997-09-09 | Sony Corporation | High efficiency encoding and decoding of picture signals and recording medium containing same |
KR0134871B1 (ko) * | 1992-07-17 | 1998-04-22 | 사또오 후미오 | 고능률 부호화 복호화 시스템 |
US5442400A (en) * | 1993-04-29 | 1995-08-15 | Rca Thomson Licensing Corporation | Error concealment apparatus for MPEG-like video data |
US5452006A (en) * | 1993-10-25 | 1995-09-19 | Lsi Logic Corporation | Two-part synchronization scheme for digital video decoders |
US6009236A (en) * | 1994-09-26 | 1999-12-28 | Mitsubishi Denki Kabushiki Kaisha | Digital video signal record and playback device and method for giving priority to a center of an I frame |
EP1802135A3 (en) * | 1995-03-15 | 2008-11-12 | Kabushiki Kaisha Toshiba | Moving picture coding and/or decoding systems |
JPH09322174A (ja) * | 1996-05-30 | 1997-12-12 | Hitachi Ltd | 動画データの再生方法 |
KR100248427B1 (ko) * | 1997-08-12 | 2000-03-15 | 이계철 | 압축 영역에서의 엠펙 부호 영상의 화면 분할 장치 및 그 방법 |
JPH11213085A (ja) * | 1998-01-30 | 1999-08-06 | Olympus Optical Co Ltd | コードイメージ記録装置 |
-
1998
- 1998-07-09 JP JP19400698A patent/JP2000032393A/ja active Pending
-
1999
- 1999-07-05 GB GB9915715A patent/GB2341509B/en not_active Expired - Fee Related
- 1999-07-08 US US09/350,226 patent/US6516034B2/en not_active Expired - Fee Related
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR100838902B1 (ko) * | 2000-11-29 | 2008-06-16 | 소니 가부시끼 가이샤 | 스트림 처리 장치 |
WO2002045420A1 (en) * | 2000-11-29 | 2002-06-06 | Sony Corporation | Stream processor |
US7035337B2 (en) | 2000-11-29 | 2006-04-25 | Sony Corporation | Stream processing apparatus |
JP2003046944A (ja) * | 2001-08-02 | 2003-02-14 | Sony Corp | 信号処理装置および方法、記録装置および方法、再生装置および方法、記録再生装置および方法、ビデオカメラ、ならびに、映像モニタ装置 |
JP2011205665A (ja) * | 2002-01-22 | 2011-10-13 | Microsoft Corp | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
JP2009246995A (ja) * | 2002-01-22 | 2009-10-22 | Microsoft Corp | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
US7839895B2 (en) | 2002-01-22 | 2010-11-23 | Microsoft Corporation | Methods and systems for start code emulation prevention and data stuffing |
JP4703114B2 (ja) * | 2002-01-22 | 2011-06-15 | マイクロソフト コーポレーション | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
JP2006502605A (ja) * | 2002-01-22 | 2006-01-19 | マイクロソフト コーポレーション | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
JP2012182797A (ja) * | 2002-01-22 | 2012-09-20 | Microsoft Corp | 開始符号エミュレーションの防止およびデータ充填のための方法およびシステム |
KR100900607B1 (ko) * | 2002-04-08 | 2009-06-02 | 파나소닉 주식회사 | 멀티미디어 데이터 복호장치 |
US7751691B2 (en) | 2004-02-13 | 2010-07-06 | Canon Kabushiki Kaisha | Reproducing apparatus |
JP2006295910A (ja) * | 2005-03-16 | 2006-10-26 | Victor Co Of Japan Ltd | エラー訂正装置 |
JP2007318455A (ja) * | 2006-05-25 | 2007-12-06 | Matsushita Electric Ind Co Ltd | トランスコーデック装置 |
JP2013031007A (ja) * | 2011-07-28 | 2013-02-07 | Fujitsu Ltd | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム |
JP2015149762A (ja) * | 2015-04-13 | 2015-08-20 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法及び動画像符号化プログラム |
US10271069B2 (en) | 2016-08-31 | 2019-04-23 | Microsoft Technology Licensing, Llc | Selective use of start code emulation prevention |
Also Published As
Publication number | Publication date |
---|---|
US20020114397A1 (en) | 2002-08-22 |
US6516034B2 (en) | 2003-02-04 |
GB2341509A (en) | 2000-03-15 |
GB2341509B (en) | 2000-09-06 |
GB9915715D0 (en) | 1999-09-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2000032393A (ja) | 画像情報処理装置および方法、並びに提供媒体 | |
US7313184B2 (en) | Video data compression apparatus and method of same | |
KR960002730B1 (ko) | 고능률 부호화 신호 처리 장치 | |
JP3215952B2 (ja) | 符号化装置及び復号化装置 | |
KR100289855B1 (ko) | 복호화 방법 및 장치 | |
JP2004056797A (ja) | 画像復号化方法及び装置 | |
JP3531186B2 (ja) | ビデオ信号符号化方法及び装置 | |
JP2002359853A (ja) | 画像処理装置、画像処理方法、画像処理プログラムおよび記録媒体 | |
KR100796885B1 (ko) | 신호 프로세서 | |
JP2000236522A (ja) | 画像情報処理装置および方法、並びに提供媒体 | |
JPH08256308A (ja) | ディジタルビデオテ−プレコ−ダのビットストリ−ム配置/復元方法およびそれに適合なデ−タ圧縮装置および伸長装置 | |
US5995149A (en) | Image data compression | |
JP2000032449A (ja) | 画像情報処理装置および方法、並びに提供媒体 | |
JP2000032394A (ja) | 画像情報処理装置および方法、並びに提供媒体 | |
KR100578258B1 (ko) | 디지털비디오신호기록/재생장치및방법 | |
JP2000032457A (ja) | 画像情報処理装置および方法、並びに提供媒体 | |
JP3501521B2 (ja) | ディジタル映像信号再生装置および再生方法 | |
JP3208601B2 (ja) | 高能率符号化装置 | |
JP2000333180A (ja) | スキップマクロブロック禁止制御方法、スキップマクロブロック禁止制御装置およびスキップマクロブロック禁止制御プログラムを記録した媒体 | |
JPH08125967A (ja) | 画像データ記録再生装置 | |
JP3685780B2 (ja) | ディジタル映像信号記録装置および記録方法並びに再生装置および再生方法 | |
JP2897585B2 (ja) | 画像符号化記録再生装置 | |
JP3531594B2 (ja) | ビデオ信号復号化方法及び装置 | |
JP3852451B2 (ja) | 情報信号記録装置および情報信号再生装置 | |
JP2005328512A (ja) | ディジタル映像信号再生装置および再生方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20050304 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050304 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060725 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060804 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060913 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20061024 |