JP3921841B2 - 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置 - Google Patents

信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置 Download PDF

Info

Publication number
JP3921841B2
JP3921841B2 JP29520898A JP29520898A JP3921841B2 JP 3921841 B2 JP3921841 B2 JP 3921841B2 JP 29520898 A JP29520898 A JP 29520898A JP 29520898 A JP29520898 A JP 29520898A JP 3921841 B2 JP3921841 B2 JP 3921841B2
Authority
JP
Japan
Prior art keywords
dct coefficient
dct
coefficient data
order
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP29520898A
Other languages
English (en)
Other versions
JP2000125262A (ja
Inventor
治夫 富樫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP29520898A priority Critical patent/JP3921841B2/ja
Priority to EP19990308091 priority patent/EP0994482A3/en
Priority to CA 2286251 priority patent/CA2286251A1/en
Priority to US09/418,265 priority patent/US6721492B1/en
Priority to CNB991215125A priority patent/CN1230009C/zh
Priority to KR19990044788A priority patent/KR100668993B1/ko
Publication of JP2000125262A publication Critical patent/JP2000125262A/ja
Application granted granted Critical
Publication of JP3921841B2 publication Critical patent/JP3921841B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/625Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding using discrete cosine transform [DCT]
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/30Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording
    • G11B27/3027Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on the same track as the main recording used signal is digitally coded
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/129Scanning of coding units, e.g. zig-zag scan of transform coefficients or flexible macroblock ordering [FMO]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/78Television signal recording using magnetic recording
    • H04N5/782Television signal recording using magnetic recording on tape
    • H04N5/783Adaptations for reproducing at a rate different from the recording rate
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B20/00Signal processing not specific to the method of recording or reproducing; Circuits therefor
    • G11B20/10Digital recording or reproducing
    • G11B20/12Formatting, e.g. arrangement of data block or words on the record carriers
    • G11B20/1217Formatting, e.g. arrangement of data block or words on the record carriers on discs
    • G11B20/1252Formatting, e.g. arrangement of data block or words on the record carriers on discs for discontinuous data, e.g. digital information signals, computer programme data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/7921Processing of colour television signals in connection with recording for more than one processing mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H04N9/8063Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal using time division multiplex of the PCM audio and PCM video signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Television Signal Processing For Recording (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Signal Processing For Digital Recording And Reproducing (AREA)

Description

【0001】
【発明の属する技術分野】
この発明は、特に放送局の用途に適用され、DCT(Discrete Cosine Transform) を用いて圧縮符号化され記録された画像データの再生時に、再生データの欠落があっても、再生できたデータによる復号化を最大限有効に行うことができるような信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置に関する。
【0002】
【従来の技術】
近年、ディジタルビデオ信号を記録媒体に記録したり、ネットワークを利用して伝送するためのフォーマットがいくつか提供されている。一般に、ディジタルビデオ信号は、データ量が極めて多いため、これを記録媒体に長時間記録する場合、圧縮符号化することが必要である。この圧縮符号化方式の代表的なものとして、MPEG(Moving Picture Experts Group)方式が知られている。
【0003】
MPEG方式は、動き補償予測符号化と、DCT(Discrete Cosine Transform) による符号化とを組み合わせたハイブリッド方式の圧縮符号化方式である。すなわち、先ず最初に、ビデオ信号のフレーム間の差分をとることにより、時間軸方向の冗長度を落とす。次に、DCTを用いて空間軸方向の冗長度を落とす。これらにより、効率のよい符号化を行うことができる。
【0004】
MPEG方式では、1画面を例えば16画素×16ラインからなるマクロブロックに分割し、そのマクロブロックを、例えば8画素×8ラインからなるDCTブロックに、さらに分割する。例えば、ビデオ信号のフォーマットがNTSC方式に基づく場合、各信号成分の比率に従い、輝度信号YのDCTブロックが4個と、色信号Cr,CbのDCTブロックがそれぞれ2個ずつ形成される。DCTは、このDCTブロック単位で行われる。そして、DCTによって得られたDCT係数は、ジグザグスキャンによって、DCTブロック毎にDC成分および低域成分から高域成分へと並べられ、これがマクロブロックを構成する複数のでしてブロックのそれぞれに対して行われる。
【0005】
ところで、ビデオ信号を記録する記録媒体としては、磁気テープが一般的に用いられている。磁気テープへのビデオ信号の記録は、回転するドラム上に設けられた磁気ヘッド(回転ヘッド)によって、テープの走行方向に対して斜めに傾斜した、所謂ヘリカルトラックが形成されることによってなされる。再生時には、回転ヘッドによって、記録時に形成されたヘリカルトラックが正確にトレースされる。
【0006】
再生時に、テープの走行速度を記録時の速度よりも高速にすることで、例えば2倍速、3倍速、あるいはサーチなどの再生を行うことができる。この場合、回転ヘッドのテープ上でのトレース角がヘリカルトラックの傾き角度とは異なってくる。そのため、ヘリカルトラックに記録された信号の全てをトレースすることができなくなる。すなわち、高速再生時には、各ヘリカルトラックの一部を走査するような再生が行われる。
【0007】
【発明が解決しようとする課題】
MPEGを用いて圧縮符号化を行い、そのデータをテープ状記録媒体に記録すると、上述したサーチなどの高速再生を行った場合、各ヘリカルトラックの一部しかトレースされない。そのため、例えば上述のマクロブロックにおいて後半のデータが取得できないような場合に、マクロブロックの前半に当たる一部のDCTブロックしか活用できず、著しい画質の低下が生じる。このように、従来では、再生されたデータを有効に活用して高品質の再生画像を得ることが困難であるという問題点があった。
【0008】
したがって、この発明の目的は、MPEGを用いて圧縮符号化を行ってデータがヘリカルトラックで記録されている磁気テープを再生するようなときに、再生時に高速再生を行っても高品質な画像が得られるような信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置を提供することにある。
【0009】
【課題を解決するための手段】
この発明は、上述した課題を解決するために、ビデオデータに含まれるフレームそれぞれを複数のマクロブロックに分割し、分割したマクロブロック毎に含まれる複数のDCTブロック毎にDCTを行われることで生成されたDCT係数データを、DCTブロック毎に、DCTブロック内で低次のDCT係数データから高次のDCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と、解読手段で切り出されたDCT係数データに対し、DCTブロック毎に独立して符号化されているDCT係数データの並びを、マクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換手段と、変換手段で変換されたDCT係数データをパッキングするパッキング手段と、パッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段とを有することを特徴とする信号処理装置である。
【0010】
また、この発明は、ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われることによって生成されたDCT係数データを、マクロブロック内の複数のDCTブロックに跨がって、低次の係数データから高次の係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎に付加されるヘッダを付加してなる変換エレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と解読手段で切り出されたDCT係数データに対し、マクロブロック内の複数のDCTブロックに跨がって低次のDCT係数データから高次の係数データの順に並べられたDCT係数データの並びを、DCTブロック毎に独立して、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換手段と、変換手段で変換されたDCT係数データをパッキングするパッキング手段と、パッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段と
を有することを特徴とする信号処理装置である。
【0011】
また、この発明は、ビデオデータに含まれるフレームそれぞれを複数のマクロブロックに分割し、分割したマクロブロック毎に含まれる複数のDCTブロック毎にDCTを行われることで生成されたDCT係数データを、DCTブロック毎に、DCTブロック内で低次のDCT係数データから高次のDCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離のステップと、分離のステップにより分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読のステップと、解読のステップにより切り出されたDCT係数データに対し、DCTブロック毎に独立して符号化されているDCT係数データの並びを、マクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換のステップと、変換のステップにより変換されたDCT係数データをパッキングするパッキングのステップと、パッキングのステップによりパッキングされたDCT係数データと、分離のステップにより分離されたヘッダ部分とを多重化する多重化のステップとを有することを特徴とする信号処理方法である。
【0012】
また、この発明は、ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われることによって生成されたDCT係数データを、マクロブロック内の複数のDCTブロックに跨がって、低次の係数データから高次の係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎に付加されるヘッダを付加してなる変換エレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離のステップと、分離のステップにより分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読のステップと、解読のステップにより切り出されたDCT係数データに対し、マクロブロック内の複数のDCTブロックに跨がって低次のDCT係数データから高次の係数データの順に並べられたDCT係数データの並びを、DCTブロック毎に独立して、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換のステップと、変換のステップにより変換されたDCT係数データをパッキングするパッキングのステップと、パッキングのステップによりパッキングされたDCT係数データと、分離のステップにより分離されたヘッダ部分とを多重化する多重化のステップとを有することを特徴とする信号処理方法である。
【0013】
また、この発明は、ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われて生成されたDCT係数データを、DCTブロック毎に、DCTブロック内で低次のDCT係数データから高次のDCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と、解読手段で切り出されたDCT係数データに対し、DCTブロック毎に独立して符号化されているDCT係数データの並びを、マクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換手段と、変換手段で変換されたDCT係数データをパッキングする第1のパッキング手段と、第1のパッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段と、多重化手段の出力をマクロブロック毎に固定長枠に当てはめ、固定長枠からはみ出た部分を固定長枠に足りない部分に順に詰め込むパッキングを行う第2のパッキング手段と、第2のパッキング手段によってパッキングされた複数の固定長枠に対応するデータに対して、積符号を用いたエラー訂正符号化を行うエラー訂正符号化手段と、エラー訂正符号化手段によってエラー訂正符号化されたデータを記録媒体に記録する記録手段とを有することを特徴とする記録装置である。
【0014】
また、この発明は、ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われDCT係数データが生成され、生成されたDCT係数データを可変長符号化し、可変長符号化されたDCT係数データをマクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替え、並べ替えられたDCT係数データに対して第1のパッキングを行い、第1のパッキングが行われたDCT係数部分に対してマクロブロック毎にヘッダを付加してなる変換エレメンタリストリームを、マクロブロック毎に固定長枠に当てはめ、固定長枠からはみ出た部分を固定長枠に足りない部分に順に詰め込む第2のパッキングを行い、第2のパッキングが行われた複数の固定長枠に対応するデータに対して積符号を用いたエラー訂正符号化が施されて記録媒体に記録されたデータを再生するようにした再生装置において、記録媒体に記録されたデータを再生する再生手段と、再生手段により再生されたデータの積符号を用いたエラー訂正符号を復号化してエラー訂正を行うエラー訂正手段と、エラー訂正手段によってエラー訂正されたデータに対して、対応するマクロブロック同士を連結してマクロブロックを復元するデパッキング手段と、デパッキング手段の出力からマクロブロック毎に、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と、解読手段で切り出されたDCT係数データに対し、デパッキング手段によって復元されたマクロブロック内で、複数のDCTブロックに跨がって低次のDCT係数データから高次の係数データの順に並べられたDCT係数データの並びを、DCTブロック毎に独立して、低次のDCT係数データから高次のDCT係数データの順に並べ替える変換手段と、変換手段で変換されたDCT係数データをパッキングするパッキング手段と、パッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段とを有することを特徴とする再生装置である。
【0015】
また、この発明は、ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われて生成されたDCT係数データを、DCTブロック毎に、DCTブロック内で低次のDCT係数データから高次のDCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と、解読手段で切り出されたDCT係数データに対し、DCTブロック毎に独立して符号化されているDCT係数データの並びを、マクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替える第1の変換手段と、第1の変換手段で並べ替えられたDCT係数データをパッキングする第1のパッキング手段と、第1のパッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段と、多重化手段の出力をマクロブロック毎に固定長枠に当てはめ、固定長枠からはみ出た部分を固定長枠に足りない部分に順に詰め込むパッキングを行う第2のパッキング手段と、第2のパッキング手段によってパッキングされた複数の固定長枠に対応するデータに対して、積符号を用いたエラー訂正符号化を行うエラー訂正符号化手段と、エラー訂正符号化手段によってエラー訂正符号化されたデータを記録媒体に記録する記録手段と、記録媒体に記録されたデータを再生する再生手段と、再生手段により再生されたデータの積符号を用いたエラー訂正符号を復号化してエラー訂正を行うエラー訂正手段と、エラー訂正手段によってエラー訂正されたデータに対して、対応するマクロブロック同士を連結してマクロブロックを復元するデパッキング手段と、デパッキング手段の出力からマクロブロック毎に、ヘッダ部分とDCT係数部分とを分離する分離手段と、分離手段で分離されたDCT係数部分の可変長符号を解読してDCT係数データの区切りを検出し、DCT係数データに対応する部分を切り出す解読手段と、解読手段で切り出されたDCT係数データに対し、デパッキング手段によって復元されたマクロブロック内で、複数のDCTブロックに跨がって低次のDCT係数データから高次の係数データの順に並べられたDCT係数データの並びを、DCTブロック毎に独立して、低次のDCT係数データから高次のDCT係数データの順に並べ替える第2の変換手段と、第2の変換手段で変換されたDCT係数データをパッキングする第3のパッキング手段と、第3のパッキング手段でパッキングされたDCT係数データと、分離手段で分離されたヘッダ部分とを多重化する多重化手段とを有することを特徴とする記録再生装置である。
【0016】
上述したように、この発明による信号処理装置および方法、ならびに、記録装置および記録再生装置は、DCTブロック毎に独立して符号化されているDCT係数の並びを、複数のDCTブロックに跨がって、低次の係数から高次の係数の順に並べ替えるようにしているため、再生時に、マクロブロック内の複数のDCTブロックのデータが全て再生できなくても、複数のDCTブロックのそれぞれについて、低次のデータから利用できる。
【0017】
また、上述したように、この発明による信号処理装置および方法、ならびに、再生装置および記録再生装置は、マクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数から高次の係数の順に並べられたDCT係数の並びを、DCTブロック毎に独立して、低次の係数から高次の係数の順に並べ替えるようにしているため、再生時に、マクロブロック内の複数のDCTブロックのデータが全て再生できなくても、複数のDCTブロックのそれぞれについて、低次のデータから利用できる。
【0018】
【発明の実施の形態】
以下、この発明の一実施形態について説明する。この一実施形態による記録装置では、ディジタルオーディオ信号を、MPEG2方式によって圧縮符号化して、ヘリカルスキャン方式で、磁気テープに記録する。その際に、MPEG方式の規定に基づきDCTブロック毎に周波数成分の順に並べられているDCT係数を、1マクロブロックを構成する複数のDCTブロックを通して、周波数成分の順に並び替える。また、再生時には、このように並べられたDCT係数を、MPEG方式の規定に基づく順番に並べ替えて出力する。
【0019】
こうすることで、例えば高速再生を行い、1マクロブロックのデータが一部しか再生できなくても、1マクロブロックを構成する全てのDCTブロックに対して、DCT係数をDC成分ならびに低域成分から順に、満遍なく行き渡らせることができる。そのため、再生できたデータを有効に活用することができ、より高品質の再生画像を得ることができる。
【0020】
先ず、理解を容易とするために、この発明の一実施形態の前提となる技術について説明する。この一実施形態による記録再生装置においては、互いに異なる複数のフォーマットのビデオ信号が統一的に扱われる。例えば、NTSC方式に基づいた525本/60HzのシステムおよびPAL方式に基づいた625本/50Hzのシステムによるビデオ信号が統一的に扱われるのに加えて、インターレス走査でライン数が1080本のシステム(以下、1080i方式と称する)、プログレッシブ走査(ノンインターレス)でライン数がそれぞれ480本、720本、1080本のシステム(それぞれ480p方式、720p方式、1080p方式と称する)など、ディジタルテレビジョン放送の方式として認められている信号が、統一的に扱われる。すなわち、殆ど共通のハードウェアによって、異なるフォーマットのビデオ信号を記録・再生することができる。
【0021】
また、この一実施形態では、ビデオ信号およびオーディオ信号は、MPEG2(Moving Picture Experts Group Phase 2)方式に基づき圧縮符号化される。周知のように、MPEG2は、動き補償予測符号化と、DCT(Discrete Cosine Transform) による圧縮符号化とを組み合わせたものである。MPEG2のデータ構造は、階層構造をなしており、下位から、ブロック層、マクロブロック層、スライス層、ピクチャ層、GOP層およびシーケンス層となっている。
【0022】
ブロック層は、DCTを行う単位であるDCTブロックからなる。マクロブロック層は、複数のDCTブロックで構成される。スライス層は、ヘッダ部と、行間をまたがらない任意個のマクロブロックより構成される。ピクチャ層は、ヘッダ部と、複数のスライスとから構成される。ピクチャは、1画面に対応する。GOP(Group Of Picture)層は、ヘッダ部と、フレーム内符号化に基づくピクチャであるIピクチャと、予測符号化に基づくピクチャであるPおよびBピクチャとから構成される。GOPには、最低1枚のIピクチャが含まれ、PおよびBピクチャは、存在しなくても許容される。最上層のシーケンス層は、ヘッダ部と複数のGOPとから構成される。
【0023】
MPEGのフォーマットにおいては、スライスが1つの可変長符号系列である。可変長符号系列は、可変長符号を復号化しなければデータの境界を検出できない。
【0024】
また、シーケンス層、GOP層、ピクチャ層、スライス層およびマクロブロック層の先頭には、それぞれ、バイト単位に整列された識別コード(スタートコードと称される)が配される。なお、上述した各層のヘッダ部は、ヘッダ、拡張データまたはユーザデータをまとめて記述したものである。ヘッダ部は、それぞれ可変長符号系列である。
【0025】
シーケンス層のヘッダには、画像(ピクチャ)のサイズ(縦横の画素数)が記述される。GOP層のヘッダには、タイムコードおよびGOPを構成するピクチャ数が記述される。
【0026】
スライス層に含まれるマクロブロックは、複数のDCTブロックの集合であり、DCTブロックの符号化系列は、量子化されたDCT係数の系列を0係数の連続回数(ラン)とその直後の非0系列(レベル)を1つの単位として可変長符号化したものである(詳細は後述する)。マクロブロックならびにマクロブロック内のDCTブロックには、バイト単位に整列した識別コードは付加されない。すなわち、これらは、1つの可変長符号系列ではない。
【0027】
詳細は後述するが、マクロブロックは、画面(ピクチャ)を16画素×16ラインの格子状に分割したものである。スライスは、例えばこのマクロブロックを水平方向に連結してなる。連続するスライスの前のスライスの最後のマクロブロックと、次のスライスの先頭のマクロブロックとは連続しており、スライス間でのマクロブロックのオーバーラップを形成することは、許されていない。
【0028】
MPEG2方式では、データが少なくともマクロブロック単位で揃わないと、画像データとして復号化を行うことができない。また、画面のサイズが決まると、1画面当たりのマクロブロック数は、一意に決まる。
【0029】
一方、復号および符号化による信号の劣化を避けるためには、符号化データ上で編集することが望ましい。このとき、予測符号化によるPピクチャおよびBピクチャは、その復号に、時間的に前のピクチャあるいは前後のピクチャを必要とする。そのため、編集単位を1フレーム単位とすることができない。この点を考慮して、この一実施形態では、1つのGOPが1枚のIピクチャからなるようにしている。
【0030】
また、例えば1フレーム分の記録データが記録される記録領域が所定のものとされる。MPEG2では、可変長符号化を用いているので、1フレーム期間に発生するデータを所定の記録領域に記録できるように、1フレーム分の発生データ量が等長化される。
【0031】
さらに、この一実施形態では、磁気テープへの記録に適するように、1スライスを1マクロブロックから構成すると共に、1マクロブロックを、所定長の固定枠に当てはめる。
【0032】
図1は、この一実施形態による記録再生装置100の構成の一例を示す。先ず、この構成を概略的に説明する。記録時には、所定の方式のディジタルビデオ信号が端子101から入力される。このビデオ信号は、MPEGエンコーダ102で可変長符号化されて、可変長符号化(VLC)データとして出力される。このデータは、MPEG2(Moving Picture Experts Group Phase 2)に準拠したエレメンタリーストリームである。この出力は、セレクタ103の一方の入力端に供給される。
【0033】
一方、端子104は、様々なフォーマットを包含できるように、ANSI/SMPTE 305Mによって規定されたインターフェイスである、SDTI(Serial Data Transport Interface) のフォーマットのデータが入力される。端子104から、MPEG2のエレメンタリーストリームを含んだ信号が入力される。この信号は、SDTI受信回路105で同期検出される。そして、バッファに一旦溜め込まれ、エレメンタリーストリームを抜き出される。抜き出されたエレメンタリーストリームは、セレクタ103の他方の入力端に供給される。
【0034】
セレクタ103で選択され出力されたエレメンタリーストリームは、ストリームコンバータ106に供給される。後述するように、ストリームコンバータ106では、MPEG2の規定に基づきDCTブロック毎に並べられていたDCT係数を、1マクロブロックを構成する複数のDCTブロックを通して、周波数成分毎に並べ替える。並べ替えられた変換エレメンタリーストリームは、パッキング回路107に供給される。
【0035】
エレメンタリーストリームのビデオデータは、可変長符号化されているため、各マクロブロックのデータの長さが不揃いである。パッキング回路107では、マクロブロックが固定枠に流し込まれる。このとき、固定枠からはみ出た部分は、固定枠のサイズに対して余った部分に順に詰め込まれる。こうしてパッキングされたデータは、ECCエンコーダ108に供給される。
【0036】
ECC(Error Correction Coding) エンコーダ108には、パッキングされたビデオ信号が供給されると共に、例えば端子109からディジタルオーディオ信号が供給される。この一実施形態では、非圧縮のディジタルオーディオ信号が扱われる。これらの信号は、ECCエンコーダ108で、シンクブロック毎にシャフリングが行われる。シャフリングが行われることによって、テープ上のパターンに対して、データが均一的に配置されるようになる。それと共に、例えば内符号パリティおよび外符号パリティが付加され、積符号を用いたエラー訂正符号化が行われる。そして、エラー訂正符号化されたデータに対して、同期を検出するためのSYNCパターン、シンクブロックを識別するためのID、および、記録されるデータの内容に関する情報を示すDIDが付加される。これら、SYNCパターン、IDおよびDIDについては、後述する。
【0037】
ECCエンコーダ108の出力は、図示されない記録符号化回路によって例えばチャンネル符号化され、記録に適した形式に変換され、記録アンプ110で増幅されて記録ヘッド111に供給される。記録ヘッド111で磁気テープ120に対してヘリカルスキャン方式で以て記録される。記録方式およびフォーマットについては、詳細は後述する。
【0038】
再生時には、磁気テープ120に記録された信号が再生ヘッド130で再生され、再生アンプ131に供給される。再生信号は、再生アンプ131で等化や波形整形などを施され、図示されない復号回路によってディジタル信号に変換される。再生アンプ131から出力された再生ディジタル信号は、ECCデコーダ132に供給される。
【0039】
ECCデコーダ132では、先ず、記録時に付加されたSYNCパターンに基づき同期検出が行われ、シンクブロックが切り出される。そして、記録時に付加されたエラー訂正符号に基づき、エラー訂正が行われる。エラーがエラー訂正符号の持つエラー訂正能力を上回って存在するときには、その旨示すエラーフラグが立てられる。そして、デシャフリングが行われ、記録時にシャフリングされたデータが元の順序に並べ直される。
【0040】
ECCデコーダ132から出力されたビデオデータは、デパッキング回路133に供給される。デパッキング回路133では、記録時に施されたパッキングを解除する。すなわち、マクロブロック単位にデータの長さを戻して、元の可変長符号を復元する。ここで、上述のECCデコーダ132でエラーフラグが立てられていれば、図示されないコンシール回路により、エラー訂正されなかったデータの修整が行われる。データ修整は、例えばデータを全て〔0〕で埋める、あるいは、前フレームのデータに置き替えることでなされる。なお、ECCデコーダ132では、オーディオデータのエラー訂正も行われる。オーディオデータは、例えば端子139に導出される。
【0041】
デパッキング回路133の出力は、ストリームコンバータ134に供給される。ストリームコンバータ134では、上述のストリームコンバータ106と逆の処理がなされる。すなわち、DCTブロックを通して周波数毎に並べられていたDCT係数を、DCTブロック毎に並び替える。これにより、再生信号がMPEG2に準拠したエレメンタリーストリームに変換される。
【0042】
このエレメンタリーストリームは、SDTI送信回路135に供給されることで、SDTIフォーマットに変換され、端子136に導出される。また、MPEGデコーダ137に供給されることで、MPEG2の規定に基づいた復号化が行われ、ディジタルビデオ信号に復号されて端子138に導出される。
【0043】
この一実施形態では、磁気テープへの信号の記録は、回転する回転ヘッド上に設けられた磁気ヘッドにより、斜めのトラックを形成する、ヘリカルスキャン方式によって行われる。磁気ヘッドは、回転ドラム上の、互いに対向する位置に、それぞれ複数個が設けられる。すなわち、磁気テープが回転ヘッドに180°程度の巻き付け角で以て巻き付けられている場合、回転ヘッドの180°の回転により、同時に複数本のトラックを形成することができる。また、磁気ヘッドは、互いにアジマスの異なる2個で一組とされる。複数個の磁気ヘッドは、隣接するトラックのアジマスが互いに異なるように配置される。
【0044】
図2は、上述した回転ヘッドにより磁気テープ上に形成されるトラックフォーマットの一例を示す。これは、1フレーム当たり8トラックで記録される例である。この例のフォーマットでは、例えばフレーム周波数が29.97Hz、レートが50Mbps、有効ライン数が480本で有効水平画素数が720画素のインターレス走査(480i)のビデオ信号が記録される。また例えば、フレーム周波数が25Hz、レートが50Mbps、有効ライン数が576本で有効水平画素数が720画素のインターレス走査(576i)のビデオ信号が記録される。なお、この例では、データをより確実に再生できるように、1フレームのデータが2重に記録され、全体で16トラックとされている。
【0045】
互いに異なるアジマスの2トラックが1組とされ、セグメントが構成される。すなわち、8トラックは、4セグメントからなる。セグメントを構成するトラックの一方にはトラック番号〔0〕が付され、他方にはトラック番号〔1〕が付される。上述したように、図2に示される例では、1フレームのデータが2重に記録される。その際、トラック番号が入れ替えられると共に、フレーム毎に互いに異なるトラックシーケンスが付される。これにより、アジマスが異なる1組の磁気ヘッドのうち一方が、例えば目詰まりなどにより読み取り不能状態に陥っても、データの再生を行うことができる。
【0046】
トラックのそれぞれにおいて、両端側にビデオデータが記録されるビデオセクタが配され、ビデオセクタに挟まれて、オーディオデータが記録されるオーディオセクタが配される。なお、この図2および後述する図3は、テープ上のセクタの配置を示すものである。
【0047】
この例では、8チャンネルのオーディオデータを扱うことができるようにされている。A1〜A8は、それぞれオーディオデータの1〜8chを示す。オーディオデータは、セグメント単位で配列を変えられて記録される。また、ビデオデータは、この例では、1トラックに対して4エラー訂正ブロック分のデータがインターリーブされ、Upper SideおよびLower Sideのセクタに分割され記録される。Lower Sideのビデオセクタには、所定位置にシステム領域が設けられる。なお、エラー訂正ブロックについては、後述する。
【0048】
1トラックは、シンクブロックと称される等間隔に区切られた複数のブロックからなる。図2Cは、シンクブロックの構成を概略的に示す。詳細は後述するが、シンクブロックは、同期検出するためのSYNCパターン、シンクブロックのそれぞれを識別するためのID、後続するデータの内容を示すDID、データパケットおよびエラー訂正用の内符号パリティから構成される。データは、シンクブロック単位でパケットとして扱われる。すなわち、記録あるいは再生されるデータ単位の最小のものが1シンクブロックである。シンクブロックが多数並べられて(図2B)、例えばビデオセクタが形成される(図2A)。
【0049】
なお、図2Aにおいて、SAT1(Tr)およびSAT2(Tm)は、サーボロック用の信号が記録されるエリアである。また、各記録エリアの間には、所定の大きさのギャップ(Vg1,Sg1,Ag,Sg2,Sg3およびVg2)が設けられる。
【0050】
ここでは、1フレーム当たり8トラックで記録される例を示したが、これはこの例に限定されない。この一実施形態では、さらに、1フレーム当たり4トラック、6トラックなどでの記録を行うことができる。図3は、1フレームが6トラックで記録される例である。この例では、1フレームの2重記録は行われず、トラックシーケンスが〔0〕のみとされる。この一実施形態による記録再生装置においては、この別の例のトラックフォーマットと、上述の図2に示されたトラックフォーマットとに、共に対応することができる。
【0051】
図4は、各トラックにおける記録単位である、シンクブロックの一例を示す。この一実施形態においては、1シンクブロックに対して1個乃至は2個のマクロブロックが格納されると共に、1シンクブロックのサイズは、扱うビデオ信号のフォーマットに応じて長さが可変とされる。図4Aに示されるように、1シンクブロックは、先頭から、2バイトのSYNCパターン、2バイトのID、1バイトのDID、例えば112バイト〜206バイトの間で可変に規定されるデータ領域および12バイトのパリティ(内符号パリティ)からなる。なお、データ領域は、ペイロードとも称される。
【0052】
先頭の2バイトのSYNCパターンは、同期検出用であり、所定のパターンからなる。固有のパターンに対して一致するSYNCパターンを検出することで、同期検出が行われる。
【0053】
IDは、ID0およびID1の2つの部分からなり、個々のシンクブロックを識別するための情報が格納される。図5Aは、ID0およびID1のビットアサインの一例を示す。ID0は、1トラック中のシンクブロックのそれぞれを識別するための識別情報(SYNC ID)が格納される。SYNC IDは、例えば通し番号である。SYNC IDは、7ビットで表現される。この一実施形態では、例えば1トラック当たり216個のシンクブロックが配されるため、7ビットのSYNC IDで、トラックの半分を表現することができる。
【0054】
ID1は、シンクブロックのトラックに関する情報が格納される。MSB側をビット7、LSB側をビット0とした場合、このシンクブロックに関して、ビット7でトラックの上側(Upper)か下側(Lower)かが示され、ビット5〜ビット2で、トラックのセグメントが示される。また、ビット1は、トラックのアジマスに対応するトラック番号が示され、ビット0は、このシンクブロックがビデオデータおよびオーディオデータのうち何方のものであるかが示される。
【0055】
DIDは、ペイロードに関する情報が格納される。上述したID1のビット0の値に基づき、ビデオおよびオーディオで、DIDの内容が異なる。図5Bは、ビデオの場合のDIDのビットアサインの一例を示す。ビット7〜ビット4は、未定義(Reserved)とされている。ビット3および2は、ペイロードのモードであり、例えばペイロードのタイプが示される。ビット3および2は、補助的なものである。ビット1でペイロードに1個あるいは2個のマクロブロックが格納されることが示される。ビット0でペイロードに格納されるビデオデータが外符号パリティであるかどうかが示される。
【0056】
図5Cは、オーディオの場合のDIDのビットアサインの一例を示す。ビット7〜ビット4は、Reservedとされている。ビット3でペイロードに格納されているデータがオーディオデータであるか、一般的なデータであるかどうかが示される。ペイロードに対して、圧縮符号化されたオーディオデータが格納されている場合には、ビット3がデータを示す値とされる。ビット2〜ビット0は、NTSC方式における、5フィールドシーケンスの情報が格納される。すなわち、NTSC方式においては、ビデオ信号の1フィールドに対してオーディオ信号は、サンプリング周波数が48kHzの場合、800サンプルおよび801サンプルの何れかであり、このシーケンスが5フィールド毎に揃う。ビット2〜ビット0によって、シーケンスの何処に位置するかが示される。
【0057】
図4に戻り、図4B〜図4Eは、上述のペイロードの例を示す。図4Bおよび図4Cは、ペイロードに対して、1および2マクロブロックのビデオデータ(可変長符号化データ)が格納される場合の例をそれぞれ示す。図4Bに示される、1マクロブロックが格納される例では、先頭の3バイトに、後続するマクロブロックの長さを示す長さ情報LTが配される。なお、長さ情報LTには、自分自身の長さは含まれない。また、図4Cに示される、2マクロブロックが格納される例では、先頭に第1のマクロブロックの長さ情報LTが配され、続けて第1のマクロブロックが配される。そして、第1のマクロブロックに続けて第2のマクロブロックの長さを示す長さ情報LTが配され、続けて第2のマクロブロックが配される。
【0058】
図4Dは、ペイロードに対して、ビデオAUXデータが格納される場合の例を示す。先頭の長さ情報LTには、自分自身を含まないビデオAUXデータの長さが記される。この長さ情報LTに続けて、5バイトのシステム情報、12バイトのPICT情報、および92バイトのユーザ情報が格納される。ペイロードの長さに対して余った部分は、Reservedとされる。
【0059】
図4Eは、ペイロードに対してオーディオデータが格納される場合の例を示す。オーディオデータは、ペイロードの全長にわたって詰め込むことができる。オーディオ信号は、圧縮処理などが施されない、例えばPCM(Pulse Code Modulation) 形式で扱われる。これに限らず、所定の方式で圧縮符号化されたオーディオデータを扱うようにもできる。
【0060】
この一実施形態においては、このように、シンクブロック長が可変とされているため、ビデオデータを記録するシンクブロックの長さと、オーディオデータを記録するシンクブロックの長さとを、信号フォーマットに応じてそれぞれ最適な長さに設定することができる。これにより、複数の異なる信号フォーマットを統一的に扱うことができる。
【0061】
次に、この記録再生装置100の各部について、さらに詳細に説明する。先ず、記録時の処理について説明する。入力端子101には、例えばNTSC方式に基づく、輝度信号Yおよび色度信号Cr,Cbの比が4:2:2のディジタルビデオ信号が入力される。この信号は、MPEGエンコーダ102に供給される。
【0062】
図6は、MPEGエンコーダ102の構成の一例を示す。端子150から供給された信号は、ブロック化回路151で、例えば16画素×16ラインのマクロブロックに分割される。このマクロブロックは、減算器154の一方の入力端に供給されると共に、動き検出回路160に供給される。さらに、入力された画像データは、統計処理回路152にも供給される。統計処理回路152では、所定の統計処理により入力画像データの複雑さが算出される。算出結果は、ビットレート制御回路153に供給される。
【0063】
動き検出回路160では、ブロック化回路151から供給されたマクロブロックと、後述する逆量子化回路163および逆DCT回路162とを介して供給される、1フレーム(あるいは1フィールド)前のマクロブロックとを比較して、例えばブロックマッチングにより動き情報(動きベクトル)を得る。動き補償回路161では、この動き情報に基づく動き補償が行われ、動き補償された結果が減算器154の他方の入力端に供給される。
【0064】
減算器154で入力画像データと動き補償結果との差分が求められ、DCT回路155に供給される。DCT回路155では、この差分のマクロブロックをさらに8画素×8ラインからなるDCTブロックに分割し、それぞれのDCTブロックについて、DCTを行う。DCT回路155から出力されたDCT係数は、量子化回路156で量子化される。量子化の際に、ビットレート制御回路153からの制御情報に基づき、ビットレートが制御される。量子化されたDCT係数は、逆量子化回路163およびジグザグスキャン回路157に供給される。
【0065】
ジグザグスキャン回路157では、DCT係数がジグザグスキャンで出力され、DCTブロックそれぞれについて、DC成分および低域成分から高域成分に順に並べられる。このDCT係数は、VLC回路158で可変長符号化され、MPEG2に準拠したエレメンタリーストリームとして、出力端159に導出される。出力されるエレメンタリーストリームは、マクロブロック単位の可変長符号化データである。
【0066】
図7は、ジグザグスキャン回路157およびVLC回路158での処理を概略的に示す。図7Aに示されるように、DCTブロックにおいて例えば左上がDC成分として、右方向および下方向に、水平空間周波数および垂直空間周波数がそれぞれ高くなるとする。ジグザグスキャン回路157では、左上のDC成分から始めて、水平ならびに垂直空間周波数が高くなる方向に、DCTブロックの各DCT係数がジグザグにスキャンされる。
【0067】
その結果、図7Bに一例が示されるように、全部で64個(8画素×8ライン)のDCT係数が周波数成分順に並べられて得られる。このDCT係数がVLC回路158に供給され、可変長符号化される。すなわち、各係数は、最初の係数は、DC成分として固定的であり、次の成分(AC成分)からは、連続するランとそれに続くレベルとで係数が括られ、1つの符号が割り当てられることで、可変長符号化がなされる。符号は、周波数成分の低い(低次の)係数から高い(高次の)係数へと、AC1 ,AC2 ,AC3 ,・・・と割り当てられ、並べられる。
【0068】
VLC回路158での可変長符号化の際の符号化情報がビットレート制御回路153に供給される。ビットレート制御回路153では、この符号化情報と、上述した統計処理回路152によるマクロブロックの複雑さの算出結果とに基づき、出力において適切なビットレートが得られるように、ビットレート制御情報を量子化回路156に供給する。このビットレート制御情報により、GOPの固定長化がなされる。
【0069】
一方、逆量子化回路163に供給されたDCT係数は、逆量子化され逆DCT回路162によって画像データに復号され、動き検出回路160および動き補償回路161に供給される。
【0070】
なお、この一実施形態では、Iピクチャだけを用い、PおよびBピクチャが用いられない。したがって、上述したMPEGエンコーダ102の構成において、フレームあるいはフィールド間の動き補償を行うための構成、すなわち、逆量子化回路163、逆DCT回路162、動き補償回路161および動き検出回路160は、省略することができる。
【0071】
MPEGエンコーダ102およびSDTI受信回路105から出力されエレメンタリーストリームがセレクタ103で選択され、ストリームコンバータ106に供給される。ストリームコンバータ106では、供給された信号のDCT係数の並べ替えが行われる。すなわち、それぞれのマクロブロック内で、MPEG2の規定に基づいてDCTブロック毎に周波数成分順に並べられたDCT係数が、マクロブロックを構成する各DCTブロックを通して、周波数成分順に並べ替えられる。
【0072】
図8は、このストリームコンバータ106におけるDCT係数の並べ替えを概略的に示す。例えばNTSC方式によるビデオ信号の場合、輝度信号Yと色度信号Cb,Crとの比が4:2:2であるため、1マクロブロックは、輝度信号Yによる4個のDCTブロック(DCTブロックY1 ,Y2 ,Y3 およびY4 )と、色度信号Cb,Crのそれぞれによる2個ずつのDCTブロック(DCTブロックCb1 ,Cb2 ,Cr1 およびCr2 )からなる。
【0073】
上述したように、MPEGエンコーダ102では、MPEG2の規定に従いジグザグスキャンが行われ、図8Aに示されるように、各DCTブロック毎に、DCT係数がDC成分および低域成分から高域成分に、周波数成分の順に並べられる。一つのDCTブロックのスキャンが終了したら、次のDCTブロックのスキャンが行われ、同様に、DCT係数が並べられる。
【0074】
すなわち、マクロブロック内で、DCTブロックY1 ,Y2 ,Y3 およびY4 、DCTブロックCb1 ,Cb2 ,Cr1 およびCr2 のそれぞれについて、DCT係数がDC成分および低域成分から高域成分へと周波数成分順に並べられる。そして、上述したように、連続したランとそれに続くレベルとからなる組に、〔DC,AC1 ,AC2 ,AC3 ,・・・〕と、それぞれ1つの符号が割り当てられ可変長符号化されている。
【0075】
ストリームコンバータ106では、可変長符号化され並べられたDCT係数を、一旦可変長符号を解読して各係数の区切りを検出し、マクロブロックを構成する各DCTブロックを跨いで、周波数成分順に並べ替える。この様子を、図8Bに示す。DC成分ならびに低域成分から高域成分へ、すなわち低次の係数から高次の係数へと、各DCTブロックを跨いで順にDCT係数が並べられる。
【0076】
すなわち、マクロブロック内で、DC(Y1 ),DC(Y2 ),DC(Y3 ),DC(Y4 ),DC(Cb1 ),DC(Cb2 ),DC(Cr1 ),DC(Cr2 ),AC1 (Y1 ),AC1 (Y2 ),AC1 (Y3 ),AC1 (Y4 ),AC1 (Cb1 ),AC1 (Cb2 ),AC1 (Cr1 ),AC1 (Cr2 ),・・・と、DCTブロックを跨いで、DC成分を含む各周波数成分順にDCT係数が並べられる。なお、実際には、連続したランとそれに続くレベルとからなる組に対して割り当てられた1つの符号が、各周波数成分順に対応して並べられる。
【0077】
図9、図10および図11を用いて、ストリームコンバータ106での処理について説明する。図9は、ストリームコンバータ106の構成の一例を示す。また、図10は、図9の構成における処理の流れを概略的に示す。さらに、図11は、このストリームコンバータ106内での、データの変遷を示す。
【0078】
図9において、端子50からエレメンタリーストリームが入力され、分離回路51に供給される。エレメンタリーストリームは、分離回路51で、マクロブロック層に含まれるDCT係数部分と、マクロブロック層以上のヘッダ部、すなわち、シーケンスヘッダ、GOPヘッダおよびピクチャヘッダなどとに分離される(図10、ステップS10)。マクロブロック層以上のヘッダ部は、ディレイ回路52を介してマルチプレクサ53に供給される。
【0079】
分離回路51で分離されたDCT係数部分は、VLD(Variable Length Decoder) 回路54に供給される。そして、可変長符号が解読され、DCT係数の区切りが検出され、各DCT係数に対応する部分が切り出される(図10、ステップS11)。各DCT係数部分は、変換回路55に供給される。
【0080】
変換回路55では、DCT係数の並び替えが行われる。変換回路55に供給されたDCT係数は、図11Bに一例が示されるように、エレメンタリーストリームからヘッダ部が分離され(図11A)、低次の係数から高次の係数へと、DC,AC1 ,AC2 ,・・・というように並べられている。この並びがDCTブロック毎に同様にして繰り返されている。これが、変換回路55で、マクロブロック内の各DCTブロックを跨いで、低次の係数から高次の係数に並べられる(図10、ステップS12)。
【0081】
すなわち、図11Cに一例が示されるように、先ず、各DCTブロックにおけるDC成分が抽出され、DCTブロックの順に並べられる。次に、各DCTブロックの最初の低域成分AC1 が抽出され、DCTブロックの順に並べられる。このように、変換回路55において、各DCTブロックからDCおよび低域成分から順に周波数成分に対応したDCT係数が抽出される。なお、上述したように、このDCT係数は、連続したランとそれに続くレベルとからなる組に対して割り当てられた1つの符号からなる。そして、これらの符号は、対応する次数同士がDCTブロック順に並べ替えられる。
【0082】
より具体的には、変換前には、DCT係数は、各DCTブロック毎にDC,AC1 ,AC2 ,・・・,AC63と並べられ、構成されている(図11B)。しかしながら、この順番のまま磁気テープ上に記録すると、例えば高速再生を行いブロックの途中までしかデータを得ることができない場合、後半のDCTブロックが全く再現できない。そこで、この発明のように、DCT係数の順番を、DC,DC,・・・,AC1 ,AC1 ,・・・,AC1 ,AC2 ,AC2 ,・・・,AC63,AC63,・・・,AC63と、各DCTブロックに跨がって、低次の係数から高次の係数へと並べ替える(図11C)。このように並べ替えられたストリームは、例えブロックの途中までしかデータを得ることができなくても、各DCTブロックにおいて、DCT係数の低次の係数、すなわちDC成分や低域成分は、得ることができる。そのため、ストリームの一部を失ったデータに対して、最大限の品質を持った画像を得ることができる。
【0083】
こうして並び替えられたDCT係数は、パッキング回路56に供給され、個々のDCT係数が1個にパッキングされる。なお、このパッキング回路56でのパッキング処理は、後続するパッキング回路107でのパッキング処理とは異なる処理である。
【0084】
パッキング回路56からの出力は、マルチプレクサ53に供給される。そして、パッキングされたDCT係数と、ディレイ回路52でタイミング合わせのため所定量の遅延を与えられて供給された、マクロブロック以上のヘッダ部とが多重される(図11D)。並び替えられたDCT係数とヘッダ部とが多重された変換エレメンタリーストリームは、端子57に導出される。
【0085】
なお、このストリーム変換を最短の時間で行うには、DCT係数の並び替えを、画素データのレートのクロックで動作させて、前後との信号のやり取りを行うバスの転送速度を十分に確保する必要がある。例えば、画素レートが27MHz/bps(bit per second)、1画素が8ビットであるとする。可変長符号化の結果は、1画素が最大で3倍の24ビットになるので、バンド幅としては、27MHz×24ビットが必要とされる。ここで、81MHz×8ビット、あるいは、54MHz×16ビットで入出力を行うことで、ビット幅を減らすことができ、マクロブロックの最大長を制限する必要がなくなる。
【0086】
また、マクロブロックの最大長が制限されている場合には、その長さ分のデータが1マクロブロック分の転送時間内に転送できるだけのバンド幅を確保する。例えば、マクロブロックの最大長が512バイトに制限されていれば、27MHz×8ビットのバンド幅でインターフェイスを行う。
【0087】
さらに、このストリームコンバータ106では、1マクロブロック/1スライスではないようなエレメンタリーストリームが外部から供給された場合に、これを1マクロブロック/1スライスに変換する機能を持たせることができる(図示しない)。例えば、端子104から供給されたエレメンタリーストリームが1ストライプ/1スライスである場合、このストリームコンバータ106で、1マクロブロック/1スライスに変換する。
【0088】
さらにまた、このストリームコンバータ106では、外部から供給されたエレメンタリーストリームが装置の記録ビットレート、すなわち、上述したGOP単位の固定長を越えてしまうような場合のオーバーフローを防止するような機能を持たせることができる(図示しない)。例えば、ストリームコンバータ106において、DCT係数の上位係数(高域成分)をゼロに置き替え、打ち切る。
【0089】
なお、ここでは、ストリームコンバータ106において、DCT係数の可変長符号を解読して係数の並べ替えを行っているが、これはこの例に限定されない。すなわち、可変長符号が復号されたDCT係数を並び替えるようにしてもよい。
【0090】
こうして、ストリームコンバータ106でエレメンタリーストリームが並べ替えられた変換エレメンタリーストリームは、パッキング部107に供給される。
【0091】
マクロブロックの長さは、変換エレメンタリーストリームと変換前のエレメンタリーストリームとで同一である。また、MPEGエンコーダ102において、ビットレート制御によりGOP単位に固定長化されていても、マクロブロック単位で見ると、長さが変動している。パッキング回路107では、マクロブロックを固定枠に当てはめる。
【0092】
図12は、パッキング回路107でのマクロブロックのパッキング処理を概略的に示す。マクロブロックは、所定のデータ長を持つ固定枠に当てはめられ、パッキングされる。このとき用いられる固定枠のデータ長を、記録および再生の際のデータの最小単位であるシンクブロック長と一致させると、後続するECCエンコーダ108におけるシャフリングおよびエラー訂正符号化の際に、都合が良い。例えば8マクロブロック毎に処理が行われ、マクロブロックのそれぞれに対して#1,#2,・・・,#8と番号を付ける。
【0093】
可変長符号化によって、図12Aに一例が示されるように、8マクロブロックは、互いに長さが異なる。この例では、固定枠である1シンクブロックの長さと比較して、マクロブロック#1のデータ,#3のデータおよび#6のデータがそれぞれ長く、マクロブロック#2のデータ,#5のデータ,#7のデータおよび#8のデータがそれぞれ短い。また、マクロブロック#4のデータは、1シンクブロックと略等しい長さである。
【0094】
パッキング処理によって、マクロブロックが1シンクブロック長の固定長枠に流し込まれ、1フレーム期間で発生したデータ全体が固定長化される。図7Bに一例が示されるように、1シンクブロックと比較して長いマクロブロックは、シンクブロック長に対応する位置で分割される。分割されたマクロブロックのうち、シンクブロック長からはみ出た部分は、先頭から順に余った領域に、すなわち、長さがシンクブロック長に満たないマクロブロックの後ろに、詰め込まれる。
【0095】
図12Bの例では、マクロブロック#1の、シンクブロック長からはみ出た部分が、先ず、マクロブロック#2の後ろに詰め込まれ、そこがシンクブロックの長さに達すると、マクロブロック#5の後ろに詰め込まれる。次に、マクロブロック#3の、シンクブロック長からはみ出た部分がマクロブロック#7の後ろに詰め込まれる。さらに、マクロブロック#6のシンクブロック長からはみ出た部分がマクロブロック#7の後ろに詰め込まれ、さらにはみ出た部分がマクロブロック#8の後ろに詰め込まれる。こうして、各マクロブロックがシンクブロック長の固定枠に対してパッキングされる。
【0096】
各マクロブロックの長さは、ストリームコンバータ106において予め調べておくことができる。これにより、このパッキング回路107では、VLCデータをデコードして内容を検査すること無く、マクロブロックの最後尾を知ることができる。
【0097】
また、パッキングされたデータが磁気テープ上に記録される際には、固定長枠のマクロブロックの先頭部分にマクロブロックの長さを示す長さ情報LTが付される。再生時には、この長さ情報LTに基づきパッキングされたデータが連結され、マクロブロックデータが復元される。これを、デパッキングと称する。
【0098】
パッキング回路107の出力は、ECCエンコーダ108に供給される。ECCエンコーダ108では、1GOP分のデータが溜まったら、固定枠長に対応するブロックのそれぞれを所定の規則に基づきシャフリングして並び替える。そして、並び替えられたブロックのそれぞれについて、画面上の位置とテープ上の記録位置とを関連付ける。シャフリングを行うことにより、テープ上の連続した位置に発生するような、バーストエラーに対する耐性を高めることができる。なお、シャフリングは、上述のパッキング回路107にその機能を持たせて行ってもよい。
【0099】
シャフリングがなされると、所定のデータ単位(シンボル)で外符号パリティおよび内符号パリティが付加され、積符号を用いたエラー訂正符号化が行われる。先ず、所定数のブロックを通して外符号パリティが付加され、次に、外符号パリティを含めたブロックのそれぞれに対して、ブロックの方向に内符号パリティが付加される。内符号パリティは、パッキングの際に用いられた固定枠と同一のデータ系列からなる内符号ブロックを単位として付加される。そして、それぞれの内符号ブロックの先頭には、DID、IDおよびSYNCパターンが付加され、シンクブロックが形成される。
【0100】
なお、内符号パリティおよび外符号パリティとで完結するデータブロックを、エラー訂正ブロックと称する。
【0101】
エラー訂正符号化されたデータは、図示されないスクランブル回路によってスクランブル処理され、周波数成分が平均化される。そして、記録アンプ110に供給され、記録符号化され、磁気テープ120への記録に適した形式に変換される。この一実施形態では、記録符号化には、パーシャルレスポンスのプリコーダが用いられる。記録符号化されたデータは、記録ヘッド111によって磁気テープ120に記録される。
【0102】
次に、再生時の処理について説明する。磁気テープ120に記録された信号は、再生ヘッド130によって再生される。再生信号は、再生アンプ131に供給され、等化器でディジタルデータに復元され、パーシャルレスポンスのデコードが行われる。このとき、ビタビ復号方式を利用することにより、エラーレートを改善することができる。
【0103】
再生アンプ131から出力された再生ディジタルデータは、ECCデコーダ132に供給される。ECCデコーダ132では、先ず、SYNCパターンが検出され、シンクブロックが切り出される。シンクブロック中の内符号ブロックが内符号パリティにより内符号訂正され、IDに基づき図示されないメモリの所定のアドレスに書き込まれる。エラー訂正符号の持つエラー訂正能力を超えてエラーが存在するときには、エラーが訂正できないとされ、そのシンボルに対してエラーフラグが立てられる。こうして、1GOP分のデータの内符号訂正が終わったら、メモリに書き込まれたデータを用いて外符号訂正が行われる。
【0104】
ここでも同様に、エラー訂正符号の持つエラー訂正能力を超えてエラーが存在する場合には、エラーフラグが立てられる。外符号訂正によるエラーフラグは、後述するストリームコンバータ134に供給される。
【0105】
こうしてエラー訂正されたデータに対して、デシャフリングがなされ、データのアドレスが復元される。すなわち、記録時には、エラー訂正符号化の前に、所定の規則に基づきシャフリングがなされているため、ここでは、その逆の処理を行い、データを正しい順番に並び替える。デシャフリングが行われたデータは、デパッキング回路133に供給される。
【0106】
デパッキング回路133では、記録時に上述したパッキング回路107でパッキングされたマクロブロックの復元を行う。すなわち、シンクブロックはマクロブロックに対応しており、ペイロードの例えば先頭に記録されている長さ情報LTに基づき、マクロブロックのそれぞれのデータを連結し、元のマクロブロックを復元する。
【0107】
磁気テープ120の速度を記録時よりも高速にして再生する高速再生や、記録時と異なるテープ速度で再生を行う変速再生を行った場合には、回転ヘッドのトレース角とヘリカルトラックとの関係が変わり、1トラックを正確にトレースすることができなくなる。そのため、1GOP全ての信号を取得できないので、デパッキング処理がなされない。したがって、シンクブロック単位での再生が行われる。このとき、長さ情報LTに基づき、シンクブロック長よりも短いマクロブロックの後ろに詰め込まれたデータは、例えばゼロとして扱われる。なお、内符号パリティによるエラー訂正を行うことができ、IDに基づきデシャフリングも可能である。
【0108】
デパッキング回路133の出力は、変換エレメンタリーストリームとしてストリームコンバータ134に供給される。ストリームコンバータ134では、上述のストリームコンバータ106とは逆の処理を行う。すなわち、ストリームコンバータ134では、マクロブロック毎に、周波数成分順に並べられているDCT係数がDCTブロック毎の周波数成分順に並べ替えられる。これにより、変換エレメンタリーストリームがMPEG2に準拠したエレメンタリーストリームに逆変換される。
【0109】
なお、再生側のストリーム変換の処理では、変換前に、ECCデコーダ132で得られた外符号訂正によるエラーフラグに基づき、エラー処理を行う必要がある。すなわち、変換前に、マクロブロックデータの途中にエラーがあるとされた場合には、エラー箇所以降の周波数成分のDCT係数が復元できない。そこで、例えばエラー箇所のデータをブロック終端符号(EOB)に置き替え、それ以降の周波数成分のDCT係数をゼロとする。同様に、高速再生時にも、シンクブロック長に対応する長さまでのDCT係数のみを復元し、それ以降の係数は、ゼロデータに置き替えられる。
【0110】
DCTブロックを通して、DCT係数がDC成分および低域成分から高域成分へと並べられているため、このように、ある箇所以降からDCT係数を無視しても、マクロブロックを構成するDCTブロックのそれぞれに対して、DCならびに低域成分からのDCT係数を満遍なく行き渡らせることができる。
【0111】
また、ストリームコンバータ134の入出力は、記録側と同様に、マクロブロックの最大長に応じて、十分な転送レート(バンド幅)を確保しておく。マクロブロックの長さを制限しない場合には、画素レートの3倍のバンド幅を確保するのが好ましい。
【0112】
ストリームコンバータ134から出力されたエレメンタリーストリームは、例えばSDTI送信回路135に供給され、同期信号などを付加され、所定の信号フォーマットにされ、SDTIに対応した、MPEG2に準拠のエレメンタリーストリームとして出力端136に導出される。
【0113】
また、ストリームコンバータ134から出力されたエレメンタリーストリームは、MPEGデコーダ137にも供給することができる。MPEGデコーダ137は、図示しないが、一般的なMPEG2に準拠したデコーダの構成を有している。エレメンタリーストリームは、MPEGデコーダ137でデコードされ、ディジタルビデオ信号として出力端138に導出される。
【0114】
この再生側のストリームコンバータ134は、上述した記録側のストリームコンバータ106と同一の構成で実現可能なものである。また、その際の処理も、コンバータ106と同様であるため、ここでの詳細な説明は、繁雑さを避けるため、省略する。
【0115】
なお、再生側のストリーム変換の処理では、変換前に、ECCデコーダ132で得られた外符号訂正によるエラーフラグに基づき、エラー処理を行う必要がある。すなわち、変換前に、マクロブロックデータの途中にエラーがあるとされた場合には、エラー箇所以降の周波数成分のDCT係数が復元できない。そこで、例えばエラー箇所のデータをブロック終端符号(EOB)に置き替え、それ以降の周波数成分のDCT係数をゼロとする。同様に、高速再生時にも、シンクブロック長に対応する長さまでのDCT係数のみを復元し、それ以降の係数は、ゼロデータに置き替えられる。
【0116】
DCTブロックを通して、DCT係数がDC成分および低域成分から高域成分へと並べられているため、このように、ある箇所以降からDCT係数を無視しても、マクロブロックを構成するDCTブロックのそれぞれに対して、満遍なくDCT係数を行き渡らせることができる。
【0117】
また、ストリームコンバータ134の入出力は、記録側と同様に、マクロブロックの最大長に応じて、十分な転送レート(バンド幅)を確保しておく。マクロブロックの長さを制限しない場合には、画素レートの3倍のバンド幅を確保するのが好ましい。
【0118】
ストリームコンバータ134から出力されたエレメンタリーストリームは、例えばSDTI送信回路135に供給され、同期信号などを付加され、所定の信号フォーマットにされ、SDTIに対応した、MPEG2に準拠のエレメンタリーストリームとして出力端136に導出される。
【0119】
また、ストリームコンバータ134から出力されたエレメンタリーストリームは、MPEGデコーダ137にも供給することができる。MPEGデコーダ137は、図示しないが、一般的なMPEG2に準拠したデコーダの構成を有している。エレメンタリーストリームは、MPEGデコーダ137でデコードされ、ディジタルビデオ信号として出力端138に導出される。
【0120】
なお、上述では、この発明がDCT係数をDCTブロック毎にジグザグスキャンした場合に適用されるように説明しているが、これはこの例に限定されない。この発明は、DCT係数をDCTブロック毎に、オルタネートスキャンを行うような場合にも、適用可能である。
【0121】
また、上述では、DCT係数の並べ替えを、輝度信号YのDCTブロックから開始するように説明しているが、これはこの例に限定されず、どのDCTブロックから並べ替えを開始するかは、任意である。
【0122】
【発明の効果】
以上説明したように、この発明によれば、ビデオデータをMPEG方式によって圧縮符号化してヘリカルトラックで磁気テープに記録する際に、マクロブロックにおいて、DCTブロック毎に周波数成分順に並べられていたDCT係数を、各DCTブロックに跨がって周波数成分順に並び替えている。そのため、再生時に、例えば記録時よりもテープの走行速度が速い高速再生を行い、各ヘリカルトラックの一部しかデータが再生されなくても、マクロブロック中のDCTブロックのそれぞれに対して、DC成分側からDCT係数が与えられるので、再生されたデータを有効に活用して高品質の再生画像を得ることができるという効果がある。
【図面の簡単な説明】
【図1】一実施形態による記録再生装置の構成の一例を示すブロック図である。
【図2】トラックフォーマットの一例を示す略線図である。
【図3】トラックフォーマットの別の例を示す略線図である。
【図4】シンクブロックの一例を示す略線図である。
【図5】IDおよびDIDのビットアサインの一例を示す略線図である。
【図6】MPEGエンコーダの構成の一例を示すブロック図である。
【図7】ジグザグスキャンおよび可変長符号化を説明するための図である。
【図8】ストリームコンバータでのDCT係数の並べ替えを概略的に示す略線図である。
【図9】ストリームコンバータの構成の一例を示すブロック図である。
【図10】ストリームコンバータにおける処理の流れを概略的に示すフローチャートである。
【図11】ストリームコンバータ内でのデータの変遷を示す略線図である。
【図12】マクロブロックの等長化を概略的に示す略線図である。
【符号の説明】
50・・・分離回路、54・・・VLD回路、55・・・変換回路、56・・・パッキング回路、53・・・マルチプレクサ、100・・・記録再生装置、102・・・MPEGエンコーダ、106・・・ストリームコンバータ、107・・・パッキング回路、108・・・ECCエンコーダ、120・・・磁気テープ、132・・・ECCデコーダ、133・・・デパッキング回路、134・・・ストリームコンバータ

Claims (7)

  1. ビデオデータに含まれるフレームそれぞれを複数のマクロブロックに分割し、分割したマクロブロック毎に含まれる複数のDCTブロック毎にDCTを行われることで生成されたDCT係数データを、該DCTブロック毎に、該DCTブロック内で低次の該DCT係数データから高次の該DCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と、
    上記解読手段で切り出された上記DCT係数データに対し、上記DCTブロック毎に独立して符号化されている該DCT係数データの並びを、上記マクロブロック内の複数の上記DCTブロックに跨がって、低次の上記DCT係数データから高次の上記DCT係数データの順に並べ替える変換手段と、
    上記変換手段で変換された上記DCT係数データをパッキングするパッキング手段と、
    上記パッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と
    を有する
    ことを特徴とする信号処理装置。
  2. ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われることによって生成されたDCT係数データを、該マクロブロック内の複数の該DCTブロックに跨がって、低次の上記係数データから高次の上記係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎に付加されるヘッダを付加してなる変換エレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と
    上記解読手段で切り出された上記DCT係数データに対し、上記マクロブロック内の複数のDCTブロックに跨がって低次の該DCT係数データから高次の該係数データの順に並べられた該DCT係数データの並びを、該DCTブロック毎に独立して、該低次のDCT係数データから該高次のDCT係数データの順に並べ替える変換手段と、
    上記変換手段で変換された上記DCT係数データをパッキングするパッキング手段と、
    上記パッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と
    を有する
    ことを特徴とする信号処理装置
  3. ビデオデータに含まれるフレームそれぞれを複数のマクロブロックに分割し、分割したマクロブロック毎に含まれる複数のDCTブロック毎にDCTを行われることで生成されたDCT係数データを、該DCTブロック毎に、該DCTブロック内で低次の該DCT係数データから高次の該DCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離のステップと、
    上記分離のステップにより分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読のステップと、
    上記解読のステップにより切り出された上記DCT係数データに対し、上記DCTブロック毎に独立して符号化されている該DCT係数データの並びを、上記マクロブロック内の複数の上記DCTブロックに跨がって、低次の上記DCT係数データから高次の上記DCT係数データの順に並べ替える変換のステップと、
    上記変換のステップにより変換された上記DCT係数データをパッキングするパッキングのステップと、
    上記パッキングのステップによりパッキングされた上記DCT係数データと、上記分離のステップにより分離された上記ヘッダ部分とを多重化する多重化のステップと
    を有する
    ことを特徴とする信号処理方法。
  4. ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われることによって生成されたDCT係数データを、該マクロブロック内の複数の該DCTブロックに跨がって、低次の上記係数データから高次の上記係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎に付加されるヘッダを付加してなる変換エレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離のステップと、
    上記分離のステップにより分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読のステップと、
    上記解読のステップにより切り出された上記DCT係数データに対し、上記マクロブロック内の複数のDCTブロックに跨がって低次の該DCT係数データから高次の該係数データの順に並べられた該DCT係数データの並びを、該DCTブロック毎に独立して、該低次のDCT係数データから該高次のDCT係数データの順に並べ替える変換のステップと、
    上記変換のステップにより変換された上記DCT係数データをパッキングするパッキングのステップと、
    上記パッキングのステップによりパッキングされた上記DCT係数データと、上記分離のステップにより分離された上記ヘッダ部分とを多重化する多重化のステップと
    を有する
    ことを特徴とする信号処理方法。
  5. ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われて生成されたDCT係数データを、該DCTブロック毎に、該DCTブロック内で低次の該DCT係数データから高次の該DCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と、
    上記解読手段で切り出された上記DCT係数データに対し、上記DCTブロック毎に独立して符号化されている該DCT係数データの並びを、上記マクロブロック内の複数の上記DCTブロックに跨がって、低次の上記DCT係数データから高次の上記DCT係数データの順に並べ替える変換手段と、
    上記変換手段で変換された上記DCT係数データをパッキングする第1のパッキング手段と、
    上記第1のパッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と、
    上記多重化手段の出力を上記マクロブロック毎に固定長枠に当てはめ、上記固定長枠からはみ出た部分を上記固定長枠に足りない部分に順に詰め込むパッキングを行う第2のパッキング手段と、
    上記第2のパッキング手段によってパッキングされた複数の上記固定長枠に対応するデータに対して、積符号を用いたエラー訂正符号化を行うエラー訂正符号化手段と、
    上記エラー訂正符号化手段によってエラー訂正符号化されたデータを記録媒体に記録する記録手段と
    を有することを特徴とする記録装置
  6. ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われDCT係数データが生成され、生成されたDCT係数データを可変長符号化し、可変長符号化されたDCT係数データをマクロブロック内の複数のDCTブロックに跨がって、低次のDCT係数データから高次のDCT係数データの順に並べ替え、並べ替えられたDCT係数データに対して第1のパッキングを行い、第1のパッキングが行われたDCT係数部分に対してマクロブロック毎にヘッダを付加してなる変換エレメンタリストリームを、マクロブロック毎に固定長枠に当てはめ、固定長枠からはみ出た部分を固定長枠に足りない部分に順に詰め込む第2のパッキングを行い、第2のパッキングが行われた複数の固定長枠に対応するデータに対して積符号を用いたエラー訂正符号化が施されて記録媒体に記録されたデータを再生するようにした再生装置において、
    記録媒体に記録されたデータを再生する再生手段と、
    上記再生手段により再生された上記データの積符号を用いたエラー訂正符号を復号化してエラー訂正を行うエラー訂正手段と、
    上記エラー訂正手段によってエラー訂正されたデータに対して、対応するマクロブロック同士を連結してマクロブロックを復元するデパッキング手段と、
    上記デパッキング手段の出力から上記マクロブロック毎に、ヘッダ部分とDCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と、
    上記解読手段で切り出された上記DCT係数データに対し、上記デパッキング手段によって復元されたマクロブロック内で、複数のDCTブロックに跨がって低次の該DCT係数データから高次の該係数データの順に並べられた該DCT係数データの並びを、該DCTブロック毎に独立して、該低次のDCT係数データから該高次のDCT係数データの順に並べ替える変換手段と
    上記変換手段で変換された上記DCT係数データをパッキングするパッキング手段と、
    上記パッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と
    を有する
    ことを特徴とする再生装置
  7. ビデオデータに含まれるフレームそれぞれが複数のマクロブロックに分割され、分割されたマクロブロック毎に含まれる複数のDCTブロック毎にDCTが行われて生成されたDCT係数データを、該DCTブロック毎に、該DCTブロック内で低次の該DCT係数データから高次の該DCT係数データの順の並びに従い可変長符号化してなるDCT係数部分に対し、上記マクロブロック毎にヘッダを付加してなるエレメンタリストリームから、上記ヘッダ部分と上記DCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と、
    上記解読手段で切り出された上記DCT係数データに対し、上記DCTブロック毎に独立して符号化されている該DCT係数データの並びを、上記マクロブロック内の複数の上記DCTブロックに跨がって、低次の上記DCT係数データから高次の上記DCT係数データの順に並べ替える第1の変換手段と、
    上記第1の変換手段で並べ替えられた上記DCT係数データをパッキングする第1のパッキング手段と、
    上記第1のパッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と、
    上記多重化手段の出力を上記マクロブロック毎に固定長枠に当てはめ、該固定長枠からはみ出た部分を該固定長枠に足りない部分に順に詰め込むパッキングを行う第2のパッキング手段と、
    上記第2のパッキング手段によってパッキングされた複数の上記固定長枠に対応するデータに対して、積符号を用いたエラー訂正符号化を行うエラー訂正符号化手段と、
    上記エラー訂正符号化手段によってエラー訂正符号化されたデータを記録媒体に記録する記録手段と、
    上記記録媒体に記録されたデータを再生する再生手段と、
    上記再生手段により再生された上記データの積符号を用いたエラー訂正符号を復号化してエラー訂正を行うエラー訂正手段と、
    上記エラー訂正手段によってエラー訂正されたデータに対して、対応するマクロブロック同士を連結してマクロブロックを復元するデパッキング手段と、
    上記デパッキング手段の出力から上記マクロブロック毎に、ヘッダ部分とDCT係数部分とを分離する分離手段と、
    上記分離手段で分離された上記DCT係数部分の上記可変長符号を解読して上記DCT係数データの区切りを検出し、該DCT係数データに対応する部分を切り出す解読手段と、
    上記解読手段で切り出された上記DCT係数データに対し、上記デパッキング手段によって復元されたマクロブロック内で、複数のDCTブロックに跨がって低次の該DCT係数データから高次の該係数データの順に並べられた該DCT係数データの並びを、該DCTブロック毎に独立して、該低次のDCT係数データから該高次のDCT係数データの順に並べ替える第2の変換手段と
    上記第2の変換手段で変換された上記DCT係数データをパッキングする第3のパッキング手段と、
    上記第3のパッキング手段でパッキングされた上記DCT係数データと、上記分離手段で分離された上記ヘッダ部分とを多重化する多重化手段と
    を有する
    ことを特徴とする記録再生装置。
JP29520898A 1998-10-16 1998-10-16 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置 Expired - Fee Related JP3921841B2 (ja)

Priority Applications (6)

Application Number Priority Date Filing Date Title
JP29520898A JP3921841B2 (ja) 1998-10-16 1998-10-16 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置
EP19990308091 EP0994482A3 (en) 1998-10-16 1999-10-13 Image processing apparatus and method for high-speed image playback
CA 2286251 CA2286251A1 (en) 1998-10-16 1999-10-14 Video signal recording and playback, rearranging dct coefficients across blocks from low to high frequency
US09/418,265 US6721492B1 (en) 1998-10-16 1999-10-14 Signal processing apparatus and method, recording apparatus, playback apparatus, recording and playback apparatus, and stream processing apparatus and method
CNB991215125A CN1230009C (zh) 1998-10-16 1999-10-14 信号处理及流处理装置和方法、记录和/或播放装置
KR19990044788A KR100668993B1 (ko) 1998-10-16 1999-10-15 신호 처리 장치와 방법, 기록 장치, 재생 장치, 기록 및 재생 장치, 및 스트림 처리 장치와 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP29520898A JP3921841B2 (ja) 1998-10-16 1998-10-16 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置

Publications (2)

Publication Number Publication Date
JP2000125262A JP2000125262A (ja) 2000-04-28
JP3921841B2 true JP3921841B2 (ja) 2007-05-30

Family

ID=17817615

Family Applications (1)

Application Number Title Priority Date Filing Date
JP29520898A Expired - Fee Related JP3921841B2 (ja) 1998-10-16 1998-10-16 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置

Country Status (6)

Country Link
US (1) US6721492B1 (ja)
EP (1) EP0994482A3 (ja)
JP (1) JP3921841B2 (ja)
KR (1) KR100668993B1 (ja)
CN (1) CN1230009C (ja)
CA (1) CA2286251A1 (ja)

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6892391B1 (en) * 2000-07-13 2005-05-10 Stefan Jones Dynamic generation of video content for presentation by a media server
JP3775265B2 (ja) * 2001-08-16 2006-05-17 ソニー株式会社 信号処理装置および方法、記録再生装置および方法、ならびに、再生装置および方法
KR20050084284A (ko) * 2002-12-13 2005-08-26 코닌클리즈케 필립스 일렉트로닉스 엔.브이. 게이트웨이를 위한 장치, 전송 장치, 네트워크, 시스템전환 방법, 인코딩된 스트림 전송 방법 및 네트워크 제공방법
KR100683179B1 (ko) * 2003-11-03 2007-02-15 삼성전자주식회사 듀얼 스트림용 디지털 방송 송/수신 시스템의 강건한에러정정 부호화/복호화 장치 및 그의 방법
US8780957B2 (en) * 2005-01-14 2014-07-15 Qualcomm Incorporated Optimal weights for MMSE space-time equalizer of multicode CDMA system
CN101171843B (zh) * 2005-03-10 2010-10-13 高通股份有限公司 用于多媒体处理的内容分类
JP4779434B2 (ja) * 2005-05-17 2011-09-28 ソニー株式会社 動画像変換装置、動画像復元装置、および方法、並びにコンピュータ・プログラム
US8879857B2 (en) * 2005-09-27 2014-11-04 Qualcomm Incorporated Redundant data encoding methods and device
US8654848B2 (en) * 2005-10-17 2014-02-18 Qualcomm Incorporated Method and apparatus for shot detection in video streaming
US20070206117A1 (en) * 2005-10-17 2007-09-06 Qualcomm Incorporated Motion and apparatus for spatio-temporal deinterlacing aided by motion compensation for field-based video
US8948260B2 (en) * 2005-10-17 2015-02-03 Qualcomm Incorporated Adaptive GOP structure in video streaming
US20070171280A1 (en) * 2005-10-24 2007-07-26 Qualcomm Incorporated Inverse telecine algorithm based on state machine
US9131164B2 (en) * 2006-04-04 2015-09-08 Qualcomm Incorporated Preprocessor method and apparatus
KR100846870B1 (ko) * 2006-07-06 2008-07-16 한국전자통신연구원 다수의 기본 블록들의 다차원 구성을 통한 다단계 변환장치 및 그 방법
US8199798B2 (en) 2006-07-24 2012-06-12 Siemens Aktiengesellschaft Method and modem for subsea power line communication
CN101127903B (zh) * 2007-09-29 2010-12-08 华南理工大学 基于dct的分辨率可伸缩图像编解码方法
US7876968B2 (en) * 2007-10-15 2011-01-25 Himax Technologies Limited Apparatus of compressing image data and a method thereof
EP2391042B1 (en) * 2010-05-27 2015-07-29 Telefonaktiebolaget L M Ericsson (publ) Efficient error handling on a link using ARQ and multiple NACKs associated with multiple error thresholds
CN104009823B (zh) * 2014-06-02 2017-07-07 复旦大学 一种SerDes技术中的错位检测与纠错电路

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3532221B2 (ja) * 1991-11-05 2004-05-31 ソニー株式会社 符号化方法
EP0551672B1 (en) * 1992-01-13 1999-09-08 Koninklijke Philips Electronics N.V. Method of and system for transmitting and receiving digitally encoded video images
JP3184011B2 (ja) * 1992-07-20 2001-07-09 株式会社東芝 帯域圧縮信号処理装置
US5583650A (en) * 1992-09-01 1996-12-10 Hitachi America, Ltd. Digital recording and playback device error correction methods and apparatus for use with trick play data
JP2855067B2 (ja) * 1992-11-28 1999-02-10 三星電子株式会社 デジタルvcrの画像記録方法
JP3546434B2 (ja) * 1992-12-25 2004-07-28 ソニー株式会社 ビデオ信号再生装置
JP2651100B2 (ja) * 1993-02-17 1997-09-10 松下電器産業株式会社 ディジタル磁気記録再生装置
KR970010533B1 (en) * 1994-06-30 1997-06-26 Samsung Electronics Co Ltd Recording and reproducing method of dvcr for trick play
KR970010533A (ko) * 1995-08-31 1997-03-27 김태구 자동차 스티어링휠 조향각 정위치 표시장치
JP3355888B2 (ja) * 1995-09-19 2002-12-09 松下電器産業株式会社 画像符号化記録再生装置

Also Published As

Publication number Publication date
US6721492B1 (en) 2004-04-13
EP0994482A3 (en) 2000-08-09
CA2286251A1 (en) 2000-04-16
CN1230009C (zh) 2005-11-30
CN1251967A (zh) 2000-05-03
KR100668993B1 (ko) 2007-01-16
EP0994482A2 (en) 2000-04-19
JP2000125262A (ja) 2000-04-28
KR20000052346A (ko) 2000-08-25

Similar Documents

Publication Publication Date Title
JP3921841B2 (ja) 信号処理装置および方法、ならびに、記録装置、再生装置および記録再生装置
JP4010066B2 (ja) 画像データ記録装置および記録方法、並びに画像データ記録再生装置および記録再生方法
JP4182641B2 (ja) データ処理装置および方法、ならびに、記録装置および方法
JP4610680B2 (ja) 信号処理装置および方法、記録装置、再生装置、記録再生装置、ならびに、映像信号記録再生装置
US6643729B2 (en) Data processing apparatus and data recording apparatus
WO2001058171A1 (en) Recording device and method, and reproducing device and method
KR100739262B1 (ko) 기록 장치 및 기록 방법과, 재생 장치 및 재생 방법
JP3932721B2 (ja) データ記録装置、データ記録再生装置、データ記録方法およびデータ記録再生方法
JP2002142192A (ja) 信号処理装置および方法、ならびに、記録装置および方法
KR100681992B1 (ko) 기록 장치 및 방법
JP4099556B2 (ja) 記録装置および方法、再生装置および方法、ならびに、記録再生装置および方法
JP2000134110A (ja) データ伝送装置および伝送方法
JP2001155437A (ja) 記録装置および方法
JP4038949B2 (ja) 再生装置および方法
JP2000149455A (ja) データ記録装置および記録方法、データ記録再生装置および記録再生方法、並びにデータ記録媒体
JP2001169243A (ja) 記録装置および方法、ならびに、再生装置および方法
JP3978903B2 (ja) データ記録装置、データ記録方法、データ処理装置、およびデータ処理方法
JP2002171241A (ja) ストリーム伝送装置および方法
JP2000132914A (ja) データ処理装置およびデータ記録装置
JP3956510B2 (ja) 同期検出装置および方法、ならびに、再生装置
JP2000312341A (ja) データ伝送装置および方法、記録装置、ならびに、記録再生装置
JP2002171524A (ja) データ処理装置および方法
JP2001218162A (ja) 記録装置および方法
JP2000123485A (ja) 記録装置および方法
JP2001346163A (ja) 記録装置および方法、再生装置および方法、ならびに、記録再生装置および方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050627

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20061102

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061114

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061227

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070130

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070212

LAPS Cancellation because of no payment of annual fees