JP2003134465A - ストリーム任意領域抽出方式及び装置及びそのプログラム及びそれを記録した記録媒体 - Google Patents

Abstract

(57)【要約】 【課題】 高速な抽出処理を可能とし、さらに抽出した
ストリーム毎の個別の管理を可能とするストリーム任意
領域抽出方式を提供する。 【解決手段】 入力されるＭＰＥＧストリームを先ずス
トリーム分離部１０１によりヘッダ情報とＭＢデータに
分離し、次にＭＢデータ分析部１０２およびＭＢ領域判
定部１０３およびＭＢ処理決定部１０４により、分離さ
れたＭＢデータが抽出領域に属しているか再符号化が必
要かを判定し、抽出領域に属しかつ再符号化が必要な場
合再符号化部１２０で抽出領域内の画像から動き補償す
るよう再符号化し、その後抽出した同じ垂直位置のＭＢ
データによりスライス構成部１０７でスライスデータを
再構成し、これと前記ストリーム分離部１０１で分離し
たヘッダ情報をヘッダ分析部１０８およびヘッダ複製部
１０９で修正および複製したヘッダと合成し抽出数分の
ストリームを得る。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、ＭＰＥＧ符号化方
式およびその他のデジタル符号化方式により符号化され
たストリームから任意の１つ又は複数の領域抽出する技
術に関し、特に、前記ストリームを完全に復号化するこ
となく複数のストリームを抽出する技術に関する。

【０００２】

【従来の技術】特開２０００−１２５２６３号公報に
は、複数の動画のそれぞれの画像を１つの画像に合成
し、これを１つの符号化装置により符号化することで、
１つの符号化装置での複数動画の同時記録あるいは伝送
を行なう方法が示されている。前記符号化方法によれ
ば、複数の動画を符号化するのに要する符号化器が１つ
で済むためコスト的に有利である。しかし、前記符号化
方法により符号化されたストリームからそれぞれの画像
を取り出す際には、前記ストリームを完全に復号し、復
号された合成画像から任意の画像を取り出す処理を行な
う必要がある。

【０００３】

【発明が解決しようとする課題】前記符号化装置により
符号化されたストリームから合成されたそれぞれの画像
を取り出す際に、一般的な復号処理により全ての画像を
復号した後に、復号された合成画像から任意の画像を抽
出する処理が必要なので、復号する際に一般的な復号化
装置を用いることができないという問題がある。また、
抽出対象でない領域の画像についても復号処理が行なわ
れるため無駄な処理が多くなる問題がある。さらに、１
つの画像に合成された複数のコンテンツは１つのストリ
ームとして記録されるため、各々のコンテンツ毎別個に
削除したりジャンル分けしたりといった別個の管理がで
きないという問題がある。

【０００４】ここで、前記符号化装置で符号化されたス
トリームを一度画像に復号し任意の領域を抜き出し、そ
の領域のみを再符号化すれば一般的なデコーダで復号で
きる上不要な領域の復号に処理を割く必要がなく、さら
に画像中の抽出する領域をコンテンツの数だけ設定しこ
の前記再符号化処理を繰り返せばコンテンツ毎のストリ
ームを作成することができる。しかし、この場合も画像
までの復号化処理とその画像中の抽出領域の再符号化が
必要となるのでやはり多大な処理量を要する問題があ
る。さらに、複数の領域を抽出する場合、前記再符号化
方式では１個のエンコーダのときは抽出領域数だけ抽出
処理を繰り返す必要があり、より膨大な手間と時間がか
かる。また、抽出する領域数だけのエンコーダを用いて
処理を行なう場合１回の抽出処理ですむが、高コストに
なり装置も複雑になる。

【０００５】本発明はこれらの問題に鑑みてなされたも
のであり、本発明の第１の目的は、複数の映像コンテン
ツを１つの画像に合成し、それを符号化して得たストリ
ームなどから、１つ乃至は複数の領域を抽出し、抽出し
た領域毎の新たなストリームも作成することで、これに
より例えばコンテンツ毎の削除やジャンル分けなど個別
の管理を容易にするストリーム任意領域抽出方式を提供
することである。

【０００６】本発明の第２の目的は、前記ストリームか
ら１つ乃至は複数の領域を抽出しそれぞれ別個のストリ
ームとすることで、一般のデコーダで復号した場合も抽
出対象とした領域の画像を意図どおりに復号可能なスト
リーム任意領域抽出方式を提供することである。

【０００７】本発明の第３の目的は、前記ストリームか
ら１つ乃至は複数の領域の抽出処理を高速で実現し、し
かも抽出する領域数に関わらず１度の処理で複数領域を
抽出可能とするストリーム任意領域抽出方式を提供する
ことである。

【０００８】本発明の第４の目的は、前記ストリームか
ら１つ乃至は複数の領域を抽出し記録装置に記録する際
に、記録媒体にあるまとまったデータ単位毎に配置し、
目的のデータを検出するためのシーク動作の回数が少な
くなるように記録することで、目的のデータを検出する
までのシーク時間が比較的大きな記録媒体を用いる場合
も記録したストリームの復号処理に記録装置からのスト
リームのリード処理が間に合わない事態を防止可能で、
さらに記録装置への負担を低減可能なストリーム任意領
域抽出方式を提供することである。

【０００９】本発明の第５の目的は、前記ストリームか
ら複数の領域を抽出し記録装置に記録する際に、抽出し
たそれぞれのストリームが記録媒体にあるまとまったデ
ータ単位毎に隣接して配置されるように記録すること
で、複数ストリームの同時復号処理を行なう場合にもシ
ーク回数およびシーク時間を低減できるため、それぞれ
のストリームのリード処理が間に合わない事態を防止可
能で、さらに記録装置への負担を低減可能なストリーム
任意領域抽出方式を提供することである。

【００１０】

【課題を解決するための手段】本発明のストリーム任意
領域抽出方式は、ＭＰＥＧストリーム中のＭＢデータが
属する領域を判定するＭＢ領域判定部、およびＭＢ領域
判定部の判定結果に基づき当該ＭＢがそのまま抽出可能
かあるいは再符号化が必要かどうかを判定するＭＢ処理
決定部、および前記ＭＢ処理決定部により再符号化が必
要と判定された場合再符号化を行なう再符号化部を備え
ることで、抽出されたＭＢが他の領域を動き補償のため
に参照する場合にも参照画像の同領域から動き予測を行
なうかあるいは動き補償を行なわないフレーム内ＭＢと
して再符号化することで抽出後のそれぞれのＭＰＥＧス
トリームでの動き補償は全て抽出した領域内から参照と
することができる。さらに、抽出したＭＢデータにより
抽出領域に合うようにスライスデータを再構成するスラ
イス構成部、および抽出領域とする数や範囲にしたがっ
てMPEG規格に準拠するようＭＰＥＧストリームのヘッダ
情報を修正および複製するヘッダ複製部、および前記構
成したスライスデータと前記修正および複製されたヘッ
ダ情報を抽出する領域毎に合成する合成部（合成部Ａ、
合成部Ｂ）を備える構成とすることで、ＭＰＥＧストリ
ームから任意を１つ乃至は複数の領域から新たなストリ
ームを抽出し記録装置に記録することができる。複数の
領域からストリームを抽出し記録する場合は、それぞれ
のストリームはMPEG規格に準拠した独立したストリーム
として記録されるため、ストリーム毎の削除や個別の管
理が行なうことができ、本発明の第１の目的を達成でき
る。ここで、前記抽出したストリームには抽出領域とし
た画像のみがを含むストリームであり、かつ前述のよう
にＭＰＥＧ規格に準拠したストリームであるため、抽出
した各ストリームは一般の汎用デコーダで復号した場合
でも抽出対象とした領域の画像が意図どおりに復号可能
であり、本発明の第２の目的を達成できる。

【００１１】また、前記本発明の構成による任意領域抽
出処理において、ＭＢデータをそれが属する領域毎に分
別する処理が主となり、非常に負荷の大きい再符号化処
理が必要となるのはほとんど各領域の境界付近のＭＢデ
ータのみで済むため、全領域を一度完全に画像に復号し
て任意の領域を再符号化する一般の方式と比較して非常
に高速な処理が可能である。また領域毎に分別したＭＢ
データは、それぞれ抽出領域数分備えた合成部でヘッダ
複製で抽出数分複製されたヘッダ情報と合成されること
で、抽出数分のストリームが同時に構成される。つま
り、抽出する領域数に関わらず１度の処理で複数領域を
抽出可能であり、本発明の第３の目的を達成できる。

【００１２】本発明のストリーム任意領域抽出方式で
は、前記スライス構成部により構成したスライスデータ
毎に記録媒体へ出力するため記録媒体へのストリームの
配置はほぼスライスデータ毎の配置となる。光ディスク
などのように目的のデータを検出するまでのシークタイ
ムが比較的大きな記録媒体を用いる場合、記録したスト
リームの復号処理にストリームリードが間に合わない事
態が生じる場合がある。これを防止するため抽出したス
トリームをあるまとまったデータ単位だけ蓄積するメモ
リＡおよびメモリＢおよび前記メモリＡ、メモリＢから
前記データ単位だけストリームを読出し連続して記録装
置に出力するライト制御部をさらに備える構成としたス
トリーム任意領域抽出方式とし、抽出したストリームを
記録媒体に前記データ単位で連続した配置となるよう記
録装置へ出力することで、記録装置のシーク回数やシー
クタイムを削減でき、その結果ストリームの復号処理に
リード処理が間に合わない事態を防止でき、記録装置へ
の負荷を低減できるため、本発明の第４の目的を達成で
きる。また、ライト制御部が抽出した複数ストリームの
それぞれを前記データ単位毎に隣接して記録媒体に配置
されるよう記録装置へ出力することで、複数ストリーム
の同時復号処理を行なう場合にも記録装置のシーク回数
やシークタイムを削減でき、その結果複数ストリームの
同時復号処理時にもリード処理が間に合わない事態を防
止でき、記録装置への負荷を低減できるため本発明の第
５の目的を達成できる。

【００１３】

【発明の実施の形態】本発明のストリーム任意領域抽出
方式の実施の形態について図面を参照して詳細に説明す
る。

【００１４】（発明の第１の実施の形態）本発明のスト
リーム分割装置の第１の実施の形態は、図１に示す構成
となる。

【００１５】本実施の形態では抽出数や抽出領域を指定
するための領域指定信号を外部から指定する構成とし、
図２のように領域抽出数は２で、７２０ｘ４８０画素の
画像の水平位置ｈが０から３５１までの３５２画素を領
域Ａ、ｈが３６８から７１９ピクセルまでの３５２画素
を領域Ｂとし、領域Ａ、Ｂを抽出領域としている。ただ
し抽出数や抽出領域はこれに限らない。抽出数や抽出領
域を固定とする場合、外部から領域指定信号を指定する
必要はない。また、直接的領域数や抽出領域を指定しな
くとも何らかのパラメータを領域指定信号として入力す
ることとし、そこから抽出数や抽出領域を算出しても構
わない。さらに、入力ストリームに抽出数や抽出領域の
情報を重畳し、ストリーム分離部１０１で抽出数や抽出
する領域の情報を分離する構成とし、領域指定信号を入
力する経路を省くようにしても構わない。いずれの場合
でも領域指定信号の抽出領域指定は、マクロブロック
（以下、ＭＢという）に相当する１６ｘ１６画素の精度
で指定するものとする。

【００１６】図１に示す第１の実施の形態では、本発明
のストリーム任意領域抽出方式は、ストリーム分離部１
０１およびＭＢデータ分析部１０２およびＭＢ領域判定
部１０３およびＭＢ処理決定部１０４およびＭＢ領域変
化判定部１０５およびメモリ１０６およびスライス構成
部１０７およびヘッダ分析部１０８およびヘッダ複製部
１０９および合成部Ａ １１０および合成部Ｂ １１１お
よび再符号化部１２０および選択器Ａ １３０および選
択器Ｂ １３１により構成される。

【００１７】ここで再符号化部１２０はさらに、ＭＢ復
号化部１２１およびＭＢ符号化部１２２および参照画像
メモリ１２３から構成される。

【００１８】ストリーム分離部１０１には図３のように
例えば２つの画像を１枚に合成した画像をＭＰＥＧ符号
化方式で符号化した映像ストリームが入力され、ストリ
ーム分離部１０１は入力されたＭＰＥＧ映像ストリーム
を分析し、ＭＰＥＧで定義されたシーケンスヘッダおよ
びＧＯＰ（Group Of Pictures）ヘッダおよびピクチャ
ヘッダなどのヘッダ情報と、ＭＢデータを分離し、ヘッ
ダ情報をヘッダ分析部１０８へ出力する。一方、ＭＢデ
ータをＭＢ単位で順次ＭＢデータ分析部１０２へ出力す
る。本実施の形態では、画像Ａ、画像Ｂは画素間引きな
どにより縮小され、それぞれ図２の領域Ａ、領域Ｂに配
置された画像を想定している。

【００１９】ＭＢデータ分析部１０２は、ストリーム分
離部１０１から入力されるＭＢデータを分析し、そこか
らマクロブロックアドレス（以下、ＭＢＡという）およ
び動きベクトル情報を抽出する。ＭＢデータ分析部１０
２はまた、前記ＭＢＡから当該ＭＢデータの画像中での
位置（ＭＢｘ、ＭＢｙ）を式１により算出する。ここで
式１中のＨ＿ＭＢ＿ＮＵＭは、ヘッダ分析部１０８から
入力される画像の水平画素数を１６で割ることで得られ
る水平ＭＢ数であり、％は整数割り算のあまりを求める
演算子で、／は整数割り算の商を求める演算子を表わ
す。 （ＭＢｘ，ＭＢｙ）＝ （ （ＭＢＡ％Ｈ＿ＭＢ＿ＮＵＭ）ｘ１６，（ＭＢＡ／Ｈ ＿ＭＢ＿ＮＵＭ）ｘ１６） ・・・ 式１ ＭＢデータ分析部１０２はまた、直前に入力されたＭＢ
データの動きベクトルを記憶しておき、当該ＭＢデータ
の動きベクトルが直前のＭＢデータの差分値であった場
合は、前記記憶された直前のＭＢデータの動きベクトル
を加えて得られる動きベクトルを前記算出したＭＢ位置
（ＭＢｘ、ＭＢｙ）に加えることで当該ＭＢが参照する
位置（ＲＭＢｘ、ＲＭＢｙ）を算出する。当該ＭＢデー
タの動きベクトル差分値でない場合は、当該ＭＢデータ
の動きベクトルを前記算出したＭＢ位置に加えることで
当該ＭＢが参照する位置を算出する。当該ＭＢデータが
動き補償の必要のないイントラＭＢであった場合は、当
該ＭＢが参照する位置を、たとえば当該ＭＢの位置と同
じ値とする。当該ＭＢが動きベクトルを複数持つ場合
は、全ての動きベクトルでの参照位置を算出する。ＭＢ
データ分析部１０２は、このように算出した当該ＭＢの
位置および当該ＭＢが参照する位置をＭＢ領域判定部１
０３に出力し、当該ＭＢデータを選択器Ａ １３０およ
びＭＢ複合化部１２１に出力する。ＭＢデータ分析部１
０２はまた、当該ＭＢデータがイントラＭＢであるか否
かを判別するためのイントラＭＢ判定信号をＭＢ処理決
定部１０４に出力する。前記イントラＭＢ判定信号は、
たとえばイントラＭＢの場合”Ｉｎｔｒａ”、非イント
ラＭＢの場合”ＮｏｔＩｎｔｒａ”とすることができ
る。

【００２０】ＭＢ領域判定部１０３では、外部から入力
される領域指定信号から得られる抽出領域情報とＭＢデ
ータ分析部１０２から入力されるＭＢ位置情報（ＭＢ
ｘ、ＭＢｙ）とそのＭＢが参照するＭＢ参照位置情報
（ＲＭＢｘ、ＲＭＢｙ）から当該ＭＢ位置およびＭＢ参
照位置が属する領域を判定し、当該ＭＢが属する領域に
対応させたＭＢ領域判定信号をＭＢ領域変化判定部１０
５およびＭＢ符号化部１２２および選択器Ｂ １３１に
出力する。前記ＭＢ領域判定信号には当該ＭＢが属する
領域を抽出対象としているかどうかの情報も含む。ここ
で、図２のように７２０画素ｘ４８０画素の画像から抽
出領域として領域Ａ、領域Ｂとした場合、次のように当
該ＭＢの属する領域を判定できる。 （ａ） ＭＢｘ ≧０ かつ （ＭＢｘ＋１５） ≦ ３５９ 当該ＭＢは領域Ａに属する。 （ｂ）ＭＢｘ ≧ ３６０ かつ （ＭＢｘ＋１５） ≦ ７
１９ 当該ＭＢは領域Ｂに属する。 （ｃ） （ｉ）および（ｉｉ）以外 当該ＭＢは領域Ａと領域Ｂの間にある。

【００２１】このとき、たとえば（ａ）の場合は、”
Ａ”を、（ｂ）の場合は”Ｂ”を、（ｃ）の場合は本実
施の形態では抽出対象外の領域として”Ｘ”をＭＢ領域
判定信号としてＭＢ領域変化判定部１０５およびＭＢ符
号化部１２２および選択器Ｂ１３１に出力する。

【００２２】ＭＢ領域判定部１０３はさらに、当該ＭＢ
位置とＭＢ参照位置の属する領域の一致あるいは不一致
を示す同領域参照判定信号をＭＢ処理決定部１０４に出
力する。前記同領域参照判定信号には当該ＭＢが属する
領域を抽出対象としているかどうかの情報も含む。ここ
で、前記ＭＢ領域判定方法と同様に当該ＭＢとその参照
位置の判定を行ない当該ＭＢと当該ＭＢが参照する領域
が一致していた場合はたとえば”Ｓａｍｅ”を、不一致
の場合は”Ｄｉｆｆ”を、あるいは前記（ｃ）の場合を
含め当該ＭＢが抽出対象外の領域の場合は”Ｘ”を同領
域参照判定信号としてＭＢ処理決定部１０４に出力す
る。

【００２３】ＭＢ処理決定部１０４は、ＭＢデータ分析
部１０２から入力されるイントラＭＢ判定信号とＭＢ領
域判定部１０３から入力される同領域参照判定信号を用
いて図４に示した処理の流れで当該ＭＢを再符号化する
必要があるかどうか、あるいは抽出対象とするか否かの
決定を行ない、その結果得られた処理決定信号をＭＢ復
号化部１２１および選択器Ａ １３０に出力する。本実
施の形態では処理決定信号を、再符号化が必要ない場
合”Ｏｒｇｉｎａｌ”、再符号化が必要な場合”ＲｅＥ
ＮＣ”、抽出対象でない場合”Ｄｕｍｐ”とした。

【００２４】図４に示した処理決定信号を出力するまで
の流れを説明する。まず、ステップＡ１においてＭＢ領
域判定部１０３から入力される同領域判定信号が
“Ｘ”、つまり当該ＭＢが抽出対象でない領域であると
判定された場合は、ステップＡ４に進み“Ｄｕｍｐ”を
出力する。そうでない場合は、ステップＡ２へ進みＭＢ
データ分析部１０２から入力されるイントラＭＢ判定信
号が“Ｉｎｔｒａ”かどうかを調べる。判定の結果“Ｉ
ｎｔｒａ”のとき、つまり当該ＭＢがイントラＭＢであ
ると判定された場合はステップＡ５に進み“Ｏｒｉｇｉ
ｎａｌ”を出力する。そうでない場合は、ステップＡ３
に進み前記同領域判定信号が“Ｓａｍｅ”であるかどう
かを調べる。判定の結果“Ｓａｍｅ”のとき、つまり当
該ＭＢの属する領域とそれが参照する領域が一致してい
ると判定された場合、ステップＡ６へ進みこの場合も
“Ｏｒｉｇｉｎａｌ”を出力する。そうでない場合は
“ＲｅＥＮＣ”を出力する。処理決定信号を出力するま
での流れは以上で説明した図４の流れ図に必ずしも従う
必要はなく同様の結果が得られれば良い。

【００２５】ＭＢ領域変化判定部１０５は、ＭＢ領域判
定部１０３から入力されるＭＢ領域判定信号と１つ前に
入力されたＭＢ領域判定信号とを比較し、当該ＭＢが属
する領域が、ある抽出対象としている領域から別の抽出
対象領域に変化した場合、あるいはある抽出領域から抽
出対象としていない領域に変化した場合、これを通知す
るＭＢ領域変化信号 をスライス構成部１０７に出力す
る。具体的には、前記ＭＢ領域判定信号が、”Ａ”か
ら”Ｂ”あるいは”Ｘ”に変化したとき、また、”Ｂ”
から”Ａ”あるいは”Ｘ”に変化したときＭＢ領域変化
信号を出力する。

【００２６】ＭＢ復号化部１２１は、ヘッダ分析部１０
８から入力されるピクチャタイプ情報によって当該ＭＢ
データがＩピクチャまたはＰピクチャという他の画面か
ら動き補償時に参照される画像のＭＢである場合、ある
いはＭＢ処理決定部１０４から入力される処理決定信号
が”ＲｅＥＮＣ”の場合、つまり再符号化が必要な場
合、入力されるＭＢデータに対し可変長復号化、逆量子
化および逆ＤＣＴ、さらに必要な場合は参照画像メモリ
１２３中の参照画像を使って動き補償を行ない１６ｘ１
６の画像に復号し、前記処理決定信号が”ＲｅＥＮＣ”
の場合は復号された前記１６ｘ１６の画像をＭＢ符号化
部１２２へ出力する。また、当該ＭＢデータがＩピクチ
ャまたはＰピクチャである場合は復号された前記１６ｘ
１６の画像を参照画像とするため参照画像メモリ１２３
に記憶する。

【００２７】ＭＢ符号化部１２２は、ＭＢ処理決定部１
０４により当該ＭＢの再符号化が必要と判定された場合
にＭＢ復号化部１２１から入力される１６ｘ１６の画像
に復号されたＭＢデータに対し、参照画像メモリ１２３
に記憶された参照用画像中の当該ＭＢと同じ領域から動
き予測し、その後ＤＣＴ、量子化、可変長符号化により
再符号化し、再符号化されたＭＢデータを選択器Ｂ １
３１に出力する。ここで、外部から指定される領域指定
信号やＭＢ領域判定部１０３から入力される当該ＭＢデ
ータが属する領域情報を利用することで参照画像のどの
領域が当該ＭＢと同じとなるかの判定ができる。処理量
の軽減を図りたい場合は、再符号化時に動き予測せず、
フレーム内ＭＢとして符号化しても構わない。

【００２８】ＭＢ符号化部１２２で再符号化処理を行な
うのは、ＭＢ処理決定部１０４により当該ＭＢの再符号
化が必要と判定された場合であるが、これは図５に示す
ようにある抽出領域に属するＭＢデータが動き補償用の
参照画像の異なる領域を参照している場合である。この
異領域の参照は各領域の境界付近となる場合がほとんど
であるため他の大部分のＭＢデータでは負荷の大きい再
符号化処理は行なわれない。したがって、高速な任意領
域の抽出処理が可能となる。

【００２９】参照画像メモリ１２３には、ＭＢ復号化部
１２１で１６ｘ１６の画像に復号されたＭＢデータが記
憶される。このとき、前記ＭＢデータは、参照用画像と
して参照できるようにメモリ中に配置される。また参照
画像メモリ１２３は、２画面分の参照画面が記憶され、
新たな参照画像が記憶される毎に、古い順に参照画像は
参照画像メモリ１２３中から削除される。

【００３０】選択器Ａ １３０は、ＭＢ処理決定部１０
４から入力される処理決定信号により、メモリ１０６へ
出力するＭＢデータをＭＢデータ分析部１０２から入力
されるＭＢデータ（図１端子ａ）あるいはＭＢ符号化部
１２２から入力されるＭＢデータ（図１端子ｃ）あるい
はいずれも入力しない（図１端子ｂ）の３通りから選択
し、いずれかのＭＢデータが選択された場合は、それを
メモリ１０６へ出力する。具体的な例としては、処理決
定信号が”Ｏｒｉｇｉｎａｌ”の場合、ＭＢデータ分析
部１０２から入力される再符号化していないＭＢデータ
を選択し、”ＲｅＥＮＣ”の場合、ＭＢ符号化部１２２
から入力される再符号化されたＭＢデータを選択する。
さらに、処理決定信号が”Ｄｕｍｐ”のときは、ＭＢデ
ータは入力せずＭＢデータはメモリ１０６へ出力されな
い。

【００３１】スライス構成部１０７は、ＭＢ領域変化判
定部１０５から入力されるＭＢ領域変化信号により同領
域に属し、かつ同垂直位置のＭＢのＭＢデータがメモリ
１０６に蓄積されたことを判断し、メモリ１０６に蓄積
された前記ＭＢデータ順次読み出し、ＭＢデータの情報
を利用してスライスヘッダを生成すると共に、前記生成
したヘッダと読みだされたＭＢデータで１スライス分の
データを構成し、前記構成したスライスデータを選択器
Ｂ １３１へ出力する。もし、前記ＭＢ領域変化信号が
入力されたときにメモリ１０６に読み出すべきＭＢデー
タがなかった場合、スライスヘッダの生成およびスライ
スデータの構成は行なわず、選択器Ｂ１３１には何も出
力しない。

【００３２】スライスヘッダを生成する際にはメモリ１
０６に記憶されたＭＢデータの分析を行なう。具体的に
は、スライスの先頭となるＭＢデータの量子化スケール
コードの値をスライスヘッダ中の量子化スケールコード
の値として用いる。さらに１スライスとする全てのＭＢ
データが全てイントラＭＢの場合はそれを示すスライス
ヘッダ中のフラグを１とする。また、メモリ１０６のＭ
Ｂデータでスライスを構成する際には、ＭＢデータ中の
動きベクトル値およびイントラＭＢのＤＣ係数および量
子化スケールコードの変更あるいは削除が必要な場合は
その処理を行なう。前記ＭＢデータの変更あるいは削除
処理について具体的に説明する。動きベクトルは、ＭＢ
領域変換判定部１０５から入力されるＭＢ領域変化信号
の直後ではなく、すなわちスライスの先頭ＭＢでなく、
かつ直前のＭＢがイントラＭＢでなく、直前のＭＢと当
該ＭＢのＭＢＡが連続した値のとき、当該ＭＢの動きベ
クトル値を直前のＭＢの動きベクトルとの差分値に変更
する。イントラＤＣ係数は、当該ＭＢがスライスの先頭
でなく、直前のＭＢと当該ＭＢが共にイントラＭＢでか
つＭＢＡが連続した値のとき、当該ＭＢのイントラＤＣ
係数値を直前のＭＢのイントラＤＣ係数との差分値に変
更する。量子化スケールコードは、当該ＭＢが、スライ
スの先頭あるいは直前のＭＢの量子化スケールコードと
同じ値の場合、ＭＢデータ中から削除する。これによ
り、図６に示すように各抽出領域毎に同水平位置のＭＢ
データの集合を１スライスとする構造となる。

【００３３】本実施の形態では、図６に示すようなスラ
イス構成としたが、ＭＰＥＧ規格に準拠する限りスライ
スを他の構成としても構わない。

【００３４】ヘッダ分析部１０８は、ストリーム分離部
１０１から入力されたヘッダ情報を分析し、当該画像が
画像内で符号化が行われるＩピクチャあるいは、他画面
から動き予測が行われるＰ、Ｂピクチャといったピクチ
ャタイプ情報を抽出、これをＭＢ復号化部１２１へ出力
する。一方ヘッダ情報は、ヘッダ複製部１０９へ出力す
る。また、画像の水平画素数をＭＢデータ分析部１０２
に出力する。ヘッダ複製部１０９は、ヘッダ分析部１０
８から入力されるヘッダ情報を抽出する領域の数だけ複
製すると同時にヘッダ情報内の画面のピクセルサイズや
表示サイズ、１ピクセルの水平、垂直サイズの比率など
任意の領域を抽出するにあたり変更が必要なパラメータ
値の変更する。本実施の形態では抽出数は２つであり、
ヘッダ情報は２つに複製する。また、抽出領域のピクセ
ルサイズはいずれも３５２ｘ４８０であり、表示サイズ
は例えば７２０ｘ４８０とし、１ピクセルの縦、横サイ
ズの比率もこれにあった値とすることができる。ヘッダ
複製部１０９は、ヘッダの複製を行なった後、領域Ａに
ついてのヘッダ情報を合成部Ａ １３０に、領域Ｂにつ
いてのヘッダ情報を成部Ｂ １３１に出力する。

【００３５】選択器Ｂ １３１は、ＭＢ領域判定部１０
３から入力されるＭＢ領域判定信号に従い、スライス構
成部１０７から入力されるスライスデータの出力先を合
成部Ａ １１０あるいは合成部Ｂ １１１に振り分ける。
具体的には、領域Ａのスライスデータを合成部Ａ １１
０に、領域Ｂのスライスデータを合成部Ｂ １１１に出
力する。

【００３６】合成部Ａ １１０は、ヘッダ複製部１０９
から入力されるヘッダデータと選択器Ｂ １３１から入
力されるスライスデータを合成してＭＰＥＧストリーム
とし記録装置２００にファイルＡ ２０１として出力す
る。

【００３７】合成部Ｂ １１１は前記合成部１１０と同
様に、ヘッダ複製部１０９から入力されるヘッダデータ
と選択器Ｂ １３１から入力されるスライスデータを合
成してＭＰＥＧストリームとし記録装置２００にファイ
ルＢ ２０２として出力する。

【００３８】ここで、合成部Ａ １１０および合成部Ｂ
１１１から出力されるＭＰＥＧストリームには、それぞ
れ領域Ａ、領域Ｂの画像のみが含まれるストリームとな
っており、以上説明した本発明の第１の実施の形態の構
成によりストリームの任意領域の抽出処理が達成され
る。また、１度の処理で複数の領域から抽出したストリ
ームを同時に得ることができる。

【００３９】さらにことのとき、前記抽出したＭＰＥＧ
ストリームは、ＭＢ処理決定部１０４および再符号化部
１２０の作用により抽出対象としたそれぞれの領域のみ
を参照するように修正されている、またヘッダ複製部１
０９の作用により抽出領域に応じた適切なパラメータの
値としたヘッダ情報となっており、さらにスライス構成
部１０７の作用により抽出領域に応じたスライス構成と
されている。このため前記抽出したＭＰＥＧストリーム
は、ＭＰＥＧ規格に準拠したストリームとなっており一
般のデコーダで復号した場合、意図どおり抽出領域の画
像が復号される。

【００４０】第１の実施の形態では、前記合成部１１０
および前記合成部１１１からそれぞれ出力されるＭＰＥ
Ｇストリームを同一の記憶装置２００に出力したが、そ
れぞれ別々の記憶装置に出力しても構わない。また、前
記出力されるＭＰＥＧストリームを直接デコーダへ出力
することにしても構わない。さらに、前記ＭＰＥＧスト
リームを出力する記憶装置あるいはデコーダは、装置内
に存在している必要はなくネットワーク上に配置された
ものであっても構わない。

【００４１】第１の実施の形態ではＭＰＥＧストリーム
から任意領域を抽出する例を記述したが、同様の方法は
画像がＭＢあるいはＤＣＴブロックのように複数のブロ
ックで構成され、かつ前記ブロック単位ごとに独立した
処理が可能な符号化方式に適用できる。前記符号化方式
がフレーム間の相関を利用しない符号化方式である場
合、再符号化部１２０が必要ないためさらに簡易な構成
でストリーム任意領域抽出方式を実施することができ
る。

【００４２】（発明の第２の実施の形態）本発明の第２
の実施の形態は、図７のように図１で示した本発明の実
施の形態の構成に加え、合成部Ａ １１０、合成部Ｂ １
１１のそれぞれの後段に符号量制御部１４０をさらに備
えた構成となる。

【００４３】符号量制御部１４０は図８に示すように、
符号レート変換部１４１および符号量計算部１４２から
構成される。

【００４４】符号レート変換部１４１は、入力されるＭ
ＰＥＧストリームを可変長復号化および逆量子化を行な
う。その後、符号量計算部１４２から入力される符号量
制御信号をもとに新たな量子化ステップ値で量子化し可
変長符号化して符号レートを変換したストリームを符号
量計算部１４２に出力する。ここで、符号量制御信号は
外部から指定される目標符号レートに対する符号レート
変換部１４１から出力されるストリームの実符号レート
の誤差を表わす信号である。従って、前記符号量制御信
号により前記目標符号レートに対し、前記実符号レート
が大きいと判定された場合は量子化ステップ値を大きな
値とすることで符号レートを削減することができ、実符
号レートが目標符号レートとなるよう制御できる。

【００４５】符号量計算部１４２は、符号レート変換部
１４１から入力される符号レートが変換されたストリー
ムの符号量をカウントし、たとえばピクチャ毎に外部か
ら入力される目標符号レートと前記符号量のカウント値
から算出した実符号レートを比較し、目標符号レートに
対する実符号レートの誤差を符号量制御信号として符号
レート変換部１４１に出力する。また、符号量計算部１
４２は入力されるストリームをそのまま出力する。目標
符号レートと実符号レートの比較は、ピクチャ毎とは限
らずスライス毎やその他の単位毎の比較として構わな
い。

【００４６】このように本発明の第２の実施の形態で
は、合成部Ａ １１０、合成部Ｂ １１１のそれぞれの後
段に前記符号量制御部１４０を備え、それぞれの符号量
制御部１４０に各抽出領域の目標符号レートを入力する
ことで、各領域から抽出したそれぞれのストリームの符
号レートを任意に設定可能となる。

【００４７】符号レート変換部１４１で行なわれる処理
は、ＤＣＴや逆ＤＣＴの処理と比較してはるかに負荷の
小さい処理であり、逆量子化および量子化をまとめて処
理することでさらに高速にすることができる。したがっ
て、第２の実施の形態により、高速性を保持したまま第
１の実施の形態で示したストリーム任意領域抽出方式が
可能とする機能に加え、各領域から抽出したそれぞれの
ストリームの符号レートを任意に設定可能なストリーム
任意領域抽出方式を提供できる。

【００４８】本発明の第２の実施の形態では、符号レー
ト変換部１４１が合成部Ａ １１０および合成部Ｂ １１
１の後段に配置される構成としたが、符号レート変換部
１４１を選択器Ａ １３０の後段、あるいはメモリ１０
６の後段、あるいはスライス構成部１０７の後段に配置
する構成としても構わない。この場合符号レート変換部
１４１には、領域Ａおよび領域Ｂから抽出したそれぞれ
のストリームについての符号量制御信号を入力する必要
があり、また当該ＭＢが属する領域を判定する必要があ
るためＭＢ領域判定部１０３からＭＢ領域判定信号を入
力する必要があるが、符号レート変換部１４１は抽出領
域数に関わらず１つで済むことになり装置の簡略化が可
能である。

【００４９】（発明の第３の実施の形態）本発明の第３
の実施の形態は、ストリーム任意領域抽出部１００に加
え、さらにメモリＡ ３００およびメモリＢ ４００およ
びライト制御部５００を備えた図９に示す構成となる。
ストリーム任意領域抽出部１００は、本発明の第１の実
施の形態である図１のストリーム任意領域抽出部１００
あるいは本発明の第２の実施の形態である図７のストリ
ーム任意領域抽出部１００と同様の機能を有し、また記
録装置２００はライト制御部３００からの制御信号によ
りデータ書き込み位置が制御可能な記録装置である。

【００５０】メモリＡ ３００およびメモリＢ ４００
は、それぞれに入力されるストリーム任意領域抽出部１
００で領域Ａおよび領域Ｂから抽出された２系統のスト
リームを記録する。

【００５１】ライト制御部５００は、１フレームあるい
はＧＯＰなどある程度まとまったストリームをデータ単
位とし、前記メモリＡ ３００およびメモリＢ ４００に
前記データ単位のストリームが蓄積された後に、メモリ
Ａ ３００およびメモリＢ４００のそれぞれから前記デ
ータ単位のストリームを読出し記録装置２００に出力す
る。このとき、読み出されたストリームを前記データ単
位で可能な限り物理的に連続して記録媒体上に配置され
るような記録位置を指定するための制御信号を記録装置
２００に出力する。さらに複数の領域から抽出したスト
リームをライトする場合もそれぞれのストリームができ
るだけ隣接して記録媒体に配置されるような制御信号を
記録装置２００に出力する。例えば記録装置２００で用
いる記録媒体が光ディスクの場合は、領域Ａおよび領域
Ｂから抽出されたストリームの物理的な配置は図１０の
ように、領域Ａと領域Ｂから抽出したストリームは前記
データ単位で連続して記録され、さらにそれぞれのスト
リームが隣接して交互に配置される。前記データ単位
は、１フレーム単位あるいはＧＯＰ単位あるいはそれ以
上の単位でもそれ以下の単位であっても良い。さらに、
前記データ単位はストリーム全体とすることもできる。

【００５２】このとき、記録装置２００が光ディスクの
内周から外周までをいくつかのゾーンに分けてその中で
回転速度を一定とするZCAV（Zone Constant Angular Ve
locity）方式を用いている場合は、前記制御信号を用い
てストリームをなるべく同一ゾーンに配置すれば、スト
リームのリード処理時に記録装置２００が時間と負荷の
かかる回転速度の変更を行なう頻度を削減できるためシ
ーク時間や記録装置２００への負荷の低減できる。

【００５３】記録装置２００が、制御信号により正確に
物理的な書き込み位置の制御が可能であり、シークタイ
ム等のアクセス速度が十分な速度である場合は、メモリ
Ａ３００およびメモリＢ ４００を省略することができ
る。一方、記録装置２００が、制御信号による物理的な
書き込み位置の制御が不可能な場合にも、メモリＡ３０
０およびメモリＢ ４００は、ライトするデータ単位を
記録可能な容量とし、ストリームをデータ単位で連続し
て記録装置２００へ出力することで大概の記録装置にお
いて可能な限り物理的に連続した記録ができる。

【００５４】以上の構成となる本発明の第３の実施の形
態とすることで、ストリームから１つ乃至は複数の領域
から抽出したストリームを記録装置に記録する際に、ス
トリームのあるまとまったデータ単位毎に連続して記録
媒体に配置できる。これにより、ストリームを記録装置
２００からリードし復号する際に、シーク回数およびシ
ーク時間を最小限にでき、復号処理時に記録装置２００
からのストリームのリード処理が間に合わない事態を防
止でき、記録装置２００への負担も低減可能なストリー
ム任意領域抽出方式を提供できる。また、本発明の第３
の実施の形態の構成とすることで、複数領域から抽出し
たそれぞれのストリームを隣接して記録媒体に配置でき
る。これにより、複数ストリーム同時復号処理を行なう
場合でもシーク回数およびシーク時間を最小限にできる
ため複数ストリームの同時復号処理時に記録装置２００
からのストリームのリード処理が間に合わない事態を防
止でき、記録装置２００負担も低減可能なストリーム任
意領域抽出方式を提供できる。

【００５５】本発明によるストリーム任意領域抽出方式
を、前記実施の形態として実施するにあたり、ストリー
ム任意領域抽出方式の各ブロックをこれと等価な機能を
有する回路にて実現することが可能である。また同じ
く、ストリーム任意領域抽出方式の各ブロックはこれと
等価な処理を行なうプログラムをコンピユータ上で実行
することにより実現することが可能である。このとき前
記コンピユータは前記プログラムを格納する記録媒体を
備える。この記録媒体は、半導体メモリ、磁気ディス
ク、光ディスクその他の記録媒体であってよい。さら
に、本発明のストリーム任意領域抽出方式における再符
号化部１２０での処理は比較的処理の付加が大きいため
ソフトウェアで実現すると必要な処理速度に至らない場
合は、それらの部分を回路により実現しても構わない。
このように、本発明の実施においては、一部のブロック
を回路、つまりハードウェアによる構成とし、他の部分
をソフトウェアによる構成としても構わない。

【００５６】また、メモリＡ ３００およびメモリＢ ４
００としては、半導体メモリや磁気ディスクドライブ、
その他にもストリームのバッファリングに十分に間に合
う高速な記録装置により実施できる。

【００５７】また、記録装置２００としては半導体メモ
リ、あるいは磁気ディスク、光ディスク、その他の記憶
媒体にデータをライト・リード可能な装置により実施で
きる。本発明の第３の実施の形態を実施するにあたって
は、記録装置２００は制御信号により記録媒体への物理
的な記録位置を制御できることが望ましいが、必ずしも
そうである必要はない。

【００５８】

【発明の効果】以上説明したように、本発明には以下の
効果がある。

【００５９】本発明の第１の効果は、ＭＰＥＧストリー
ム中から１つ乃至複数の任意領域の画像部分を別個のス
トリームとして抽出し、別個のファイルとして記録でき
ることである。これによりたとえば複数の映像コンテン
ツを１つの画像に合成しそれを符号化して得たストリー
ムからそれぞれのコンテンツを抽出し別個のファイルと
して記録すればコンテンツ毎の管理が容易となる。

【００６０】本発明の第２の効果は、それぞれのストリ
ームを復号する際には、本発明のストリーム任意領域抽
出方式が使われたことに配慮したＭＰＥＧデコーダを使
う必要はなく、一般のＭＰＥＧデコーダを用いることで
それぞれのストリームから抽出領域とした画像が復号で
きることである。これは、抽出領域に属するＭＢデータ
を抽出する際に当該ＭＢが参照するＭＢが異なる領域に
属している場合、一度復号し、同じ領域から動き予測し
て再符号化したＭＢデータと、一方抽出領域の数だけ複
製し、抽出領域に応じて変更したＭＰＥＧヘッダ情報に
よりＭＰＥＧ規格に準拠したストリームを再構成するこ
とで実現している。

【００６１】本発明の第３の効果は、ストリームを一度
画像に復号した後、抽出領域を切り出し再符号化する一
般の方式と比較して、はるかに高速な抽出処理ができる
ことである。これは、抽出するＭＢデータが動き補償用
の参照画像の補償を異なる領域を参照しているときのみ
再符号化を行なう方式であり、さらにこの場合再符号化
処理を行なうＭＢデータはほとんど各領域の境界付近の
ＭＢデータのみだけであり、大部分のＭＢデータには非
常に負荷が大きい再符号化処理が行なわれないためであ
る。

【００６２】本発明の第４の効果は、抽出領域が複数の
場合でも１度の処理で全ての領域のストリーム抽出を行
なうことができることである。これは、１度の処理で各
抽出領域に属するＭＢデータを抽出し、抽出領域の数だ
け複製したヘッダ情報とそれぞれの領域に属するＭＢデ
ータにより構成したスライスデータと合成するため、ス
ライスデータ毎に各領域のストリームが順次作成される
ためである。

【００６３】本発明の第５の効果は、抽出したストリー
ムを任意の符号レートとすることができることである。
これは、抽出したストリーム毎に指定された目標符号レ
ートと実際のストリームの実符号レートとの差に応じて
ストリームの量子化ステップ数の変更を行ない、実符号
レートが目標レートとなるよう制御するためである。

【００６４】本発明の第６の効果は、抽出したストリー
ムをあるまとまったデータ単位だけ連続して配置される
よう記録媒体に記録し記録装置のデータシーク回数やシ
ーク時間を削減することで、ストリーム復号時にストリ
ームリード処理が間に合わない事態を防止でき、かつ記
録装置への負荷を小さくできることである。

【００６５】本発明の第７の効果は、複数のストリーム
を抽出し記録媒体に記録する際に、それぞれのストリー
ムがあるまとまったデータ単位毎に隣接して配置される
よう記録することで、複数ストリームの同時復号処理を
行なう場合、それぞれのストリームリード処理が間に合
わない事態を防止でき、かつ記録装置への負荷を小さく
できることである。

【図面の簡単な説明】

【図１】本発明の第１の実施の形態の構成を示すブロッ
ク図である。

【図２】本発明の第１の実施の形態での抽出領域を示す
図である。

【図３】本発明の第１の実施の形態での入力とする画像
の例を示す図である。

【図４】ＭＢ処理決定部でのＭＢ処理決定手順を示す流
れ図である。

【図５】参照画像中の異領域参照を示す図である。

【図６】スライス構成部でのスライス構成例を示す図で
ある。

【図７】本発明の第２の実施の形態の構成を示すブロッ
ク図である。

【図８】符号量制御部を示すブロック図である。

【図９】本発明の第３の実施の形態の構成を示すブロッ
ク図である。

【図１０】記録媒体へのストリーム配置を示す図であ
る。

【符号の説明】

１００ ストリーム任意領域抽出部 １０１ ストリーム分離部 １０２ ＭＢデータ分析部 １０３ ＭＢ領域判定部 １０４ ＭＢ処理決定部 １０５ ＭＢ領域変化判定部 １０６ ＭＢデータ蓄積用メモリ １０７ スライス構成部 １０８ ヘッダ分析部 １０９ ヘッダ複製部 １１０ 合成部Ａ １１１ 合成部Ｂ １２０ 再符号化部 １２１ ＭＢ復号化部 １２２ ＭＢ符号化部 １２３ 参照画像メモリ １３０ 選択器Ａ １３１ 選択器Ｂ １４０ 符号量制御部 １４１ 符号レート変換部 １４２ 符号量計算部 ２００ 記録装置 ２０１ ファイルＡ（領域Ａから抽出されたストリー
ム） ２０２ ファイルＢ（領域Ｂから抽出されたストリー
ム） ３００ メモリＡ ４００ メモリＢ ５００ ライト制御部

───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C053 FA14 FA23 GB05 GB06 GB07 GB17 GB19 GB21 GB28 GB32 GB37 JA21 5C059 KK41 MA00 MA05 MA23 MC11 MC32 ME01 NN21 NN28 PP05 PP06 RB09 RB13 SS11 SS20 UA02 UA39 5D110 AA15 AA29 BB01 DA12 DB05 DC05 DD13 DE01

Claims (17)

【特許請求の範囲】
1. 【請求項１】 ＭＰＥＧ（Ｍｏｔｉｏｎ Ｐｉｃｔｕｒ
   ｅ Ｅｘｐｅｒｔ Ｇｒｏｕｐ）符号化方式により符号化
   されたストリームから任意の１つ又は複数のＭＢ（マク
   ロブロック）の属する領域を抽出するストリーム任意領
   域抽出方式において、 ＭＰＥＧ符号化方式で符号化されたストリームから、外
   部からの設定又は予め設定又は内部で決定の所定の方法
   で設定された、画像中の１つ又は複数の領域を、画像ま
   で復号せずにストリームの状態で前記１つ又は複数の領
   域を抽出することを特徴とするストリーム任意領域抽出
   方式。
2. 【請求項２】 ＭＰＥＧ符号化方式により符号化された
   ストリームから任意の１つ又は複数のＭＢの属する領域
   を抽出するストリーム任意領域抽出方式において、 複数の画像を１つの画像に合成した画像をＭＰＥＧ符号
   化方式で符号化したストリームから、前記合成された画
   像の全て又はその一部を、画像まで完全に復号せずにス
   トリームの状態で抽出することを特徴とするストリーム
   任意領域抽出方式。
3. 【請求項３】 請求項１又は請求項２に記載のストリー
   ム任意領域抽出方式において、 当該ＭＢの属する領域と前記ＭＢが動き補償のために参
   照する領域が異なる場合に、新たに当該ＭＢが属する領
   域と同じ領域から動き予測を行ないフレーム又はフィー
   ルド間の相関を利用した符号化を行なう手段を備えるこ
   とを特徴とするストリーム任意領域抽出方式。
4. 【請求項４】 請求項１又は請求項２に記載のストリー
   ム任意領域抽出方式において、 当該ＭＢの属する領域と前記ＭＢが動き補償のために参
   照する領域が異なる場合に、フレーム又はフィールド内
   符号化を行なう手段を備えることを特徴とするストリー
   ム任意領域抽出方式。
5. 【請求項５】 請求項１に記載のストリーム任意領域抽
   出方式において、前記ＭＢデータの抽出動作に加え、Ｍ
   ＰＥＧのヘッダ情報を、抽出領域とする数や範囲にした
   がって修正および複製を行ない、抽出したＭＢデータと
   合成する手段を備えることで、それぞれの抽出領域から
   得られたストリームのそれぞれがＭＰＥＧ規格に準拠し
   たストリームとなることを特徴とするストリーム任意領
   域抽出方式。
6. 【請求項６】 請求項１に記載のストリーム任意領域抽
   出方式において、 複数のＭＢで構成されるＭＰＥＧに規定されたスライス
   と呼ばれるデータの構造を抽出領域にしたがって再構成
   するスライス構成部を備えることを特徴とするストリー
   ム任意領域抽出方式。
7. 【請求項７】 請求項６に記載のストリーム任意領域抽
   出方式において、 とくに抽出対象とした領域で垂直位置が等しいＭＢの集
   合をスライスとして再構成するスライス構成部を備える
   ことを特徴とするストリーム任意領域抽出方式。
8. 【請求項８】 請求項１に記載のストリーム任意領域抽
   出方式において、 抽出したストリームの実符号レートが外部から指定され
   た目標レートとなるよう符号レートの変換を行なう符号
   量制御部を備えることで、前記抽出したストリームを任
   意の符号レートとすることを特徴とするストリーム任意
   領域抽出方式。
9. 【請求項９】 請求項８に記載のストリーム任意領域抽
   出方式において、 とくに実符号レートと外部から指定される目標レートの
   誤差を算出する符号量計算部と該符号量計算部により算
   出された誤差に応じてストリームの量子化ステップ値を
   変更し前記実符号レートを前記目標レートに制御する符
   号レート変換部とから成る符号量制御部を備えることを
   特徴とするストリーム任意領域抽出方式。
10. 【請求項１０】 請求項１に記載のストリーム任意領域
    抽出方式において、 抽出した１つ又は複数のストリームを記録媒体に記録す
    る際に、それぞれのストリームについてあるまとまった
    量のストリームをデータ単位として蓄積するメモリを備
    え、前記メモリから前記データ単位毎にストリームを読
    み出し、前記データ単位に読み出されたストリームを記
    録媒体に連続して配置されるように記録装置に出力する
    ライト制御部を備えることを特徴とするストリーム任意
    領域抽出方式。
11. 【請求項１１】 請求項１０に記載のストリーム任意領
    域抽出方式において、抽出した複数のストリームを、そ
    れぞれ前記データ単位毎に隣接して記録媒体に配置され
    るように記録装置に出力するライト制御部を備えること
    を特徴とするストリーム任意領域抽出方式。
12. 【請求項１２】 請求項１０に記載のストリーム任意領
    域抽出方式において、抽出した１つ又は複数のストリー
    ムを、それぞれストリーム単位で連続して記録媒体に配
    置されるように記録装置に出力するライト制御部を備え
    ることを特徴とするストリーム任意領域抽出方式。
13. 【請求項１３】 請求項３から請求項１２に記載のスト
    リーム任意領域抽出方式の一部又は全ての特徴を備えた
    ストリーム任意領域抽出方式。
14. 【請求項１４】 請求項１乃至請求項１３に記載のスト
    リーム任意領域抽出方式と等価な処理をおこなうストリ
    ーム任意領域抽出装置。
15. 【請求項１５】 請求項１乃至請求項１３に記載のスト
    リーム任意領域抽出方式の処理をコンピュータに実行さ
    せるためのプログラム。
16. 【請求項１６】 請求項１乃至請求項１３に記載のスト
    リーム任意領域抽出方式の処理をコンピュータに実行さ
    せるためのプログラムを記録した記録媒体。
17. 【請求項１７】 請求項１３に記載のストリーム任意領
    域抽出方式又は請求項１４に記載のストリーム任意領域
    抽出装置により抽出したストリームを記録した記録媒
    体。