JP2001112004A - 動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法 - Google Patents
動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法Info
- Publication number
- JP2001112004A JP2001112004A JP28830799A JP28830799A JP2001112004A JP 2001112004 A JP2001112004 A JP 2001112004A JP 28830799 A JP28830799 A JP 28830799A JP 28830799 A JP28830799 A JP 28830799A JP 2001112004 A JP2001112004 A JP 2001112004A
- Authority
- JP
- Japan
- Prior art keywords
- unit
- wavelet transform
- image
- roi
- encoding
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Abandoned
Links
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 要求に応じて動画像の符号化時のビットレー
トを制御する。 【解決手段】 ビットレート制御部１０６は、ビットレ
ート設定部１０５に設定された所望のビットレートを各
符号化処理単位に割り振り、エントロピー符号化部１０
７は、割り振られたビットレートで、各符号化処理単位
を構成する量子化されたウェーブレット変換係数をビッ
トプレーンごとに符号化して、ビットプレーンごとのエ
ントロピー符号化データを生成し、符号化ストリーム生
成部１０８が、エントロピー符号化データと符号化パラ
メータを結合して符号化ビットストリームを生成する。
トを制御する。 【解決手段】 ビットレート制御部１０６は、ビットレ
ート設定部１０５に設定された所望のビットレートを各
符号化処理単位に割り振り、エントロピー符号化部１０
７は、割り振られたビットレートで、各符号化処理単位
を構成する量子化されたウェーブレット変換係数をビッ
トプレーンごとに符号化して、ビットプレーンごとのエ
ントロピー符号化データを生成し、符号化ストリーム生
成部１０８が、エントロピー符号化データと符号化パラ
メータを結合して符号化ビットストリームを生成する。
Description
【０００１】
【発明の属する技術分野】この発明は、符号化データを
再生するビットレートや解像度を可変にできるレート・
解像度スケーラブル機能や、画像の注目領域の画質を優
先的に保持して符号化する機能を有する静止画像符号化
・復号方式を用いて、動画像の各画像フレームの符号化
伝送・受信再生を、特定の画像フレームをランダムに抜
き出す等の符号化データの編集性の良さを保ちつつ実現
する動画像符号化装置及び動画像復号装置、並びに動画
像符号化方法及び動画像復号方法に関するものである。
再生するビットレートや解像度を可変にできるレート・
解像度スケーラブル機能や、画像の注目領域の画質を優
先的に保持して符号化する機能を有する静止画像符号化
・復号方式を用いて、動画像の各画像フレームの符号化
伝送・受信再生を、特定の画像フレームをランダムに抜
き出す等の符号化データの編集性の良さを保ちつつ実現
する動画像符号化装置及び動画像復号装置、並びに動画
像符号化方法及び動画像復号方法に関するものである。
【０００２】
【従来の技術】従来の静止画像符号化方式を用いた動画
像符号化装置及び動画像復号装置として、静止画像符号
化の国際標準ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａ
ｐｈｉｃ Ｅｘｅｐｅｒｔｓ Ｇｒｏｕｐ）として知ら
れる画像を小ブロックに分割して、それぞれを離散コサ
イン変換・逆変換する符号化・復号方式を、動画像の各
画像フレームに適用するものがある。
像符号化装置及び動画像復号装置として、静止画像符号
化の国際標準ＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａ
ｐｈｉｃ Ｅｘｅｐｅｒｔｓ Ｇｒｏｕｐ）として知ら
れる画像を小ブロックに分割して、それぞれを離散コサ
イン変換・逆変換する符号化・復号方式を、動画像の各
画像フレームに適用するものがある。
【０００３】図１４は、従来の動画像符号化装置の構成
を示すブロック図であり、動画像をＤＣＴ変換して符号
化する構成より成る。図において、１１０１はブロック
バッファであり、動画像を構成する各画像フレームを小
ブロックに分割し、画像を小ブロックデータとして保持
するものである。１１０２はＤＣＴ変換部であり、ブロ
ック単位に画像にＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉ
ｎｅ Ｔｒａｎｓｆｏｒｍ，離散コサイン変換）を施し
ＤＣＴ係数を生成するものである。
を示すブロック図であり、動画像をＤＣＴ変換して符号
化する構成より成る。図において、１１０１はブロック
バッファであり、動画像を構成する各画像フレームを小
ブロックに分割し、画像を小ブロックデータとして保持
するものである。１１０２はＤＣＴ変換部であり、ブロ
ック単位に画像にＤＣＴ（Ｄｉｓｃｒｅｔｅ Ｃｏｓｉ
ｎｅ Ｔｒａｎｓｆｏｒｍ，離散コサイン変換）を施し
ＤＣＴ係数を生成するものである。
【０００４】また、図１４において、１１０３は量子化
部であり、ＤＣＴ係数を量子化閾値と比較して量子化係
数を生成するものである。１１０４は可変長符号化部で
あり、量子化部１１０３の生成した量子化係数をハフマ
ン符号表１１０５を参照して可変長符号化するものであ
る。１１０５はハフマン符号表であり、符号の発生頻度
の高いものには短いビットを割り当て、発生頻度が低い
ものには長いビットを割り当てるための可変長符号の表
である。
部であり、ＤＣＴ係数を量子化閾値と比較して量子化係
数を生成するものである。１１０４は可変長符号化部で
あり、量子化部１１０３の生成した量子化係数をハフマ
ン符号表１１０５を参照して可変長符号化するものであ
る。１１０５はハフマン符号表であり、符号の発生頻度
の高いものには短いビットを割り当て、発生頻度が低い
ものには長いビットを割り当てるための可変長符号の表
である。
【０００５】図１５は、従来の動画像復号装置の構成を
示すブロック図であり、動画像を逆ＤＣＴ変換して復号
する構成より成る。図において、１２０１は可変長復号
部であり、ハフマン符号表１２０２を参照して可変長符
号を復号するものである。１２０３は逆量子化部であ
り、復号された量子化係数を逆量子化しＤＣＴ係数を復
元するものである。１２０４は逆ＤＣＴ変換部であり、
復元されたＤＣＴ係数を逆ＤＣＴ変換することにより、
動画像を構成する各画像フレームの各小ブロックを復元
するものである。１２０５は画像メモリであり、復元さ
れた動画像データを格納するものである。
示すブロック図であり、動画像を逆ＤＣＴ変換して復号
する構成より成る。図において、１２０１は可変長復号
部であり、ハフマン符号表１２０２を参照して可変長符
号を復号するものである。１２０３は逆量子化部であ
り、復号された量子化係数を逆量子化しＤＣＴ係数を復
元するものである。１２０４は逆ＤＣＴ変換部であり、
復元されたＤＣＴ係数を逆ＤＣＴ変換することにより、
動画像を構成する各画像フレームの各小ブロックを復元
するものである。１２０５は画像メモリであり、復元さ
れた動画像データを格納するものである。
【０００６】
【発明が解決しようとする課題】従来の動画像符号化装
置及び動画像復号装置は、以上のように、量子化された
ＤＣＴ係数の値をそれぞれハフマン符号化することをベ
ースにしているため、動画像を構成する各画像フレーム
の符号化ビットレートを同一に保って符号化したり、伝
送路の混雑状況を見て画像フレームのビットレートを制
御したり、動画像の符号化データを符号化時とは異なる
ビットレートで復号するといった処理が実現できないと
いう課題があった。このため、動画像の伝送速度を安定
させるために一定のビットレートで各画像フレームを符
号化したり、帯域の少ない伝送路等で動画像の有意な情
報のみを伝送したり、蓄積された動画像を早送りで再生
可能にするために、符号化に要したビットレート以下の
任意のレートで符号化ビットストリームを復号可能にす
ることが課題である。
置及び動画像復号装置は、以上のように、量子化された
ＤＣＴ係数の値をそれぞれハフマン符号化することをベ
ースにしているため、動画像を構成する各画像フレーム
の符号化ビットレートを同一に保って符号化したり、伝
送路の混雑状況を見て画像フレームのビットレートを制
御したり、動画像の符号化データを符号化時とは異なる
ビットレートで復号するといった処理が実現できないと
いう課題があった。このため、動画像の伝送速度を安定
させるために一定のビットレートで各画像フレームを符
号化したり、帯域の少ない伝送路等で動画像の有意な情
報のみを伝送したり、蓄積された動画像を早送りで再生
可能にするために、符号化に要したビットレート以下の
任意のレートで符号化ビットストリームを復号可能にす
ることが課題である。
【０００７】さらに、従来の動画像符号化装置及び動画
像復号装置は、画像全体の画質を上下させる制御を加え
た動画像の符号化伝送は可能であるが、画像フレームの
一部の注目領域を他領域より高画質に保った符号化伝送
を実現する機能は備えていないという課題があった。こ
のため、符号化側で注目領域を検出し、同領域のみ高画
質に伝送して他領域を低画質に伝送することで、伝送時
間を短縮する処理や、復号側でこれまでに受信復号され
た画像フレームから注目領域を選択し、符号化側は、注
目領域の情報をフィードバック情報として受け、以降の
画像フレームについて、注目領域のみを高画質化して符
号化伝送する機能を実現することは、伝送路を有効利用
し、効果的に画像フレームを再生するための課題であ
る。
像復号装置は、画像全体の画質を上下させる制御を加え
た動画像の符号化伝送は可能であるが、画像フレームの
一部の注目領域を他領域より高画質に保った符号化伝送
を実現する機能は備えていないという課題があった。こ
のため、符号化側で注目領域を検出し、同領域のみ高画
質に伝送して他領域を低画質に伝送することで、伝送時
間を短縮する処理や、復号側でこれまでに受信復号され
た画像フレームから注目領域を選択し、符号化側は、注
目領域の情報をフィードバック情報として受け、以降の
画像フレームについて、注目領域のみを高画質化して符
号化伝送する機能を実現することは、伝送路を有効利用
し、効果的に画像フレームを再生するための課題であ
る。
【０００８】さらに、従来の動画像符号化装置及び動画
像復号装置は、符号化側が、伝送路や復号側からのフィ
ードバック情報を利用して、符号化処理時のパラメータ
を決定するしくみを持ち合わせていないため、伝送帯域
（伝送路の混雑度）や、復号側での画質等に関する要求
を、動画像の符号化処理に反映させることはできないと
いう課題があった。このため、伝送帯域による制約や、
復号側での画質要求にあわせて符号化処理を適応的に制
御することが課題である。
像復号装置は、符号化側が、伝送路や復号側からのフィ
ードバック情報を利用して、符号化処理時のパラメータ
を決定するしくみを持ち合わせていないため、伝送帯域
（伝送路の混雑度）や、復号側での画質等に関する要求
を、動画像の符号化処理に反映させることはできないと
いう課題があった。このため、伝送帯域による制約や、
復号側での画質要求にあわせて符号化処理を適応的に制
御することが課題である。
【０００９】この発明は上記の課題を解決するためにな
されたもので、静止画像の符号化技術を用いることで、
符号化データの編集性を保ちつつ、ビットレートを符号
化・復号時に自在に可変にする機能や、符号化、復号処
理時に解像度をスケーラブルにする機能や、画像フレー
ムの注目領域を他領域より高画質に符号化する機能を持
ち、符号化側あるいは復号側の要求に応じて、符号化ビ
ットレート、符号化解像度、画像内領域への画質配分を
制御可能にする動画像符号化装置及び動画像符号化方
法、並びに同符号化方式で生成された符号化データを復
号し動画像を再生する動画像復号装置及び動画像復号方
法を得ることを目的とする。
されたもので、静止画像の符号化技術を用いることで、
符号化データの編集性を保ちつつ、ビットレートを符号
化・復号時に自在に可変にする機能や、符号化、復号処
理時に解像度をスケーラブルにする機能や、画像フレー
ムの注目領域を他領域より高画質に符号化する機能を持
ち、符号化側あるいは復号側の要求に応じて、符号化ビ
ットレート、符号化解像度、画像内領域への画質配分を
制御可能にする動画像符号化装置及び動画像符号化方
法、並びに同符号化方式で生成された符号化データを復
号し動画像を再生する動画像復号装置及び動画像復号方
法を得ることを目的とする。
【００１０】
【課題を解決するための手段】この発明に係る動画像符
号化装置は、動画像データを入力し動画像を構成する画
像フレームを抽出する画像フレーム抽出部と、抽出され
た画像フレームをウェーブレット変換して、ウェーブレ
ット変換係数を出力するウェーブレット変換部と、上記
ウェーブレット変換係数を量子化する量子化部と、上記
量子化されたウェーブレット変換係数を、符号化処理単
位ごとにまとめる符号化処理単位構成部と、要求された
符号化時の所望のビットレートを設定するビットレート
設定部と、設定された所望のビットレートで各画像フレ
ームを符号化するために、上記所望のビットレートを各
符号化処理単位に割り振るビットレート制御部と、割り
振られたビットレートで、各符号化処理単位を構成する
上記量子化されたウェーブレット変換係数をビットプレ
ーンごとに符号化し、ビットプレーンごとのエントロピ
ー符号化データを生成するエントロピー符号化部と、生
成されたビットプレーンごとのエントロピー符号化デー
タと、各画像フレームの符号化に用いた符号化パラメー
タを、各画像フレームの符号化データとして結合し、符
号化ビットストリームを生成する符号化ストリーム生成
部とを備えたものである。
号化装置は、動画像データを入力し動画像を構成する画
像フレームを抽出する画像フレーム抽出部と、抽出され
た画像フレームをウェーブレット変換して、ウェーブレ
ット変換係数を出力するウェーブレット変換部と、上記
ウェーブレット変換係数を量子化する量子化部と、上記
量子化されたウェーブレット変換係数を、符号化処理単
位ごとにまとめる符号化処理単位構成部と、要求された
符号化時の所望のビットレートを設定するビットレート
設定部と、設定された所望のビットレートで各画像フレ
ームを符号化するために、上記所望のビットレートを各
符号化処理単位に割り振るビットレート制御部と、割り
振られたビットレートで、各符号化処理単位を構成する
上記量子化されたウェーブレット変換係数をビットプレ
ーンごとに符号化し、ビットプレーンごとのエントロピ
ー符号化データを生成するエントロピー符号化部と、生
成されたビットプレーンごとのエントロピー符号化デー
タと、各画像フレームの符号化に用いた符号化パラメー
タを、各画像フレームの符号化データとして結合し、符
号化ビットストリームを生成する符号化ストリーム生成
部とを備えたものである。
【００１１】この発明に係る動画像復号装置は、符号化
ビットストリームより各画像フレームの符号化データを
抽出する符号化データ抽出部と、抽出された各画像フレ
ームの符号化データより、エントロピー符号化データを
分離するエントロピー符号化データ分離部と、要求され
た復号時の所望のビットレートを設定するビットレート
設定部と、設定された所望のビットレートで各画像フレ
ームを復号するために、上記所望のビットレートを各符
号化処理単位に割り振るビットレート制御部と、割り振
られたビットレートで、分離された上記エントロピー符
号化データを、各符号化処理単位ごとにビットプレーン
単位でエントロピー復号し、量子化されたウェーブレッ
ト変換係数を求めるエントロピー復号部と、上記量子化
されたウェーブレット変換係数に逆量子化処理を施す逆
量子化部と、上記逆量子化処理されたウェーブレット変
換係数にウェーブレット逆変換を施し画像フレームを再
生するウェーブレット逆変換部と、再生された各画像フ
レームを時系列順に並べて動画像を生成し動画像データ
を出力する動画像生成部とを備えたものである。
ビットストリームより各画像フレームの符号化データを
抽出する符号化データ抽出部と、抽出された各画像フレ
ームの符号化データより、エントロピー符号化データを
分離するエントロピー符号化データ分離部と、要求され
た復号時の所望のビットレートを設定するビットレート
設定部と、設定された所望のビットレートで各画像フレ
ームを復号するために、上記所望のビットレートを各符
号化処理単位に割り振るビットレート制御部と、割り振
られたビットレートで、分離された上記エントロピー符
号化データを、各符号化処理単位ごとにビットプレーン
単位でエントロピー復号し、量子化されたウェーブレッ
ト変換係数を求めるエントロピー復号部と、上記量子化
されたウェーブレット変換係数に逆量子化処理を施す逆
量子化部と、上記逆量子化処理されたウェーブレット変
換係数にウェーブレット逆変換を施し画像フレームを再
生するウェーブレット逆変換部と、再生された各画像フ
レームを時系列順に並べて動画像を生成し動画像データ
を出力する動画像生成部とを備えたものである。
【００１２】この発明に係る動画像符号化装置は、動画
像データを入力し動画像を構成する画像フレームを抽出
する画像フレーム抽出部と、抽出された画像フレームを
ウェーブレット変換して、ウェーブレット変換係数を出
力するウェーブレット変換部と、上記ウェーブレット変
換係数を量子化する量子化部と、上記量子化されたウェ
ーブレット変換係数を、符号化処理単位ごとにまとめる
符号化処理単位構成部と、要求された符号化時の所望の
符号化処理時間を設定する符号化時間設定部と、設定さ
れた所望の符号化処理時間で各画像フレームを符号化す
るために、上記所望の符号化処理時間を各符号化処理単
位に割り振る符号化時間制御部と、割り振られた符号化
処理時間で、各符号化処理単位を構成する上記量子化さ
れたウェーブレット変換係数をビットプレーンごとに符
号化し、ビットプレーンごとのエントロピー符号化デー
タを生成するエントロピー符号化部と、生成されたビッ
トプレーンごとのエントロピー符号化データと、各画像
フレームの符号化に用いた符号化パラメータを、各画像
フレームの符号化データとして結合し、符号化ビットス
トリームを生成する符号化ストリーム生成部とを備えた
ものである。
像データを入力し動画像を構成する画像フレームを抽出
する画像フレーム抽出部と、抽出された画像フレームを
ウェーブレット変換して、ウェーブレット変換係数を出
力するウェーブレット変換部と、上記ウェーブレット変
換係数を量子化する量子化部と、上記量子化されたウェ
ーブレット変換係数を、符号化処理単位ごとにまとめる
符号化処理単位構成部と、要求された符号化時の所望の
符号化処理時間を設定する符号化時間設定部と、設定さ
れた所望の符号化処理時間で各画像フレームを符号化す
るために、上記所望の符号化処理時間を各符号化処理単
位に割り振る符号化時間制御部と、割り振られた符号化
処理時間で、各符号化処理単位を構成する上記量子化さ
れたウェーブレット変換係数をビットプレーンごとに符
号化し、ビットプレーンごとのエントロピー符号化デー
タを生成するエントロピー符号化部と、生成されたビッ
トプレーンごとのエントロピー符号化データと、各画像
フレームの符号化に用いた符号化パラメータを、各画像
フレームの符号化データとして結合し、符号化ビットス
トリームを生成する符号化ストリーム生成部とを備えた
ものである。
【００１３】この発明に係る動画像復号装置は、符号化
ビットストリームより各画像フレームの符号化データを
抽出する符号化データ抽出部と、抽出された各画像フレ
ームの符号化データより、エントロピー符号化データを
分離するエントロピー符号化データ分離部と、要求され
た復号時の所望の復号処理時間を設定する復号時間設定
部と、設定された所望の復号処理時間で各画像フレーム
を復号するために、上記所望の復号処理時間を各符号化
処理単位に割り振る復号時間制御部と、割り振られた復
号処理時間で、分離された上記エントロピー符号化デー
タを、各符号化処理単位ごとにビットプレーン単位でエ
ントロピー復号し、量子化されたウェーブレット変換係
数を求めるエントロピー復号部と、上記量子化されたウ
ェーブレット変換係数に逆量子化処理を施す逆量子化部
と、上記逆量子化されたウェーブレット変換係数にウェ
ーブレット逆変換を施し画像フレームを再生するウェー
ブレット逆変換部と、再生された各画像フレームを時系
列順に並べて動画像を生成し動画像データを出力する動
画像生成部とを備えたものである。
ビットストリームより各画像フレームの符号化データを
抽出する符号化データ抽出部と、抽出された各画像フレ
ームの符号化データより、エントロピー符号化データを
分離するエントロピー符号化データ分離部と、要求され
た復号時の所望の復号処理時間を設定する復号時間設定
部と、設定された所望の復号処理時間で各画像フレーム
を復号するために、上記所望の復号処理時間を各符号化
処理単位に割り振る復号時間制御部と、割り振られた復
号処理時間で、分離された上記エントロピー符号化デー
タを、各符号化処理単位ごとにビットプレーン単位でエ
ントロピー復号し、量子化されたウェーブレット変換係
数を求めるエントロピー復号部と、上記量子化されたウ
ェーブレット変換係数に逆量子化処理を施す逆量子化部
と、上記逆量子化されたウェーブレット変換係数にウェ
ーブレット逆変換を施し画像フレームを再生するウェー
ブレット逆変換部と、再生された各画像フレームを時系
列順に並べて動画像を生成し動画像データを出力する動
画像生成部とを備えたものである。
【００１４】この発明に係る動画像符号化装置は、画像
フレーム抽出部により抽出された画像フレーム上で注目
領域を選択し、注目領域の座標情報を出力するＲＯＩ
（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）選択部と、
選択された注目領域に、他領域に対しての画質の優先度
を設定し、その優先度値を出力するＲＯＩ優先度設定部
と、上記ＲＯＩ選択部より出力された注目領域の座標情
報に基づき、選択された注目領域に対応するウェーブレ
ット変換係数を、ＲＯＩ変換係数として特定するＲＯＩ
マスク生成部と、量子化部より出力された量子化された
ウェーブレット変換係数を入力し、上記ＲＯＩマスク生
成部により特定されたＲＯＩ変換係数の量子化値を、上
記ＲＯＩ優先度設定部により設定された画質の優先度値
に対応してスケールアップし、スケールアップしたＲＯ
Ｉ変換係数の量子化値を含む上記量子化されたウェーブ
レット変換係数を符号化処理単位構成部に出力するＲＯ
Ｉスケールアップ部とを備え、符号化ストリーム生成部
が、上記ＲＯＩ選択部より出力された注目領域の座標情
報と上記ＲＯＩ優先度設定部より出力された優先度値
を、符号化ビットストリームに付加するものである。
フレーム抽出部により抽出された画像フレーム上で注目
領域を選択し、注目領域の座標情報を出力するＲＯＩ
（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ）選択部と、
選択された注目領域に、他領域に対しての画質の優先度
を設定し、その優先度値を出力するＲＯＩ優先度設定部
と、上記ＲＯＩ選択部より出力された注目領域の座標情
報に基づき、選択された注目領域に対応するウェーブレ
ット変換係数を、ＲＯＩ変換係数として特定するＲＯＩ
マスク生成部と、量子化部より出力された量子化された
ウェーブレット変換係数を入力し、上記ＲＯＩマスク生
成部により特定されたＲＯＩ変換係数の量子化値を、上
記ＲＯＩ優先度設定部により設定された画質の優先度値
に対応してスケールアップし、スケールアップしたＲＯ
Ｉ変換係数の量子化値を含む上記量子化されたウェーブ
レット変換係数を符号化処理単位構成部に出力するＲＯ
Ｉスケールアップ部とを備え、符号化ストリーム生成部
が、上記ＲＯＩ選択部より出力された注目領域の座標情
報と上記ＲＯＩ優先度設定部より出力された優先度値
を、符号化ビットストリームに付加するものである。
【００１５】この発明に係る動画像復号装置は、エント
ロピー符号化データ分離部が、入力した各画像フレーム
の符号化データから注目領域の位置情報と注目領域の画
質の優先度値を抽出し、抽出された注目領域の位置情報
に基づき、注目領域に対応するウェーブレット変換係数
を、ＲＯＩ変換係数として特定するＲＯＩマスク生成部
と、エントロピー復号部より出力された量子化されたウ
ェーブレット変換係数を入力し、上記ＲＯＩマスク生成
部により特定されたＲＯＩ変換係数の量子化値を、上記
エントロピー符号化データ分離部により抽出された注目
領域の画質の優先度値に対応してスケールダウンし、ス
ケールダウンしたＲＯＩ変換係数の量子化値を含む上記
量子化されたウェーブレット変換係数を逆量子化部に出
力するＲＯＩスケールダウン部とを備えたものである。
ロピー符号化データ分離部が、入力した各画像フレーム
の符号化データから注目領域の位置情報と注目領域の画
質の優先度値を抽出し、抽出された注目領域の位置情報
に基づき、注目領域に対応するウェーブレット変換係数
を、ＲＯＩ変換係数として特定するＲＯＩマスク生成部
と、エントロピー復号部より出力された量子化されたウ
ェーブレット変換係数を入力し、上記ＲＯＩマスク生成
部により特定されたＲＯＩ変換係数の量子化値を、上記
エントロピー符号化データ分離部により抽出された注目
領域の画質の優先度値に対応してスケールダウンし、ス
ケールダウンしたＲＯＩ変換係数の量子化値を含む上記
量子化されたウェーブレット変換係数を逆量子化部に出
力するＲＯＩスケールダウン部とを備えたものである。
【００１６】この発明に係る動画像符号化装置は、復号
側より送信された画像フレームの注目領域の座標情報
と、他領域に対しての注目領域の画質の優先度値を入力
するＲＯＩ情報入力部と、上記ＲＯＩ情報入力部より出
力された注目領域の座標情報に基づき、注目領域に対応
するウェーブレット変換係数を、ＲＯＩ変換係数として
特定するＲＯＩマスク生成部と、量子化部より出力され
た量子化されたウェーブレット変換係数を入力し、上記
ＲＯＩマスク生成部により特定されたＲＯＩ変換係数の
量子化値を、上記ＲＯＩ情報入力部より出力された画質
の優先度値に対応してスケールアップし、スケールアッ
プしたＲＯＩ変換係数の量子化値を含む上記量子化され
たウェーブレット変換係数を符号化処理単位構成部に出
力するＲＯＩスケールアップ部とを備えたものである。
側より送信された画像フレームの注目領域の座標情報
と、他領域に対しての注目領域の画質の優先度値を入力
するＲＯＩ情報入力部と、上記ＲＯＩ情報入力部より出
力された注目領域の座標情報に基づき、注目領域に対応
するウェーブレット変換係数を、ＲＯＩ変換係数として
特定するＲＯＩマスク生成部と、量子化部より出力され
た量子化されたウェーブレット変換係数を入力し、上記
ＲＯＩマスク生成部により特定されたＲＯＩ変換係数の
量子化値を、上記ＲＯＩ情報入力部より出力された画質
の優先度値に対応してスケールアップし、スケールアッ
プしたＲＯＩ変換係数の量子化値を含む上記量子化され
たウェーブレット変換係数を符号化処理単位構成部に出
力するＲＯＩスケールアップ部とを備えたものである。
【００１７】この発明に係る動画像復号装置は、動画像
生成部が生成した動画像の画像フレーム上で注目領域を
選択し、注目領域の座標情報を出力するＲＯＩ選択部
と、選択された注目領域に、他領域に対しての画質の優
先度を設定し優先度値を出力するＲＯＩ優先度設定部
と、上記ＲＯＩ選択部から出力された注目領域の座標情
報と、上記ＲＯＩ優先度設定部から出力された注目領域
の画質の優先度値を、動画像の符号化側にフィードバッ
クするＲＯＩ情報フィードバック部とを備えたものであ
る。
生成部が生成した動画像の画像フレーム上で注目領域を
選択し、注目領域の座標情報を出力するＲＯＩ選択部
と、選択された注目領域に、他領域に対しての画質の優
先度を設定し優先度値を出力するＲＯＩ優先度設定部
と、上記ＲＯＩ選択部から出力された注目領域の座標情
報と、上記ＲＯＩ優先度設定部から出力された注目領域
の画質の優先度値を、動画像の符号化側にフィードバッ
クするＲＯＩ情報フィードバック部とを備えたものであ
る。
【００１８】この発明に係る動画像符号化装置は、多チ
ャネル系列の動画像データを入力して符号化する際に、
各チャネル系列の動画像データを入力する比率を設定す
ると共に、エントロピー符号化部により生成された各チ
ャネル系列のエントロピー符号化データを出力する比率
を設定するチャネル比率設定部と、上記チャネル比率設
定部により設定された各チャネル系列の動画像データを
入力する比率に基づき、各チャネル系列の動画像データ
を入力して、画像フレーム抽出部に出力する動画像系列
選択部と、上記チャネル比率設定部により設定された各
チャネル系列のエントロピー符号化データを出力する比
率に基づき、上記エントロピー符号化部により生成され
た各チャネル系列のエントロピー符号化データを、符号
化ストリーム生成部に出力する各系列データ分配部とを
備えたものである。
ャネル系列の動画像データを入力して符号化する際に、
各チャネル系列の動画像データを入力する比率を設定す
ると共に、エントロピー符号化部により生成された各チ
ャネル系列のエントロピー符号化データを出力する比率
を設定するチャネル比率設定部と、上記チャネル比率設
定部により設定された各チャネル系列の動画像データを
入力する比率に基づき、各チャネル系列の動画像データ
を入力して、画像フレーム抽出部に出力する動画像系列
選択部と、上記チャネル比率設定部により設定された各
チャネル系列のエントロピー符号化データを出力する比
率に基づき、上記エントロピー符号化部により生成され
た各チャネル系列のエントロピー符号化データを、符号
化ストリーム生成部に出力する各系列データ分配部とを
備えたものである。
【００１９】この発明に係る動画像復号装置は、多チャ
ネル系列の符号化データを含んだ符号化ビットストリー
ムを入力して復号する際に、各チャネル系列の符号化デ
ータを入力する比率を設定すると共に、ウェーブレット
逆変換部により再生された各チャネル系列の画像フレー
ムを出力する比率を設定するチャネル比率設定部と、上
記チャネル比率設定部により設定された各チャネル系列
の符号化データを入力する比率に基づき、符号化データ
抽出部にて、上記符号化ビットストリームから各チャネ
ル系列の符号化データを選択的に抽出するよう制御を行
う符号化データ系列選択部と、上記チャネル比率設定部
により設定された各チャネル系列の画像フレームを出力
する比率に基づき、ウェーブレット逆変換部により再生
された各チャネル系列の画像フレームを、動画像生成部
に出力する各系列画像分配部とを備えたものである。
ネル系列の符号化データを含んだ符号化ビットストリー
ムを入力して復号する際に、各チャネル系列の符号化デ
ータを入力する比率を設定すると共に、ウェーブレット
逆変換部により再生された各チャネル系列の画像フレー
ムを出力する比率を設定するチャネル比率設定部と、上
記チャネル比率設定部により設定された各チャネル系列
の符号化データを入力する比率に基づき、符号化データ
抽出部にて、上記符号化ビットストリームから各チャネ
ル系列の符号化データを選択的に抽出するよう制御を行
う符号化データ系列選択部と、上記チャネル比率設定部
により設定された各チャネル系列の画像フレームを出力
する比率に基づき、ウェーブレット逆変換部により再生
された各チャネル系列の画像フレームを、動画像生成部
に出力する各系列画像分配部とを備えたものである。
【００２０】この発明に係る動画像符号化方法は、動画
像データを入力し動画像を構成する画像フレームを抽出
するステップと、抽出された画像フレームをウェーブレ
ット変換して、ウェーブレット変換係数を出力するステ
ップと、上記ウェーブレット変換係数を量子化するステ
ップと、上記量子化されたウェーブレット変換係数を、
符号化処理単位ごとにまとめるステップと、要求された
符号化時の所望のビットレートを設定するステップと、
設定された所望のビットレートで各画像フレームを符号
化するために、上記所望のビットレートを各符号化処理
単位に割り振るステップと、割り振られたビットレート
で、各符号化処理単位を構成する上記量子化されたウェ
ーブレット変換係数をビットプレーンごとに符号化し、
ビットプレーンごとのエントロピー符号化データを生成
するステップと、生成されたビットプレーンごとのエン
トロピー符号化データと、各画像フレームの符号化に用
いた符号化パラメータを、各画像フレームの符号化デー
タとして結合し、符号化ビットストリームを生成するス
テップとを備えたものである。
像データを入力し動画像を構成する画像フレームを抽出
するステップと、抽出された画像フレームをウェーブレ
ット変換して、ウェーブレット変換係数を出力するステ
ップと、上記ウェーブレット変換係数を量子化するステ
ップと、上記量子化されたウェーブレット変換係数を、
符号化処理単位ごとにまとめるステップと、要求された
符号化時の所望のビットレートを設定するステップと、
設定された所望のビットレートで各画像フレームを符号
化するために、上記所望のビットレートを各符号化処理
単位に割り振るステップと、割り振られたビットレート
で、各符号化処理単位を構成する上記量子化されたウェ
ーブレット変換係数をビットプレーンごとに符号化し、
ビットプレーンごとのエントロピー符号化データを生成
するステップと、生成されたビットプレーンごとのエン
トロピー符号化データと、各画像フレームの符号化に用
いた符号化パラメータを、各画像フレームの符号化デー
タとして結合し、符号化ビットストリームを生成するス
テップとを備えたものである。
【００２１】この発明に係る動画像復号方法は、符号化
ビットストリームより各画像フレームの符号化データを
抽出するステップと、抽出された各画像フレームの符号
化データより、エントロピー符号化データを分離するス
テップと、要求された復号時の所望のビットレートを設
定するステップと、設定された所望のビットレートで各
画像フレームを復号するために、上記所望のビットレー
トを各符号化処理単位に割り振るステップと、割り振ら
れたビットレートで、分離された上記エントロピー符号
化データを、各符号化処理単位ごとにビットプレーン単
位でエントロピー復号し、量子化されたウェーブレット
変換係数を求めるステップと、上記量子化されたウェー
ブレット変換係数に逆量子化処理を施すステップと、上
記逆量子化処理されたウェーブレット変換係数にウェー
ブレット逆変換を施し画像フレームを再生するステップ
と、再生された各画像フレームを時系列順に並べて動画
像を生成し動画像データを出力するステップとを備えた
ものである。
ビットストリームより各画像フレームの符号化データを
抽出するステップと、抽出された各画像フレームの符号
化データより、エントロピー符号化データを分離するス
テップと、要求された復号時の所望のビットレートを設
定するステップと、設定された所望のビットレートで各
画像フレームを復号するために、上記所望のビットレー
トを各符号化処理単位に割り振るステップと、割り振ら
れたビットレートで、分離された上記エントロピー符号
化データを、各符号化処理単位ごとにビットプレーン単
位でエントロピー復号し、量子化されたウェーブレット
変換係数を求めるステップと、上記量子化されたウェー
ブレット変換係数に逆量子化処理を施すステップと、上
記逆量子化処理されたウェーブレット変換係数にウェー
ブレット逆変換を施し画像フレームを再生するステップ
と、再生された各画像フレームを時系列順に並べて動画
像を生成し動画像データを出力するステップとを備えた
ものである。
【００２２】この発明に係る動画像符号化方法は、動画
像データを入力し動画像を構成する画像フレームを抽出
するステップと、抽出された画像フレームをウェーブレ
ット変換して、ウェーブレット変換係数を出力するステ
ップと、上記ウェーブレット変換係数を量子化するステ
ップと、上記量子化されたウェーブレット変換係数を、
符号化処理単位ごとにまとめるステップと、要求された
符号化時の所望の符号化処理時間を設定するステップ
と、設定された符号化処理時間で各画像フレームを符号
化するために、上記所望の符号化処理時間を各符号化処
理単位に割り振るステップと、割り振られた符号化処理
時間で、各符号化処理単位を構成する上記量子化された
ウェーブレット変換係数をビットプレーンごとに符号化
し、ビットプレーンごとのエントロピー符号化データを
生成するステップと、生成されたビットプレーンごとの
エントロピー符号化データと、各画像フレームの符号化
に用いた符号化パラメータを、各画像フレームの符号化
データとして結合し、符号化ビットストリームを生成す
るステップとを備えたものである。
像データを入力し動画像を構成する画像フレームを抽出
するステップと、抽出された画像フレームをウェーブレ
ット変換して、ウェーブレット変換係数を出力するステ
ップと、上記ウェーブレット変換係数を量子化するステ
ップと、上記量子化されたウェーブレット変換係数を、
符号化処理単位ごとにまとめるステップと、要求された
符号化時の所望の符号化処理時間を設定するステップ
と、設定された符号化処理時間で各画像フレームを符号
化するために、上記所望の符号化処理時間を各符号化処
理単位に割り振るステップと、割り振られた符号化処理
時間で、各符号化処理単位を構成する上記量子化された
ウェーブレット変換係数をビットプレーンごとに符号化
し、ビットプレーンごとのエントロピー符号化データを
生成するステップと、生成されたビットプレーンごとの
エントロピー符号化データと、各画像フレームの符号化
に用いた符号化パラメータを、各画像フレームの符号化
データとして結合し、符号化ビットストリームを生成す
るステップとを備えたものである。
【００２３】この発明に係る動画像復号方法は、符号化
ビットストリームより各画像フレームの符号化データを
抽出するステップと、抽出された各画像フレームの符号
化データより、エントロピー符号化データを分離するス
テップと、要求された復号時の所望の復号処理時間を設
定するステップと、設定された所望の復号処理時間で各
画像フレームを復号するために、上記所望の復号処理時
間を各符号化処理単位に割り振るステップと、割り振ら
れた復号処理時間で、分離された上記エントロピー符号
化データを、各符号化処理単位ごとにビットプレーン単
位でエントロピー復号し、量子化されたウェーブレット
変換係数を求めるステップと、上記量子化されたウェー
ブレット変換係数に逆量子化処理を施すステップと、上
記逆量子化されたウェーブレット変換係数にウェーブレ
ット逆変換を施し画像フレームを再生するステップと、
再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力するステップとを備えたもの
である。
ビットストリームより各画像フレームの符号化データを
抽出するステップと、抽出された各画像フレームの符号
化データより、エントロピー符号化データを分離するス
テップと、要求された復号時の所望の復号処理時間を設
定するステップと、設定された所望の復号処理時間で各
画像フレームを復号するために、上記所望の復号処理時
間を各符号化処理単位に割り振るステップと、割り振ら
れた復号処理時間で、分離された上記エントロピー符号
化データを、各符号化処理単位ごとにビットプレーン単
位でエントロピー復号し、量子化されたウェーブレット
変換係数を求めるステップと、上記量子化されたウェー
ブレット変換係数に逆量子化処理を施すステップと、上
記逆量子化されたウェーブレット変換係数にウェーブレ
ット逆変換を施し画像フレームを再生するステップと、
再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力するステップとを備えたもの
である。
【００２４】
【発明の実施の形態】以下、この発明の実施の一形態を
説明する。 実施の形態１．図１はこの発明の実施の形態１による動
画像符号化装置の構成を示すブロック図であり、図にお
いて、１０１は、動画像データを入力し、動画像を構成
する画像フレームを１フレームづつ抽出する画像フレー
ム抽出部で、１０２は、画像フレーム抽出部１０１が抽
出した画像フレームをウェーブレット変換して、そのウ
ェーブレット変換係数を各サブバンドごとに出力するウ
ェーブレット変換部である。
説明する。 実施の形態１．図１はこの発明の実施の形態１による動
画像符号化装置の構成を示すブロック図であり、図にお
いて、１０１は、動画像データを入力し、動画像を構成
する画像フレームを１フレームづつ抽出する画像フレー
ム抽出部で、１０２は、画像フレーム抽出部１０１が抽
出した画像フレームをウェーブレット変換して、そのウ
ェーブレット変換係数を各サブバンドごとに出力するウ
ェーブレット変換部である。
【００２５】また、図１において、１０３は、ウェーブ
レット変換部１０２が出力したウェーブレット変換係数
を、しきい値のセットと比較し量子化する量子化部で、
１０４は、量子化されたウェーブレット変換係数を、エ
ントロピー符号化処理する符号化処理単位ごとにまとめ
る符号化処理単位構成部で、１０５は、要求された符号
化時の所望のビットレートを、ターゲットビットレート
として設定するビットレート設定部で、１０６は、ビッ
トレート設定部１０５により設定されたターゲットビッ
トレートで各画像フレームを符号化するために、各符号
化処理単位からどれだけの量の符号化データを作成する
かを制御する、すなわち、ビットレート設定部１０５に
より設定されたターゲットビットレートで各画像フレー
ムを符号化するために、ターゲットビットレートを各符
号化処理単位に割り振るビットレート制御部である。
レット変換部１０２が出力したウェーブレット変換係数
を、しきい値のセットと比較し量子化する量子化部で、
１０４は、量子化されたウェーブレット変換係数を、エ
ントロピー符号化処理する符号化処理単位ごとにまとめ
る符号化処理単位構成部で、１０５は、要求された符号
化時の所望のビットレートを、ターゲットビットレート
として設定するビットレート設定部で、１０６は、ビッ
トレート設定部１０５により設定されたターゲットビッ
トレートで各画像フレームを符号化するために、各符号
化処理単位からどれだけの量の符号化データを作成する
かを制御する、すなわち、ビットレート設定部１０５に
より設定されたターゲットビットレートで各画像フレー
ムを符号化するために、ターゲットビットレートを各符
号化処理単位に割り振るビットレート制御部である。
【００２６】さらに、図１において、１０７は、ビット
レート制御部１０６で割り振られたビットレートで、各
符号化処理単位を構成する量子化されたウェーブレット
変換係数をビットプレーンごとに符号化し、ビットプレ
ーンごとのエントロピー符号化データを生成するエント
ロピー符号化部で、１０８は、生成されたビットプレー
ンごとのエントロピー符号化データと、各画像フレーム
のシリアル番号、画像サイズ、サブバンド分割レベル
数、フィルタ等の各画像フレームの符号化に用いた符号
化パラメータを、各画像フレームの符号化データとして
結合し、１つの符号化ビットストリームを生成する符号
化ストリーム生成部である。
レート制御部１０６で割り振られたビットレートで、各
符号化処理単位を構成する量子化されたウェーブレット
変換係数をビットプレーンごとに符号化し、ビットプレ
ーンごとのエントロピー符号化データを生成するエント
ロピー符号化部で、１０８は、生成されたビットプレー
ンごとのエントロピー符号化データと、各画像フレーム
のシリアル番号、画像サイズ、サブバンド分割レベル
数、フィルタ等の各画像フレームの符号化に用いた符号
化パラメータを、各画像フレームの符号化データとして
結合し、１つの符号化ビットストリームを生成する符号
化ストリーム生成部である。
【００２７】次に動作について説明する。まず、画像フ
レーム抽出部１０１は、動画像データを入力し動画像を
構成する画像フレームを１フレームずつ時系列順に抽出
して、後段のウェーブレット変換部１０２へ出力する。
レーム抽出部１０１は、動画像データを入力し動画像を
構成する画像フレームを１フレームずつ時系列順に抽出
して、後段のウェーブレット変換部１０２へ出力する。
【００２８】ウェーブレット変換部１０２は、抽出され
た画像フレームをＭ段階のウェーブレット変換して、そ
のウェーブレット変換係数を出力する。図２はウェーブ
レット変換部１０２の動作を説明する図であり、図２に
示すように、例えば、１段階目では、画像フレームをＬ
Ｌ1 （横方向低周波成分、縦方向低周波成分），ＬＨ 1
（横方向低周波成分、縦方向高周波成分），ＨＬ1 （横
方向高周波成分、縦方向低周波成分），ＨＨ1 （横方向
高周波成分、縦方向高周波成分）にサブバンド分割して
ウェーブレット変換する。
た画像フレームをＭ段階のウェーブレット変換して、そ
のウェーブレット変換係数を出力する。図２はウェーブ
レット変換部１０２の動作を説明する図であり、図２に
示すように、例えば、１段階目では、画像フレームをＬ
Ｌ1 （横方向低周波成分、縦方向低周波成分），ＬＨ 1
（横方向低周波成分、縦方向高周波成分），ＨＬ1 （横
方向高周波成分、縦方向低周波成分），ＨＨ1 （横方向
高周波成分、縦方向高周波成分）にサブバンド分割して
ウェーブレット変換する。
【００２９】２段階目では、１段階目での最低周波数成
分ＬＬ1 に、１段階目と同様なサブバンド分割を施すこ
とで、画像フレームをＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ
2 ，ＬＨ1 ，ＨＬ1 ，ＨＨ1 にサブバンド分割してウェ
ーブレット変換する。３段階目以降も、２段階目と同様
に最低周波数成分に順次サブバンド分割を施すことで、
画像フレームをウェーブレット変換し、Ｍ段階のウェー
ブレット変換が完了するまで繰り返し実行する。
分ＬＬ1 に、１段階目と同様なサブバンド分割を施すこ
とで、画像フレームをＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ
2 ，ＬＨ1 ，ＨＬ1 ，ＨＨ1 にサブバンド分割してウェ
ーブレット変換する。３段階目以降も、２段階目と同様
に最低周波数成分に順次サブバンド分割を施すことで、
画像フレームをウェーブレット変換し、Ｍ段階のウェー
ブレット変換が完了するまで繰り返し実行する。
【００３０】量子化部１０３は、ウェーブレット変換部
１０２が出力したウェーブレット変換係数を、有限個の
しきい値と比較して量子化し、量子化されたウェーブレ
ット変換係数の値を出力する。ウェーブレット変換係数
の値が整数値として得られている場合については、明示
的な量子化処理を省略し、各変換係数値をそのまま量子
化結果として出力する。
１０２が出力したウェーブレット変換係数を、有限個の
しきい値と比較して量子化し、量子化されたウェーブレ
ット変換係数の値を出力する。ウェーブレット変換係数
の値が整数値として得られている場合については、明示
的な量子化処理を省略し、各変換係数値をそのまま量子
化結果として出力する。
【００３１】符号化処理単位構成部１０４は、量子化部
１０３が出力した量子化されたウェーブレット変換係数
を、後段のエントロピー符号化部１０７でエントロピー
符号化処理する符号化処理単位ごとにまとめる。各符号
化処理単位は、全てのサブバンドを構成するウェーブレ
ット変換係数、各サブバンドを構成するウェーブレット
変換係数、あるいは、各サブバンドを小ブロックに分割
した各小ブロックを構成するウェーブレット変換係数の
いずれを選んでも良い。
１０３が出力した量子化されたウェーブレット変換係数
を、後段のエントロピー符号化部１０７でエントロピー
符号化処理する符号化処理単位ごとにまとめる。各符号
化処理単位は、全てのサブバンドを構成するウェーブレ
ット変換係数、各サブバンドを構成するウェーブレット
変換係数、あるいは、各サブバンドを小ブロックに分割
した各小ブロックを構成するウェーブレット変換係数の
いずれを選んでも良い。
【００３２】ビットレート設定部１０５は、符号化側で
の要求や、伝送路の帯域幅又はトラフィックの状態によ
り伝送路からフィードバックされた要求や、又は、復号
側での要求、例えば、これまでに送信された動画像の復
号結果によりフィードバックされた要求に従って、符号
化時の所望のビットレートをターゲットビットレートと
して設定する。ここでの要求は、ターゲットビットレー
トの値であっても、高画質、中画質、低画質等の画質の
指標であっても良く、後者のような画質の指標で与える
場合には、画質の指標をターゲットビットレートに変換
する変換テーブルを参照して所望のビットレートを設定
する。
の要求や、伝送路の帯域幅又はトラフィックの状態によ
り伝送路からフィードバックされた要求や、又は、復号
側での要求、例えば、これまでに送信された動画像の復
号結果によりフィードバックされた要求に従って、符号
化時の所望のビットレートをターゲットビットレートと
して設定する。ここでの要求は、ターゲットビットレー
トの値であっても、高画質、中画質、低画質等の画質の
指標であっても良く、後者のような画質の指標で与える
場合には、画質の指標をターゲットビットレートに変換
する変換テーブルを参照して所望のビットレートを設定
する。
【００３３】ビットレート制御部１０６は、ビットレー
ト設定部１０５により設定された所望のビットレート、
すなわち、ターゲットビットレートで各画像フレームを
符号化するために、ターゲットビットレートを各符号化
処理単位に割り振ることにより、各符号化処理単位のど
のレベルのビットプレーンまでの符号化データを、符号
化ビットストリームの生成に利用するかを考慮して、エ
ントロピー符号化を施すビットプレーンの個数を符号化
処理単位ごとに制御したり、又は、全てのビットプレー
ンを符号化し終わった後に、必要なデータ量を最上位ビ
ットプレーンに対応するものから順に取り出す処理を行
う。
ト設定部１０５により設定された所望のビットレート、
すなわち、ターゲットビットレートで各画像フレームを
符号化するために、ターゲットビットレートを各符号化
処理単位に割り振ることにより、各符号化処理単位のど
のレベルのビットプレーンまでの符号化データを、符号
化ビットストリームの生成に利用するかを考慮して、エ
ントロピー符号化を施すビットプレーンの個数を符号化
処理単位ごとに制御したり、又は、全てのビットプレー
ンを符号化し終わった後に、必要なデータ量を最上位ビ
ットプレーンに対応するものから順に取り出す処理を行
う。
【００３４】エントロピー符号化部１０７は、ビットレ
ート制御部１０６で割り振られたビットレートで、符号
化処理単位構成部１０４によりまとめられた各符号化処
理単位を構成する量子化されたウェーブレット変換係数
の値を、最上位ビットプレーンから下位ビットプレーン
に向かって、順次ビットプレーンごとに符号化し、ビッ
トプレーンごとのエントロピー符号化データを生成す
る。各ウェーブレット変換係数の符号（ｓｉｇｎ）ビッ
トの符号化処理が行われるタイミングは変換係数によっ
て異なり、各ウェーブレット変換係数の符号ビットは、
その変換係数の最上位の有効ビット（値１のビット）が
符号化され、それより１つ下位のビットプレーンの符号
化が開始されるまでの間に符号化処理される。一例とし
て、あるウェーブレット変換係数の最上位の有効ビット
が符号化された直後に、そのウェーブレット変換係数の
符号ビットの符号化を行う方法がある。
ート制御部１０６で割り振られたビットレートで、符号
化処理単位構成部１０４によりまとめられた各符号化処
理単位を構成する量子化されたウェーブレット変換係数
の値を、最上位ビットプレーンから下位ビットプレーン
に向かって、順次ビットプレーンごとに符号化し、ビッ
トプレーンごとのエントロピー符号化データを生成す
る。各ウェーブレット変換係数の符号（ｓｉｇｎ）ビッ
トの符号化処理が行われるタイミングは変換係数によっ
て異なり、各ウェーブレット変換係数の符号ビットは、
その変換係数の最上位の有効ビット（値１のビット）が
符号化され、それより１つ下位のビットプレーンの符号
化が開始されるまでの間に符号化処理される。一例とし
て、あるウェーブレット変換係数の最上位の有効ビット
が符号化された直後に、そのウェーブレット変換係数の
符号ビットの符号化を行う方法がある。
【００３５】なお、特にターゲットビットレートの指定
がない場合には、エントロピー符号化部１０７は、各符
号化処理単位で最下位ビットプレーンまでのエントロピ
ー符号化を行い、対応する全てのエントロピー符号化デ
ータは、符号化ビットストリームの生成に用いられる。
がない場合には、エントロピー符号化部１０７は、各符
号化処理単位で最下位ビットプレーンまでのエントロピ
ー符号化を行い、対応する全てのエントロピー符号化デ
ータは、符号化ビットストリームの生成に用いられる。
【００３６】符号化ストリーム生成部１０８は、各符号
化処理単位で生成された各ビットプレーンのエントロピ
ー符号化データと、各画像フレームのシリアル番号、画
像サイズ、サブバンド分割レベル数、フィルタ等の各画
像フレームの符号化に用いた符号化パラメータを、各画
像フレームの符号化データとして結合し、１つの符号化
ビットストリームを生成する。この場合、符号化ストリ
ーム生成部１０８は、どのビットプレーンの符号化デー
タが、どの並びに埋め込まれているかを特定できるよう
に結合して、符号化ビットストリームを生成する。
化処理単位で生成された各ビットプレーンのエントロピ
ー符号化データと、各画像フレームのシリアル番号、画
像サイズ、サブバンド分割レベル数、フィルタ等の各画
像フレームの符号化に用いた符号化パラメータを、各画
像フレームの符号化データとして結合し、１つの符号化
ビットストリームを生成する。この場合、符号化ストリ
ーム生成部１０８は、どのビットプレーンの符号化デー
タが、どの並びに埋め込まれているかを特定できるよう
に結合して、符号化ビットストリームを生成する。
【００３７】各ビットプレーンの符号化データを結合す
る順序としては、符号化再生画像のＭｅａｎ Ｓｑｕａ
ｒｅ Ｅｒｒｏｒ（ＭＳＥ）を低減する意味での重要度
の高い順に並べたり、又は、低解像度を担う符号化処理
単位のビットプレーンの符号化データほど早い順序で、
かつ、各符号化処理単位内での並びは上位ビットプレー
ンほど早い順序でならべる等があげられる。さらに、符
号化ストリーム生成部１０８では、新たに符号化された
画像フレームの符号化ストリームが、既に符号化された
画像フレームの符号化ストリームに追加され、動画像の
画像フレームの符号化データが１つの符号化ビットスト
リームにまとめられる。
る順序としては、符号化再生画像のＭｅａｎ Ｓｑｕａ
ｒｅ Ｅｒｒｏｒ（ＭＳＥ）を低減する意味での重要度
の高い順に並べたり、又は、低解像度を担う符号化処理
単位のビットプレーンの符号化データほど早い順序で、
かつ、各符号化処理単位内での並びは上位ビットプレー
ンほど早い順序でならべる等があげられる。さらに、符
号化ストリーム生成部１０８では、新たに符号化された
画像フレームの符号化ストリームが、既に符号化された
画像フレームの符号化ストリームに追加され、動画像の
画像フレームの符号化データが１つの符号化ビットスト
リームにまとめられる。
【００３８】以上のように、この実施の形態１によれ
ば、動画像を構成する画像フレームを所望のビットレー
トで個別に符号化できるため、動画像の符号化データか
ら、特定の画像フレームを選択する等の編集性を保ちつ
つ、符号化側や伝送路や復号側の要求を反映して、ある
画像フレームを境に画質を上げたり下げたりして動画像
を伝送することができるという効果が得られる。そのた
め、符号化ビットレート以下の任意のビットレートで、
各画像フレームを復号できる符号化ビットストリームを
生成することができる。
ば、動画像を構成する画像フレームを所望のビットレー
トで個別に符号化できるため、動画像の符号化データか
ら、特定の画像フレームを選択する等の編集性を保ちつ
つ、符号化側や伝送路や復号側の要求を反映して、ある
画像フレームを境に画質を上げたり下げたりして動画像
を伝送することができるという効果が得られる。そのた
め、符号化ビットレート以下の任意のビットレートで、
各画像フレームを復号できる符号化ビットストリームを
生成することができる。
【００３９】また、この実施の形態１によれば、符号化
された動画像を複数の受信先に異なる伝送帯域を通して
配信する場合、帯域幅に応じて各符号化処理単位から取
り出すエントロピー符号化データの量を変えたり、又は
各画像フレームごとに生成された符号化ビットストリー
ムのどの部分を取り出して配信するかを変えるだけで対
応可能になる。これにより、各伝送帯域ごとに異なる動
画像の符号化データを作成するのではなく、符号化処理
の大部分、作成される符号化データの大部分を共有しな
がら、マルチデスティネーション対応の動画像符号化伝
送を実現できるという効果が得られる。例えば、異なる
伝送帯域、異なる復号処理速度を持つ動画像復号装置へ
配信される画像サーバーを構築する際に、個々の伝送帯
域や個々の動画像復号装置用に個別の符号化データを保
持するのでなく、単一の符号化データを保持し、これを
流用することを前提とした画像サーバーの構築が可能に
なるという効果が得られる。
された動画像を複数の受信先に異なる伝送帯域を通して
配信する場合、帯域幅に応じて各符号化処理単位から取
り出すエントロピー符号化データの量を変えたり、又は
各画像フレームごとに生成された符号化ビットストリー
ムのどの部分を取り出して配信するかを変えるだけで対
応可能になる。これにより、各伝送帯域ごとに異なる動
画像の符号化データを作成するのではなく、符号化処理
の大部分、作成される符号化データの大部分を共有しな
がら、マルチデスティネーション対応の動画像符号化伝
送を実現できるという効果が得られる。例えば、異なる
伝送帯域、異なる復号処理速度を持つ動画像復号装置へ
配信される画像サーバーを構築する際に、個々の伝送帯
域や個々の動画像復号装置用に個別の符号化データを保
持するのでなく、単一の符号化データを保持し、これを
流用することを前提とした画像サーバーの構築が可能に
なるという効果が得られる。
【００４０】実施の形態２．図３はこの発明の実施の形
態２による動画像画像復号装置の構成を示すブロック図
であり、図において、２０１は、動画像符号化装置から
送信された符号化ビットストリームを入力し、動画像の
各画像フレームの符号化データを抽出して、各画像フレ
ームごとに出力する符号化データ抽出部で、２０２は、
抽出された各画像フレームの符号化データより、各符号
化処理単位のエントロピー符号化データと符号化パラメ
ータを分離するエントロピー符号化データ分離部であ
る。
態２による動画像画像復号装置の構成を示すブロック図
であり、図において、２０１は、動画像符号化装置から
送信された符号化ビットストリームを入力し、動画像の
各画像フレームの符号化データを抽出して、各画像フレ
ームごとに出力する符号化データ抽出部で、２０２は、
抽出された各画像フレームの符号化データより、各符号
化処理単位のエントロピー符号化データと符号化パラメ
ータを分離するエントロピー符号化データ分離部であ
る。
【００４１】また、図３において、２０３は要求される
復号時の所望のビットレートをターゲットビットレート
として設定するビットレート設定部で、２０４は、ビッ
トレート設定部２０３により設定されたターゲットビッ
トレートで各画像フレームを復号するために、各符号化
処理単位でのエントロピー復号でどれだけのビットレー
トのデータを取り出すかを制御する、すなわち、ビット
レート設定部２０３により設定されたターゲットビット
レートで各画像フレームを復号するために、ターゲット
ビットレートを各符号化処理単位に割り振るビットレー
ト制御部で、２０５は、ビットレート制御部２０４によ
り割り振られたビットレートで、エントロピー符号化デ
ータ分離部２０２により分離されたエントロピー符号化
データを、各符号化処理単位ごとにビットプレーン単位
でエントロピー復号し、符号化処理単位ごとの量子化さ
れたウェーブレット変換係数の値を求めるエントロピー
復号部である。
復号時の所望のビットレートをターゲットビットレート
として設定するビットレート設定部で、２０４は、ビッ
トレート設定部２０３により設定されたターゲットビッ
トレートで各画像フレームを復号するために、各符号化
処理単位でのエントロピー復号でどれだけのビットレー
トのデータを取り出すかを制御する、すなわち、ビット
レート設定部２０３により設定されたターゲットビット
レートで各画像フレームを復号するために、ターゲット
ビットレートを各符号化処理単位に割り振るビットレー
ト制御部で、２０５は、ビットレート制御部２０４によ
り割り振られたビットレートで、エントロピー符号化デ
ータ分離部２０２により分離されたエントロピー符号化
データを、各符号化処理単位ごとにビットプレーン単位
でエントロピー復号し、符号化処理単位ごとの量子化さ
れたウェーブレット変換係数の値を求めるエントロピー
復号部である。
【００４２】さらに、図３において、２０６はエントロ
ピー復号部２０５で得られた量子化されたウェーブレッ
ト変換係数の値に逆量子化処理を施す逆量子化部で、２
０７は、逆量子化処理されたウェーブレット変換係数よ
りなるそれぞれの符号化処理単位より構成される各サブ
バンドに、ウェーブレット逆変換を施し画像フレームを
再生するウェーブレット逆変換部で、２０８は再生され
た画像フレームを時系列順に並べて動画像を生成し動画
像データを出力する動画像生成部である。
ピー復号部２０５で得られた量子化されたウェーブレッ
ト変換係数の値に逆量子化処理を施す逆量子化部で、２
０７は、逆量子化処理されたウェーブレット変換係数よ
りなるそれぞれの符号化処理単位より構成される各サブ
バンドに、ウェーブレット逆変換を施し画像フレームを
再生するウェーブレット逆変換部で、２０８は再生され
た画像フレームを時系列順に並べて動画像を生成し動画
像データを出力する動画像生成部である。
【００４３】次に動作について説明する。まず、符号化
データ抽出部２０１は、符号化ビットストリームを入力
し、各画像フレームの符号化データを抽出して、各画像
フレームの符号化データごとに後段のエントロピー符号
化データ分離部２０２に出力する。
データ抽出部２０１は、符号化ビットストリームを入力
し、各画像フレームの符号化データを抽出して、各画像
フレームの符号化データごとに後段のエントロピー符号
化データ分離部２０２に出力する。
【００４４】エントロピー符号化データ分離部２０２
は、各画像フレームの符号化データより、エントロピー
符号化データと、画像サイズ、サブバンド分割レベル
数、フィルタ等の符号化パラメータを分離し、エントロ
ピー符号化データについては、データのどの部分が、ど
の符号化処理単位に対応するものかを特定した上で、後
段のエントロピー復号部２０５に出力する。
は、各画像フレームの符号化データより、エントロピー
符号化データと、画像サイズ、サブバンド分割レベル
数、フィルタ等の符号化パラメータを分離し、エントロ
ピー符号化データについては、データのどの部分が、ど
の符号化処理単位に対応するものかを特定した上で、後
段のエントロピー復号部２０５に出力する。
【００４５】ビットレート設定部２０３は、復号時の所
望のビットレートを、ターゲットビットレートとして設
定する。ここでは、符号化側で設定されたビットレート
に設定したり、伝送路の帯域幅又はトラフィックの状態
により伝走路からフィードバックされた要求や、又は、
復号側での要求、例えば、これまで送信された画像フレ
ームの復号結果をもとにフィードバックされた要求によ
り、ターゲットビットレートを設定する。ここでの要求
は、ターゲットビットレートの値そのものでも良く、高
画質、中画質、低画質等の画質の指標であっても良い。
後者のような画質の指標を用いる場合には、画質の指標
をターゲットビットレートに変換する変換テーブルを参
照してターゲットビットレートを設定する。
望のビットレートを、ターゲットビットレートとして設
定する。ここでは、符号化側で設定されたビットレート
に設定したり、伝送路の帯域幅又はトラフィックの状態
により伝走路からフィードバックされた要求や、又は、
復号側での要求、例えば、これまで送信された画像フレ
ームの復号結果をもとにフィードバックされた要求によ
り、ターゲットビットレートを設定する。ここでの要求
は、ターゲットビットレートの値そのものでも良く、高
画質、中画質、低画質等の画質の指標であっても良い。
後者のような画質の指標を用いる場合には、画質の指標
をターゲットビットレートに変換する変換テーブルを参
照してターゲットビットレートを設定する。
【００４６】ビットレート制御部２０４は、ビットレー
ト設定部２０３が設定した所望のビットレート、すなわ
ち、ターゲットビットレートで画像フレームを復号する
ために、ターゲットビットレートを各符号化処理単位に
割り振ることにより、各符号化処理単位でどれだけのビ
ットレートのデータを復号するかをターゲットビットレ
ートから割り出し、所定のビットレートに至るレベルに
あるビットプレーンまでを復号するよう制御を行う。
ト設定部２０３が設定した所望のビットレート、すなわ
ち、ターゲットビットレートで画像フレームを復号する
ために、ターゲットビットレートを各符号化処理単位に
割り振ることにより、各符号化処理単位でどれだけのビ
ットレートのデータを復号するかをターゲットビットレ
ートから割り出し、所定のビットレートに至るレベルに
あるビットプレーンまでを復号するよう制御を行う。
【００４７】エントロピー復号部２０５は、ビットレー
ト制御部２０４により割り振られたビットレートで、エ
ントロピー符号化データ分離部２０２により分離された
エントロピー符号化データを、各符号化処理単位ごとに
ビットプレーン単位でエントロピー復号し、最上位ビッ
トプレーンから下位ビットプレーンに向かって、符号化
処理単位を構成する量子化されたウェーブレット変換係
数の値を求める。各ウェーブレット変換係数の符号（ｓ
ｉｇｎ）ビットの復号処理が行われるタイミングは変換
係数によって異なり、各ウェーブレット変換係数の符号
ビットは、その変換係数の最上位の有効ビット（値１の
ビット）が復号され、それより１つ下位のビットプレー
ンの復号が開始されるまでの間に復号処理される。一例
として、あるウェーブレット変換係数の最上位の有効ビ
ットが復号された直後に、そのウェーブレット変換係数
の符号ビットの復号を行う方法がある。
ト制御部２０４により割り振られたビットレートで、エ
ントロピー符号化データ分離部２０２により分離された
エントロピー符号化データを、各符号化処理単位ごとに
ビットプレーン単位でエントロピー復号し、最上位ビッ
トプレーンから下位ビットプレーンに向かって、符号化
処理単位を構成する量子化されたウェーブレット変換係
数の値を求める。各ウェーブレット変換係数の符号（ｓ
ｉｇｎ）ビットの復号処理が行われるタイミングは変換
係数によって異なり、各ウェーブレット変換係数の符号
ビットは、その変換係数の最上位の有効ビット（値１の
ビット）が復号され、それより１つ下位のビットプレー
ンの復号が開始されるまでの間に復号処理される。一例
として、あるウェーブレット変換係数の最上位の有効ビ
ットが復号された直後に、そのウェーブレット変換係数
の符号ビットの復号を行う方法がある。
【００４８】逆量子化部２０６は、エントロピー復号部
２０５で求めた量子化されたウェーブレット変換係数の
値に逆量子化処理を施す。符号化データ作成時に用いら
れたウェーブレット変換が、整数値を整数値に変換する
タイプのＩｎｔｅｇｅｒ ｔｒａｎｓｆｏｒｍの場合に
は、明示的な逆量子化処理は省略される。
２０５で求めた量子化されたウェーブレット変換係数の
値に逆量子化処理を施す。符号化データ作成時に用いら
れたウェーブレット変換が、整数値を整数値に変換する
タイプのＩｎｔｅｇｅｒ ｔｒａｎｓｆｏｒｍの場合に
は、明示的な逆量子化処理は省略される。
【００４９】ウェーブレット逆変換部２０７は、逆量子
化されたウェーブレット変換係数よりなるそれぞれの符
号化処理単位より構成される各サブバンドに、ウェーブ
レット逆変換を施し画像フレームを再生する。
化されたウェーブレット変換係数よりなるそれぞれの符
号化処理単位より構成される各サブバンドに、ウェーブ
レット逆変換を施し画像フレームを再生する。
【００５０】符号化側で、符号化データの生成時に適用
されたウェーブレット変換の段数がＭである場合、ウェ
ーブレット逆変換部２０７によりＭ段階のウェーブレッ
ト逆変換処理が施される。図４はＭ＝２の場合のウェー
ブレット逆変換部２０７の動作を説明する図であり、図
４に示すように、１段階目では、画像の最低解像度成分
を担うサブバンドＬＬM （横方向低周波成分、縦方向低
周波成分）と１つ上の解像度レベルの情報を担う３つの
サブバンドＬＨM （横方向低周波成分、縦方向高周波成
分），ＨＬM （横方向高周波成分、縦方向低周波成
分），ＨＨM （横方向高周波成分、縦方向高周波成分）
にウェーブレット逆変換を施し、１つ上の解像度レベル
にある低周波画像ＬＬM-1 を合成する。
されたウェーブレット変換の段数がＭである場合、ウェ
ーブレット逆変換部２０７によりＭ段階のウェーブレッ
ト逆変換処理が施される。図４はＭ＝２の場合のウェー
ブレット逆変換部２０７の動作を説明する図であり、図
４に示すように、１段階目では、画像の最低解像度成分
を担うサブバンドＬＬM （横方向低周波成分、縦方向低
周波成分）と１つ上の解像度レベルの情報を担う３つの
サブバンドＬＨM （横方向低周波成分、縦方向高周波成
分），ＨＬM （横方向高周波成分、縦方向低周波成
分），ＨＨM （横方向高周波成分、縦方向高周波成分）
にウェーブレット逆変換を施し、１つ上の解像度レベル
にある低周波画像ＬＬM-1 を合成する。
【００５１】２段階目では、ＬＬM-1 とそれより１つ上
の解像度レベルの高周波成分の情報を担う３つのサブバ
ンドＬＨM-1 ，ＨＬM-1 ，ＬＬM-1 にウェーブレット逆
変換を施し、１つ上の解像度レベルにある低周波画像Ｌ
ＬM-2 を合成する。３段階目以降も、２段階目と同様に
その時点までに合成された低周波数成分画像に、それよ
り１つ上の解像度レベルの高周波成分の情報を担う３つ
のサブバンドに順次ウェーブレット逆変換処理を施し、
Ｍ段階のウェーブレット逆変換が完了するまで、すなわ
ち、ＬＬ0 が生成されるまで処理を繰り返し実行する。
の解像度レベルの高周波成分の情報を担う３つのサブバ
ンドＬＨM-1 ，ＨＬM-1 ，ＬＬM-1 にウェーブレット逆
変換を施し、１つ上の解像度レベルにある低周波画像Ｌ
ＬM-2 を合成する。３段階目以降も、２段階目と同様に
その時点までに合成された低周波数成分画像に、それよ
り１つ上の解像度レベルの高周波成分の情報を担う３つ
のサブバンドに順次ウェーブレット逆変換処理を施し、
Ｍ段階のウェーブレット逆変換が完了するまで、すなわ
ち、ＬＬ0 が生成されるまで処理を繰り返し実行する。
【００５２】動画像生成部２０８は、ウェーブレット逆
変換部２０７より再生された各画像フレームを時系列順
に並べて動画像を生成し動画像データを図示されていな
い表示装置に出力する。
変換部２０７より再生された各画像フレームを時系列順
に並べて動画像を生成し動画像データを図示されていな
い表示装置に出力する。
【００５３】以上のように、この実施の形態２によれ
ば、動画像の符号化データを所望のビットレートで個別
に復号できるため、動画像の符号化データから、特定の
画像フレームを選択的に取り出してつなぎあわせる等の
編集性や、特定の画像フレームのみ取り出して復号する
ことによるフレームレートの制御等の性能を維持しなが
ら、符号化側や伝送路や復号側の要求を反映して、ある
画像フレームを境に画質を上げたり下げたりする動画像
の復号再生ができるという効果が得られる。そのため、
符号化ビットレート以下の任意のビットレートに相当す
る符号化データのみを選択的に取り出した復号が可能に
なる。
ば、動画像の符号化データを所望のビットレートで個別
に復号できるため、動画像の符号化データから、特定の
画像フレームを選択的に取り出してつなぎあわせる等の
編集性や、特定の画像フレームのみ取り出して復号する
ことによるフレームレートの制御等の性能を維持しなが
ら、符号化側や伝送路や復号側の要求を反映して、ある
画像フレームを境に画質を上げたり下げたりする動画像
の復号再生ができるという効果が得られる。そのため、
符号化ビットレート以下の任意のビットレートに相当す
る符号化データのみを選択的に取り出した復号が可能に
なる。
【００５４】また、この実施の形態２によれば、符号化
されて送信されてくる動画像の符号化データ、あるい
は、サーバに蓄積されている動画像の符号化データの各
画像フレームに相当する符号化データのうち、どれだけ
のデータ量を受信して復号再生するかを、伝送路の状況
や、復号側の要求や、あるいは処理能力に応じて選択可
能になる。これにより、生成された動画像の符号化デー
タを、種々の伝送帯域で受信し、種々の処理速度を持つ
動画像復号装置で動画像として復号再生できるという効
果が得られる。
されて送信されてくる動画像の符号化データ、あるい
は、サーバに蓄積されている動画像の符号化データの各
画像フレームに相当する符号化データのうち、どれだけ
のデータ量を受信して復号再生するかを、伝送路の状況
や、復号側の要求や、あるいは処理能力に応じて選択可
能になる。これにより、生成された動画像の符号化デー
タを、種々の伝送帯域で受信し、種々の処理速度を持つ
動画像復号装置で動画像として復号再生できるという効
果が得られる。
【００５５】実施の形態３．図５はこの発明の実施の形
態３による動画像符号化装置の構成を示すブロック図で
ある。図において、３０５は要求された各画像フレーム
の符号化時の所望の符号化処理時間を設定する符号化時
間設定部で、３０６は、符号化時間設定部３０５により
設定された符号化処理時間で画像フレームを符号化する
ために、所望の符号化処理時間を各符号化処理単位に割
り振る符号化時間制御部であり、その他の構成は、実施
の形態１の図１に示す構成と同等である。
態３による動画像符号化装置の構成を示すブロック図で
ある。図において、３０５は要求された各画像フレーム
の符号化時の所望の符号化処理時間を設定する符号化時
間設定部で、３０６は、符号化時間設定部３０５により
設定された符号化処理時間で画像フレームを符号化する
ために、所望の符号化処理時間を各符号化処理単位に割
り振る符号化時間制御部であり、その他の構成は、実施
の形態１の図１に示す構成と同等である。
【００５６】上記実施の形態１では、ビットレート制御
部１０６で行われる符号化側でのエントロピー符号化部
のビットレート制御、すなわち、各符号化処理単位から
のエントロピー符号化データの抽出を、指定されたター
ゲットビットレートで決まるデータ量を取り出すことに
より行っていたが、図３に示すように、符号化時間設定
部３０５と符号化時間制御部３０６を設けて、符号化時
間設定部３０５により設定された符号化処理時間を、各
符号化処理単位に割り振り、すなわち、各符号化処理単
位を構成するビットプレーンで重要度の高い情報を保持
するものから順次符号化を開始し、設定された符号化処
理時間が経過したら符号化データの生成を終えるように
しても良い。
部１０６で行われる符号化側でのエントロピー符号化部
のビットレート制御、すなわち、各符号化処理単位から
のエントロピー符号化データの抽出を、指定されたター
ゲットビットレートで決まるデータ量を取り出すことに
より行っていたが、図３に示すように、符号化時間設定
部３０５と符号化時間制御部３０６を設けて、符号化時
間設定部３０５により設定された符号化処理時間を、各
符号化処理単位に割り振り、すなわち、各符号化処理単
位を構成するビットプレーンで重要度の高い情報を保持
するものから順次符号化を開始し、設定された符号化処
理時間が経過したら符号化データの生成を終えるように
しても良い。
【００５７】この実施の形態３の符号化時間設定部３０
５は、各画像フレームの符号化にかけられる符号化処理
時間を、符号化側や復号側からの要求により決定する。
すなわち、各画像フレームの符号化処理時間を、動画像
符号化装置の符号化処理速度や毎秒の画像フレーム数等
から設定するか、符号化データが復号されることになる
動画像復号装置の復号処理速度や毎秒の画像フレーム数
等から設定する。
５は、各画像フレームの符号化にかけられる符号化処理
時間を、符号化側や復号側からの要求により決定する。
すなわち、各画像フレームの符号化処理時間を、動画像
符号化装置の符号化処理速度や毎秒の画像フレーム数等
から設定するか、符号化データが復号されることになる
動画像復号装置の復号処理速度や毎秒の画像フレーム数
等から設定する。
【００５８】符号化時間制御部３０６は、設定された符
号化処理時間に達するまで、エントロピー符号化部１０
７が符号化処理を行うよう制御する。ここで、画像の空
間解像度が大きい場合には、ウェーブレット変換処理に
大きく時間を取られ、エントロピー符号化処理に到達す
る前に設定した符号化処理時間を経過してしまう場合が
起こり得る。こういう場合、単位時間内の画像フレーム
数を削減し、複数の画像フレームに割り当てられた時間
を単一の画像フレームの符号化に割り当てる等の制御を
行う。
号化処理時間に達するまで、エントロピー符号化部１０
７が符号化処理を行うよう制御する。ここで、画像の空
間解像度が大きい場合には、ウェーブレット変換処理に
大きく時間を取られ、エントロピー符号化処理に到達す
る前に設定した符号化処理時間を経過してしまう場合が
起こり得る。こういう場合、単位時間内の画像フレーム
数を削減し、複数の画像フレームに割り当てられた時間
を単一の画像フレームの符号化に割り当てる等の制御を
行う。
【００５９】以上のように、この実施の形態３によれ
ば、各画像フレームの符号化処理にかけることのできる
時間をフルに使用した符号化処理が可能になるため、与
えられた符号化処理時間で処理し得る最大の情報量を符
号化でき、動画像符号化装置の処理能力を最大限に生か
した動画像の伝送を行えるという効果が得られる。
ば、各画像フレームの符号化処理にかけることのできる
時間をフルに使用した符号化処理が可能になるため、与
えられた符号化処理時間で処理し得る最大の情報量を符
号化でき、動画像符号化装置の処理能力を最大限に生か
した動画像の伝送を行えるという効果が得られる。
【００６０】また、この実施の形態３によれば、画像フ
レームの符号化処理速度が異なる動画像符号化装置で、
同様な動画像を符号化する場合、処理速度に応じて設定
時間間隔を変えるのみで、同一時間間隔で同じ画像フレ
ーム数の符号化処理が可能となるという効果が得られ
る。
レームの符号化処理速度が異なる動画像符号化装置で、
同様な動画像を符号化する場合、処理速度に応じて設定
時間間隔を変えるのみで、同一時間間隔で同じ画像フレ
ーム数の符号化処理が可能となるという効果が得られ
る。
【００６１】さらに、この実施の形態３によれば、処理
速度の遅い動作環境でも、一定以上の処理速度を確保で
きれば、特定の画像フレームの欠落（こま落ち）を招く
ことなく動画像の各フレームの符号化を可能にする効果
が得られる。すなわち、動画像符号化装置の性能が要求
表示速度に追いつかず、ある画像フレームの符号化をス
キップせねばならない状態や、復号処理がエラーになっ
てしまう状態を回避できるという効果が得られる。
速度の遅い動作環境でも、一定以上の処理速度を確保で
きれば、特定の画像フレームの欠落（こま落ち）を招く
ことなく動画像の各フレームの符号化を可能にする効果
が得られる。すなわち、動画像符号化装置の性能が要求
表示速度に追いつかず、ある画像フレームの符号化をス
キップせねばならない状態や、復号処理がエラーになっ
てしまう状態を回避できるという効果が得られる。
【００６２】さらに、この実施の形態３によれば、各画
像フレームの符号化処理時間は、符号化前に一意に決定
するばかりでなく、これまでに符号化伝送された画像フ
レームに関わる符号化処理時間、伝送路でのトラフィッ
ク、復号処理時間を反映して、以降に伝送される画像フ
レームに割り当てる符号化処理時間を適応的に変更する
ことで、伝送路のトラフィック、符号化処理・復号処理
の動作環境の処理能力が変化しても、それに追随した動
画像の符号化伝送を行うことができるという効果が得ら
れる。
像フレームの符号化処理時間は、符号化前に一意に決定
するばかりでなく、これまでに符号化伝送された画像フ
レームに関わる符号化処理時間、伝送路でのトラフィッ
ク、復号処理時間を反映して、以降に伝送される画像フ
レームに割り当てる符号化処理時間を適応的に変更する
ことで、伝送路のトラフィック、符号化処理・復号処理
の動作環境の処理能力が変化しても、それに追随した動
画像の符号化伝送を行うことができるという効果が得ら
れる。
【００６３】実施の形態４．図６はこの発明の実施の形
態４による動画像復号装置の構成を示すブロック図であ
り、図において、４０３は、各画像の復号処理にかけら
れる復号処理時間、すなわち、復号処理の主な処理過程
である、エントロピー復号部２０５の処理時間と、逆量
子化部２０６やウェーブレット逆変換部２０７の処理時
間の合計である復号処理時間を設定する復号時間設定部
で、４０４は、復号時間設定部４０３が設定したエント
ロピー復号部２０５の復号処理時間を、各符号化処理単
位に割り振る復号時間制御部であり、その他の構成は、
実施の形態２の図３に示す構成と同等である。
態４による動画像復号装置の構成を示すブロック図であ
り、図において、４０３は、各画像の復号処理にかけら
れる復号処理時間、すなわち、復号処理の主な処理過程
である、エントロピー復号部２０５の処理時間と、逆量
子化部２０６やウェーブレット逆変換部２０７の処理時
間の合計である復号処理時間を設定する復号時間設定部
で、４０４は、復号時間設定部４０３が設定したエント
ロピー復号部２０５の復号処理時間を、各符号化処理単
位に割り振る復号時間制御部であり、その他の構成は、
実施の形態２の図３に示す構成と同等である。
【００６４】上記実施の形態２では、ビットレート制御
部２０４で、エントロピー符号化データよりターゲット
ビットレートを実現するための所望のデータ量を取り出
すよう制御し、エントロピー復号部２０５で同データの
復号処理を行うことで、符号化側や復号側で要求される
画像品質や伝送速度を反映した動画像復号処理を行う場
合について示したが、この実施の形態４では、図６に示
すように、復号時間設定部４０３と復号時間制御部４０
４を設け、各符号化処理単位を構成するビットプレーン
の符号化データで重要度の高い情報を保持するものから
順次復号し、指定時間のうちエントロピー復号にかけら
れる時間が経過したらエントロピー復号処理を終え、後
段の処理に移すようにしても良い。
部２０４で、エントロピー符号化データよりターゲット
ビットレートを実現するための所望のデータ量を取り出
すよう制御し、エントロピー復号部２０５で同データの
復号処理を行うことで、符号化側や復号側で要求される
画像品質や伝送速度を反映した動画像復号処理を行う場
合について示したが、この実施の形態４では、図６に示
すように、復号時間設定部４０３と復号時間制御部４０
４を設け、各符号化処理単位を構成するビットプレーン
の符号化データで重要度の高い情報を保持するものから
順次復号し、指定時間のうちエントロピー復号にかけら
れる時間が経過したらエントロピー復号処理を終え、後
段の処理に移すようにしても良い。
【００６５】この実施の形態４の復号時間設定部４０３
は、各画像フレームの復号処理にかけられる時間、すな
わち、エントロピー復号の復号処理時間と、逆量子化や
ウェーブレット逆変換の復号処理時間を、符号化側や復
号側での要求に基づいて決定する。復号時間制御部４０
４は、エントロピー復号部２０５で施されるエントロピ
ー復号処理に割り当てた時間に達したところで、処理を
次の逆量子化やウェーブレット逆変換の処理に移すよう
制御を行う。復号時間設定部４０３で設定された復号処
理時間は、逆量子化やウェーブレット逆変換等の復号処
理時間を含むため、エントロピー復号処理への割り当て
時間は、復号時間設定部４０３が設定した復号処理時間
より、逆量子化やウェーブレット逆変換等の復号処理時
間を差し引いたものとなる。逆量子化やウェーブレット
逆変換等の復号処理時間は、画像のサイズや事前に復号
処理された画像フレームでの実測時間に基づいて推定さ
れる。
は、各画像フレームの復号処理にかけられる時間、すな
わち、エントロピー復号の復号処理時間と、逆量子化や
ウェーブレット逆変換の復号処理時間を、符号化側や復
号側での要求に基づいて決定する。復号時間制御部４０
４は、エントロピー復号部２０５で施されるエントロピ
ー復号処理に割り当てた時間に達したところで、処理を
次の逆量子化やウェーブレット逆変換の処理に移すよう
制御を行う。復号時間設定部４０３で設定された復号処
理時間は、逆量子化やウェーブレット逆変換等の復号処
理時間を含むため、エントロピー復号処理への割り当て
時間は、復号時間設定部４０３が設定した復号処理時間
より、逆量子化やウェーブレット逆変換等の復号処理時
間を差し引いたものとなる。逆量子化やウェーブレット
逆変換等の復号処理時間は、画像のサイズや事前に復号
処理された画像フレームでの実測時間に基づいて推定さ
れる。
【００６６】以上のように、この実施の形態４によれ
ば、符号化データの各フレームの復号処理にかけること
のできる時間をフルに使用した復号処理が可能になるた
め、与えられた復号処理時間内で処理し得る最大の情報
量を復号処理し、同条件下で実現し得る最高の画質を再
生できるという効果が得られる。
ば、符号化データの各フレームの復号処理にかけること
のできる時間をフルに使用した復号処理が可能になるた
め、与えられた復号処理時間内で処理し得る最大の情報
量を復号処理し、同条件下で実現し得る最高の画質を再
生できるという効果が得られる。
【００６７】また、この実施の形態４によれば、フレー
ムの復号処理速度の異なる動画像復号装置で復号する場
合でも、各画像フレームの復号処理時間を復号処理速度
に応じて設定すれば、同じ時間間隔で同じ画像フレーム
数を表示する復号処理が可能となるという効果が得られ
る。
ムの復号処理速度の異なる動画像復号装置で復号する場
合でも、各画像フレームの復号処理時間を復号処理速度
に応じて設定すれば、同じ時間間隔で同じ画像フレーム
数を表示する復号処理が可能となるという効果が得られ
る。
【００６８】さらに、この実施の形態４によれば、処理
速度の遅い動作環境でも、一定以上の処理速度を確保で
きれば、特定フレームの欠落（こま落ち）を招くことな
く動画像の各画像フレームの復号再生を可能にする効果
が得られる。すなわち、動画像復号装置の性能が要求表
示速度に追いつかず、ある画像フレームの復号処理をス
キップせねばならない状態や、復号処理がエラーになっ
てしまう状態を回避できるという効果が得られる。
速度の遅い動作環境でも、一定以上の処理速度を確保で
きれば、特定フレームの欠落（こま落ち）を招くことな
く動画像の各画像フレームの復号再生を可能にする効果
が得られる。すなわち、動画像復号装置の性能が要求表
示速度に追いつかず、ある画像フレームの復号処理をス
キップせねばならない状態や、復号処理がエラーになっ
てしまう状態を回避できるという効果が得られる。
【００６９】実施の形態５．図７はこの発明の実施の形
態５による動画像符号化装置の構成を示すブロック図で
あり、図において、５０９は画像フレーム抽出部１０１
により抽出された画像フレーム上で注目領域（Ｒｅｇｉ
ｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ：ＲＯＩ）を選択し、注
目領域の座標情報を出力するＲＯＩ選択部で、５１０
は、選択されたＲＯＩに、他領域に対しての画質の優先
度を設定し、その優先度値Ｓを出力するＲＯＩ優先度設
定部で、５１１は、ＲＯＩ選択部５０９より出力された
注目領域の座標情報に基づき、選択されたウェーブレッ
ト変換係数をＲＯＩ変換係数として特定するＲＯＩマス
クを生成するＲＯＩマスク生成部で、５１２は、量子化
部１０３より出力された量子化されたウェーブレット変
換係数を入力し、ＲＯＩマスク生成部５１１により特定
されたＲＯＩ変換係数の量子化値の絶対値を、ＲＯＩ優
先度設定部５１０で設定された画質の優先度値Ｓに対応
してスケールアップし、スケールアップしたＲＯＩ変換
係数の量子化値を含むウェーブレット変換係数を符号化
処理単位構成部１０４に出力するＲＯＩスケールアップ
部であり、その他の構成は、実施の形態１の図１に示す
構成と同等である。
態５による動画像符号化装置の構成を示すブロック図で
あり、図において、５０９は画像フレーム抽出部１０１
により抽出された画像フレーム上で注目領域（Ｒｅｇｉ
ｏｎ Ｏｆ Ｉｎｔｅｒｅｓｔ：ＲＯＩ）を選択し、注
目領域の座標情報を出力するＲＯＩ選択部で、５１０
は、選択されたＲＯＩに、他領域に対しての画質の優先
度を設定し、その優先度値Ｓを出力するＲＯＩ優先度設
定部で、５１１は、ＲＯＩ選択部５０９より出力された
注目領域の座標情報に基づき、選択されたウェーブレッ
ト変換係数をＲＯＩ変換係数として特定するＲＯＩマス
クを生成するＲＯＩマスク生成部で、５１２は、量子化
部１０３より出力された量子化されたウェーブレット変
換係数を入力し、ＲＯＩマスク生成部５１１により特定
されたＲＯＩ変換係数の量子化値の絶対値を、ＲＯＩ優
先度設定部５１０で設定された画質の優先度値Ｓに対応
してスケールアップし、スケールアップしたＲＯＩ変換
係数の量子化値を含むウェーブレット変換係数を符号化
処理単位構成部１０４に出力するＲＯＩスケールアップ
部であり、その他の構成は、実施の形態１の図１に示す
構成と同等である。
【００７０】上記実施の形態１又は実施の形態３では、
画像全体の画質をビットレート、又は符号化処理時間に
よって制御するものであるが、この実施の形態５では、
図７に示すように、実施の形態１の図１に示す動画像符
号化装置に、ＲＯＩ選択部５０９，ＲＯＩ優先度設定部
５１０，ＲＯＩマスク生成部５１１，ＲＯＩスケールア
ップ部５１２を加えることで、選択した注目領域の画質
を他領域より高く保って符号化伝送する動画像符号化装
置を構成する。なお、実施の形態３の図５に示す動画像
符号化装置に、ＲＯＩ選択部５０９，ＲＯＩ優先度設定
部５１０，ＲＯＩマスク生成部５１１，ＲＯＩスケール
アップ部５１２を加えても良い。
画像全体の画質をビットレート、又は符号化処理時間に
よって制御するものであるが、この実施の形態５では、
図７に示すように、実施の形態１の図１に示す動画像符
号化装置に、ＲＯＩ選択部５０９，ＲＯＩ優先度設定部
５１０，ＲＯＩマスク生成部５１１，ＲＯＩスケールア
ップ部５１２を加えることで、選択した注目領域の画質
を他領域より高く保って符号化伝送する動画像符号化装
置を構成する。なお、実施の形態３の図５に示す動画像
符号化装置に、ＲＯＩ選択部５０９，ＲＯＩ優先度設定
部５１０，ＲＯＩマスク生成部５１１，ＲＯＩスケール
アップ部５１２を加えても良い。
【００７１】次に動作について説明する。まず、ＲＯＩ
選択部５０９は、画像フレーム抽出部１０１により抽出
された画像フレーム上で注目領域（ＲＯＩ）を選択し、
選択されたＲＯＩの座標情報を、ＲＯＩ変換係数の特定
作業を行うためにＲＯＩマスク生成部５１１に出力する
と共に、符号化データのオーバーヘッド情報に加えるた
めに、符号化ストリーム生成部１０８へ出力する。
選択部５０９は、画像フレーム抽出部１０１により抽出
された画像フレーム上で注目領域（ＲＯＩ）を選択し、
選択されたＲＯＩの座標情報を、ＲＯＩ変換係数の特定
作業を行うためにＲＯＩマスク生成部５１１に出力する
と共に、符号化データのオーバーヘッド情報に加えるた
めに、符号化ストリーム生成部１０８へ出力する。
【００７２】ＲＯＩ優先度設定部５１０は、ＲＯＩの画
質を他領域に比べてどの程度高く保持して符号化するか
を指定する優先度を設定し、その優先度値Ｓを、ＲＯＩ
マスクで指定されるＲＯＩ変換係数のスケールアップ処
理を行うＲＯＩスケールアップ部５１２に出力すると共
に、符号化データのオーバーヘッド情報に加えるため
に、符号化ストリーム生成部１０８に出力する。
質を他領域に比べてどの程度高く保持して符号化するか
を指定する優先度を設定し、その優先度値Ｓを、ＲＯＩ
マスクで指定されるＲＯＩ変換係数のスケールアップ処
理を行うＲＯＩスケールアップ部５１２に出力すると共
に、符号化データのオーバーヘッド情報に加えるため
に、符号化ストリーム生成部１０８に出力する。
【００７３】ＲＯＩマスク生成部５１１は、ＲＯＩ内の
各画素値を再生するために必要なウェーブレット変換係
数を、ウェーブレット逆変換の入出力関係を画像領域か
らウェーブレット変換領域へと辿ることにより特定し、
特定した結果をＲＯＩマスクとして出力する。
各画素値を再生するために必要なウェーブレット変換係
数を、ウェーブレット逆変換の入出力関係を画像領域か
らウェーブレット変換領域へと辿ることにより特定し、
特定した結果をＲＯＩマスクとして出力する。
【００７４】図８はウェーブレット変換の分割レベル数
が２（Ｍ＝２）の場合のＲＯＩマスクの生成過程を説明
する図である。まず、図８（ｃ）に示す画像領域の注目
領域内の各画素から１レベル分割されたサブバンドであ
るＬＬ1 ，ＬＨ1 ，ＨＬ1 ，ＨＨ1 （図８（ｂ））へと
ウェーブレット逆変換の関係式を辿り、これらのサブバ
ンド内のウェーブレット変換係数のうち、ＲＯＩに対応
するウェーブレット変換係数（ＲＯＩ変換係数）を特定
する。
が２（Ｍ＝２）の場合のＲＯＩマスクの生成過程を説明
する図である。まず、図８（ｃ）に示す画像領域の注目
領域内の各画素から１レベル分割されたサブバンドであ
るＬＬ1 ，ＬＨ1 ，ＨＬ1 ，ＨＨ1 （図８（ｂ））へと
ウェーブレット逆変換の関係式を辿り、これらのサブバ
ンド内のウェーブレット変換係数のうち、ＲＯＩに対応
するウェーブレット変換係数（ＲＯＩ変換係数）を特定
する。
【００７５】続いて、ＬＬ1 内のＲＯＩ変換係数を画像
領域での注目領域と見なして、同領域を再生するために
必要なウェーブレット変換係数を、次の分割レベルにあ
るサブバンドＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ2 （図８
（ａ））内で特定する。同様な処理を符号化時に設定さ
れた分割レベル数Ｍ（＝２）に達するまでＬＬk に対し
て順次適用することで特定された変換係数が、画面上で
の注目領域を完全再構成するのに必要不可欠なウェーブ
レット変換係数であり、ＲＯＩマスク（図８（ａ））を
構成することになる。
領域での注目領域と見なして、同領域を再生するために
必要なウェーブレット変換係数を、次の分割レベルにあ
るサブバンドＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ2 （図８
（ａ））内で特定する。同様な処理を符号化時に設定さ
れた分割レベル数Ｍ（＝２）に達するまでＬＬk に対し
て順次適用することで特定された変換係数が、画面上で
の注目領域を完全再構成するのに必要不可欠なウェーブ
レット変換係数であり、ＲＯＩマスク（図８（ａ））を
構成することになる。
【００７６】各ウェーブレット逆変換の関係式を辿る操
作では、逆変換に用いられるウェーブレットフィルタの
フィルタ範囲（フィルタ長）と、ダウンサンプリング
（間引き）、あるいは、アップサンプリングの規則から
注目領域内の各画素に対応する変換係数のセットを導出
する。
作では、逆変換に用いられるウェーブレットフィルタの
フィルタ範囲（フィルタ長）と、ダウンサンプリング
（間引き）、あるいは、アップサンプリングの規則から
注目領域内の各画素に対応する変換係数のセットを導出
する。
【００７７】注目領域の形状が複雑な場合、ウェーブレ
ット変換係数の個数と同数の少なくとも１画素１ビット
のメモリ上に、ＲＯＩ変換係数であるか否かを示すマッ
プを保持する必要がある。注目領域の形状が長方形等の
多角形の場合、多角形の頂点に対応する変換係数のう
ち、最も外側にある変換係数の位置を保持することで、
ＲＯＩ変換係数の判定結果を保持しても良い。
ット変換係数の個数と同数の少なくとも１画素１ビット
のメモリ上に、ＲＯＩ変換係数であるか否かを示すマッ
プを保持する必要がある。注目領域の形状が長方形等の
多角形の場合、多角形の頂点に対応する変換係数のう
ち、最も外側にある変換係数の位置を保持することで、
ＲＯＩ変換係数の判定結果を保持しても良い。
【００７８】ＲＯＩスケールアップ部５１２は、量子化
部１０３がウェーブレット変換係数を量子化すると、Ｒ
ＯＩマスク生成部５１１が生成したＲＯＩマスクを参照
し、ＲＯＩ優先度設定部５１０で設定された画質の優先
度値Ｓに対応して、ＲＯＩ変換係数の量子化値の絶対値
を優先度値Ｓ分だけスケールアップする。すなわち、Ｒ
ＯＩ変換係数の量子化値の絶対値をＳビットだけ左シフ
トすることにより、ＲＯＩ変換係数をスケールアップす
る。
部１０３がウェーブレット変換係数を量子化すると、Ｒ
ＯＩマスク生成部５１１が生成したＲＯＩマスクを参照
し、ＲＯＩ優先度設定部５１０で設定された画質の優先
度値Ｓに対応して、ＲＯＩ変換係数の量子化値の絶対値
を優先度値Ｓ分だけスケールアップする。すなわち、Ｒ
ＯＩ変換係数の量子化値の絶対値をＳビットだけ左シフ
トすることにより、ＲＯＩ変換係数をスケールアップす
る。
【００７９】スケールアップされたＲＯＩ変換係数を含
むウェーブレット変換係数は、符号化処理単位構成部１
０４を介してエントロピー符号化部１０７へ出力され、
各符号化処理単位ごとに最上位ビットプレーンから下位
ビットプレーンに向かって、ビットプレーンごとにエン
トロピー符号化が施される。
むウェーブレット変換係数は、符号化処理単位構成部１
０４を介してエントロピー符号化部１０７へ出力され、
各符号化処理単位ごとに最上位ビットプレーンから下位
ビットプレーンに向かって、ビットプレーンごとにエン
トロピー符号化が施される。
【００８０】以上のように、この実施の形態５によれ
ば、実施の形態１及び実施の形態３に示す効果に加え、
動画像を構成する各画像フレームの注目領域を他より高
い優先度で符号化できるため、低ビットレートで符号化
した時にも、注目領域の画質は良好に保った符号化伝送
が実現でき、高ビットレートで符号化すれば、画像全体
の画質を高く保った符号化伝送が実現できるという効果
が得られる。
ば、実施の形態１及び実施の形態３に示す効果に加え、
動画像を構成する各画像フレームの注目領域を他より高
い優先度で符号化できるため、低ビットレートで符号化
した時にも、注目領域の画質は良好に保った符号化伝送
が実現でき、高ビットレートで符号化すれば、画像全体
の画質を高く保った符号化伝送が実現できるという効果
が得られる。
【００８１】また、この実施の形態５によれば、各画像
フレームで位置を変えて注目領域を選択した場合、復号
側で低ビットレートで符号化伝送されたものを復号再
生、あるいは、高ビットレートで符号化伝送されたもの
を低ビットレートで復号再生すれば、少ない情報量で注
目領域の画質を選択的に維持した再生が可能になるため
に、注目領域の動きを効果的に見せることができるとい
う効果が得られる。
フレームで位置を変えて注目領域を選択した場合、復号
側で低ビットレートで符号化伝送されたものを復号再
生、あるいは、高ビットレートで符号化伝送されたもの
を低ビットレートで復号再生すれば、少ない情報量で注
目領域の画質を選択的に維持した再生が可能になるため
に、注目領域の動きを効果的に見せることができるとい
う効果が得られる。
【００８２】さらに、この実施の形態５によれば、画像
フレームの注目領域に高い優先度を与えて符号化処理し
た動画像符号化データを生成できるため、注目領域より
他領域が低い画質で再生されるよう符号化ビットレート
での符号化伝送を行うことにより、画像全体を高画質に
符号化伝送するのに比べ、符号化処理時間や伝送時間を
大幅に削減できるという効果が得られる。
フレームの注目領域に高い優先度を与えて符号化処理し
た動画像符号化データを生成できるため、注目領域より
他領域が低い画質で再生されるよう符号化ビットレート
での符号化伝送を行うことにより、画像全体を高画質に
符号化伝送するのに比べ、符号化処理時間や伝送時間を
大幅に削減できるという効果が得られる。
【００８３】さらに、この実施の形態５によれば、注目
領域に優先度を与え、画像全体が最高画質まで復号可能
になるまで符号化処理を行うことで、符号化データの一
部からは、注目領域のみが再生され、残りのデータを加
えると画像全体が良好な画質で再生される形態での動画
像データの配信を実現できる効果が得られる。
領域に優先度を与え、画像全体が最高画質まで復号可能
になるまで符号化処理を行うことで、符号化データの一
部からは、注目領域のみが再生され、残りのデータを加
えると画像全体が良好な画質で再生される形態での動画
像データの配信を実現できる効果が得られる。
【００８４】実施の形態６．図９はこの発明の実施の形
態６による動画像復号装置の構成を示すブロック図であ
り、図において、エントロピー符号化データ分離部２０
２は、画像フレームの符号化データから、注目領域（Ｒ
ＯＩ）に関する位置情報と、ＲＯＩに付与された優先度
値Ｓも抽出し、６０９は、ＲＯＩに関する位置情報をも
とに、ウェーブレット変換係数のうちＲＯＩに対応する
係数（ＲＯＩ変換係数）を特定するＲＯＩマスクを生成
するＲＯＩマスク生成部で、６１０は、生成されたＲＯ
Ｉマスクを参照することで、エントロピー復号されたビ
ットプレーンよりなるウェーブレット変換係数のうちの
ＲＯＩ変換係数の量子化の絶対値を、ＲＯＩへ付与され
た優先度値Ｓ分だけ右シフトすることでスケールダウン
するＲＯＩスケールダウン部であり、その他の構成は実
施の形態２の図３に示す構成と同等である。
態６による動画像復号装置の構成を示すブロック図であ
り、図において、エントロピー符号化データ分離部２０
２は、画像フレームの符号化データから、注目領域（Ｒ
ＯＩ）に関する位置情報と、ＲＯＩに付与された優先度
値Ｓも抽出し、６０９は、ＲＯＩに関する位置情報をも
とに、ウェーブレット変換係数のうちＲＯＩに対応する
係数（ＲＯＩ変換係数）を特定するＲＯＩマスクを生成
するＲＯＩマスク生成部で、６１０は、生成されたＲＯ
Ｉマスクを参照することで、エントロピー復号されたビ
ットプレーンよりなるウェーブレット変換係数のうちの
ＲＯＩ変換係数の量子化の絶対値を、ＲＯＩへ付与され
た優先度値Ｓ分だけ右シフトすることでスケールダウン
するＲＯＩスケールダウン部であり、その他の構成は実
施の形態２の図３に示す構成と同等である。
【００８５】上記の実施の形態２又は実施の形態４で
は、実施の形態１又は実施の形態３の動画像符号化装置
により生成された符号化ビットストリームを、ビットレ
ート又は復号処理時間を制御しつつ復号することで、画
像全体の画質を制御するものであるが、符号化ビットス
トリームが実施の形態５の動画像符号化装置により生成
された場合には、図９に示すように、実施の形態２の図
３に示す動画像復号装置に、ＲＯＩマスク生成部６０
９，ＲＯＩスケールダウン部６１０を加えることによ
り、注目領域の画質を高く保って符号化された動画像符
号化データを受信復号する動画像復号装置を構成する。
なお、実施の形態４の図６に示す動画像復号装置に、Ｒ
ＯＩマスク生成部６０９，ＲＯＩスケールダウン部６１
０を加えても良い。
は、実施の形態１又は実施の形態３の動画像符号化装置
により生成された符号化ビットストリームを、ビットレ
ート又は復号処理時間を制御しつつ復号することで、画
像全体の画質を制御するものであるが、符号化ビットス
トリームが実施の形態５の動画像符号化装置により生成
された場合には、図９に示すように、実施の形態２の図
３に示す動画像復号装置に、ＲＯＩマスク生成部６０
９，ＲＯＩスケールダウン部６１０を加えることによ
り、注目領域の画質を高く保って符号化された動画像符
号化データを受信復号する動画像復号装置を構成する。
なお、実施の形態４の図６に示す動画像復号装置に、Ｒ
ＯＩマスク生成部６０９，ＲＯＩスケールダウン部６１
０を加えても良い。
【００８６】次に動作について説明する。まず、エント
ロピー符号化データ分離部２０２は、画像フレームの符
号化データのオーバーヘッド情報の中に、ＲＯＩの画像
フレーム内での位置情報とＲＯＩに付与された画質の優
先度値Ｓが含まれているかどうかを確認し、含まれてい
ればそれらの情報を抽出し、ＲＯＩの位置情報をＲＯＩ
マスク生成部６０９に出力し、ＲＯＩの優先度値ＳをＲ
ＯＩスケールダウン部６１０に出力する。
ロピー符号化データ分離部２０２は、画像フレームの符
号化データのオーバーヘッド情報の中に、ＲＯＩの画像
フレーム内での位置情報とＲＯＩに付与された画質の優
先度値Ｓが含まれているかどうかを確認し、含まれてい
ればそれらの情報を抽出し、ＲＯＩの位置情報をＲＯＩ
マスク生成部６０９に出力し、ＲＯＩの優先度値ＳをＲ
ＯＩスケールダウン部６１０に出力する。
【００８７】ＲＯＩマスク生成部６０９は、ＲＯＩの位
置情報により示されるＲＯＩ内の各画素値を再生するた
めに必要なウェーブレット変換係数を特定するため、実
施の形態５に示すＲＯＩマスク生成部５１１と同様に、
ウェーブレット逆変換処理の出力である注目領域内の画
素から、ウェーブレット逆変換処理の入力であるウエー
ブレット変換係数領域へ逆変換処理の関係式を辿る処理
を行う。ここで、ウェーブレット逆変換処理の出力を図
８（ｃ）の画像とする場合は、ウェーブレット逆変換処
理の入力は図８（ｂ）のＬＬ1 ，ＬＨ1 ，ＨＬ1 ，ＨＨ
1 であり、ウェーブレット逆変換処理の出力を図８
（ｂ）のＬＬ1 とする場合は、ウェーブレット逆変換処
理の入力は図８（ａ）のＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ
2 である。
置情報により示されるＲＯＩ内の各画素値を再生するた
めに必要なウェーブレット変換係数を特定するため、実
施の形態５に示すＲＯＩマスク生成部５１１と同様に、
ウェーブレット逆変換処理の出力である注目領域内の画
素から、ウェーブレット逆変換処理の入力であるウエー
ブレット変換係数領域へ逆変換処理の関係式を辿る処理
を行う。ここで、ウェーブレット逆変換処理の出力を図
８（ｃ）の画像とする場合は、ウェーブレット逆変換処
理の入力は図８（ｂ）のＬＬ1 ，ＬＨ1 ，ＨＬ1 ，ＨＨ
1 であり、ウェーブレット逆変換処理の出力を図８
（ｂ）のＬＬ1 とする場合は、ウェーブレット逆変換処
理の入力は図８（ａ）のＬＬ2 ，ＬＨ2 ，ＨＬ2 ，ＨＨ
2 である。
【００８８】ＲＯＩスケールダウン部６１０は、ウェー
ブレット変換係数の量子化値が、所望のビットレートに
達するまで、エントロピー復号部２０５によりビットプ
レーン単位に復号された後、ＲＯＩマスク生成部６０９
が生成したＲＯＩマスクを参照し、符号化時にＲＯＩ変
換係数に施されたスケールアップを補償するために、Ｒ
ＯＩ変換係数をＲＯＩの優先度値Ｓ分だけスケールダウ
ンする。すなわち、ＲＯＩ変換係数の量子化値の絶対値
をＳビットだけ右シフトすることにより、ＲＯＩ変換係
数をスケールダウンし、スケールダウンしたＲＯＩ変換
係数の量子化値を含む量子化されたウェーブレット変換
係数を逆量子化部２０６に出力する。
ブレット変換係数の量子化値が、所望のビットレートに
達するまで、エントロピー復号部２０５によりビットプ
レーン単位に復号された後、ＲＯＩマスク生成部６０９
が生成したＲＯＩマスクを参照し、符号化時にＲＯＩ変
換係数に施されたスケールアップを補償するために、Ｒ
ＯＩ変換係数をＲＯＩの優先度値Ｓ分だけスケールダウ
ンする。すなわち、ＲＯＩ変換係数の量子化値の絶対値
をＳビットだけ右シフトすることにより、ＲＯＩ変換係
数をスケールダウンし、スケールダウンしたＲＯＩ変換
係数の量子化値を含む量子化されたウェーブレット変換
係数を逆量子化部２０６に出力する。
【００８９】以上のように、この実施の形態６によれ
ば、実施の形態２及び実施の形態４に示す効果に加え、
実施の形態５に示す動画像符号化装置で生成された符号
化ビットストリームにおいて、動画像を構成する画像フ
レームの注目領域を、他領域より高い優先度で復号可能
となるため、低ビットレートで復号が行われても、注目
領域の画質を良好に保った動画像の再生が実現でき、高
ビットレートで復号が行われれば、画像全体が良好な画
質で再生できるという効果が得られる。
ば、実施の形態２及び実施の形態４に示す効果に加え、
実施の形態５に示す動画像符号化装置で生成された符号
化ビットストリームにおいて、動画像を構成する画像フ
レームの注目領域を、他領域より高い優先度で復号可能
となるため、低ビットレートで復号が行われても、注目
領域の画質を良好に保った動画像の再生が実現でき、高
ビットレートで復号が行われれば、画像全体が良好な画
質で再生できるという効果が得られる。
【００９０】また、この実施の形態６によれば、各画像
フレームで位置を変えて注目領域が選択されて符号化さ
れた符号化ビットストリームを受信した場合に、これを
低ビットレートで復号再生することで、相対的に注目領
域が他より高い画質で再生されるために、ぼやけた背景
の中で、注目領域のみがはっきりとした画質で動き回る
のが表示でき、注目領域の追跡情報や動きを効果的に表
示できるという効果が得られる。
フレームで位置を変えて注目領域が選択されて符号化さ
れた符号化ビットストリームを受信した場合に、これを
低ビットレートで復号再生することで、相対的に注目領
域が他より高い画質で再生されるために、ぼやけた背景
の中で、注目領域のみがはっきりとした画質で動き回る
のが表示でき、注目領域の追跡情報や動きを効果的に表
示できるという効果が得られる。
【００９１】実施の形態７．図１０はこの発明の実施の
形態７による動画像符号化装置の構成を示すブロック図
であり、図において、７０９は、動画像符号化装置の外
部で選択された注目領域（ＲＯＩ）に関する位置情報と
ＲＯＩの画質の優先度値を、ＲＯＩ情報として受け取る
ＲＯＩ情報入力部であり、その他の構成は、実施の形態
５の図７に示す構成から、ＲＯＩ選択部５０９とＲＯＩ
優先度設定部５１０を削除したものと同等である。
形態７による動画像符号化装置の構成を示すブロック図
であり、図において、７０９は、動画像符号化装置の外
部で選択された注目領域（ＲＯＩ）に関する位置情報と
ＲＯＩの画質の優先度値を、ＲＯＩ情報として受け取る
ＲＯＩ情報入力部であり、その他の構成は、実施の形態
５の図７に示す構成から、ＲＯＩ選択部５０９とＲＯＩ
優先度設定部５１０を削除したものと同等である。
【００９２】上記実施の形態５では、ＲＯＩ選択部５０
９で、画像フレーム抽出部１０１を通して画像フレーム
が入力されると、ＲＯＩ選択部５０９により画像フレー
ム上でＲＯＩを選択して、得られたＲＯＩの位置情報を
ＲＯＩマスク生成部５１１に出力し、ＲＯＩ優先度設定
部５１０で選択されたＲＯＩに付与する優先度を設定
し、その優先度値ＳをＲＯＩスケールアップ部５１２に
出力しているが、この実施の形態７では、図１０に示す
ように、動画像符号化装置の外部で選択されたＲＯＩに
関する位置情報とＲＯＩの優先度値Ｓを受け取るＲＯＩ
情報入力部７０９を備え、これら受け付けたＲＯＩに関
する位置情報とＲＯＩの画質の優先度値Ｓを、それぞれ
ＲＯＩマスク生成部５１１，ＲＯＩスケールアップ部５
１２に出力して、以降符号化される画像フレームにおい
てＲＯＩを他領域より高画質に符号化送信する。
９で、画像フレーム抽出部１０１を通して画像フレーム
が入力されると、ＲＯＩ選択部５０９により画像フレー
ム上でＲＯＩを選択して、得られたＲＯＩの位置情報を
ＲＯＩマスク生成部５１１に出力し、ＲＯＩ優先度設定
部５１０で選択されたＲＯＩに付与する優先度を設定
し、その優先度値ＳをＲＯＩスケールアップ部５１２に
出力しているが、この実施の形態７では、図１０に示す
ように、動画像符号化装置の外部で選択されたＲＯＩに
関する位置情報とＲＯＩの優先度値Ｓを受け取るＲＯＩ
情報入力部７０９を備え、これら受け付けたＲＯＩに関
する位置情報とＲＯＩの画質の優先度値Ｓを、それぞれ
ＲＯＩマスク生成部５１１，ＲＯＩスケールアップ部５
１２に出力して、以降符号化される画像フレームにおい
てＲＯＩを他領域より高画質に符号化送信する。
【００９３】なお、この実施の形態７では、実施の形態
１の図１に示す動画像符号化装置動画像符号化装置に、
ＲＯＩ情報入力部７０９，ＲＯＩマスク生成部５１１，
ＲＯＩスケールアップ部５１２を加えているが、実施の
形態３の図５に示す動画像符号化装置に、ＲＯＩ情報入
力部７０９，ＲＯＩマスク生成部５１１，ＲＯＩスケー
ルアップ部５１２を加えても良い。
１の図１に示す動画像符号化装置動画像符号化装置に、
ＲＯＩ情報入力部７０９，ＲＯＩマスク生成部５１１，
ＲＯＩスケールアップ部５１２を加えているが、実施の
形態３の図５に示す動画像符号化装置に、ＲＯＩ情報入
力部７０９，ＲＯＩマスク生成部５１１，ＲＯＩスケー
ルアップ部５１２を加えても良い。
【００９４】次に動作について説明する。ＲＯＩ情報入
力部７０９は、次の実施の形態８で示される動画像復号
装置からフィードバックされたＲＯＩ情報、すなわち、
ＲＯＩの位置情報とＲＯＩに付与された画質の優先度値
Ｓを入力し、ＲＯＩの位置情報をＲＯＩマスク生成部５
１１に出力し、画質の優先度値ＳをＲＯＩスケールアッ
プ部５１２に出力する。ＲＯＩマスク生成部５１１の処
理と、ＲＯＩスケールアップ部５１２の処理は、実施の
形態５と同様である。なお、ＲＯＩの位置情報と画質の
優先度値Ｓは、実施の形態５と同様に符号化ストリーム
生成部１０８に出力され、符号化データのオーバヘッド
情報に加えられる。
力部７０９は、次の実施の形態８で示される動画像復号
装置からフィードバックされたＲＯＩ情報、すなわち、
ＲＯＩの位置情報とＲＯＩに付与された画質の優先度値
Ｓを入力し、ＲＯＩの位置情報をＲＯＩマスク生成部５
１１に出力し、画質の優先度値ＳをＲＯＩスケールアッ
プ部５１２に出力する。ＲＯＩマスク生成部５１１の処
理と、ＲＯＩスケールアップ部５１２の処理は、実施の
形態５と同様である。なお、ＲＯＩの位置情報と画質の
優先度値Ｓは、実施の形態５と同様に符号化ストリーム
生成部１０８に出力され、符号化データのオーバヘッド
情報に加えられる。
【００９５】以上のように、この実施の形態７によれ
ば、注目領域の選択を通して、次に示す実施の形態８の
動画像復号装置と協調動作し、復号側駆動で注目領域を
選択して、注目領域が他領域より高画質に再生可能とな
るように符号化側の処理を制御することにより、実施の
形態５と同様の効果が得られる。
ば、注目領域の選択を通して、次に示す実施の形態８の
動画像復号装置と協調動作し、復号側駆動で注目領域を
選択して、注目領域が他領域より高画質に再生可能とな
るように符号化側の処理を制御することにより、実施の
形態５と同様の効果が得られる。
【００９６】実施の形態８．図１１はこの発明の実施の
形態８による動画像復号装置の構成を示すブロック図で
あり、図において、８０９はこれまでに再生された画像
フレーム上で注目領域（ＲＯＩ）を選択するＲＯＩ選択
部で、８１０は選択されたＲＯＩに画質の優先度値Ｓを
付与するＲＯＩ優先度設定部で、８１１はＲＯＩの位置
情報と優先度値Ｓを符号化側にフィードバックするＲＯ
Ｉ情報フィードバック部であり、その他の構成は、実施
の形態６の図９に示す構成と同等である。
形態８による動画像復号装置の構成を示すブロック図で
あり、図において、８０９はこれまでに再生された画像
フレーム上で注目領域（ＲＯＩ）を選択するＲＯＩ選択
部で、８１０は選択されたＲＯＩに画質の優先度値Ｓを
付与するＲＯＩ優先度設定部で、８１１はＲＯＩの位置
情報と優先度値Ｓを符号化側にフィードバックするＲＯ
Ｉ情報フィードバック部であり、その他の構成は、実施
の形態６の図９に示す構成と同等である。
【００９７】上記実施の形態６では、符号化側で選択さ
れたＲＯＩに関する位置情報、優先度値ＳをもとにＲＯ
Ｉマスク生成部６０９、ＲＯＩスケールダウン部６１０
を制御していたが、この実施の形態８では、図１１に示
すように、復号側に、ＲＯＩ選択部８０９，ＲＯＩ優先
度設定部８１０，ＲＯＩ情報フィードバック部８１１を
備え、符号化ビットストリームの復号処理に加え、ＲＯ
Ｉの選択機能を備えている。
れたＲＯＩに関する位置情報、優先度値ＳをもとにＲＯ
Ｉマスク生成部６０９、ＲＯＩスケールダウン部６１０
を制御していたが、この実施の形態８では、図１１に示
すように、復号側に、ＲＯＩ選択部８０９，ＲＯＩ優先
度設定部８１０，ＲＯＩ情報フィードバック部８１１を
備え、符号化ビットストリームの復号処理に加え、ＲＯ
Ｉの選択機能を備えている。
【００９８】なお、この実施の形態８では、実施の形態
２の図３に示す動画像復号装置に、ＲＯＩマスク生成部
６０９，ＲＯＩスケールダウン部６１０，ＲＯＩ選択部
８０９，ＲＯＩ優先度設定部８１０，ＲＯＩ情報フィー
ドバック部８１１を加えているが、実施の形態４の図６
に示す動画像復号装置に、ＲＯＩマスク生成部６０９，
ＲＯＩスケールダウン部６１０，ＲＯＩ選択部８０９，
ＲＯＩ優先度設定部８１０，ＲＯＩ情報フィードバック
部８１１を加えても良い。
２の図３に示す動画像復号装置に、ＲＯＩマスク生成部
６０９，ＲＯＩスケールダウン部６１０，ＲＯＩ選択部
８０９，ＲＯＩ優先度設定部８１０，ＲＯＩ情報フィー
ドバック部８１１を加えているが、実施の形態４の図６
に示す動画像復号装置に、ＲＯＩマスク生成部６０９，
ＲＯＩスケールダウン部６１０，ＲＯＩ選択部８０９，
ＲＯＩ優先度設定部８１０，ＲＯＩ情報フィードバック
部８１１を加えても良い。
【００９９】次に動作について説明する。ＲＯＩ選択部
８０９は、これまでに復号再生された画像フレーム上
で、ＲＯＩの選択を行う。ＲＯＩ優先度設定部８１０
は、選択されたＲＯＩに付与する画質の優先度値Ｓを設
定する。ＲＯＩ情報フィードバック部８１１は、選択さ
れたＲＯＩの位置情報と画質の優先度値Ｓを、上記実施
の形態７に示す符号化側にＲＯＩ情報として送信する。
なお、ＲＯＩの位置情報と画質の優先度値Ｓは、実施の
形態７に示す動画像符号化装置にて符号化データのオー
バヘッドに加えられ、これらの情報をもとに、ＲＯＩマ
スク生成部６０９，ＲＯＩスケールダウン部６１０によ
り、ＲＯＩへの画質を優先した復号処理が実施される。
８０９は、これまでに復号再生された画像フレーム上
で、ＲＯＩの選択を行う。ＲＯＩ優先度設定部８１０
は、選択されたＲＯＩに付与する画質の優先度値Ｓを設
定する。ＲＯＩ情報フィードバック部８１１は、選択さ
れたＲＯＩの位置情報と画質の優先度値Ｓを、上記実施
の形態７に示す符号化側にＲＯＩ情報として送信する。
なお、ＲＯＩの位置情報と画質の優先度値Ｓは、実施の
形態７に示す動画像符号化装置にて符号化データのオー
バヘッドに加えられ、これらの情報をもとに、ＲＯＩマ
スク生成部６０９，ＲＯＩスケールダウン部６１０によ
り、ＲＯＩへの画質を優先した復号処理が実施される。
【０１００】以上のように、この実施の形態８によれ
ば、符号化側と復号側が、注目領域の選択を通して、上
記実施の形態７の動画像符号化装置と協調動作し、復号
側駆動で注目領域を選択して、注目領域が他領域より高
画質に再生可能となるように符号化側の処理を制御する
ことにより、実施の形態６と同様の効果が得られる。
ば、符号化側と復号側が、注目領域の選択を通して、上
記実施の形態７の動画像符号化装置と協調動作し、復号
側駆動で注目領域を選択して、注目領域が他領域より高
画質に再生可能となるように符号化側の処理を制御する
ことにより、実施の形態６と同様の効果が得られる。
【０１０１】実施の形態９．図１２はこの発明の実施の
形態９による動画像符号化装置の構成を示すブロック図
であり、図において、９０１は、多チャネル系列の動画
像データを符号化する際に、各チャネル系列の動画像デ
ータを受け付ける比率を設定すると共に、各チャネル系
列のエントロピー符号化データを取り出す比率を設定す
るチャネル比率設定部で、９０２は、チャネル比率設定
部９０１により設定された、各チャネル系列の動画像デ
ータを受け付ける比率に基づき、各チャネル系列の動画
像データを選択して入力する動画像系列選択部である。
形態９による動画像符号化装置の構成を示すブロック図
であり、図において、９０１は、多チャネル系列の動画
像データを符号化する際に、各チャネル系列の動画像デ
ータを受け付ける比率を設定すると共に、各チャネル系
列のエントロピー符号化データを取り出す比率を設定す
るチャネル比率設定部で、９０２は、チャネル比率設定
部９０１により設定された、各チャネル系列の動画像デ
ータを受け付ける比率に基づき、各チャネル系列の動画
像データを選択して入力する動画像系列選択部である。
【０１０２】また、図１２において、９０３は、チャネ
ル比率設定部９０１により設定された、各チャネル系列
のエントロピー符号化データを取り出す比率に基づき、
各チャネル系列のエントロピー符号化データを符号化ス
トリーム生成部１０８に分配する各系列データ分配部で
あり、その他の構成は、実施の形態１の図１に示す構成
と同等である。
ル比率設定部９０１により設定された、各チャネル系列
のエントロピー符号化データを取り出す比率に基づき、
各チャネル系列のエントロピー符号化データを符号化ス
トリーム生成部１０８に分配する各系列データ分配部で
あり、その他の構成は、実施の形態１の図１に示す構成
と同等である。
【０１０３】上記の実施の形態１，実施の形態３，実施
の形態５及び実施の形態７では、１チャネル系列の動画
像を符号化する動画像符号化装置に関するものであった
が、この実施の形態９では、図１２に示すように、実施
の形態１の図１に示す動画像符号化装置に、チャネル比
率設定部９０１，動画像系列選択部９０２，各系列デー
タ分配部９０３を加え、多チャネル系列の動画像データ
を単一の動画像符号化装置で同時に符号化するものであ
る。なお、実施の形態３の図５に示す動画像符号化装置
に、チャネル比率設定部９０１，動画像系列選択部９０
２，各系列データ分配部９０３を加えても良い。
の形態５及び実施の形態７では、１チャネル系列の動画
像を符号化する動画像符号化装置に関するものであった
が、この実施の形態９では、図１２に示すように、実施
の形態１の図１に示す動画像符号化装置に、チャネル比
率設定部９０１，動画像系列選択部９０２，各系列デー
タ分配部９０３を加え、多チャネル系列の動画像データ
を単一の動画像符号化装置で同時に符号化するものであ
る。なお、実施の形態３の図５に示す動画像符号化装置
に、チャネル比率設定部９０１，動画像系列選択部９０
２，各系列データ分配部９０３を加えても良い。
【０１０４】次に動作について説明する。チャネル比率
設定部９０１は、同じ動画像符号化装置で符号化される
複数のチャネル系列の各動画像データを、動画像符号化
装置に入力する比率を設定すると共に、各チャネル系列
のエントロピー符号化データを符号化ストリーム生成部
１０８に分配する比率を設定する。例えば、チャネル
Ａ：チャネルＢ：チャネルＣ＝１：１：１と設定する
と、各チャネル系列の動画像データの画像フレームが１
枚ずつ順次処理される設定となる。チャネルＡ：チャネ
ルＢ：チャネルＣ＝２：１：１と設定すると、チャネル
Ａの２枚の画像フレームが処理されると、チャネルＢの
１枚の画像フレーム、チャネルＣの１枚の画像フレーム
が順次処理される設定となる。
設定部９０１は、同じ動画像符号化装置で符号化される
複数のチャネル系列の各動画像データを、動画像符号化
装置に入力する比率を設定すると共に、各チャネル系列
のエントロピー符号化データを符号化ストリーム生成部
１０８に分配する比率を設定する。例えば、チャネル
Ａ：チャネルＢ：チャネルＣ＝１：１：１と設定する
と、各チャネル系列の動画像データの画像フレームが１
枚ずつ順次処理される設定となる。チャネルＡ：チャネ
ルＢ：チャネルＣ＝２：１：１と設定すると、チャネル
Ａの２枚の画像フレームが処理されると、チャネルＢの
１枚の画像フレーム、チャネルＣの１枚の画像フレーム
が順次処理される設定となる。
【０１０５】動画像系列選択部９０２は、複数のチャネ
ル系列から動画像データを入力し、チャネル比率設定部
９０１で事前に設定された比率で、各チャネル系列の動
画像データを画像フレーム抽出部１０１に出力する。例
えば、３チャネルの場合で、チャネルＡ：チャネルＢ：
チャネルＣの比率を１：１：１と設定されている場合
は、画像フレーム抽出部１０１で１枚の画像フレーム取
り出されるごとに、次のチャネル系列の動画像データを
選択する。この比率が、チャネルＡ：チャネルＢ：チャ
ネルＣ＝２：１：１と設定されている場合は、チャネル
Ａの動画像データの２枚の画像フレームが抽出された
ら、チャネルＢの動画像データの１枚の画像フレーム、
つづいて、チャネルＣの動画像データの１枚の画像フレ
ームが抽出され、それが終了すると、チャネルＡの動画
像データの選択に制御を戻して同様な処理を繰り返す。
ル系列から動画像データを入力し、チャネル比率設定部
９０１で事前に設定された比率で、各チャネル系列の動
画像データを画像フレーム抽出部１０１に出力する。例
えば、３チャネルの場合で、チャネルＡ：チャネルＢ：
チャネルＣの比率を１：１：１と設定されている場合
は、画像フレーム抽出部１０１で１枚の画像フレーム取
り出されるごとに、次のチャネル系列の動画像データを
選択する。この比率が、チャネルＡ：チャネルＢ：チャ
ネルＣ＝２：１：１と設定されている場合は、チャネル
Ａの動画像データの２枚の画像フレームが抽出された
ら、チャネルＢの動画像データの１枚の画像フレーム、
つづいて、チャネルＣの動画像データの１枚の画像フレ
ームが抽出され、それが終了すると、チャネルＡの動画
像データの選択に制御を戻して同様な処理を繰り返す。
【０１０６】各系列データ分配部９０３は、各チャネル
系列の画像フレームのエントロピー符号化データを、チ
ャネル比率設定部９０１で事前に設定された比率に従っ
て、符号化ストリーム生成部１０８に分配する。例え
ば、３チャネルの場合で、チャネルＡ：チャネルＢ：チ
ャネルＣ＝２：１：１と設定された場合は、各系列デー
タ分配部９０３は、チャネルＡの連続する２枚の画像フ
レーム分のエントロピー符号化データを符号化ストリー
ム生成部１０８に分配し、続いて、チャネルＢの１枚の
画像フレーム分のエントロピー符号化データ、チャネル
Ｃの１枚の画像フレーム分のエントロピー符号化データ
を、それぞれ符号化ストリーム生成部１０８に分配し、
その後はチャネルＡに戻って分配する。
系列の画像フレームのエントロピー符号化データを、チ
ャネル比率設定部９０１で事前に設定された比率に従っ
て、符号化ストリーム生成部１０８に分配する。例え
ば、３チャネルの場合で、チャネルＡ：チャネルＢ：チ
ャネルＣ＝２：１：１と設定された場合は、各系列デー
タ分配部９０３は、チャネルＡの連続する２枚の画像フ
レーム分のエントロピー符号化データを符号化ストリー
ム生成部１０８に分配し、続いて、チャネルＢの１枚の
画像フレーム分のエントロピー符号化データ、チャネル
Ｃの１枚の画像フレーム分のエントロピー符号化データ
を、それぞれ符号化ストリーム生成部１０８に分配し、
その後はチャネルＡに戻って分配する。
【０１０７】以上のように、この実施の形態９によれ
ば、複数のチャネル系列の動画像データを、同一の動画
像符号化装置にて符号化可能となるという効果が得られ
る。また、単位時間あたりの画像フレーム数が異なる動
画像データであっても、他チャネルの動画像データと共
に同一の動画像符号化装置にて符号化できるという効果
が得られる。さらに、１チャネルの動画像データを複数
の動画像符号化装置にて符号化できるという効果が得ら
れる。
ば、複数のチャネル系列の動画像データを、同一の動画
像符号化装置にて符号化可能となるという効果が得られ
る。また、単位時間あたりの画像フレーム数が異なる動
画像データであっても、他チャネルの動画像データと共
に同一の動画像符号化装置にて符号化できるという効果
が得られる。さらに、１チャネルの動画像データを複数
の動画像符号化装置にて符号化できるという効果が得ら
れる。
【０１０８】さらに、この実施の形態９によれば、ｎ個
の動画像符号化装置で、ｍ個（ｍ＞ｎ）チャネルの動画
像データを符号化処理することもできるので、マルチチ
ャネル動画像符号化装置を構成する場合に、チャネル数
より少ない数の動画像符号化装置で対応することがで
き、装置のハードウェア規模を低減できる効果が得られ
る。特に、単位時間あたりの画像フレーム数、すなわ
ち、フレームレートの低い動画像符号化伝送を行う場合
に、その効果は大きい。
の動画像符号化装置で、ｍ個（ｍ＞ｎ）チャネルの動画
像データを符号化処理することもできるので、マルチチ
ャネル動画像符号化装置を構成する場合に、チャネル数
より少ない数の動画像符号化装置で対応することがで
き、装置のハードウェア規模を低減できる効果が得られ
る。特に、単位時間あたりの画像フレーム数、すなわ
ち、フレームレートの低い動画像符号化伝送を行う場合
に、その効果は大きい。
【０１０９】実施の形態１０．図１３はこの発明の実施
の形態１０による動画像復号装置の構成を示すブロック
図であり、図において、１００１は、符号化ビットスト
リームに含まれる各チャネル系列の符号化データを受け
付ける比率を設定すると共に、各チャネル系列ごとに画
像フレームを分配する比率を設定するチャネル比率設定
部で、１００２は、チャネル比率設定部１００１で設定
された、各チャネル系列の符号化データを受け付ける比
率に基づき、符号化データ抽出部２０１にて、各チャネ
ル系列に対応する画像フレームの符号化データを選択的
に抽出するよう制御を行う符号化データ系列選択部、１
００３は、チャネル比率設定部１００１で設定された画
像フレームを分配する比率に基づき、各チャネル系列の
画像フレームを動画像生成部に分配する各系列画像分配
部であり、その他の構成は、実施の形態２の図３に示す
構成と同等である。
の形態１０による動画像復号装置の構成を示すブロック
図であり、図において、１００１は、符号化ビットスト
リームに含まれる各チャネル系列の符号化データを受け
付ける比率を設定すると共に、各チャネル系列ごとに画
像フレームを分配する比率を設定するチャネル比率設定
部で、１００２は、チャネル比率設定部１００１で設定
された、各チャネル系列の符号化データを受け付ける比
率に基づき、符号化データ抽出部２０１にて、各チャネ
ル系列に対応する画像フレームの符号化データを選択的
に抽出するよう制御を行う符号化データ系列選択部、１
００３は、チャネル比率設定部１００１で設定された画
像フレームを分配する比率に基づき、各チャネル系列の
画像フレームを動画像生成部に分配する各系列画像分配
部であり、その他の構成は、実施の形態２の図３に示す
構成と同等である。
【０１１０】上記の実施の形態２，実施の形態４，実施
の形態６及び実施の形態８では、１チャネル系列の動画
像の符号化データを復号する動画像復号装置に関するも
のであったが、この実施の形態では、図１３に示すよう
に、実施の形態２の図３に示す動画像復号装置に、チャ
ネル比率設定部１００１，符号化データ系列選択部１０
０２，各系列画像分配部１００３を加え、多チャネル系
列の符号化データを単一の動画像復号装置で同時に復号
するものである。なお、実施の形態４の図６に示す動画
像復号装置に、チャネル比率設定部１００１，符号化デ
ータ系列選択部１００２，各系列画像分配部１００３を
加えても良い。
の形態６及び実施の形態８では、１チャネル系列の動画
像の符号化データを復号する動画像復号装置に関するも
のであったが、この実施の形態では、図１３に示すよう
に、実施の形態２の図３に示す動画像復号装置に、チャ
ネル比率設定部１００１，符号化データ系列選択部１０
０２，各系列画像分配部１００３を加え、多チャネル系
列の符号化データを単一の動画像復号装置で同時に復号
するものである。なお、実施の形態４の図６に示す動画
像復号装置に、チャネル比率設定部１００１，符号化デ
ータ系列選択部１００２，各系列画像分配部１００３を
加えても良い。
【０１１１】次に動作について説明する。チャネル比率
設定部１００１は、同じ動画像復号装置で復号される複
数のチャネル系列の符号化データを符号化データ抽出部
２０１に入力する比率を設定すると共に、各チャネル系
列の画像フレームを動画像生成部２０８に分配する比率
を設定する。例えば、チャネルＡ：チャネルＢ：チャネ
ルＣ＝１：１：１と設定すると、各チャネルの画像フレ
ームが１枚づつ順次処理される設定となる。チャネル
Ａ：チャネルＢ：チャネルＣ＝２：１：１と設定する
と、チャネルＡの２枚の画像フレームが処理されると、
チャネルＢの１枚の画像フレーム、チャネルＣの１枚の
画像フレームが順次処理される設定となる。
設定部１００１は、同じ動画像復号装置で復号される複
数のチャネル系列の符号化データを符号化データ抽出部
２０１に入力する比率を設定すると共に、各チャネル系
列の画像フレームを動画像生成部２０８に分配する比率
を設定する。例えば、チャネルＡ：チャネルＢ：チャネ
ルＣ＝１：１：１と設定すると、各チャネルの画像フレ
ームが１枚づつ順次処理される設定となる。チャネル
Ａ：チャネルＢ：チャネルＣ＝２：１：１と設定する
と、チャネルＡの２枚の画像フレームが処理されると、
チャネルＢの１枚の画像フレーム、チャネルＣの１枚の
画像フレームが順次処理される設定となる。
【０１１２】符号化データ系列選択部１００２は、各チ
ャネル系列の符号化データを、チャネル比率設定部１０
０１で事前に設定された比率に従って、符号化データ抽
出部２０１にて符号化ビットストリームから抽出するよ
う制御を行う。例えば、３チャネルの場合でチャネル
Ａ：チャネルＢ：チャネルＣ＝２：１：１と設定された
場合は、チャネルＡの２枚の画像フレームに相当する符
号化データ，チャネルＢの１枚の画像フレームに相当す
る符号化データ，チャネルＣの１枚の画像フレームに相
当する符号化データがこの順で繰り返し抽出され、復号
処理される。
ャネル系列の符号化データを、チャネル比率設定部１０
０１で事前に設定された比率に従って、符号化データ抽
出部２０１にて符号化ビットストリームから抽出するよ
う制御を行う。例えば、３チャネルの場合でチャネル
Ａ：チャネルＢ：チャネルＣ＝２：１：１と設定された
場合は、チャネルＡの２枚の画像フレームに相当する符
号化データ，チャネルＢの１枚の画像フレームに相当す
る符号化データ，チャネルＣの１枚の画像フレームに相
当する符号化データがこの順で繰り返し抽出され、復号
処理される。
【０１１３】各系列画像分配部１００３は、ウェーブレ
ット逆変換部２０７から出力された各チャネル系列の画
像フレームを、チャネル比率設定部１００１で事前に設
定された比率に従って、各チャネル系列ごとに動画像生
成部２０８に送出する。例えば、３チャネルの場合で、
チャネルＡ：チャネルＢ：チャネルＣ＝２：１：１と設
定されている場合は、各系列画像分配部１００３は、入
力された各画像フレームを、チャネルＡの２枚の画像フ
レーム、チャネルＢの１枚の画像フレーム、チャネルＣ
の１枚の画像フレームを、動画像生成部２０８に分配す
る。
ット逆変換部２０７から出力された各チャネル系列の画
像フレームを、チャネル比率設定部１００１で事前に設
定された比率に従って、各チャネル系列ごとに動画像生
成部２０８に送出する。例えば、３チャネルの場合で、
チャネルＡ：チャネルＢ：チャネルＣ＝２：１：１と設
定されている場合は、各系列画像分配部１００３は、入
力された各画像フレームを、チャネルＡの２枚の画像フ
レーム、チャネルＢの１枚の画像フレーム、チャネルＣ
の１枚の画像フレームを、動画像生成部２０８に分配す
る。
【０１１４】以上のように、この実施の形態１０によれ
ば、複数のチャネル系列の動画像符号化データを同一の
動画像復号装置にて復号可能となるという効果が得られ
る。また、単位時間あたりの画像フレーム数が異なる符
号化データであっても、他チャネルの符号化データと共
に同一の動画像復号装置にて復号できるという効果が得
られる。さらに、１チャネル系列の符号化データを複数
の動画像復号装置で分散して復号できるという効果が得
られる。
ば、複数のチャネル系列の動画像符号化データを同一の
動画像復号装置にて復号可能となるという効果が得られ
る。また、単位時間あたりの画像フレーム数が異なる符
号化データであっても、他チャネルの符号化データと共
に同一の動画像復号装置にて復号できるという効果が得
られる。さらに、１チャネル系列の符号化データを複数
の動画像復号装置で分散して復号できるという効果が得
られる。
【０１１５】さらに、この実施の形態１０によれば、ｎ
個の動画像復号装置で、ｍ個（ｍ＞ｎ）チャネル分の符
号化データを復号処理することもできるので、マルチチ
ャネル動画像復号装置を構成する場合には、チャネル数
より少ない数の動画像復号装置で対応することができ、
装置のハードウェア規模を低減できるという効果が得ら
れる。特に、単位時間あたりの画像フレーム数、すなわ
ち、フレームレートの低い動画像の復号処理を行う場合
に、その効果は大きい。
個の動画像復号装置で、ｍ個（ｍ＞ｎ）チャネル分の符
号化データを復号処理することもできるので、マルチチ
ャネル動画像復号装置を構成する場合には、チャネル数
より少ない数の動画像復号装置で対応することができ、
装置のハードウェア規模を低減できるという効果が得ら
れる。特に、単位時間あたりの画像フレーム数、すなわ
ち、フレームレートの低い動画像の復号処理を行う場合
に、その効果は大きい。
【０１１６】
【発明の効果】以上のように、この発明によれば、要求
された所望のビットレートを各符号化処理単位に割り振
ったビットレートで、各符号化処理単位を構成する量子
化されたウェーブレット変換係数をビットプレーンごと
に符号化し、ビットプレーンごとのエントロピー符号化
データを生成することにより、動画像を構成する画像フ
レームを所望のビットレートで個別に符号化できるた
め、動画像の符号化データから、特定の画像フレームを
選択する等の編集性を保ちつつ、符号化側や伝送路や復
号側の要求を反映して、ある画像フレームを境に画質を
上げたり下げたりして動画像を伝送することができると
いう効果がある。
された所望のビットレートを各符号化処理単位に割り振
ったビットレートで、各符号化処理単位を構成する量子
化されたウェーブレット変換係数をビットプレーンごと
に符号化し、ビットプレーンごとのエントロピー符号化
データを生成することにより、動画像を構成する画像フ
レームを所望のビットレートで個別に符号化できるた
め、動画像の符号化データから、特定の画像フレームを
選択する等の編集性を保ちつつ、符号化側や伝送路や復
号側の要求を反映して、ある画像フレームを境に画質を
上げたり下げたりして動画像を伝送することができると
いう効果がある。
【０１１７】この発明によれば、要求された復号時の所
望のビットレートを各符号化処理単位に割り振ったビッ
トレートで、エントロピー符号化データを、各符号化処
理単位ごとにビットプレーン単位でエントロピー復号
し、量子化されたウェーブレット変換係数を求めること
により、動画像の符号化データを所望のビットレートで
個別に復号できるため、動画像の符号化データから、特
定の画像フレームを選択的に取り出してつなぎあわせる
等の編集性や、特定の画像フレームのみ取り出して復号
することによるフレームレートの制御等の性能を維持し
ながら、符号化側や伝送路や復号側の要求を反映して、
ある画像フレームを境に画質を上げたり下げたりする動
画像の復号再生ができるという効果がある。
望のビットレートを各符号化処理単位に割り振ったビッ
トレートで、エントロピー符号化データを、各符号化処
理単位ごとにビットプレーン単位でエントロピー復号
し、量子化されたウェーブレット変換係数を求めること
により、動画像の符号化データを所望のビットレートで
個別に復号できるため、動画像の符号化データから、特
定の画像フレームを選択的に取り出してつなぎあわせる
等の編集性や、特定の画像フレームのみ取り出して復号
することによるフレームレートの制御等の性能を維持し
ながら、符号化側や伝送路や復号側の要求を反映して、
ある画像フレームを境に画質を上げたり下げたりする動
画像の復号再生ができるという効果がある。
【０１１８】この発明によれば、要求された符号化時の
所望の符号化処理時間を各符号化処理単位に割り振った
符号化処理時間で、各符号化処理単位を構成する量子化
されたウェーブレット変換係数をビットプレーンごとに
符号化し、ビットプレーンごとのエントロピー符号化デ
ータを生成することにより、各画像フレームの符号化処
理にかけることのできる時間をフルに使用した符号化処
理が可能になるため、与えられた符号化処理時間で処理
し得る最大の情報量を符号化でき、動画像符号化装置の
処理能力を最大限に生かした動画像の伝送を行えるとい
う効果がある。
所望の符号化処理時間を各符号化処理単位に割り振った
符号化処理時間で、各符号化処理単位を構成する量子化
されたウェーブレット変換係数をビットプレーンごとに
符号化し、ビットプレーンごとのエントロピー符号化デ
ータを生成することにより、各画像フレームの符号化処
理にかけることのできる時間をフルに使用した符号化処
理が可能になるため、与えられた符号化処理時間で処理
し得る最大の情報量を符号化でき、動画像符号化装置の
処理能力を最大限に生かした動画像の伝送を行えるとい
う効果がある。
【０１１９】この発明によれば、要求された復号時の所
望の復号処理時間を各符号化処理単位に割り振った復号
処理時間で、エントロピー符号化データを、各符号化処
理単位ごとにビットプレーン単位でエントロピー復号
し、量子化されたウェーブレット変換係数を求めること
により、符号化データの各フレームの復号処理にかける
ことのできる時間をフルに使用した復号処理が可能にな
るため、与えられた復号処理時間内で処理し得る最大の
情報量を復号処理し、同条件下で実現し得る最高の画質
を再生できるという効果がある。
望の復号処理時間を各符号化処理単位に割り振った復号
処理時間で、エントロピー符号化データを、各符号化処
理単位ごとにビットプレーン単位でエントロピー復号
し、量子化されたウェーブレット変換係数を求めること
により、符号化データの各フレームの復号処理にかける
ことのできる時間をフルに使用した復号処理が可能にな
るため、与えられた復号処理時間内で処理し得る最大の
情報量を復号処理し、同条件下で実現し得る最高の画質
を再生できるという効果がある。
【０１２０】この発明によれば、画像フレーム上で注目
領域を選択し、選択された注目領域に他領域に対しての
画質の優先度を設定し、選択された注目領域に対応する
ウェーブレット変換係数をＲＯＩ変換係数として特定
し、特定されたＲＯＩ変換係数の量子化値を、設定され
た画質の優先度値に対応してスケールアップすることに
より、各画像フレームの注目領域を他より高い優先度で
符号化できるため、低ビットレートで符号化した時に
も、注目領域の画質を良好に保った符号化伝送が実現で
きるという効果がある。
領域を選択し、選択された注目領域に他領域に対しての
画質の優先度を設定し、選択された注目領域に対応する
ウェーブレット変換係数をＲＯＩ変換係数として特定
し、特定されたＲＯＩ変換係数の量子化値を、設定され
た画質の優先度値に対応してスケールアップすることに
より、各画像フレームの注目領域を他より高い優先度で
符号化できるため、低ビットレートで符号化した時に
も、注目領域の画質を良好に保った符号化伝送が実現で
きるという効果がある。
【０１２１】この発明によれば、各画像フレームの符号
化データから注目領域の位置情報と注目領域の画質の優
先度値を抽出し、抽出された注目領域の位置情報に基づ
き、注目領域に対応するウェーブレット変換係数をＲＯ
Ｉ変換係数として特定し、特定されたＲＯＩ変換係数の
量子化値を、抽出された注目領域の画質の優先度値に対
応してスケールダウンすることにより、画像フレームの
注目領域を、他領域より高い優先度で復号可能となるた
め、低ビットレートで復号が行われても、注目領域の画
質を良好に保った動画像の再生が実現できるという効果
がある。
化データから注目領域の位置情報と注目領域の画質の優
先度値を抽出し、抽出された注目領域の位置情報に基づ
き、注目領域に対応するウェーブレット変換係数をＲＯ
Ｉ変換係数として特定し、特定されたＲＯＩ変換係数の
量子化値を、抽出された注目領域の画質の優先度値に対
応してスケールダウンすることにより、画像フレームの
注目領域を、他領域より高い優先度で復号可能となるた
め、低ビットレートで復号が行われても、注目領域の画
質を良好に保った動画像の再生が実現できるという効果
がある。
【０１２２】この発明によれば、復号側より送信された
画像フレームの注目領域の座標情報と、他領域に対して
の注目領域の画質の優先度値を入力し、注目領域の座標
情報に基づき、注目領域に対応するウェーブレット変換
係数をＲＯＩ変換係数として特定し、特定されたＲＯＩ
変換係数の量子化値を、画質の優先度値に対応してスケ
ールアップすることにより、復号側と協調して各画像フ
レームの注目領域を他より高い優先度で符号化できるた
め、低ビットレートで符号化した時にも、注目領域の画
質を良好に保った符号化伝送が実現できるという効果が
ある。
画像フレームの注目領域の座標情報と、他領域に対して
の注目領域の画質の優先度値を入力し、注目領域の座標
情報に基づき、注目領域に対応するウェーブレット変換
係数をＲＯＩ変換係数として特定し、特定されたＲＯＩ
変換係数の量子化値を、画質の優先度値に対応してスケ
ールアップすることにより、復号側と協調して各画像フ
レームの注目領域を他より高い優先度で符号化できるた
め、低ビットレートで符号化した時にも、注目領域の画
質を良好に保った符号化伝送が実現できるという効果が
ある。
【０１２３】この発明によれば、復号側で、動画像の画
像フレーム上で注目領域を選択し、選択された注目領域
に他領域に対しての画質の優先度を設定し、注目領域の
座標情報と注目領域の画質の優先度値を、符号化側にフ
ィードバックすると共に、復号側で、注目画像に対応す
るＲＯＩ変換係数の量子化値を、注目領域の画質の優先
度値に対応してスケールダウンすることにより、符号化
側と協調して画像フレームの注目領域を他領域より高い
優先度で復号可能となるため、低ビットレートで復号が
行われても、注目領域の画質を良好に保った動画像の再
生が実現できるという効果がある。
像フレーム上で注目領域を選択し、選択された注目領域
に他領域に対しての画質の優先度を設定し、注目領域の
座標情報と注目領域の画質の優先度値を、符号化側にフ
ィードバックすると共に、復号側で、注目画像に対応す
るＲＯＩ変換係数の量子化値を、注目領域の画質の優先
度値に対応してスケールダウンすることにより、符号化
側と協調して画像フレームの注目領域を他領域より高い
優先度で復号可能となるため、低ビットレートで復号が
行われても、注目領域の画質を良好に保った動画像の再
生が実現できるという効果がある。
【０１２４】この発明によれば、設定された各チャネル
系列の動画像データを入力する比率に基づき、各チャネ
ル系列の動画像データを入力し、設定された各チャネル
のエントロピー符号化データを出力する比率に基づき、
各チャネル系列のエントロピー符号化データを出力する
ことにより、複数のチャネルの動画像データを同一の動
画像符号化装置にて符号化可能となるという効果があ
る。
系列の動画像データを入力する比率に基づき、各チャネ
ル系列の動画像データを入力し、設定された各チャネル
のエントロピー符号化データを出力する比率に基づき、
各チャネル系列のエントロピー符号化データを出力する
ことにより、複数のチャネルの動画像データを同一の動
画像符号化装置にて符号化可能となるという効果があ
る。
【０１２５】この発明によれば、設定された各チャネル
系列の符号化データを入力する比率に基づき、符号化ビ
ットストリームから各チャネル系列の符号化データを入
力し、設定された各チャネル系列の画像フレームを出力
する比率に基づき、ウェーブレット逆変換部により再生
された各チャネル系列の画像フレームを出力することに
より、複数のチャネル系列の動画像の符号化データを同
一の動画像復号装置にて復号可能となるという効果があ
る。
系列の符号化データを入力する比率に基づき、符号化ビ
ットストリームから各チャネル系列の符号化データを入
力し、設定された各チャネル系列の画像フレームを出力
する比率に基づき、ウェーブレット逆変換部により再生
された各チャネル系列の画像フレームを出力することに
より、複数のチャネル系列の動画像の符号化データを同
一の動画像復号装置にて復号可能となるという効果があ
る。
【図１】 この発明の実施の形態１による画像符号化装
置の構成を示すブロック図である。
置の構成を示すブロック図である。
【図２】 この発明の実施の形態１によるウェーブレッ
ト変換部の動作を説明する図である。
ト変換部の動作を説明する図である。
【図３】 この発明の実施の形態２による画像復号装置
の構成を示すブロック図である。
の構成を示すブロック図である。
【図４】 この発明の実施の形態２によるウェーブレッ
ト逆変換部の動作を説明する図である。
ト逆変換部の動作を説明する図である。
【図５】 この発明の実施の形態３による画像符号化装
置の構成を示すブロック図である。
置の構成を示すブロック図である。
【図６】 この発明の実施の形態４による画像復号装置
の構成を示すブロック図である。
の構成を示すブロック図である。
【図７】 この発明の実施の形態５による画像符号化装
置の構成を示すブロック図である。
置の構成を示すブロック図である。
【図８】 この発明の実施の形態５によるＲＯＩ変換係
数の特定を説明する図である。
数の特定を説明する図である。
【図９】 この発明の実施の形態６による画像復号装置
の構成を示すブロック図である。
の構成を示すブロック図である。
【図１０】 この発明の実施の形態７による画像符号化
装置の構成を示すブロック図である。
装置の構成を示すブロック図である。
【図１１】 この発明の実施の形態８による画像復号装
置の構成を示すブロック図である。
置の構成を示すブロック図である。
【図１２】 この発明の実施の形態９による画像符号化
装置の構成を示すブロック図である。
装置の構成を示すブロック図である。
【図１３】 この発明の実施の形態１０による画像復号
装置の構成を示すブロック図である。
装置の構成を示すブロック図である。
【図１４】 従来の画像符号化装置の構成を示すブロッ
ク図である。
ク図である。
【図１５】 従来の画像復号装置の構成を示すブロック
図である。
図である。
１０１ 画像フレーム抽出部、１０２ ウェーブレット
変換部、１０３ 量子化部、１０４ 符号化処理単位構
成部、１０５ ビットレート設定部、１０６，２０４
ビットレート制御部、１０７ エントロピー符号化部、
１０８ 符号化ストリーム生成部、２０１ 符号化デー
タ抽出部、２０２ エントロピー符号化データ分離部、
２０３ ビットレート設定部、２０５ エントロピー復
号部、２０６ 逆量子化部、２０７ ウェーブレット逆
変換部、２０８ 動画像生成部、３０５ 符号化時間設
定部、３０６ 符号化時間制御部、４０３ 復号時間設
定部、４０４ 復号時間制御部、５０９，８０９ ＲＯ
Ｉ選択部、５１０，８１０ＲＯＩ優先度設定部、５１
１，６０９ ＲＯＩマスク生成部、５１２ ＲＯＩスケ
ールアップ部、６１０ ＲＯＩスケールダウン部、７０
９ ＲＯＩ情報入力部、８１０ ＲＯＩ優先度設定部、
８１１ ＲＯＩ情報フィードバック部、９０１，１００
１ チャネル比率設定部、９０２ 動画像系列選択部、
９０３ 各系列データ分配部、１００１ チャネル比率
設定部、１００２ 符号化データ系列選択部、１００３
各系列画像分配部。
変換部、１０３ 量子化部、１０４ 符号化処理単位構
成部、１０５ ビットレート設定部、１０６，２０４
ビットレート制御部、１０７ エントロピー符号化部、
１０８ 符号化ストリーム生成部、２０１ 符号化デー
タ抽出部、２０２ エントロピー符号化データ分離部、
２０３ ビットレート設定部、２０５ エントロピー復
号部、２０６ 逆量子化部、２０７ ウェーブレット逆
変換部、２０８ 動画像生成部、３０５ 符号化時間設
定部、３０６ 符号化時間制御部、４０３ 復号時間設
定部、４０４ 復号時間制御部、５０９，８０９ ＲＯ
Ｉ選択部、５１０，８１０ＲＯＩ優先度設定部、５１
１，６０９ ＲＯＩマスク生成部、５１２ ＲＯＩスケ
ールアップ部、６１０ ＲＯＩスケールダウン部、７０
９ ＲＯＩ情報入力部、８１０ ＲＯＩ優先度設定部、
８１１ ＲＯＩ情報フィードバック部、９０１，１００
１ チャネル比率設定部、９０２ 動画像系列選択部、
９０３ 各系列データ分配部、１００１ チャネル比率
設定部、１００２ 符号化データ系列選択部、１００３
各系列画像分配部。
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK32 KK33 KK34 MA24 MC14 MC23 MC32 MC34 PP04 SS01 SS06 SS11 TA33 TA39 TA47 TA49 TA73 TB04 TB13 TC21 TC24 TC34 TC45 TD12 TD15 UA02 UA05 5J064 AA01 BA09 BB12 BD02
Claims (14)
- 【請求項１】 動画像データを入力し動画像を構成する
画像フレームを抽出する画像フレーム抽出部と、 抽出された画像フレームをウェーブレット変換して、ウ
ェーブレット変換係数を出力するウェーブレット変換部
と、 上記ウェーブレット変換係数を量子化する量子化部と、 上記量子化されたウェーブレット変換係数を、符号化処
理単位ごとにまとめる符号化処理単位構成部と、 要求された符号化時の所望のビットレートを設定するビ
ットレート設定部と、 設定された所望のビットレートで各画像フレームを符号
化するために、上記所望のビットレートを各符号化処理
単位に割り振るビットレート制御部と、 割り振られたビットレートで、各符号化処理単位を構成
する上記量子化されたウェーブレット変換係数をビット
プレーンごとに符号化し、ビットプレーンごとのエント
ロピー符号化データを生成するエントロピー符号化部
と、 生成されたビットプレーンごとのエントロピー符号化デ
ータと、各画像フレームの符号化に用いた符号化パラメ
ータを、各画像フレームの符号化データとして結合し、
符号化ビットストリームを生成する符号化ストリーム生
成部とを備えたこと特徴とする動画像符号化装置。 - 【請求項２】 符号化ビットストリームより各画像フレ
ームの符号化データを抽出する符号化データ抽出部と、 抽出された各画像フレームの符号化データより、エント
ロピー符号化データを分離するエントロピー符号化デー
タ分離部と、 要求された復号時の所望のビットレートを設定するビッ
トレート設定部と、 設定された所望のビットレートで各画像フレームを復号
するために、上記所望のビットレートを各符号化処理単
位に割り振るビットレート制御部と、 割り振られたビットレートで、分離された上記エントロ
ピー符号化データを、各符号化処理単位ごとにビットプ
レーン単位でエントロピー復号し、量子化されたウェー
ブレット変換係数を求めるエントロピー復号部と、 上記量子化されたウェーブレット変換係数に逆量子化処
理を施す逆量子化部と、 上記逆量子化処理されたウェーブレット変換係数にウェ
ーブレット逆変換を施し画像フレームを再生するウェー
ブレット逆変換部と、 再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力する動画像生成部とを備えた
ことを特徴とする動画像復号装置。 - 【請求項３】 動画像データを入力し動画像を構成する
画像フレームを抽出する画像フレーム抽出部と、 抽出された画像フレームをウェーブレット変換して、ウ
ェーブレット変換係数を出力するウェーブレット変換部
と、 上記ウェーブレット変換係数を量子化する量子化部と、 上記量子化されたウェーブレット変換係数を、符号化処
理単位ごとにまとめる符号化処理単位構成部と、 要求された符号化時の所望の符号化処理時間を設定する
符号化時間設定部と、 設定された所望の符号化処理時間で各画像フレームを符
号化するために、上記所望の符号化処理時間を各符号化
処理単位に割り振る符号化時間制御部と、 割り振られた符号化処理時間で、各符号化処理単位を構
成する上記量子化されたウェーブレット変換係数をビッ
トプレーンごとに符号化し、ビットプレーンごとのエン
トロピー符号化データを生成するエントロピー符号化部
と、 生成されたビットプレーンごとのエントロピー符号化デ
ータと、各画像フレームの符号化に用いた符号化パラメ
ータを、各画像フレームの符号化データとして結合し、
符号化ビットストリームを生成する符号化ストリーム生
成部とを備えたことを特徴とする動画像符号化装置。 - 【請求項４】 符号化ビットストリームより各画像フレ
ームの符号化データを抽出する符号化データ抽出部と、 抽出された各画像フレームの符号化データより、エント
ロピー符号化データを分離するエントロピー符号化デー
タ分離部と、 要求された復号時の所望の復号処理時間を設定する復号
時間設定部と、 設定された所望の復号処理時間で各画像フレームを復号
するために、上記所望の復号処理時間を各符号化処理単
位に割り振る復号時間制御部と、 割り振られた復号処理時間で、分離された上記エントロ
ピー符号化データを、各符号化処理単位ごとにビットプ
レーン単位でエントロピー復号し、量子化されたウェー
ブレット変換係数を求めるエントロピー復号部と、 上記量子化されたウェーブレット変換係数に逆量子化処
理を施す逆量子化部と、 上記逆量子化されたウェーブレット変換係数にウェーブ
レット逆変換を施し画像フレームを再生するウェーブレ
ット逆変換部と、 再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力する動画像生成部とを備えた
ことを特徴とする動画像復号装置。 - 【請求項５】 画像フレーム抽出部により抽出された画
像フレーム上で注目領域を選択し、注目領域の座標情報
を出力するＲＯＩ（Ｒｅｇｉｏｎ Ｏｆ Ｉｎｔｅｒｅ
ｓｔ）選択部と、 選択された注目領域に、他領域に対しての画質の優先度
を設定し、その優先度値を出力するＲＯＩ優先度設定部
と、 上記ＲＯＩ選択部より出力された注目領域の座標情報に
基づき、選択された注目領域に対応するウェーブレット
変換係数を、ＲＯＩ変換係数として特定するＲＯＩマス
ク生成部と、 量子化部より出力された量子化されたウェーブレット変
換係数を入力し、上記ＲＯＩマスク生成部により特定さ
れたＲＯＩ変換係数の量子化値を、上記ＲＯＩ優先度設
定部により設定された画質の優先度値に対応してスケー
ルアップし、スケールアップしたＲＯＩ変換係数の量子
化値を含む上記量子化されたウェーブレット変換係数を
符号化処理単位構成部に出力するＲＯＩスケールアップ
部とを備え、 符号化ストリーム生成部が、上記ＲＯＩ選択部より出力
された注目領域の座標情報と上記ＲＯＩ優先度設定部よ
り出力された優先度値を、符号化ビットストリームに付
加することを特徴とする請求項１又は請求項３記載の動
画像符号化装置。 - 【請求項６】 エントロピー符号化データ分離部が、入
力した各画像フレームの符号化データから注目領域の位
置情報と注目領域の画質の優先度値を抽出し、 抽出された注目領域の位置情報に基づき、注目領域に対
応するウェーブレット変換係数を、ＲＯＩ変換係数とし
て特定するＲＯＩマスク生成部と、 エントロピー復号部より出力された量子化されたウェー
ブレット変換係数を入力し、上記ＲＯＩマスク生成部に
より特定されたＲＯＩ変換係数の量子化値を、上記エン
トロピー符号化データ分離部により抽出された注目領域
の画質の優先度値に対応してスケールダウンし、スケー
ルダウンしたＲＯＩ変換係数の量子化値を含む上記量子
化されたウェーブレット変換係数を逆量子化部に出力す
るＲＯＩスケールダウン部とを備えたことを特徴とする
請求項２又は請求項４記載の動画像復号装置。 - 【請求項７】 復号側より送信された画像フレームの注
目領域の座標情報と、他領域に対しての注目領域の画質
の優先度値を入力するＲＯＩ情報入力部と、 上記ＲＯＩ情報入力部より出力された注目領域の座標情
報に基づき、注目領域に対応するウェーブレット変換係
数を、ＲＯＩ変換係数として特定するＲＯＩマスク生成
部と、 量子化部より出力された量子化されたウェーブレット変
換係数を入力し、上記ＲＯＩマスク生成部により特定さ
れたＲＯＩ変換係数の量子化値を、上記ＲＯＩ情報入力
部より出力された画質の優先度値に対応してスケールア
ップし、スケールアップしたＲＯＩ変換係数の量子化値
を含む上記量子化されたウェーブレット変換係数を符号
化処理単位構成部に出力するＲＯＩスケールアップ部と
を備えたことを特徴とする請求項１又は請求項３記載の
動画像符号化装置。 - 【請求項８】 動画像生成部が生成した動画像の画像フ
レーム上で注目領域を選択し、注目領域の座標情報を出
力するＲＯＩ選択部と、 選択された注目領域に、他領域に対しての画質の優先度
を設定し優先度値を出力するＲＯＩ優先度設定部と、 上記ＲＯＩ選択部から出力された注目領域の座標情報
と、上記ＲＯＩ優先度設定部から出力された注目領域の
画質の優先度値を、動画像の符号化側にフィードバック
するＲＯＩ情報フィードバック部とを備えたことを特徴
とする請求項６記載の動画像復号装置。 - 【請求項９】 多チャネル系列の動画像データを入力し
て符号化する際に、各チャネル系列の動画像データを入
力する比率を設定すると共に、エントロピー符号化部に
より生成された各チャネル系列のエントロピー符号化デ
ータを出力する比率を設定するチャネル比率設定部と、 上記チャネル比率設定部により設定された各チャネル系
列の動画像データを入力する比率に基づき、各チャネル
系列の動画像データを入力して、画像フレーム抽出部に
出力する動画像系列選択部と、 上記チャネル比率設定部により設定された各チャネル系
列のエントロピー符号化データを出力する比率に基づ
き、上記エントロピー符号化部により生成された各チャ
ネル系列のエントロピー符号化データを、符号化ストリ
ーム生成部に出力する各系列データ分配部とを備えたこ
とを特徴とする請求項１又は請求項３記載の動画像符号
化装置。 - 【請求項１０】 多チャネル系列の符号化データを含ん
だ符号化ビットストリームを入力して復号する際に、各
チャネル系列の符号化データを入力する比率を設定する
と共に、ウェーブレット逆変換部により再生された各チ
ャネル系列の画像フレームを出力する比率を設定するチ
ャネル比率設定部と、 上記チャネル比率設定部により設定された各チャネル系
列の符号化データを入力する比率に基づき、符号化デー
タ抽出部にて、上記符号化ビットストリームから各チャ
ネル系列の符号化データを選択的に抽出するよう制御を
行う符号化データ系列選択部と、 上記チャネル比率設定部により設定された各チャネル系
列の画像フレームを出力する比率に基づき、ウェーブレ
ット逆変換部により再生された各チャネル系列の画像フ
レームを、動画像生成部に出力する各系列画像分配部と
を備えたことを特徴とする請求項２又は請求項４記載の
動画像復号装置。 - 【請求項１１】 動画像データを入力し動画像を構成す
る画像フレームを抽出するステップと、 抽出された画像フレームをウェーブレット変換して、ウ
ェーブレット変換係数を出力するステップと、 上記ウェーブレット変換係数を量子化するステップと、 上記量子化されたウェーブレット変換係数を、符号化処
理単位ごとにまとめるステップと、 要求された符号化時の所望のビットレートを設定するス
テップと、 設定された所望のビットレートで各画像フレームを符号
化するために、上記所望のビットレートを各符号化処理
単位に割り振るステップと、 割り振られたビットレートで、各符号化処理単位を構成
する上記量子化されたウェーブレット変換係数をビット
プレーンごとに符号化し、ビットプレーンごとのエント
ロピー符号化データを生成するステップと、 生成されたビットプレーンごとのエントロピー符号化デ
ータと、各画像フレームの符号化に用いた符号化パラメ
ータを、各画像フレームの符号化データとして結合し、
符号化ビットストリームを生成するステップとを備えた
こと特徴とする動画像符号化方法。 - 【請求項１２】 符号化ビットストリームより各画像フ
レームの符号化データを抽出するステップと、 抽出された各画像フレームの符号化データより、エント
ロピー符号化データを分離するステップと、 要求された復号時の所望のビットレートを設定するステ
ップと、 設定された所望のビットレートで各画像フレームを復号
するために、上記所望のビットレートを各符号化処理単
位に割り振るステップと、 割り振られたビットレートで、分離された上記エントロ
ピー符号化データを、各符号化処理単位ごとにビットプ
レーン単位でエントロピー復号し、量子化されたウェー
ブレット変換係数を求めるステップと、 上記量子化されたウェーブレット変換係数に逆量子化処
理を施すステップと、 上記逆量子化処理されたウェーブレット変換係数にウェ
ーブレット逆変換を施し画像フレームを再生するステッ
プと、 再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力するステップとを備えたこと
を特徴とする動画像復号方法。 - 【請求項１３】 動画像データを入力し動画像を構成す
る画像フレームを抽出するステップと、 抽出された画像フレームをウェーブレット変換して、ウ
ェーブレット変換係数を出力するステップと、 上記ウェーブレット変換係数を量子化するステップと、 上記量子化されたウェーブレット変換係数を、符号化処
理単位ごとにまとめるステップと、 要求された符号化時の所望の符号化処理時間を設定する
ステップと、 設定された符号化処理時間で各画像フレームを符号化す
るために、上記所望の符号化処理時間を各符号化処理単
位に割り振るステップと、 割り振られた符号化処理時間で、各符号化処理単位を構
成する上記量子化されたウェーブレット変換係数をビッ
トプレーンごとに符号化し、ビットプレーンごとのエン
トロピー符号化データを生成するステップと、 生成されたビットプレーンごとのエントロピー符号化デ
ータと、各画像フレームの符号化に用いた符号化パラメ
ータを、各画像フレームの符号化データとして結合し、
符号化ビットストリームを生成するステップとを備えた
こと特徴とする動画像符号化方法。 - 【請求項１４】 符号化ビットストリームより各画像フ
レームの符号化データを抽出するステップと、 抽出された各画像フレームの符号化データより、エント
ロピー符号化データを分離するステップと、 要求された復号時の所望の復号処理時間を設定するステ
ップと、 設定された所望の復号処理時間で各画像フレームを復号
するために、上記所望の復号処理時間を各符号化処理単
位に割り振るステップと、 割り振られた復号処理時間で、分離された上記エントロ
ピー符号化データを、各符号化処理単位ごとにビットプ
レーン単位でエントロピー復号し、量子化されたウェー
ブレット変換係数を求めるステップと、 上記量子化されたウェーブレット変換係数に逆量子化処
理を施すステップと、 上記逆量子化されたウェーブレット変換係数にウェーブ
レット逆変換を施し画像フレームを再生するステップ
と、 再生された各画像フレームを時系列順に並べて動画像を
生成し動画像データを出力するステップとを備えたこと
を特徴とする動画像復号方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28830799A JP2001112004A (ja) | 1999-10-08 | 1999-10-08 | 動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP28830799A JP2001112004A (ja) | 1999-10-08 | 1999-10-08 | 動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2001112004A true JP2001112004A (ja) | 2001-04-20 |
Family
ID=17728488
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP28830799A Abandoned JP2001112004A (ja) | 1999-10-08 | 1999-10-08 | 動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2001112004A (ja) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002344941A (ja) * | 2001-05-14 | 2002-11-29 | Sony Corp | コンテンツ品質制御システム |
| WO2005088977A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| JP2006279397A (ja) * | 2005-03-29 | 2006-10-12 | Megachips Lsi Solutions Inc | 画像強調装置 |
| JP2007142614A (ja) * | 2005-11-16 | 2007-06-07 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム及び情報記録媒体 |
| JP2007312399A (ja) * | 2007-05-31 | 2007-11-29 | Sanyo Electric Co Ltd | 画像符号化装置および画像復号装置、ならびにそれらを利用可能な画像表示装置および方法 |
| US7903734B2 (en) | 2003-04-24 | 2011-03-08 | Canon Kabushiki Kaisha | Moving image decoding apparatus, moving image decoding method, image decoding method, and image decoding apparatus |
| US7957604B2 (en) | 2004-03-12 | 2011-06-07 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, and computer-readable storage medium |
| CN112368712A (zh) * | 2018-07-03 | 2021-02-12 | 通用电气公司 | 基于注释信息的分类和定位 |
-
1999
- 1999-10-08 JP JP28830799A patent/JP2001112004A/ja not_active Abandoned
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002344941A (ja) * | 2001-05-14 | 2002-11-29 | Sony Corp | コンテンツ品質制御システム |
| US7903734B2 (en) | 2003-04-24 | 2011-03-08 | Canon Kabushiki Kaisha | Moving image decoding apparatus, moving image decoding method, image decoding method, and image decoding apparatus |
| WO2005088977A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| JP2005295504A (ja) * | 2004-03-12 | 2005-10-20 | Canon Inc | 動画像符号化装置及び復号装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
| US7822282B2 (en) | 2004-03-12 | 2010-10-26 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| US7957604B2 (en) | 2004-03-12 | 2011-06-07 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, and computer-readable storage medium |
| JP4702928B2 (ja) * | 2004-03-12 | 2011-06-15 | キヤノン株式会社 | 動画像符号化装置及び復号装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
| JP2006279397A (ja) * | 2005-03-29 | 2006-10-12 | Megachips Lsi Solutions Inc | 画像強調装置 |
| US8050506B2 (en) | 2005-03-29 | 2011-11-01 | Megachips Corporation | Image enhancement device |
| JP2007142614A (ja) * | 2005-11-16 | 2007-06-07 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム及び情報記録媒体 |
| JP2007312399A (ja) * | 2007-05-31 | 2007-11-29 | Sanyo Electric Co Ltd | 画像符号化装置および画像復号装置、ならびにそれらを利用可能な画像表示装置および方法 |
| CN112368712A (zh) * | 2018-07-03 | 2021-02-12 | 通用电气公司 | 基于注释信息的分类和定位 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US8953898B2 (en) | Image processing apparatus and method | |
| JP4367880B2 (ja) | 画像処理装置及びその方法並びに記憶媒体 | |
| JP4656190B2 (ja) | 情報処理装置および方法 | |
| JP5152598B2 (ja) | 符号化装置および符号化方法、並びに復号装置および復号方法 | |
| CN1122414C (zh) | 将图象数据存入存储器前按显示装置分辨率对图象数据去压缩和再压缩的mpeg系统和方法 | |
| US7072404B2 (en) | Decoding apparatus, control method therefor, and storage medium | |
| JP3213584B2 (ja) | 画像符号化装置及び画像復号装置 | |
| US8098947B2 (en) | Method and apparatus for processing image data by rearranging wavelet transform data | |
| US7302105B2 (en) | Moving image coding apparatus, moving image decoding apparatus, and methods therefor | |
| US7970220B2 (en) | Image processing apparatus and method for performing decoding process on coded data of motion picture based on a plurality of attributes thereof | |
| US20200344467A1 (en) | Multi-codec processing and rate control | |
| JPH1146372A (ja) | 画像符号化装置及び画像復号装置 | |
| US5905815A (en) | Decoding encoded image signals encoded by further transforming transformed DC signals | |
| JP2002034043A (ja) | 符号化装置及び符号化方法並びに記憶媒体 | |
| JP2006304329A (ja) | 符号化方法及び復号化方法及び符号化装置及び復号化装置 | |
| JP5950157B2 (ja) | 画像処理装置および方法、並びに、プログラム | |
| JP2022536512A (ja) | 符号化器及び一連のフレームを符号化する方法 | |
| JP2001112004A (ja) | 動画像符号化装置及び動画像復号装置、並びに動画像符号化方法及び動画像復号方法 | |
| US8135223B2 (en) | Image processing apparatus and method of image processing | |
| US20110069897A1 (en) | Image processing device and method | |
| JP2001285642A (ja) | 画像処理装置及びその方法、コンピュータ可読メモリ | |
| KR20060027831A (ko) | 신호를 비트 스트림으로 인코딩하는 방법 | |
| JPH10215454A (ja) | 符号化装置及び符号化方法 | |
| JPH11146397A (ja) | 動画像圧縮符号化・復号化方法、動画像圧縮符号化・復号化装置、動画像符号化伝送方法、動画像符号化伝送システムおよび動画像圧縮符号化・復号化プログラムを記録した記録媒体 | |
| JPH0686253A (ja) | 動画像データ伝送装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A762 | Written abandonment of application |
Free format text: JAPANESE INTERMEDIATE CODE: A762 Effective date: 20050419 |