JP2002325257A - 画像復号方法および装置 - Google Patents
画像復号方法および装置Info
- Publication number
- JP2002325257A JP2002325257A JP2002039612A JP2002039612A JP2002325257A JP 2002325257 A JP2002325257 A JP 2002325257A JP 2002039612 A JP2002039612 A JP 2002039612A JP 2002039612 A JP2002039612 A JP 2002039612A JP 2002325257 A JP2002325257 A JP 2002325257A
- Authority
- JP
- Japan
- Prior art keywords
- decoding
- image
- simplification
- processing
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Landscapes
- Television Signal Processing For Recording (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
(57)【要約】
【課題】 動画の再生をリアルタイムにおこなう場合、
一般に高速な画像復号装置が必要で、コストや消費電力
の面で不利であった。 【解決手段】 復号ユニット１２は、ＪＰＥＧ２０００
にしたがって画像を復号する。簡略化ユニット３０は、
画像復号の各段階において経過時間と制限時間を比較
し、必要に応じて復号処理を簡略化処理に切り替える強
制変換器３２を含む。たとえば動画の１枚のフレームの
再生が１／３０秒を超えそうな場合、強制変換器３２に
より、低周波成分のみを復号する等の簡略化処理が実施
される。
一般に高速な画像復号装置が必要で、コストや消費電力
の面で不利であった。 【解決手段】 復号ユニット１２は、ＪＰＥＧ２０００
にしたがって画像を復号する。簡略化ユニット３０は、
画像復号の各段階において経過時間と制限時間を比較
し、必要に応じて復号処理を簡略化処理に切り替える強
制変換器３２を含む。たとえば動画の１枚のフレームの
再生が１／３０秒を超えそうな場合、強制変換器３２に
より、低周波成分のみを復号する等の簡略化処理が実施
される。
Description
【０００１】
【発明の属する技術分野】この発明は画像復号技術、と
くに符号化された画像データを復号する方法および装置
に関する。
くに符号化された画像データを復号する方法および装置
に関する。
【０００２】
【従来の技術】近年、ＰＣ（パーソナルコンピュータ）
を代表とする各種情報機器の普及、デジタルカメラやカ
ラープリンタなどの大衆化、インターネット人口の爆発
的な増加などにより、一般人の日常生活にデジタル画像
の文化が深く浸透した。こうした状況下、静止画像、動
画像については、それぞれＪＰＥＧ（Joint Photograph
ic Expert Group）、ＭＰＥＧ（Motion Picture Expert
Group）などの符号化圧縮技術が標準化され、ＣＤ−Ｒ
ＯＭなどの記録媒体や、ネットワークまたは放送波など
の伝送媒体を通じた画像の配信および再生の利便性が改
善されてきた。ＪＰＥＧの系列において、その進化版と
もいうべきＪＰＥＧ２０００が発表され、またＭＰＥＧ
についても中長期に及ぶ目標が策定されており、今後も
画像処理技術が機器の機能向上へ寄与することに疑いは
ない。
を代表とする各種情報機器の普及、デジタルカメラやカ
ラープリンタなどの大衆化、インターネット人口の爆発
的な増加などにより、一般人の日常生活にデジタル画像
の文化が深く浸透した。こうした状況下、静止画像、動
画像については、それぞれＪＰＥＧ（Joint Photograph
ic Expert Group）、ＭＰＥＧ（Motion Picture Expert
Group）などの符号化圧縮技術が標準化され、ＣＤ−Ｒ
ＯＭなどの記録媒体や、ネットワークまたは放送波など
の伝送媒体を通じた画像の配信および再生の利便性が改
善されてきた。ＪＰＥＧの系列において、その進化版と
もいうべきＪＰＥＧ２０００が発表され、またＭＰＥＧ
についても中長期に及ぶ目標が策定されており、今後も
画像処理技術が機器の機能向上へ寄与することに疑いは
ない。
【０００３】たとえば、デジタルカメラひとつをとって
みても、最近では動画撮影機能が充実し、ムービーカメ
ラの独自領域が狭まっている。ＣＣＤ（Charge Coupled
Device）の画素数もミリオンオーダになり、高速連写
撮影機能を搭載するものもある。銀塩カメラにこだわり
つづけるユーザもいるが、デジタル化の波は音楽レコー
ドをコンパクトディスクに置き換えたように、とどまる
ところを知らない。
みても、最近では動画撮影機能が充実し、ムービーカメ
ラの独自領域が狭まっている。ＣＣＤ（Charge Coupled
Device）の画素数もミリオンオーダになり、高速連写
撮影機能を搭載するものもある。銀塩カメラにこだわり
つづけるユーザもいるが、デジタル化の波は音楽レコー
ドをコンパクトディスクに置き換えたように、とどまる
ところを知らない。
【０００４】
【発明が解決しようとする課題】しかしながら、民生機
器の進展には、つねに機能、操作性、およびコストが一
体に検討されなければならない。機能面の充実は、操作
性とコストへの期待を生む。たとえば、動画再生機能や
高速連写機能をデジタルカメラに搭載する場合、圧縮符
号化されていったんメモリカード等へ格納された画像デ
ータを読み出し、これを表示に間に合うタイミングで復
号および伸張しなければならない。このためには高速の
画像デコーダを搭載しなければならず、一般にコスト、
消費電力、実装面積などの面で不利になりやすい。
器の進展には、つねに機能、操作性、およびコストが一
体に検討されなければならない。機能面の充実は、操作
性とコストへの期待を生む。たとえば、動画再生機能や
高速連写機能をデジタルカメラに搭載する場合、圧縮符
号化されていったんメモリカード等へ格納された画像デ
ータを読み出し、これを表示に間に合うタイミングで復
号および伸張しなければならない。このためには高速の
画像デコーダを搭載しなければならず、一般にコスト、
消費電力、実装面積などの面で不利になりやすい。
【０００５】本発明はこうした課題に鑑みてなされたも
のであり、その目的は、コストまたは消費電力などの面
で有利な画像復号技術を提供することにある。
のであり、その目的は、コストまたは消費電力などの面
で有利な画像復号技術を提供することにある。
【０００６】
【課題を解決するための手段】特開平１１−２２５３３
７号公報には、伝送路の速度のばらつきを考慮し、画像
データの送信元が適宜データ伝送をうち切る技術が開示
されている。また、その中で、本発明が適用可能なウェ
ーブレット変換を利用する旨も開示されている。この技
術は、伝送路が正常な場合は働かないことを主眼として
設計されている。一方、本発明は、伝送路には関係な
く、復号側のコストダウン等を目的とする。
７号公報には、伝送路の速度のばらつきを考慮し、画像
データの送信元が適宜データ伝送をうち切る技術が開示
されている。また、その中で、本発明が適用可能なウェ
ーブレット変換を利用する旨も開示されている。この技
術は、伝送路が正常な場合は働かないことを主眼として
設計されている。一方、本発明は、伝送路には関係な
く、復号側のコストダウン等を目的とする。
【０００７】本発明のある態様は、画像復号方法に関す
る。この方法は、規定時間内に符号化画像データの復号
が完了しない状勢になったとき、以降の復号を簡略化処
理に切り替えて行う。このため、さして複雑または高速
な処理をしなくとも、一応の画質を維持しながらコマ落
ちなどの好ましくない再生を防止できる。「完了しない
状勢になったとき」とは、実際に完了しなかったときの
ほか、途中経過から判断して完了しないことが高い確率
で予想されたときを含む。
る。この方法は、規定時間内に符号化画像データの復号
が完了しない状勢になったとき、以降の復号を簡略化処
理に切り替えて行う。このため、さして複雑または高速
な処理をしなくとも、一応の画質を維持しながらコマ落
ちなどの好ましくない再生を防止できる。「完了しない
状勢になったとき」とは、実際に完了しなかったときの
ほか、途中経過から判断して完了しないことが高い確率
で予想されたときを含む。
【０００８】なお、この態様は、符号化画像データを取
得する工程と、取得した符号化画像データを復号処理に
投入する工程と、復号処理の経過時間を監視する工程
と、監視の結果、復号処理の途中のチェックポイントに
おける経過時間が所定の制限時間を上回ったとき、以降
の復号処理を簡略化処理に切り替える工程とを含んでも
よい。
得する工程と、取得した符号化画像データを復号処理に
投入する工程と、復号処理の経過時間を監視する工程
と、監視の結果、復号処理の途中のチェックポイントに
おける経過時間が所定の制限時間を上回ったとき、以降
の復号処理を簡略化処理に切り替える工程とを含んでも
よい。
【０００９】本発明の別の態様も画像復号方法に関す
る。この方法は、前記符号化画像データは動画をフレー
ムベースで符号化したものであり、規定時間内にその符
号化画像データに含まれる任意のフレームの復号が完了
しない状勢になったとき、以降そのフレームの復号を簡
略化処理に切り替えて行う。「規定時間」の例は、１秒
間に３０フレームを動画として復号再生する場合の１／
３０秒や、１秒間に５フレームを高速連写画像として復
号再生する場合の１／５秒などであってもよい。
る。この方法は、前記符号化画像データは動画をフレー
ムベースで符号化したものであり、規定時間内にその符
号化画像データに含まれる任意のフレームの復号が完了
しない状勢になったとき、以降そのフレームの復号を簡
略化処理に切り替えて行う。「規定時間」の例は、１秒
間に３０フレームを動画として復号再生する場合の１／
３０秒や、１秒間に５フレームを高速連写画像として復
号再生する場合の１／５秒などであってもよい。
【００１０】このとき、フレームの復号を複数の段階に
分け、それらの段階ごとに制限時間を設け、いずれかの
段階においてその段階について定められた制限時間が経
過したとき、その段階において以降の処理を簡略化して
もよい。「複数の段階」として、色コンポーネントごと
の復号の段階、画像領域ごとの復号の段階があるが、こ
れらに限らず、制限時間と経過時間が比較できる区分で
あればよい。
分け、それらの段階ごとに制限時間を設け、いずれかの
段階においてその段階について定められた制限時間が経
過したとき、その段階において以降の処理を簡略化して
もよい。「複数の段階」として、色コンポーネントごと
の復号の段階、画像領域ごとの復号の段階があるが、こ
れらに限らず、制限時間と経過時間が比較できる区分で
あればよい。
【００１１】符号化画像データは動画をフレーム単位で
独立して符号化したものであり、簡略化処理はそのフレ
ームに閉じた処理であってもよい。この場合、簡略化処
理の結果はそのフレームに閉じるため、別のフレームの
画質へ影響しない。
独立して符号化したものであり、簡略化処理はそのフレ
ームに閉じた処理であってもよい。この場合、簡略化処
理の結果はそのフレームに閉じるため、別のフレームの
画質へ影響しない。
【００１２】本発明の別の態様は、画像復号装置に関す
る。この装置は、符号化画像データを復号する復号ユニ
ットと、規定時間内にその符号化画像データの復号が完
了しない状勢になったとき、以降の復号を簡略化処理に
切り替える簡略化ユニットとを含む。動画はフレームベ
ースで符号化されていてもよく、その場合、簡略化処理
部は、フレーム単位で復号を簡略化処理に切り替えても
よい。簡略化ユニットは、復号ユニットに代わって自ら
簡略化された復号を実行してもよいし、単に復号ユニッ
トに対して簡略化処理を指示してもよい。
る。この装置は、符号化画像データを復号する復号ユニ
ットと、規定時間内にその符号化画像データの復号が完
了しない状勢になったとき、以降の復号を簡略化処理に
切り替える簡略化ユニットとを含む。動画はフレームベ
ースで符号化されていてもよく、その場合、簡略化処理
部は、フレーム単位で復号を簡略化処理に切り替えても
よい。簡略化ユニットは、復号ユニットに代わって自ら
簡略化された復号を実行してもよいし、単に復号ユニッ
トに対して簡略化処理を指示してもよい。
【００１３】簡略化ユニットは、画像を構成する複数の
色コンポーネントのそれぞれ、または複数の領域のそれ
ぞれを復号する段階において前記制限時間と経過時間の
比較および必要に応じた簡略化処理を行ってもよい。
「必要に応じた」とは、制限時間を守っている限り、簡
略化処理が不要なことをいう。ただし、その場合でも別
の理由から簡略化処理をすることに差し支えはない。
色コンポーネントのそれぞれ、または複数の領域のそれ
ぞれを復号する段階において前記制限時間と経過時間の
比較および必要に応じた簡略化処理を行ってもよい。
「必要に応じた」とは、制限時間を守っている限り、簡
略化処理が不要なことをいう。ただし、その場合でも別
の理由から簡略化処理をすることに差し支えはない。
【００１４】簡略化ユニットは、複数の段階のいずれか
が早く完了した場合、残りの段階に割り当てられた制限
時間を緩和してもよい。さらに巨視的に見て、複数のフ
レームのいずれかの復号が早く完了した場合、つぎに復
号すべきフレームに割り当てられた規定時間を緩和して
もよい。たとえば、規定時間が本来１／３０秒であって
も、あるフレームが１／６０秒で復号できれば、つぎの
フレームの規定時間は、１／３０＋（１／３０−１／６
０）＝１／２０秒としてもよい。この場合でも、１／３
０秒ごとの再生に間に合わせることができる。
が早く完了した場合、残りの段階に割り当てられた制限
時間を緩和してもよい。さらに巨視的に見て、複数のフ
レームのいずれかの復号が早く完了した場合、つぎに復
号すべきフレームに割り当てられた規定時間を緩和して
もよい。たとえば、規定時間が本来１／３０秒であって
も、あるフレームが１／６０秒で復号できれば、つぎの
フレームの規定時間は、１／３０＋（１／３０−１／６
０）＝１／２０秒としてもよい。この場合でも、１／３
０秒ごとの再生に間に合わせることができる。
【００１５】簡略化ユニットは、画像の高周波成分を強
制的にゼロとみなして簡略化処理をしてもよい。ＪＰＥ
Ｇ２０００に基づく復号の場合、ＨＨサブバンドなどを
無効係数、すなわちすべてゼロとみなす方法がある。
制的にゼロとみなして簡略化処理をしてもよい。ＪＰＥ
Ｇ２０００に基づく復号の場合、ＨＨサブバンドなどを
無効係数、すなわちすべてゼロとみなす方法がある。
【００１６】簡略化ユニットは、高周波成分を強制的に
ゼロとみなしたときに得られる、低周波成分を主体とす
る復号画像の解像度が所望の値に到達していない場合、
この復号画像の解像度を調整してから出力してもよい。
ＪＰＥＧ２０００に基づく復号の場合、規定時間内でＬ
Ｌサブバンドしか復号できなかったとき、このままでは
画像サイズ、すなわち解像度が、最終的に得るべき復号
画像（以下単に「復号画像」といえば、最終的に得るべ
き復号画像とする）の１／４しかない。そこで他のサブ
バンドをゼロとみなすか、このＬＬサブバンドの画像を
補間によって縦横２倍ずつの画像へ変換して出力しても
よい。
ゼロとみなしたときに得られる、低周波成分を主体とす
る復号画像の解像度が所望の値に到達していない場合、
この復号画像の解像度を調整してから出力してもよい。
ＪＰＥＧ２０００に基づく復号の場合、規定時間内でＬ
Ｌサブバンドしか復号できなかったとき、このままでは
画像サイズ、すなわち解像度が、最終的に得るべき復号
画像（以下単に「復号画像」といえば、最終的に得るべ
き復号画像とする）の１／４しかない。そこで他のサブ
バンドをゼロとみなすか、このＬＬサブバンドの画像を
補間によって縦横２倍ずつの画像へ変換して出力しても
よい。
【００１７】簡略化ユニットは、復号の初期段階でなさ
れる低周波成分の復号が前記規定時間に完了しない状勢
になったとき、その低周波成分の下位ビットプレーンに
相当する画像部分の処理をスキップしてもよい。すなわ
ち、ＪＰＥＧ２０００の場合、ＬＬサブバンドすら全部
は復号できない状況のとき、ＬＬサブバンドの下位ビッ
トプレーンを無視してもよい。
れる低周波成分の復号が前記規定時間に完了しない状勢
になったとき、その低周波成分の下位ビットプレーンに
相当する画像部分の処理をスキップしてもよい。すなわ
ち、ＪＰＥＧ２０００の場合、ＬＬサブバンドすら全部
は復号できない状況のとき、ＬＬサブバンドの下位ビッ
トプレーンを無視してもよい。
【００１８】簡略化ユニットは、復号の目的である動画
の再生が停止されたとき、その時点において復号中だっ
たフレームはその時点以降簡略化処理をせず、このフレ
ームに対して以降通常の復号がなされてもよい。たとえ
ば、ユーザが再生停止の指示を出したとき、最後に表示
されるべきフレームには、十分の復号時間が与えられる
ことによる。
の再生が停止されたとき、その時点において復号中だっ
たフレームはその時点以降簡略化処理をせず、このフレ
ームに対して以降通常の復号がなされてもよい。たとえ
ば、ユーザが再生停止の指示を出したとき、最後に表示
されるべきフレームには、十分の復号時間が与えられる
ことによる。
【００１９】本発明のさらに別の態様も画像復号装置に
関する。この装置は、撮像ブロックと、それを機構面で
制御する機構制御ブロックと、撮像によって得られたデ
ジタル画像を処理する処理ブロックとを含み、前記処理
ブロックは、前記デジタル画像から生成された符号化画
像データを復号する復号ユニットと、規定時間内にその
符号化画像データに含まれる任意のフレームの復号が完
了しない状勢になったとき、以降そのフレームの復号を
簡略化処理に切り替える簡略化ユニットとを含む。
関する。この装置は、撮像ブロックと、それを機構面で
制御する機構制御ブロックと、撮像によって得られたデ
ジタル画像を処理する処理ブロックとを含み、前記処理
ブロックは、前記デジタル画像から生成された符号化画
像データを復号する復号ユニットと、規定時間内にその
符号化画像データに含まれる任意のフレームの復号が完
了しない状勢になったとき、以降そのフレームの復号を
簡略化処理に切り替える簡略化ユニットとを含む。
【００２０】本発明のさらに別の態様も画像復号装置に
関する。この装置は、受信ブロックと、受信信号を処理
する処理ブロックと、処理後の信号を再生する再生ブロ
ックを含み、前記処理ブロックは、前記受信信号から抽
出されたデジタル画像の符号化画像データを復号する復
号ユニットと、規定時間内にその符号化画像データに含
まれる任意のフレームの復号が完了しない状勢になった
とき、以降そのフレームの復号を簡略化処理に切り替え
る簡略化ユニットとを含む。
関する。この装置は、受信ブロックと、受信信号を処理
する処理ブロックと、処理後の信号を再生する再生ブロ
ックを含み、前記処理ブロックは、前記受信信号から抽
出されたデジタル画像の符号化画像データを復号する復
号ユニットと、規定時間内にその符号化画像データに含
まれる任意のフレームの復号が完了しない状勢になった
とき、以降そのフレームの復号を簡略化処理に切り替え
る簡略化ユニットとを含む。
【００２１】なお、以上の構成要素の任意の組合せ、本
発明の表現を方法、装置、システム、コンピュータプロ
グラム、記録媒体などの間で変換したものもまた、本発
明の態様として有効である。
発明の表現を方法、装置、システム、コンピュータプロ
グラム、記録媒体などの間で変換したものもまた、本発
明の態様として有効である。
【００２２】
【発明の実施の形態】以下、本発明の好適な実施の形態
を説明する。この実施の形態は、ＪＰＥＧ２０００によ
って符号化された画像データを復号する装置に関する。
を説明する。この実施の形態は、ＪＰＥＧ２０００によ
って符号化された画像データを復号する装置に関する。
【００２３】図１は、ＪＰＥＧ２０００にもとづく復号
の過程を説明する図である。同図のごとく、まず符号化
画像データＣＩ（Coded Image）が入力され、後述のご
とく、算術復号、ピットプレーン復号などの処理を経た
のち、逆量子化処理を受ける。この段階で、原画像に対
して２回ウェーブレット変換が施された画像（以下、第
２階層の画像ＷＩ２という）が得られる。つづいてこの
画像にウェーブレット逆変換が施され、第１階層の画像
ＷＩ１が生成される。さらにこの画像に対してもう１度
ウェーブレット逆変換が施され、復号画像ＤＩ(Decoded
Image)が得られる。
の過程を説明する図である。同図のごとく、まず符号化
画像データＣＩ（Coded Image）が入力され、後述のご
とく、算術復号、ピットプレーン復号などの処理を経た
のち、逆量子化処理を受ける。この段階で、原画像に対
して２回ウェーブレット変換が施された画像（以下、第
２階層の画像ＷＩ２という）が得られる。つづいてこの
画像にウェーブレット逆変換が施され、第１階層の画像
ＷＩ１が生成される。さらにこの画像に対してもう１度
ウェーブレット逆変換が施され、復号画像ＤＩ(Decoded
Image)が得られる。
【００２４】いま、理解の容易のために符号化の手順を
示せば、これは図１の処理の逆変換といえる。すなわ
ち、図１において復号画像ＤＩとされた部分が原画像で
あり、これに対して１回ウェーブレット変換が施され、
第１階層の画像ＷＩ１が生成される。ＪＰＥＧ２０００
で利用されるウェーブレット変換のフィルタは、Daubec
hiesフィルタであり、その本質は、画像の縦横に対して
それぞれ同時にハイパスフィルタおよびローパスフィル
タを作用させる点にある。したがって、その変換の結果
画像はｘ、ｙの両方向に低周波成分を有するＬＬサブバ
ンドと、ｘ、ｙの一方向に低周波成分を有し、かつ他方
向に高周波成分を有するＨＬサブバンドおよびＬＨサブ
バンドと、ｘ、ｙの両方向に高周波成分を有するＨＨサ
ブバンドの合計４つのバンドに分割される。またこのフ
ィルタは、ｘ、ｙの両方向について画素数を１／２に軽
減する作用も併せもつ。したがって、図１に示すごと
く、第１階層の画像ＷＩ１において、模式的に示された
４つのサブバンド（ここではＬＬ１、ＨＬ１、ＬＨ１、
ＨＨ１と表記する）が生成される。
示せば、これは図１の処理の逆変換といえる。すなわ
ち、図１において復号画像ＤＩとされた部分が原画像で
あり、これに対して１回ウェーブレット変換が施され、
第１階層の画像ＷＩ１が生成される。ＪＰＥＧ２０００
で利用されるウェーブレット変換のフィルタは、Daubec
hiesフィルタであり、その本質は、画像の縦横に対して
それぞれ同時にハイパスフィルタおよびローパスフィル
タを作用させる点にある。したがって、その変換の結果
画像はｘ、ｙの両方向に低周波成分を有するＬＬサブバ
ンドと、ｘ、ｙの一方向に低周波成分を有し、かつ他方
向に高周波成分を有するＨＬサブバンドおよびＬＨサブ
バンドと、ｘ、ｙの両方向に高周波成分を有するＨＨサ
ブバンドの合計４つのバンドに分割される。またこのフ
ィルタは、ｘ、ｙの両方向について画素数を１／２に軽
減する作用も併せもつ。したがって、図１に示すごと
く、第１階層の画像ＷＩ１において、模式的に示された
４つのサブバンド（ここではＬＬ１、ＨＬ１、ＬＨ１、
ＨＨ１と表記する）が生成される。
【００２５】符号化におけるウェーブレット変換では、
所定の回数フィルタリングが施される。図１では、ウェ
ーブレット変換は２回おこなわれ、第２階層の画像ＷＩ
２が生成される。２回目以降のウェーブレット変換は、
直前の階層の画像のうち、ＬＬサブバンド成分に対して
のみ施される。したがって、第２階層の画像ＷＩ２にお
いて、第１階層の画像ＷＩ１のＬＬ１サブバンドが、４
つのサブバンドであるＬＬ２、ＨＬ２、ＬＨ２、ＨＨ２
に分解されている。符号化処理においては、このあと量
子化、その他の処理を経て最終的に符号化画像データＣ
Ｉが得られる。
所定の回数フィルタリングが施される。図１では、ウェ
ーブレット変換は２回おこなわれ、第２階層の画像ＷＩ
２が生成される。２回目以降のウェーブレット変換は、
直前の階層の画像のうち、ＬＬサブバンド成分に対して
のみ施される。したがって、第２階層の画像ＷＩ２にお
いて、第１階層の画像ＷＩ１のＬＬ１サブバンドが、４
つのサブバンドであるＬＬ２、ＨＬ２、ＬＨ２、ＨＨ２
に分解されている。符号化処理においては、このあと量
子化、その他の処理を経て最終的に符号化画像データＣ
Ｉが得られる。
【００２６】階層化された画像について注意すべきは、
原画像における低周波成分が、図１において、より左上
に現れることである。図１の場合、第２階層の画像ＷＩ
２の左上隅にあるＬＬ２サブバンドがもっとも低周波で
あり、逆にいえば、このＬＬ２サブバンドさえ得ること
ができれば、原画像のもっとも基本的な性質を再現する
ことができる。この知見が、以下の実施の形態で利用さ
れている。
原画像における低周波成分が、図１において、より左上
に現れることである。図１の場合、第２階層の画像ＷＩ
２の左上隅にあるＬＬ２サブバンドがもっとも低周波で
あり、逆にいえば、このＬＬ２サブバンドさえ得ること
ができれば、原画像のもっとも基本的な性質を再現する
ことができる。この知見が、以下の実施の形態で利用さ
れている。
【００２７】図２は画像復号装置１０の構成を示す。こ
の構成は、ハードウエア的には、任意のコンピュータの
ＣＰＵ、メモリ、その他のＬＳＩで実現でき、ソフトウ
エア的にはメモリのロードされた画像復号機能のあるプ
ログラムなどによって実現されるが、ここではそれらの
連携によって実現される機能ブロックを描いている。し
たがって、これらの機能ブロックがハードウエアのみ、
ソフトウエアのみ、またはそれらの組合せによっていろ
いろな形で実現できることは、当業者には理解されると
ころである。
の構成は、ハードウエア的には、任意のコンピュータの
ＣＰＵ、メモリ、その他のＬＳＩで実現でき、ソフトウ
エア的にはメモリのロードされた画像復号機能のあるプ
ログラムなどによって実現されるが、ここではそれらの
連携によって実現される機能ブロックを描いている。し
たがって、これらの機能ブロックがハードウエアのみ、
ソフトウエアのみ、またはそれらの組合せによっていろ
いろな形で実現できることは、当業者には理解されると
ころである。
【００２８】画像復号装置１０は、おもに復号ユニット
１２と簡略化ユニット３０からなる。復号ユニット１２
は、符号化画像データＣＩを受け取り、そのデータスト
リームを解析するストリーム解析器１４と、解析の結果
判明した復号すべきデータ列に対して算術復号を施す算
術復号器１６と、その結果得られたデータを色コンポー
ネント毎にビットプレーンの形で復号するビットプレー
ン復号器１８と、その結果を逆量子化する逆量子化器２
０と、逆量子化の結果得られた第ｎ階層の画像ＷＩｎに
ウェーブレット逆変換を施すウェーブレット逆変換器２
４を含む。ウェーブレット逆変換器２４は、フレームバ
ッファ２２をワークエリアとして利用する。最終的に復
号が完了して得られた復号画像ＤＩは、フレームバッフ
ァ２２から任意の目的へ向けて出力される。
１２と簡略化ユニット３０からなる。復号ユニット１２
は、符号化画像データＣＩを受け取り、そのデータスト
リームを解析するストリーム解析器１４と、解析の結果
判明した復号すべきデータ列に対して算術復号を施す算
術復号器１６と、その結果得られたデータを色コンポー
ネント毎にビットプレーンの形で復号するビットプレー
ン復号器１８と、その結果を逆量子化する逆量子化器２
０と、逆量子化の結果得られた第ｎ階層の画像ＷＩｎに
ウェーブレット逆変換を施すウェーブレット逆変換器２
４を含む。ウェーブレット逆変換器２４は、フレームバ
ッファ２２をワークエリアとして利用する。最終的に復
号が完了して得られた復号画像ＤＩは、フレームバッフ
ァ２２から任意の目的へ向けて出力される。
【００２９】一方、簡略化ユニット３０は、復号の進行
状況を監視し、経過時間が所定の制限時間を超えたと
き、復号処理を簡略化処理へ強制的に切り替える強制変
換器３２と、強制変換器３２が参照する制限時間を格納
する制限時間テーブル３４と、ユーザが動画の再生中に
停止を指示したときこれを検出する再生停止検出部３６
を含む。ユーザが動画を再生しているとき一時停止また
は再生終了を指示した場合、その瞬間に復号および再生
されていたフレームは、事実上復号のための制限時間か
ら解放される。したがって、再生停止検出部３６によっ
てそうした指示が検出された場合、そのフレームについ
ては強制変換器３２による簡略化処理を回避し、通常ど
おり完全な復号および再生をさせる。ただし、すでに強
制変換器３２による簡略化処理が始まっている場合もあ
り、その場合は可能なかぎり以降の復号処理を通常通り
の方法でおこなえばよい。
状況を監視し、経過時間が所定の制限時間を超えたと
き、復号処理を簡略化処理へ強制的に切り替える強制変
換器３２と、強制変換器３２が参照する制限時間を格納
する制限時間テーブル３４と、ユーザが動画の再生中に
停止を指示したときこれを検出する再生停止検出部３６
を含む。ユーザが動画を再生しているとき一時停止また
は再生終了を指示した場合、その瞬間に復号および再生
されていたフレームは、事実上復号のための制限時間か
ら解放される。したがって、再生停止検出部３６によっ
てそうした指示が検出された場合、そのフレームについ
ては強制変換器３２による簡略化処理を回避し、通常ど
おり完全な復号および再生をさせる。ただし、すでに強
制変換器３２による簡略化処理が始まっている場合もあ
り、その場合は可能なかぎり以降の復号処理を通常通り
の方法でおこなえばよい。
【００３０】強制変換器３２は、経過時間を計時するた
めにクロックＣＬＫを参照している。クロックＣＬＫ
は、強制変換器３２の内部で必要に応じて分周され、図
示しないカウンタでカウントされ、所定の時間が計時さ
れる。ただし、強制変換器３２はクロックＣＬＫを利用
する代わり、ＰＩＴ（プログラマブル・インターラプト
・タイマ）など、外部に設けられた計時手段を参照して
もよい。またここでは、強制変換器３２はウェーブレッ
ト逆変換器２４における処理の進行を監視しているが、
これは必ずしもそうである必要はなく、ストリーム解析
器１４からウェーブレット逆変換器２４に至るいずれの
段階の処理の経過時間を監視してもよい。以下、監視の
対象となる処理を単に「復号」で代表させる。
めにクロックＣＬＫを参照している。クロックＣＬＫ
は、強制変換器３２の内部で必要に応じて分周され、図
示しないカウンタでカウントされ、所定の時間が計時さ
れる。ただし、強制変換器３２はクロックＣＬＫを利用
する代わり、ＰＩＴ（プログラマブル・インターラプト
・タイマ）など、外部に設けられた計時手段を参照して
もよい。またここでは、強制変換器３２はウェーブレッ
ト逆変換器２４における処理の進行を監視しているが、
これは必ずしもそうである必要はなく、ストリーム解析
器１４からウェーブレット逆変換器２４に至るいずれの
段階の処理の経過時間を監視してもよい。以下、監視の
対象となる処理を単に「復号」で代表させる。
【００３１】図３は、復号処理の各段階における制限時
間と経過時間、および簡略化処理の起動の関係を示す。
同図のごとく、フレーム期間はＴｆとされ、動画の復号
の場合、たとえばＴｆ＝１／２４、１／３０秒などと設
定される。制限時間は処理の段階に応じ、３つ設定され
る。ＪＰＥＧ２０００における復号は、色コンポーネン
トである輝度Ｙ、色差Ｃｂ、Ｃｒのそれぞれを独立に処
理する。同図では、輝度Ｙの復号の制限時間がＴｙ、色
差Ｃｂの復号の制限時間がＴｂ、同様に色差Ｃｒの復号
の制限時間がＴｒと定められている。これらの制限時間
は、制限時間テーブル３４へあらかじめ格納されてい
る。制限時間を色コンポーネント毎に定めることによ
り、ある色成分だけが復号され、他の成分がまったく復
号されないと云った不自然な画像の再生が防止される。
制限時間の比率は、それぞれの処理段階に必要な平均的
時間の比をもとに設定されてもよいし、重要な色コンポ
ーネント、たとえば輝度Ｙについて大きめに割り振って
もよいし、その他実験などを通じて任意に設定すること
ができる。
間と経過時間、および簡略化処理の起動の関係を示す。
同図のごとく、フレーム期間はＴｆとされ、動画の復号
の場合、たとえばＴｆ＝１／２４、１／３０秒などと設
定される。制限時間は処理の段階に応じ、３つ設定され
る。ＪＰＥＧ２０００における復号は、色コンポーネン
トである輝度Ｙ、色差Ｃｂ、Ｃｒのそれぞれを独立に処
理する。同図では、輝度Ｙの復号の制限時間がＴｙ、色
差Ｃｂの復号の制限時間がＴｂ、同様に色差Ｃｒの復号
の制限時間がＴｒと定められている。これらの制限時間
は、制限時間テーブル３４へあらかじめ格納されてい
る。制限時間を色コンポーネント毎に定めることによ
り、ある色成分だけが復号され、他の成分がまったく復
号されないと云った不自然な画像の再生が防止される。
制限時間の比率は、それぞれの処理段階に必要な平均的
時間の比をもとに設定されてもよいし、重要な色コンポ
ーネント、たとえば輝度Ｙについて大きめに割り振って
もよいし、その他実験などを通じて任意に設定すること
ができる。
【００３２】ＪＰＥＧ２０００では、復号は同一階層の
画像についてＬＬ、ＨＬまたはＬＨ、ＨＨサブバンドの
順におこなわれる。したがって、まず輝度Ｙに関し４つ
のサブバンドがこの順に復号され、つづいて色差Ｃｂ、
Ｃｒのそれぞれ４つのサブバンドが復号される。
画像についてＬＬ、ＨＬまたはＬＨ、ＨＨサブバンドの
順におこなわれる。したがって、まず輝度Ｙに関し４つ
のサブバンドがこの順に復号され、つづいて色差Ｃｂ、
Ｃｒのそれぞれ４つのサブバンドが復号される。
【００３３】いま、輝度Ｙの復号処理においてＬＬ、Ｈ
Ｌ、ＬＨの３つのサブバンドの処理は正常に終了した
が、最後のＨＨサブバンドの処理中に制限時間Ｔｙが過
ぎたとする。この場合、輝度Ｙに関する復号処理はうち
切られ、同図において「処理Ａ」と表記された簡略化処
理へ移行する。つづいて、色差Ｃｂの復号処理が開始さ
れ、ＬＬサブバンドの復号は正常に完了したが、つぎの
ＨＬサブバンドの復号の途中で制限時間Ｔｂが過ぎたと
する。この場合、色差Ｃｂに関する復号処理は中止さ
れ、同図で「処理Ｂ」と表記した簡略化処理へ移行す
る。つぎに、復号処理は色差Ｃｒへ移る。この復号処理
においては、最初のサブバンドであるＬＬの処理中に制
限時間Ｔｒが過ぎたとする。このとき復号処理は中止さ
れ、同図で「処理Ｃ」と表記された簡略化処理へ移行す
る。処理Ａ、Ｂ、Ｃは、いずれも強制変換器３２がそれ
ぞれの制限時間および実際に処理にかかった経過時間を
比較して起動する。
Ｌ、ＬＨの３つのサブバンドの処理は正常に終了した
が、最後のＨＨサブバンドの処理中に制限時間Ｔｙが過
ぎたとする。この場合、輝度Ｙに関する復号処理はうち
切られ、同図において「処理Ａ」と表記された簡略化処
理へ移行する。つづいて、色差Ｃｂの復号処理が開始さ
れ、ＬＬサブバンドの復号は正常に完了したが、つぎの
ＨＬサブバンドの復号の途中で制限時間Ｔｂが過ぎたと
する。この場合、色差Ｃｂに関する復号処理は中止さ
れ、同図で「処理Ｂ」と表記した簡略化処理へ移行す
る。つぎに、復号処理は色差Ｃｒへ移る。この復号処理
においては、最初のサブバンドであるＬＬの処理中に制
限時間Ｔｒが過ぎたとする。このとき復号処理は中止さ
れ、同図で「処理Ｃ」と表記された簡略化処理へ移行す
る。処理Ａ、Ｂ、Ｃは、いずれも強制変換器３２がそれ
ぞれの制限時間および実際に処理にかかった経過時間を
比較して起動する。
【００３４】図４（ａ）、図４（ｂ）、図４（ｃ）は、
それぞれ強制変換器３２による処理Ａ、Ｂ、Ｃの内容を
模式的に示す。図４（ａ）に示すごとく、強制変換器３
２は処理Ａとして、復号の途中で処理がうち切られたＨ
Ｈサブバンドについて、その係数を無効化する。すなわ
ち、ＨＨサブバンドの全成分を０に置き換える。強制変
換器３２はこの処理のためにウェーブレット逆変換器２
４と協調し、ウェーブレット逆変換器２４が、本来であ
れば逆変換ののちにＨＨサブバンドの成分を格納するは
ずだった領域に対し、強制変換器３２が「０」を格納す
る。この簡略化処理によれば、輝度Ｙの復号を制限時間
Ｔｙに収めることができ、かつ人の眼が一般に高周波成
分にあまり敏感でないことを利用し、画質の低下を最小
限にとどめることができる。
それぞれ強制変換器３２による処理Ａ、Ｂ、Ｃの内容を
模式的に示す。図４（ａ）に示すごとく、強制変換器３
２は処理Ａとして、復号の途中で処理がうち切られたＨ
Ｈサブバンドについて、その係数を無効化する。すなわ
ち、ＨＨサブバンドの全成分を０に置き換える。強制変
換器３２はこの処理のためにウェーブレット逆変換器２
４と協調し、ウェーブレット逆変換器２４が、本来であ
れば逆変換ののちにＨＨサブバンドの成分を格納するは
ずだった領域に対し、強制変換器３２が「０」を格納す
る。この簡略化処理によれば、輝度Ｙの復号を制限時間
Ｔｙに収めることができ、かつ人の眼が一般に高周波成
分にあまり敏感でないことを利用し、画質の低下を最小
限にとどめることができる。
【００３５】図４（ｂ）は強制変換器３２が処理Ｂとし
ておこなう簡略化処理を表す。同図のごとく、色差Ｃｂ
の復号処理においては、正常に復号できたサブバンドが
ＬＬのみであった。そのため、同図に示すごとく、ＬＬ
サブバンド以外の３つのサブバンドの係数をすべて無効
化し、０で埋めている。この場合も、低周波成分を残す
趣旨である。一般に、ＪＰＥＧ２０００で採用されるウ
ェーブレット変換用のフィルタは低ビットレートにおけ
る画質を重視して設計されており、ＬＬサブバンドのみ
による画像の再生でも、比較的高い画質が維持できる。
ここではその性質を利用する。
ておこなう簡略化処理を表す。同図のごとく、色差Ｃｂ
の復号処理においては、正常に復号できたサブバンドが
ＬＬのみであった。そのため、同図に示すごとく、ＬＬ
サブバンド以外の３つのサブバンドの係数をすべて無効
化し、０で埋めている。この場合も、低周波成分を残す
趣旨である。一般に、ＪＰＥＧ２０００で採用されるウ
ェーブレット変換用のフィルタは低ビットレートにおけ
る画質を重視して設計されており、ＬＬサブバンドのみ
による画像の再生でも、比較的高い画質が維持できる。
ここではその性質を利用する。
【００３６】図４（ｃ）は、強制変換器３２による処理
を表す。色差Ｃｒの処理においては、最初のサブバンド
であるＬＬですら完全には終わらなかった。このため、
同図でＬＬ’と示すごとく、ＬＬサブバンドのデータに
処理を施している。具体的には、ＬＬサブバンドを構成
する複数のビットプレーンのうち、下位のビットプレー
ンの処理をスキップすることにより、処理時間の短縮を
図っている。
を表す。色差Ｃｒの処理においては、最初のサブバンド
であるＬＬですら完全には終わらなかった。このため、
同図でＬＬ’と示すごとく、ＬＬサブバンドのデータに
処理を施している。具体的には、ＬＬサブバンドを構成
する複数のビットプレーンのうち、下位のビットプレー
ンの処理をスキップすることにより、処理時間の短縮を
図っている。
【００３７】図５（ａ）は、第２階層ＷＩ２におけるＬ
Ｌ２サブバンドとビットプレーンの関係を示す。同図の
ごとく、第２階層の画像ＷＩ２において、まずＬＬ２サ
ブバンドが、同図において直方体５０で示されるごと
く、すべてのビットプレーンを縦断する形で復号され
る。したがって、そのＬＳＢ（最下位ビット）に近い方
のビットプレーンからスキップすることにより、画質の
低下を最小限に抑えつつ、処理時間の短縮を図ることが
できる。
Ｌ２サブバンドとビットプレーンの関係を示す。同図の
ごとく、第２階層の画像ＷＩ２において、まずＬＬ２サ
ブバンドが、同図において直方体５０で示されるごと
く、すべてのビットプレーンを縦断する形で復号され
る。したがって、そのＬＳＢ（最下位ビット）に近い方
のビットプレーンからスキップすることにより、画質の
低下を最小限に抑えつつ、処理時間の短縮を図ることが
できる。
【００３８】図５（ｂ）では、ＬＬ２サブバンドに関す
る直方体５０が有効なビットプレーンによって形成され
る部分５２とスキップする部分５４に分けられている。
ここでは、制限時間Ｔｒとの関連で、最下位のビットプ
レーン１枚が捨てられている。
る直方体５０が有効なビットプレーンによって形成され
る部分５２とスキップする部分５４に分けられている。
ここでは、制限時間Ｔｒとの関連で、最下位のビットプ
レーン１枚が捨てられている。
【００３９】以上、簡略化ユニット３０、特に強制変換
器３２の簡略化処理により、フレーム期間Ｔｆ毎に１枚
のフレームが再生できるため、所望の速度で動画や連写
画像をコマ落ちなく再生することができる。またその
際、画質の低下の防止に配慮されているため、比較的自
然な画像が得られる。さらに、色コンポーネント毎に制
限時間を割り振っているため、フレーム間で色のばらつ
きが生じる可能性も低い。したがってこの実施の形態に
よれば、比較的小規模な構成で、実用上非常に大きなメ
リットを生むことができる。
器３２の簡略化処理により、フレーム期間Ｔｆ毎に１枚
のフレームが再生できるため、所望の速度で動画や連写
画像をコマ落ちなく再生することができる。またその
際、画質の低下の防止に配慮されているため、比較的自
然な画像が得られる。さらに、色コンポーネント毎に制
限時間を割り振っているため、フレーム間で色のばらつ
きが生じる可能性も低い。したがってこの実施の形態に
よれば、比較的小規模な構成で、実用上非常に大きなメ
リットを生むことができる。
【００４０】いままでは、画像の復号中に制限時間が経
過する場合を考えた。しかしながら、状況によっては逆
に、制限時間が余る場合も考えられる。図６は、そうし
た状況において制限時間を再スケジューリングする方法
を示す。
過する場合を考えた。しかしながら、状況によっては逆
に、制限時間が余る場合も考えられる。図６は、そうし
た状況において制限時間を再スケジューリングする方法
を示す。
【００４１】同図において、フレーム期間Ｔｆは図３と
同じであり、また３つの制限時間Ｔｙ、Ｔｂ、Ｔｒもそ
れぞれ図３と同じである。この状態でまず、輝度Ｙの復
号処理が開始され、ＬＬ、ＨＬ、ＬＨ、ＨＨの４つのサ
ブバンドがすべて制限時間Ｔｙの範囲で完了したとす
る。同図では、制限時間Ｔｙに対し時間的な余裕Ｔｍが
生じている。この場合、この余裕Ｔｍを色差Ｃｂおよび
Ｃｒの復号に算入することができる。したがって、同図
のごとく、色差Ｃｂ、Ｃｒに対する制限時間Ｔｂ、Ｔｒ
がそれぞれ緩和され、より長い制限時間Ｔb’、Ｔｒ’
に変更されている。
同じであり、また３つの制限時間Ｔｙ、Ｔｂ、Ｔｒもそ
れぞれ図３と同じである。この状態でまず、輝度Ｙの復
号処理が開始され、ＬＬ、ＨＬ、ＬＨ、ＨＨの４つのサ
ブバンドがすべて制限時間Ｔｙの範囲で完了したとす
る。同図では、制限時間Ｔｙに対し時間的な余裕Ｔｍが
生じている。この場合、この余裕Ｔｍを色差Ｃｂおよび
Ｃｒの復号に算入することができる。したがって、同図
のごとく、色差Ｃｂ、Ｃｒに対する制限時間Ｔｂ、Ｔｒ
がそれぞれ緩和され、より長い制限時間Ｔb’、Ｔｒ’
に変更されている。
【００４２】この方法によれば、ある色コンポーネント
の復号が完全に終了した場合、その波及効果として他の
色コンポーネントの復号にも時間的な余裕が生じ、結果
として完全に復号される色コンポーネントが増える。そ
のため、色のバランスを保ちながら全体の画質が向上す
る。
の復号が完全に終了した場合、その波及効果として他の
色コンポーネントの復号にも時間的な余裕が生じ、結果
として完全に復号される色コンポーネントが増える。そ
のため、色のバランスを保ちながら全体の画質が向上す
る。
【００４３】なお、３つの色コンポーネントのすべて、
またはいずれかが制限時間内に復号された場合、このフ
レーム全体の復号時間がもともとの規定時間であるフレ
ーム期間Ｔｆよりも短い場合がある。この場合は、同様
の再スケジューリングの考え方をフレーム間に拡張す
る。すなわち、あるフレームを復号したときに時間的な
余裕が発生した場合、この余裕を次のフレーム期間Ｔｆ
に加算すればよい。この方法によれば、より多数のフレ
ームを完全に、またはより高画質で再生することができ
る。また、この実施の形態によれば、画像復号装置１０
に過度な負担をかけることなく、低コストおよび低消費
電力で所望の再生画像が得られる。
またはいずれかが制限時間内に復号された場合、このフ
レーム全体の復号時間がもともとの規定時間であるフレ
ーム期間Ｔｆよりも短い場合がある。この場合は、同様
の再スケジューリングの考え方をフレーム間に拡張す
る。すなわち、あるフレームを復号したときに時間的な
余裕が発生した場合、この余裕を次のフレーム期間Ｔｆ
に加算すればよい。この方法によれば、より多数のフレ
ームを完全に、またはより高画質で再生することができ
る。また、この実施の形態によれば、画像復号装置１０
に過度な負担をかけることなく、低コストおよび低消費
電力で所望の再生画像が得られる。
【００４４】図７は別の実施の形態に係るデジタルカメ
ラ２００の構成を示す。デジタルカメラ２００は、撮像
ブロック２０２、機構制御ブロック２０４、処理ブロッ
ク２０６、ＬＣＤモニタ２０８、および操作ボタン群２
１０を含む。
ラ２００の構成を示す。デジタルカメラ２００は、撮像
ブロック２０２、機構制御ブロック２０４、処理ブロッ
ク２０６、ＬＣＤモニタ２０８、および操作ボタン群２
１０を含む。
【００４５】撮像ブロック２０２は、図示しないレン
ズ、絞り、光学ローパスフィルタ、ＣＣＤ、信号処理部
等を含む。ＣＣＤの受光面上に結像した被写体像の光量
に応じてＣＣＤに電荷が蓄積され、電圧信号として読み
出される。電圧信号は信号処理部でＲ、Ｇ、Ｂ成分に分
解され、ホワイトバランス調整、ガンマ補正が行われ
る。その後、Ｒ、Ｇ、Ｂ信号はＡ／Ｄ変換され、デジタ
ル画像データとなって処理ブロック２０６へ出力され
る。
ズ、絞り、光学ローパスフィルタ、ＣＣＤ、信号処理部
等を含む。ＣＣＤの受光面上に結像した被写体像の光量
に応じてＣＣＤに電荷が蓄積され、電圧信号として読み
出される。電圧信号は信号処理部でＲ、Ｇ、Ｂ成分に分
解され、ホワイトバランス調整、ガンマ補正が行われ
る。その後、Ｒ、Ｇ、Ｂ信号はＡ／Ｄ変換され、デジタ
ル画像データとなって処理ブロック２０６へ出力され
る。
【００４６】機構制御ブロック２０４は、撮像ブロック
２０２の光学系の制御、すなわちズーム、フォーカス、
絞りなどの駆動を制御する。処理ブロック２０６は、デ
ジタルカメラ２００全体の制御に利用されるＣＰＵ２２
０とメモリ２２２のほか、ＹＣ処理部２２６、カード制
御部２２８、通信部２２４を有する。これらのうち、Ｃ
ＰＵ２２０の機能の一部とメモリ２２２にロードされた
画像復号プログラムが、図２の画像復号装置１０に相当
する。図２のフレームバッファ２２もこのメモリ２２２
の一部を利用して実現することができる。なお、このデ
ジタルカメラ２００は、メモリカード２３０へ画像デー
タを保存すべく、図示しない画像符号化装置もＣＰＵ２
２０とメモリ２２２によって実現されている。したがっ
て、以下符号化も復号も可能な構成として説明する。
２０２の光学系の制御、すなわちズーム、フォーカス、
絞りなどの駆動を制御する。処理ブロック２０６は、デ
ジタルカメラ２００全体の制御に利用されるＣＰＵ２２
０とメモリ２２２のほか、ＹＣ処理部２２６、カード制
御部２２８、通信部２２４を有する。これらのうち、Ｃ
ＰＵ２２０の機能の一部とメモリ２２２にロードされた
画像復号プログラムが、図２の画像復号装置１０に相当
する。図２のフレームバッファ２２もこのメモリ２２２
の一部を利用して実現することができる。なお、このデ
ジタルカメラ２００は、メモリカード２３０へ画像デー
タを保存すべく、図示しない画像符号化装置もＣＰＵ２
２０とメモリ２２２によって実現されている。したがっ
て、以下符号化も復号も可能な構成として説明する。
【００４７】ＹＣ処理部２２６は、デジタル画像データ
から輝度Ｙと色差Ｃｂ、Ｃｒを生成する。輝度と色差は
独立に順次符号化される。符号化画像データＣＩは、通
信部２２４を介して外部へ出力され、またはカード制御
部２２８を介してメモリカード２３０へ書き込まれる。
から輝度Ｙと色差Ｃｂ、Ｃｒを生成する。輝度と色差は
独立に順次符号化される。符号化画像データＣＩは、通
信部２２４を介して外部へ出力され、またはカード制御
部２２８を介してメモリカード２３０へ書き込まれる。
【００４８】通信部２２４は、標準的な通信仕様に応じ
たプロトコル変換等の制御を行い、この他に、例えばプ
リンタ、ゲーム機等の外部機器との間で個別のインタフ
ェイスによるデータ授受を行う。
たプロトコル変換等の制御を行い、この他に、例えばプ
リンタ、ゲーム機等の外部機器との間で個別のインタフ
ェイスによるデータ授受を行う。
【００４９】ＬＣＤモニタ２０８は、撮影／再生モー
ド、ズーム倍率、日時などのほかに、撮影した動画、高
速連写画像、静止画などを表示する。したがって、ユー
ザが動画を撮影した場合、まずこれが符号化圧縮され、
例えばメモリカード２３０へ記録される。ユーザがその
動画を再生するとき、必要に応じて実施の形態に特徴的
な簡略化処理がなされる。なお、操作ボタン群２１０
は、ユーザが撮影を行い、または各種動作モードを設定
するためのパワースイッチ、レリーズスイッチ等を含
む。
ド、ズーム倍率、日時などのほかに、撮影した動画、高
速連写画像、静止画などを表示する。したがって、ユー
ザが動画を撮影した場合、まずこれが符号化圧縮され、
例えばメモリカード２３０へ記録される。ユーザがその
動画を再生するとき、必要に応じて実施の形態に特徴的
な簡略化処理がなされる。なお、操作ボタン群２１０
は、ユーザが撮影を行い、または各種動作モードを設定
するためのパワースイッチ、レリーズスイッチ等を含
む。
【００５０】以上の構成により、つぎの効果が生じる。 １．静止画を撮影して再生する場合、復号に物理的な制
限時間はない。そのため、復号は簡略化されず、最高画
質による再生がなされる。ただし、静止画であっても長
すぎる復号時間は問題になりうるため、実施の形態に係
る簡略化処理を施してもよい。 ２．動画を撮影して再生する場合、フレームレートが決
まっているため、場合により、簡略化処理がなされる。
このため、画像復号装置１０をさして高速化しないで
も、画質の維持とコマ落ちの防止が実現する。画像復号
装置１０に高い仕様を要求しないでよいため、コストメ
リットと消費電力にメリットがある。 ３．動画の再生中に停止または一旦停止が指示されたと
き、最後のフレームについては簡略化処理がなされない
ため、その画質は最高またはそれに近くなる。とくに、
そのフレームは事実上静止画として比較的長い時間ユー
ザの目に触れるため、そのことによるメリットは大き
い。
限時間はない。そのため、復号は簡略化されず、最高画
質による再生がなされる。ただし、静止画であっても長
すぎる復号時間は問題になりうるため、実施の形態に係
る簡略化処理を施してもよい。 ２．動画を撮影して再生する場合、フレームレートが決
まっているため、場合により、簡略化処理がなされる。
このため、画像復号装置１０をさして高速化しないで
も、画質の維持とコマ落ちの防止が実現する。画像復号
装置１０に高い仕様を要求しないでよいため、コストメ
リットと消費電力にメリットがある。 ３．動画の再生中に停止または一旦停止が指示されたと
き、最後のフレームについては簡略化処理がなされない
ため、その画質は最高またはそれに近くなる。とくに、
そのフレームは事実上静止画として比較的長い時間ユー
ザの目に触れるため、そのことによるメリットは大き
い。
【００５１】図８は、さらに別の実施の形態に係るテレ
ビジョン受信装置３００の構成を示す。テレビジョン受
信装置３００は、アンテナ３０２とそれを介して放送波
を受信する受信ブロック３０４と、受信ブロック３０４
による処理の結果得られた画像および音声データを処理
する処理ブロック３０６と、処理ブロック３０６によっ
て復号された音声および画像を再生する再生ブロック３
０８を含む。またインタフェイスブロック３３６は、処
理ブロック３０６による復号画像データを適宜外部機器
へ出力する。
ビジョン受信装置３００の構成を示す。テレビジョン受
信装置３００は、アンテナ３０２とそれを介して放送波
を受信する受信ブロック３０４と、受信ブロック３０４
による処理の結果得られた画像および音声データを処理
する処理ブロック３０６と、処理ブロック３０６によっ
て復号された音声および画像を再生する再生ブロック３
０８を含む。またインタフェイスブロック３３６は、処
理ブロック３０６による復号画像データを適宜外部機器
へ出力する。
【００５２】受信ブロック３０４はチューナ３２０およ
びパケット分離部３２２を含む。チューナ３２０はユー
ザが選んだチャネルを含むトランスポンダを選択し、Ｑ
ＰＳＫ復調を施す。復調で得られた複数のトランスポー
トパケットを含むストリームはパケット分離部３２２へ
送られる。パケット分離部３２２はデマルチプレクサで
あり、所望のチャンネルに対応するパケットを分離して
処理ブロック３０６へ出力する。
びパケット分離部３２２を含む。チューナ３２０はユー
ザが選んだチャネルを含むトランスポンダを選択し、Ｑ
ＰＳＫ復調を施す。復調で得られた複数のトランスポー
トパケットを含むストリームはパケット分離部３２２へ
送られる。パケット分離部３２２はデマルチプレクサで
あり、所望のチャンネルに対応するパケットを分離して
処理ブロック３０６へ出力する。
【００５３】処理ブロック３０６の画像・音声デコーダ
３３４はＣＰＵ３３０およびメモリ３３２と連携し、放
送局で符号化され送信された画像および音声データを復
号する。画像・音声デコーダ３３４は、入力されたパケ
ットを復号し、音声データを音声出力部３４０へ、画像
データを表示装置３４４へそれぞれ出力する。音声出力
部３４０は、入力された音声データに所定の処理を施
し、最終的に音声がスピーカ３４２へ出力される。処理
ブロック３０６の構成、すなわち画像・音声デコーダ３
３４、ＣＰＵ３３０、メモリ３３２のうち、画像復号に
関する部分が図２の画像復号装置１０に相当する。以上
の構成によれば、非常に低いコストと消費電力で、いわ
ゆるデジタルテレビを実現することができる。このテレ
ビは、例えば携帯電話などの小型機器に搭載することも
可能である。
３３４はＣＰＵ３３０およびメモリ３３２と連携し、放
送局で符号化され送信された画像および音声データを復
号する。画像・音声デコーダ３３４は、入力されたパケ
ットを復号し、音声データを音声出力部３４０へ、画像
データを表示装置３４４へそれぞれ出力する。音声出力
部３４０は、入力された音声データに所定の処理を施
し、最終的に音声がスピーカ３４２へ出力される。処理
ブロック３０６の構成、すなわち画像・音声デコーダ３
３４、ＣＰＵ３３０、メモリ３３２のうち、画像復号に
関する部分が図２の画像復号装置１０に相当する。以上
の構成によれば、非常に低いコストと消費電力で、いわ
ゆるデジタルテレビを実現することができる。このテレ
ビは、例えば携帯電話などの小型機器に搭載することも
可能である。
【００５４】以上、本発明を実施の形態をもとに説明し
た。これらの実施の形態は例示であり、それらの各構成
要素や各処理プロセスの組合せにいろいろな変形例が可
能なこと、またそうした変形例も本発明の範囲にあるこ
とは当業者に理解されるところである。以下、変形例を
挙げる。
た。これらの実施の形態は例示であり、それらの各構成
要素や各処理プロセスの組合せにいろいろな変形例が可
能なこと、またそうした変形例も本発明の範囲にあるこ
とは当業者に理解されるところである。以下、変形例を
挙げる。
【００５５】図４（ｂ）の処理Ｂでは、ＬＬサブバンド
以外の３つのサブバンドの成分をすべて無効化した。し
かしながら、これ以外の方法として、ＬＬサブバンド以
外の成分は不問とし、単純にＬＬサブバンドを縦横２倍
に拡大するスケールアップ処理をおこなってもよい。こ
の場合、画素間を補間する処理が用いられるが、そのた
めのフィルタの特性がＪＰＥＧ２０００のウェーブレッ
ト逆変換に利用されるものと同一である場合、３つのサ
ブバンドの成分を無効化した場合と同じ画像が得られ
る。
以外の３つのサブバンドの成分をすべて無効化した。し
かしながら、これ以外の方法として、ＬＬサブバンド以
外の成分は不問とし、単純にＬＬサブバンドを縦横２倍
に拡大するスケールアップ処理をおこなってもよい。こ
の場合、画素間を補間する処理が用いられるが、そのた
めのフィルタの特性がＪＰＥＧ２０００のウェーブレッ
ト逆変換に利用されるものと同一である場合、３つのサ
ブバンドの成分を無効化した場合と同じ画像が得られ
る。
【００５６】実施の形態では、色コンポーネント毎に制
限時間の割り当てを考えた。しかしながら、これ以外に
も画像の他の属性に応じて制限時間を割り振ってもよ
い。たとえば、画像が複数の領域に分割され、領域毎に
復号処理がおこなわれる場合、その領域毎に制限時間を
割り当ててもよい。その場合、領域の面積に比例して時
間を割り当てたり、画像の中央に近い領域に比較的長い
時間を割り当てたり、画像の中で目立つ領域、たとえば
輝度が高い領域に比較的長い時間を割り当てたり、動き
が大きな領域、たとえば動きベクトル成分が大きな領域
に比較的長い時間を割り当てたり、オブジェクトとして
重要性の高い領域、たとえばテレビ電話における人の顔
の領域に長い時間を割り当てるなどの方法が考えられ
る。また、ＪＰＥＧ２０００では、画像をあらかじめタ
イルに分割する方法も可能であり、その場合はタイル毎
に同様の割り当てをすればよい。この場合も、ある領域
の処理が制限時間以内に終われば、他の領域の制限時間
を再スケジューリングすればよい。
限時間の割り当てを考えた。しかしながら、これ以外に
も画像の他の属性に応じて制限時間を割り振ってもよ
い。たとえば、画像が複数の領域に分割され、領域毎に
復号処理がおこなわれる場合、その領域毎に制限時間を
割り当ててもよい。その場合、領域の面積に比例して時
間を割り当てたり、画像の中央に近い領域に比較的長い
時間を割り当てたり、画像の中で目立つ領域、たとえば
輝度が高い領域に比較的長い時間を割り当てたり、動き
が大きな領域、たとえば動きベクトル成分が大きな領域
に比較的長い時間を割り当てたり、オブジェクトとして
重要性の高い領域、たとえばテレビ電話における人の顔
の領域に長い時間を割り当てるなどの方法が考えられ
る。また、ＪＰＥＧ２０００では、画像をあらかじめタ
イルに分割する方法も可能であり、その場合はタイル毎
に同様の割り当てをすればよい。この場合も、ある領域
の処理が制限時間以内に終われば、他の領域の制限時間
を再スケジューリングすればよい。
【００５７】図４（ｃ）において、ＬＬサブバンドの下
位ビットプレーンの処理を省略した。別の方法として、
より以前に復号が完了している階層の画像のＬＬサブバ
ンドを利用してもよい。たとえば、図１において、第１
階層の画像ＷＩ１のＬＬ１サブバンドの復号が完了しな
かった場合、そのひとつ前の階層である第２階層の画像
ＷＩ２のＬＬ２サブバンドを拡大して利用してもよい。
位ビットプレーンの処理を省略した。別の方法として、
より以前に復号が完了している階層の画像のＬＬサブバ
ンドを利用してもよい。たとえば、図１において、第１
階層の画像ＷＩ１のＬＬ１サブバンドの復号が完了しな
かった場合、そのひとつ前の階層である第２階層の画像
ＷＩ２のＬＬ２サブバンドを拡大して利用してもよい。
【００５８】図４（ｃ）では、ＬＬサブバンドについて
下位ビットプレーンの処理を省略することにより、処理
時間の短縮を図った。別の復号の方法として、最上位ビ
ットプレーンから順に、ビットプレーン単位で４つのサ
ブバンドの処理を行ってもよい。すなわち、あるビット
プレーンについて、ＬＬ、ＨＬまたはＬＨ、ＨＨサブバ
ンドの順に処理が行われた後に、次の下位のビットプレ
ーンについて、同じ順で処理が行われる。この復号方法
においても、制限時間が過ぎたとき、未処理の下位ビッ
トプレーンの処理を省略することにより、復号処理の簡
略化を行うことができる。この場合、図５（ａ）、
（ｂ）に示した場合とは異なり、４つのサブバンド全体
について、下位ビットプレーンの処理が省略される。
下位ビットプレーンの処理を省略することにより、処理
時間の短縮を図った。別の復号の方法として、最上位ビ
ットプレーンから順に、ビットプレーン単位で４つのサ
ブバンドの処理を行ってもよい。すなわち、あるビット
プレーンについて、ＬＬ、ＨＬまたはＬＨ、ＨＨサブバ
ンドの順に処理が行われた後に、次の下位のビットプレ
ーンについて、同じ順で処理が行われる。この復号方法
においても、制限時間が過ぎたとき、未処理の下位ビッ
トプレーンの処理を省略することにより、復号処理の簡
略化を行うことができる。この場合、図５（ａ）、
（ｂ）に示した場合とは異なり、４つのサブバンド全体
について、下位ビットプレーンの処理が省略される。
【００５９】
【発明の効果】本発明によれば、比較的小さな規模の構
成で、比較的高い画質の画像を復号することができる。
成で、比較的高い画質の画像を復号することができる。
【図１】 ＪＰＥＧ２０００によって符号化画像データ
が復号される一連の手順を示す図である。
が復号される一連の手順を示す図である。
【図２】 実施の形態に係る画像復号装置の構成図であ
る。
る。
【図３】 実施の形態において、フレーム期間と制限時
間および実際の復号処理の関係を示す図である。
間および実際の復号処理の関係を示す図である。
【図４】 図４（ａ）、図４（ｂ）、図４（ｃ）は、簡
略化ユニットによっておこなわれる簡略化処理をそれぞ
れ示す図である。
略化ユニットによっておこなわれる簡略化処理をそれぞ
れ示す図である。
【図５】 図５（ａ）、図５（ｂ）は、ＪＰＥＧ２００
０において、ある階層のＬＬサブバンドとビットプレー
ンの関係を示す図である。
０において、ある階層のＬＬサブバンドとビットプレー
ンの関係を示す図である。
【図６】 実施の形態において、ある復号処理の段階に
時間的な余裕が生じた場合、他の復号の段階の制限時間
を再スケジューリングするようすを示す図である。
時間的な余裕が生じた場合、他の復号の段階の制限時間
を再スケジューリングするようすを示す図である。
【図７】 実施の形態に係るデジタルカメラの構成図で
ある。
ある。
【図８】 実施の形態に係るテレビジョン受信装置の構
成図である。
成図である。
１０ 画像復号装置、 １２ 復号ユニット、 １４
ストリーム解析器、１６ 算術復号器、 １８ ビット
プレーン復号器、 ２０ 逆量子化器、 ２２ フレー
ムバッファ、 ２４ ウェーブレット逆変換器、 ３０
簡略化ユニット、 ３２ 強制変換器、 ３４ 制限
時間テーブル、 ３６ 再生停止検出部、 ２００ デ
ジタルカメラ、 ２０２ 撮像ブロック、 ２０４ 機
構制御ブロック、 ２０６ 処理ブロック、 ２０８
ＬＣＤモニタ、 ２１０ 操作ボタン群、 ２２０ Ｃ
ＰＵ、 ２２２ メモリ、 ２２４ 通信部、 ２２６
ＹＣ処理部、 ２２８ カード制御部、 ２３０ メモ
リカード、 ３００テレビジョン受信装置、 ３０２
アンテナ、 ３０４ 受信ブロック、 ３０６ 処理ブ
ロック、 ３０８ 再生ブロック、 ３２０ チュー
ナ、 ３２２パケット分離部、 ３３０ ＣＰＵ、 ３
３２ メモリ、 ３３４ 画像・音声デコーダ、 ３３
６ インタフェイスブロック、 ３４０ 音声出力部、
３４２ スピーカ、 ３４４ 表示装置。
ストリーム解析器、１６ 算術復号器、 １８ ビット
プレーン復号器、 ２０ 逆量子化器、 ２２ フレー
ムバッファ、 ２４ ウェーブレット逆変換器、 ３０
簡略化ユニット、 ３２ 強制変換器、 ３４ 制限
時間テーブル、 ３６ 再生停止検出部、 ２００ デ
ジタルカメラ、 ２０２ 撮像ブロック、 ２０４ 機
構制御ブロック、 ２０６ 処理ブロック、 ２０８
ＬＣＤモニタ、 ２１０ 操作ボタン群、 ２２０ Ｃ
ＰＵ、 ２２２ メモリ、 ２２４ 通信部、 ２２６
ＹＣ処理部、 ２２８ カード制御部、 ２３０ メモ
リカード、 ３００テレビジョン受信装置、 ３０２
アンテナ、 ３０４ 受信ブロック、 ３０６ 処理ブ
ロック、 ３０８ 再生ブロック、 ３２０ チュー
ナ、 ３２２パケット分離部、 ３３０ ＣＰＵ、 ３
３２ メモリ、 ３３４ 画像・音声デコーダ、 ３３
６ インタフェイスブロック、 ３４０ 音声出力部、
３４２ スピーカ、 ３４４ 表示装置。
フロントページの続き Ｆターム(参考） 5C059 KK06 MA00 MA24 MA32 MA35 MC11 MC21 MC38 ME11 PP04 PP16 SS02 SS14 SS15 TA43 TB04 TB17 TC00 TD07 TD11 UA02 UA05 UA15 UA32 5J064 AA04 BA16 BB06 BB13 BC01 BC11 BC16 BD03
Claims (20)
- 【請求項１】 符号化画像データを復号する方法におい
て、 規定時間内に前記符号化画像データの復号が完了しない
状勢になったとき、以降の復号を簡略化処理に切り替え
て行うことを特徴とする画像復号方法。 - 【請求項２】 符号化画像データを復号する方法におい
て、 前記符号化画像データは動画をフレームベースで符号化
したものであり、 規定時間内にその符号化画像データに含まれる任意のフ
レームの復号が完了しない状勢になったとき、以降その
フレームの復号を簡略化処理に切り替えて行うことを特
徴とする画像復号方法。 - 【請求項３】 フレームの復号を複数の段階に分け、そ
れらの段階ごとに制限時間を設け、いずれかの段階にお
いてその段階について定められた制限時間が経過したと
き、その段階の以降の処理を簡略化することを特徴とす
る請求項２に記載の画像復号方法。 - 【請求項４】 前記複数の段階のいずれかが早く完了し
た場合、残りの段階に割り当てられた制限時間を緩和す
ることを特徴とする請求項３に記載の画像復号方法。 - 【請求項５】 前記符号化画像データは動画をフレーム
単位で独立して符号化したものであり、かつ前記簡略化
処理は各フレームに閉じた処理であることを特徴とする
請求項２から４のいずれかに記載の画像復号方法。 - 【請求項６】 符号化画像データを復号する復号ユニッ
トと、 規定時間内にその符号化画像データの復号が完了しない
状勢になったとき、以降の復号を簡略化処理に切り替え
る簡略化ユニットと、 を含むことを特徴とする画像復号装置。 - 【請求項７】 動画をフレームベースで符号化した符号
化画像データを復号する復号ユニットと、 規定時間内にその符号化画像データに含まれる任意のフ
レームの復号が完了しない状勢になったとき、以降その
フレームの復号を簡略化処理に切り替える簡略化ユニッ
トと、 を含むことを特徴とする画像復号装置。 - 【請求項８】 前記簡略化ユニットは、フレーム復号の
段階ごとに定められた制限時間と各段階の経過時間を比
較し、経過時間が制限時間に到達したとき、その段階に
おける以降の処理を簡略化することを特徴とする請求項
７に記載の画像復号装置。 - 【請求項９】 前記簡略化ユニットは、画像を構成する
複数の色コンポーネントのそれぞれを復号する段階につ
いて前記制限時間と経過時間の比較および必要に応じた
簡略化処理を行うことを特徴とする請求項８に記載の画
像復号装置。 - 【請求項１０】 前記簡略化ユニットは、画像を構成す
る複数の領域のそれぞれを復号する段階について前記制
限時間と経過時間の比較および必要に応じた簡略化処理
を行うことを特徴とする請求項８に記載の画像復号装
置。 - 【請求項１１】 前記簡略化ユニットは、複数の段階の
いずれかが早く完了した場合、残りの段階に割り当てら
れた制限時間を緩和して適用することを特徴とする請求
項８から１０のいずれかに記載の画像復号装置。 - 【請求項１２】 前記簡略化ユニットは、複数のフレー
ムのいずれかの復号が早く完了した場合、つぎに復号す
べきフレームに割り当てられた規定時間を緩和して適用
することを特徴とする請求項７から１１のいずれかに記
載の画像復号装置。 - 【請求項１３】 前記簡略化ユニットは、画像の高周波
成分を強制的にゼロとみなして簡略化処理をすることを
特徴とする請求項７から１０のいずれかに記載の画像復
号装置。 - 【請求項１４】 前記簡略化ユニットは、前記高周波成
分を強制的にゼロとみなしたときに得られる、低周波成
分を主体とする復号画像の解像度が所望の値に到達して
いない場合、この復号画像の解像度を調整してから出力
することを特徴とする請求項１３に記載の画像復号装
置。 - 【請求項１５】 前記簡略化ユニットは、復号の初期段
階でなされる低周波成分の復号が前記規定時間に完了し
ない状勢になったとき、その低周波成分の下位ビットプ
レーンに相当する画像部分の処理をスキップすることを
特徴とする請求項７から１４のいずれかに記載の画像復
号装置。 - 【請求項１６】 前記簡略化ユニットは、画像の下位ビ
ットプレーンの処理をスキップして簡略化処理をするこ
とを特徴とする請求項７から１４のいずれかに記載の画
像復号装置。 - 【請求項１７】 前記簡略化ユニットは、復号の目的で
ある動画の再生が停止されたとき、その時点において復
号中だったフレームはその時点以降簡略化処理をせず、
このフレームに対して以降通常の復号がなされることを
特徴とする請求項７から１６のいずれかに記載の画像復
号装置。 - 【請求項１８】 前記符号化画像データは動画をフレー
ム単位で独立して符号化したものであり、前記簡略化ユ
ニットは、各フレームに閉じた簡略化処理を行うことを
特徴とする請求項７から１７のいずれかに記載の画像復
号装置。 - 【請求項１９】 撮像ブロックと、それを機構面で制御
する機構制御ブロックと、撮像によって得られたデジタ
ル画像を処理する処理ブロックとを含み、 前記処理ブロックは、 前記デジタル画像から生成された符号化画像データを復
号する復号ユニットと、 規定時間内にその符号化画像データに含まれる任意のフ
レームの復号が完了しない状勢になったとき、以降その
フレームの復号を簡略化処理に切り替える簡略化ユニッ
トと、 を含むことを特徴とする画像復号装置。 - 【請求項２０】 受信ブロックと、受信信号を処理する
処理ブロックと、処理後の信号を再生する再生ブロック
を含み、 前記処理ブロックは、前記受信信号から抽出されたデジ
タル画像の符号化画像データを復号する復号ユニット
と、 規定時間内にその符号化画像データに含まれる任意のフ
レームの復号が完了しない状勢になったとき、以降その
フレームの復号を簡略化処理に切り替える簡略化ユニッ
トと、 を含むことを特徴とする画像復号装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002039612A JP3548163B2 (ja) | 2001-02-20 | 2002-02-18 | 画像復号方法および装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2001-44005 | 2001-02-20 | ||
| JP2001044005 | 2001-02-20 | ||
| JP2002039612A JP3548163B2 (ja) | 2001-02-20 | 2002-02-18 | 画像復号方法および装置 |
Related Child Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2004060459A Division JP2004229314A (ja) | 2001-02-20 | 2004-03-04 | 画像復号方法および装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2002325257A true JP2002325257A (ja) | 2002-11-08 |
| JP3548163B2 JP3548163B2 (ja) | 2004-07-28 |
Family
ID=26609743
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002039612A Expired - Fee Related JP3548163B2 (ja) | 2001-02-20 | 2002-02-18 | 画像復号方法および装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP3548163B2 (ja) |
Cited By (13)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2005088977A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| WO2006118114A1 (ja) * | 2005-04-27 | 2006-11-09 | Nec Corporation | 画像復号方法、その装置及びプログラム |
| JP2007124619A (ja) * | 2005-09-30 | 2007-05-17 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム、情報記録媒体 |
| JP2007142614A (ja) * | 2005-11-16 | 2007-06-07 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム及び情報記録媒体 |
| JP2007281594A (ja) * | 2006-04-03 | 2007-10-25 | Mitsubishi Electric Corp | 画像復号装置 |
| JP2009278545A (ja) * | 2008-05-16 | 2009-11-26 | Sony Corp | 受信装置、受信方法、プログラム、及び通信システム |
| US7660469B2 (en) | 2003-10-30 | 2010-02-09 | Nec Electronics Corporation | Image decoding apparatus and image decoding method |
| US7720295B2 (en) | 2004-06-29 | 2010-05-18 | Sanyo Electric Co., Ltd. | Method and apparatus for coding images with different image qualities for each region thereof, and method and apparatus capable of decoding the images by adjusting the image quality |
| WO2010100991A1 (ja) * | 2009-03-03 | 2010-09-10 | シャープ株式会社 | 動画像ストリーム復号装置及びその制御方法並びにプログラム、記録媒体 |
| US7957604B2 (en) | 2004-03-12 | 2011-06-07 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, and computer-readable storage medium |
| US8005309B2 (en) | 2004-02-09 | 2011-08-23 | Sanyo Electric Co., Ltd. | Image coding apparatus, image decoding apparatus, image display apparatus and image processing apparatus |
| US8150173B2 (en) | 2004-10-29 | 2012-04-03 | Sanyo Electric Co., Ltd. | Image coding method and apparatus, and image decoding method and apparatus |
| JP2015141529A (ja) * | 2014-01-28 | 2015-08-03 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
-
2002
- 2002-02-18 JP JP2002039612A patent/JP3548163B2/ja not_active Expired - Fee Related
Cited By (25)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7660469B2 (en) | 2003-10-30 | 2010-02-09 | Nec Electronics Corporation | Image decoding apparatus and image decoding method |
| US8326058B2 (en) | 2004-02-09 | 2012-12-04 | Sanyo Electric Co., Ltd. | Image coding apparatus, image decoding apparatus, image display apparatus and image processing apparatus |
| US8005309B2 (en) | 2004-02-09 | 2011-08-23 | Sanyo Electric Co., Ltd. | Image coding apparatus, image decoding apparatus, image display apparatus and image processing apparatus |
| US7822282B2 (en) | 2004-03-12 | 2010-10-26 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| US7957604B2 (en) | 2004-03-12 | 2011-06-07 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, and computer-readable storage medium |
| JP2005295504A (ja) * | 2004-03-12 | 2005-10-20 | Canon Inc | 動画像符号化装置及び復号装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
| WO2005088977A1 (en) * | 2004-03-12 | 2005-09-22 | Canon Kabushiki Kaisha | Moving image coding apparatus, moving image decoding apparatus, control method therefor, computer program, and computer-readable storage medium |
| JP4702928B2 (ja) * | 2004-03-12 | 2011-06-15 | キヤノン株式会社 | 動画像符号化装置及び復号装置及びその制御方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体 |
| US7720295B2 (en) | 2004-06-29 | 2010-05-18 | Sanyo Electric Co., Ltd. | Method and apparatus for coding images with different image qualities for each region thereof, and method and apparatus capable of decoding the images by adjusting the image quality |
| US8208738B2 (en) | 2004-10-29 | 2012-06-26 | Sanyo Electric Co., Ltd. | Image coding method and apparatus, and image decoding method and apparatus |
| US8150173B2 (en) | 2004-10-29 | 2012-04-03 | Sanyo Electric Co., Ltd. | Image coding method and apparatus, and image decoding method and apparatus |
| JP5019054B2 (ja) * | 2005-04-27 | 2012-09-05 | 日本電気株式会社 | 画像復号方法、その装置及びプログラム |
| US8223840B2 (en) | 2005-04-27 | 2012-07-17 | Nec Corporation | Image decoding method of decoding hierarchy-encoded image data in respective hierarchies, and a device thereof |
| WO2006118114A1 (ja) * | 2005-04-27 | 2006-11-09 | Nec Corporation | 画像復号方法、その装置及びプログラム |
| US7778473B2 (en) | 2005-09-30 | 2010-08-17 | Ricoh Company, Ltd. | Image processing apparatus and image processing method |
| JP4688165B2 (ja) * | 2005-09-30 | 2011-05-25 | 株式会社リコー | 画像処理装置及び画像処理方法 |
| JP2007124619A (ja) * | 2005-09-30 | 2007-05-17 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム、情報記録媒体 |
| US7970220B2 (en) | 2005-11-16 | 2011-06-28 | Ricoh Company, Ltd. | Image processing apparatus and method for performing decoding process on coded data of motion picture based on a plurality of attributes thereof |
| JP2007142614A (ja) * | 2005-11-16 | 2007-06-07 | Ricoh Co Ltd | 画像処理装置、画像処理方法、プログラム及び情報記録媒体 |
| JP4650894B2 (ja) * | 2006-04-03 | 2011-03-16 | 三菱電機株式会社 | 画像復号装置 |
| JP2007281594A (ja) * | 2006-04-03 | 2007-10-25 | Mitsubishi Electric Corp | 画像復号装置 |
| JP4525795B2 (ja) * | 2008-05-16 | 2010-08-18 | ソニー株式会社 | 受信装置、受信方法、プログラム、及び通信システム |
| JP2009278545A (ja) * | 2008-05-16 | 2009-11-26 | Sony Corp | 受信装置、受信方法、プログラム、及び通信システム |
| WO2010100991A1 (ja) * | 2009-03-03 | 2010-09-10 | シャープ株式会社 | 動画像ストリーム復号装置及びその制御方法並びにプログラム、記録媒体 |
| JP2015141529A (ja) * | 2014-01-28 | 2015-08-03 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| JP3548163B2 (ja) | 2004-07-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR100483101B1 (ko) | 화상 복호 방법 및 장치 | |
| KR100512210B1 (ko) | 화상 복호 방법 및 장치 | |
| US8254707B2 (en) | Encoding device, encoding method, encoding program, decoding device, decoding method, and decoding program in interlace scanning | |
| JP3012698B2 (ja) | 画像データの符号化装置および符号化方法 | |
| JP4254867B2 (ja) | 情報処理装置および方法、プログラム、並びに記録媒体 | |
| US8422565B2 (en) | Information processing device and method, and information processing system | |
| JP4067281B2 (ja) | 画像処理方法とその方法を利用可能な画像符号化装置および画像復号装置 | |
| JP3548163B2 (ja) | 画像復号方法および装置 | |
| JP2008187573A (ja) | 情報処理装置および方法、プログラム、並びに記録媒体 | |
| JP2002369142A (ja) | カメラ一体型ビデオ記録再生装置、及びその記録制御方法 | |
| JP4190157B2 (ja) | 画像データ送信装置および画像データ受信装置 | |
| JP2004166224A (ja) | 画像生成装置及びその方法 | |
| US7706583B2 (en) | Image processing apparatus and method | |
| JP2006074114A (ja) | 画像処理装置及び撮像装置 | |
| JP2004229314A (ja) | 画像復号方法および装置 | |
| JP4129913B2 (ja) | 画像処理装置及び画像処理方法 | |
| JP4145086B2 (ja) | 画像復号装置、画像処理装置、動画像表示システム、プログラム、記憶媒体及び画像復号方法 | |
| JP2000333130A (ja) | 動画データの記録方法及び装置 | |
| JP3384910B2 (ja) | 撮像装置および画像再生装置 | |
| JP3038022B2 (ja) | 電子カメラ装置 | |
| JP2000209592A (ja) | 画像伝送装置と方法及びシステムとその制御方法 | |
| JP2004165800A (ja) | 画像処理装置 | |
| JPH10215454A (ja) | 符号化装置及び符号化方法 | |
| JP2008187571A (ja) | 情報処理装置および方法、並びにプログラム | |
| JP2001268580A (ja) | 映像圧縮記録装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20040106 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040302 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20040331 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20040415 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 3548163 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090423 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090423 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20100423 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110423 Year of fee payment: 7 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120423 Year of fee payment: 8 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130423 Year of fee payment: 9 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140423 Year of fee payment: 10 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| LAPS | Cancellation because of no payment of annual fees |