JP2011061834A - 画像復号化方法 - Google Patents

画像復号化方法 Download PDF

Info

Publication number
JP2011061834A
JP2011061834A JP2010242682A JP2010242682A JP2011061834A JP 2011061834 A JP2011061834 A JP 2011061834A JP 2010242682 A JP2010242682 A JP 2010242682A JP 2010242682 A JP2010242682 A JP 2010242682A JP 2011061834 A JP2011061834 A JP 2011061834A
Authority
JP
Japan
Prior art keywords
coefficients
block
code
value
coefficient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010242682A
Other languages
English (en)
Other versions
JP4653258B1 (ja
Inventor
Seishi Abe
清史 安倍
Shinya Sumino
眞也 角野
Toshi Kondo
敏志 近藤
Makoto Hagai
誠 羽飼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Corp
Original Assignee
Panasonic Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Family has litigation
First worldwide family litigation filed litigation Critical https://patents.darts-ip.com/?family=29243326&utm_source=google_patent&utm_medium=platform_link&utm_campaign=public_patent_search&patent=JP2011061834(A) "Global patent litigation dataset” by Darts-ip is licensed under a Creative Commons Attribution 4.0 International License.
Application filed by Panasonic Corp filed Critical Panasonic Corp
Priority to JP2010242682A priority Critical patent/JP4653258B1/ja
Application granted granted Critical
Publication of JP4653258B1 publication Critical patent/JP4653258B1/ja
Publication of JP2011061834A publication Critical patent/JP2011061834A/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • G06T9/004Predictors, e.g. intraframe, interframe coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/13Adaptive entropy coding, e.g. adaptive variable length coding [AVLC] or context adaptive binary arithmetic coding [CABAC]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136Incoming video signal characteristics or properties
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Abstract

【課題】符号化効率を向上させた画像復号化方法を提供する。
【解決手段】画像復号化方法であって、復号化対象ブロックの周辺に位置する復号化済ブロック中に含まれる係数の値が0以外の係数である非ゼロ係数の個数に基づいて、前記復号化対象ブロック中に含まれる非ゼロ係数の個数の予測値を導出する導出ステップと、前記導出ステップにより導出された前記予測値に基づいて可変長符号テーブルを選択する選択ステップと、前記選択ステップにより選択された前記可変長符号テーブルを用いて、前記復号化対象ブロック中に含まれる非ゼロ係数の個数が符号化されている符号列に対して可変長復号化を行う可変長復号化ステップとを含み、前記導出ステップでは、前記復号化対象ブロックの周辺に位置する復号化済ブロック中の各ブロックに含まれる非ゼロ係数の個数の中央値に基づいて予測値を導出する。
【選択図】図1

Description

本発明は、画像をディジタル符号化して伝送または蓄積するための画像復号化方法および画像復号化装置に関するものである。
一般に動画像の符号化では、画面をある一定サイズのブロックに分割し、そのブロックごとに画面内予測および画面間予測を行う。その結果得られた予測残差信号に対して、分割の最小単位のブロック(例えば4×4画素)ごとに例えば離散コサイン変換等の直交変換を適用し、その結果得られた空間周波数成分を示す係数をラン・レベル符号化に基づいた可変長符号化によって符号化を行う。
前記可変長符号化では、直交変換を適用したブロックの持つ係数の値(レベル)、および0の係数が連続する個数(ラン)に対して可変長符号の割り当てを行う。このとき上記値と可変長符号とを対応付けるテーブルをVLCテーブルと呼ぶ。従来の方法では、前記VLCテーブルとして画面内予測符号化用および画面間予測符号化用それぞれに1つずつのテーブルしか用意されていなかった(例えば、非特許文献1参照)。
ISO/IEC 14496-2:1999(E) Information technology -- coding of audio-visual objects Part 2: Visual (1999-12-01) P.119 7.4.1 Variable length decoding
上記従来の技術で説明した可変長符号化方法では、前記VLCテーブルとして画面内予測符号化用および画面間予測符号化用それぞれに1つずつのテーブルしか用意されていなかったため、符号化対象の画像の性質によって符号化効率が大きく異なるという問題点があった。
前記問題点を解決するために、複数のテーブルを用意し直交変換を適用したブロックに含まれる0以外の係数の個数によって前記複数のテーブルを切り替えて参照するという方法が考えられる。これを実現するために、前記0以外の係数の個数に対しても可変長符号化を適用して符号化を行う必要があるが、その符号化方法についてはまだ確立されていない。さらに、対応する復号化方法についてもまだ確立されていない。
本発明は上記の問題点を解決するものであり、直交変換を適用したブロック中に含まれる0以外の係数の個数を、対象画像の性質によらず常に高い効率で符号化を行うことを可能とする画像復号化方法および画像復号化装置を提案することを目的とする。
上記課題を解決するために、本発明に係る画像符号化方法は、画像をブロック毎に空間周波数成分を示す係数に変換して符号化する画像符号化方法であって、符号化対象ブロックの周辺に位置する符号化済ブロック中に含まれる係数の値が0以外の係数である非ゼロ係数の個数に基づいて、前記符号化対象ブロック中に含まれる前記非ゼロ係数の個数の予測値を導出する導出ステップと、前記導出ステップにより導出された前記予測値に基づいて可変長符号テーブルを選択する選択ステップと、前記選択ステップにより選択された前記可変長符号テーブルを用いて、前記符号化対象ブロック中に含まれる前記非ゼロ係数の個数に対して可変長符号化を行う可変長符号化ステップとを含むことを特徴とする。
また、本発明に係る画像符号化方法は、画像をブロック毎に空間周波数成分を示す係数に変換して符号化する画像符号化方法であって、符号化対象ブロックの周辺に位置する符号化済ブロック中に含まれる0以外の係数の個数に基づいて、前記符号化対象ブロック中に含まれる0以外の係数の個数の予測値を算出する予測ステップと、前記予測ステップにより算出された前記予測値に基づいて可変長符号化用のテーブルを選択するテーブル選択ステップと、前記テーブル選択ステップにより選択された前記可変長符号化用のテーブルを参照して、前記符号化対象ブロック中に含まれる0以外の係数の個数に対して可変長符号化を行う可変長符号化ステップとを含むことを特徴とする。
これによって、符号化対象ブロック中に含まれる0以外の係数の個数を符号化する際に、最適な可変長符号化用のテーブルを参照することができるので、符号化効率の向上を図ることができる。
また、前記予測ステップでは、前記符号化済ブロック中に含まれる0以外の係数の個数の平均値を用いて前記予測値を算出することを特徴とする。
また、前記可変長符号化用のテーブルは、少なくとも一つ以上のVLCテーブルを有し、前記テーブル選択ステップでは、前記予測値に基づいて前記VLCテーブルを選択し、前記可変長符号化ステップでは、前記テーブル選択ステップにより選択された前記VLCテーブルを参照して、前記符号化対象ブロック中に含まれる0以外の係数の個数を可変長符号に変換することを特徴とする。
また、前記可変長符号化用のテーブルは、それぞれ少なくとも一つ以上のコードテーブルおよびVLCテーブルを有し、前記テーブル選択ステップでは、前記予測値に基づいて前記コードテーブルおよび前記VLCテーブルを選択し、前記可変長符号化ステップでは、前記テーブル選択ステップにより選択された前記コードテーブルを参照して、前記符号化対象ブロック中に含まれる0以外の係数の個数をコード番号に変換し、前記テーブル選択ステップにより選択された前記VLCテーブルを参照して、前記コード番号を可変長符号に変換することを特徴とする。
また、前記画像符号化方法は、符号化されていないブロックに隣接する符号化済ブロック中に含まれる0以外の係数の個数を、少なくとも前記符号化されていないブロックが符号化されるまで記憶する記憶ステップを含むことを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上および左に位置する前記符号化済ブロック中に含まれる0以外の係数の個数に基づいて、前記符号化対象ブロック中に含まれる0以外の係数の個数の予測値を算出することを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上および左の位置に符号化済のブロックがないとき、前記予測値を0とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上および左の位置に前記符号化済ブロックがあるとき、前記符号化対象ブロックの上および左の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数の平均値を前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上の位置に符号化済のブロックがなく、前記符号化対象ブロックの左の位置に前記符号化済ブロックがあるとき、前記符号化対象ブロックの左の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの左の位置に符号化済のブロックがなく、前記符号化対象ブロックの上の位置に前記符号化済ブロックがあるとき、前記符号化対象ブロックの上の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上境界および左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であるとき、前記予測値を0とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上境界および左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界でないとき、前記符号化対象ブロックの上および左の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数の平均値を前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの上境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であり、ブロックの左境界がピクチャの境界またはスライスの境界でないとき、前記符号化対象ブロックの左の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記符号化対象ブロックの左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であり、ブロックの上境界がピクチャの境界またはスライスの境界でないとき、前記符号化対象ブロックの上の位置にある前記符号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、本発明に係る画像復号化方法は、ブロック毎に空間周波数成分を示す係数に変換して符号化された画像を復号化する画像復号化方法であって、復号化対象ブロックの周辺に位置する復号化済ブロック中に含まれる0以外の係数の個数に基づいて、前記復号化対象ブロック中に含まれる0以外の係数の個数の予測値を算出する予測ステップと、前記予測ステップにより算出された前記予測値に基づいて可変長復号化用のテーブルを選択するテーブル選択ステップと、前記テーブル選択ステップにより選択された前記可変長復号化用のテーブルを参照して、前記復号化対象ブロック中に含まれる0以外の係数の個数が符号化されている符号列に対して可変長復号化を行う可変長復号化ステップとを含むことを特徴とする。
これによって、ブロック中に含まれる0以外の係数の個数が、最適な可変長符号化用のテーブルを参照して符号化されている符号列を正しく復号化することができる。
また、前記予測ステップでは、前記復号化済ブロック中に含まれる0以外の係数の個数の平均値を用いて予測値を算出することを特徴とする。
また、前記可変長復号化用のテーブルは、少なくとも一つ以上のVLCテーブルを有し、前記テーブル選択ステップでは、前記予測値に基づいて前記VLCテーブルを選択し、前記可変長復号化ステップでは、前記テーブル選択ステップにより選択された前記VLCテーブルを参照して、前記復号化対象ブロック中に含まれる0以外の係数の個数の可変長符号を前記係数の個数に変換することを特徴とする。
また、前記可変長復号化用のテーブルは、それぞれ少なくとも一つ以上のコードテーブルおよびVLCテーブルを有し、前記テーブル選択ステップでは、前記予測値に基づいて前記コードテーブルおよび前記VLCテーブルを選択し、前記可変長復号化ステップでは、前記テーブル選択ステップにより選択された前記VLCテーブルを参照して、前記復号化対象ブロック中に含まれる0以外の係数の個数の可変長符号をコード番号に変換し、前記テーブル選択ステップにより選択された前記コードテーブルを参照して、前記コード番号を前記係数の個数に変換することを特徴とする。
また、前記画像復号化方法は、復号化されていないブロックに隣接する復号化済ブロック中に含まれる0以外の係数の個数を、少なくとも前記復号化されていないブロックが復号化されるまで記憶する記憶ステップを含むことを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上および左に位置する前記復号化済ブロック中に含まれる0以外の係数の個数に基づいて、前記復号化対象ブロック中に含まれる0以外の係数の個数の予測値を算出することを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上および左の位置に復号化済のブロックがないとき、前記予測値を0とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上および左の位置に前記復号化済ブロックがあるとき、前記復号化対象ブロックの上および左の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数の平均値を前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上の位置に復号化済のブロックがなく、前記復号化対象ブロックの左の位置に前記復号化済ブロックがあるとき、前記復号化対象ブロックの左の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの左の位置に復号化済のブロックがなく、前記復号化対象ブロックの上の位置に前記復号化済ブロックがあるとき、前記復号化対象ブロックの上の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上境界および左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であるとき、前記予測値を0とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上境界および左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界でないとき、前記復号化対象ブロックの上および左の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数の平均値を前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの上境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であり、ブロックの左境界がピクチャの境界またはスライスの境界でないとき、前記復号化対象ブロックの左の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
また、前記予測ステップでは、前記復号化対象ブロックの左境界が前記画像の単位であるピクチャの境界または前記ピクチャを複数の領域に分割したスライスの境界であり、ブロックの上境界がピクチャの境界またはスライスの境界でないとき、前記復号化対象ブロックの上の位置にある前記復号化済ブロック中に含まれる0以外の係数の個数を用いて前記予測値とすることを特徴とする。
なお、本発明は、このような画像符号化方法および画像復号化方法として実現することができるだけでなく、このような画像符号化方法および画像復号化方法が含む特徴的なステップを手段として備える画像符号化装置および画像復号化装置として実現することもできる。また、それらのステップをコンピュータに実行させるプログラムとして実現したり、前記画像符号化方法により生成されたビットストリームとして実現したりすることもできる。そして、そのようなプログラムおよびビットストリームは、CD−ROM等の記録媒体やインターネット等の伝送媒体を介して配信することができるのは言うまでもない。
本発明に係る動画像符号化方法によれば、符号化対象ブロック中に含まれる直交変換後の0以外の係数の個数を符号化する際に、最適な可変長符号化用のテーブルを参照することができるので、符号化効率の向上を図ることができる。
本発明に係る画像符号化方法を用いた画像符号化装置の一実施の形態の構成を示すブロック図である。 (a)各ピクチャ内でのマクロブロックの処理順の概略を示す模式図、(b)符号化対象のブロックが係数の個数を符号化するために参照する符号化済みブロックの属するマクロブロックを示す模式図である。 (a)本発明の実施の形態1における係数個数符号化器の構成を示すブロック図、(b)係数個数符号化器の変形例の構成を示すブロック図である。 符号化対象ブロックと参照する符号化済みブロックとの位置関係を示す模式図であり、(a)3つの周辺ブロックを用いる場合、(b)2つの周辺ブロックを用いる場合である。 係数の個数がテーブルを参照することによって符号列に変換される流れの例を示す模式図である。 符号化対象のマクロブロックに対する参照ブロックを示す模式図であり、(a)3つの周辺ブロックを用いる場合、(b)2つの周辺ブロックを用いる場合である。 係数個数記憶器が係数の個数を記憶する動作を示す模式図であり、(a)次のマクロブロックへ処理が移る場合、(b)さらに次のマクロブロックへ処理が移る場合、(c)符号化対象のマクロブロックがピクチャの右端に位置し、次のマクロブロックへ処理が移る場合である。 本発明の実施の形態1における係数個数符号化器の変形例の構成を示すブロック図であり、(a)コードテーブルを固定する場合、(b)VLCテーブルを固定する場合、(c)コードテーブルを用いずにVLCテーブルのみを用いる場合である。 本発明の実施の形態1における係数個数符号化器の変形例の構成を示すブロック図である。 (a)本発明の実施の形態2における係数個数符号化器の構成を示すブロック図、(b)係数個数符号化器の変形例の構成を示すブロック図である。 本発明の実施の形態2および実施の形態7における係数の個数の統計を取る対象となるブロックの位置を示すための模式図である。 (a)本発明の実施の形態3における係数個数符号化器の構成を示すブロック図、(b)係数個数符号化器の変形例の構成を示すブロック図である。 (a)本発明の実施の形態4における係数個数符号化器の構成を示すブロック図、(b)係数個数符号化器の変形例の構成を示すブロック図である。 本発明の実施の形態4および実施の形態9におけるテーブル切り替えの評価値を算出する方法を示すためのブロック図である。 本発明の実施の形態5における画像符号化装置の構成を示すブロック図である。 本発明の実施の形態5における係数個数符号化器の構成を示すブロック図である。 本発明に係る画像復号化方法を用いた画像復号化装置の一実施の形態の構成を示すブロック図である。 (a)本発明の実施の形態6における係数個数復号化器の構成を示すブロック図、(b)係数個数復号化器の変形例の構成を示すブロック図である。 係数の個数の符号列がテーブルを参照することによって係数の個数に変換される流れの例を示す模式図である。 本発明の実施の形態6における係数個数復号化器の変形例の構成を示すブロック図であり、(a)コードテーブルを固定する場合、(b)VLCテーブルを固定する場合、(c)コードテーブルを用いずにVLCテーブルのみを用いる場合である。 本発明の実施の形態6における係数個数復号化器の変形例の構成を示すブロック図である。 (a)本発明の実施の形態7における係数個数復号化器の構成を示す処理の動作を説明するためのブロック図、(b)係数個数復号化器の変形例の構成を示すブロック図である。 (a)本発明の実施の形態8における係数個数復号化器の構成を示す処理の動作を説明するためのブロック図、(b)係数個数復号化器の変形例の構成を示すブロック図である。 (a)本発明の実施の形態9における係数個数復号化器の構成を示す処理の動作を説明するためのブロック図、(b)係数個数復号化器の変形例の構成を示すブロック図である。 本発明の実施の形態10における係数個数復号化器の構成を示す処理の動作を説明するためのブロック図である。 各実施の形態の画像符号化方法および画像復号化方法をコンピュータシステムにより実現するためのプログラムを格納するための記録媒体についての説明図であり、(a)記録媒体本体であるフレキシブルディスクの物理フォーマットの例を示した説明図、(b)フレキシブルディスクの正面からみた外観、断面構造、及びフレキシブルディスクを示した説明図、(c)フレキシブルディスクFDに上記プログラムの記録再生を行うための構成を示した説明図である。 コンテンツ配信サービスを実現するコンテンツ供給システムの全体構成を示すブロック図である。 携帯電話の一例を示す概略図である。 携帯電話の内部構成を示すブロック図である。 ディジタル放送用システムの全体構成を示すブロック図である。
以下、本発明の実施の形態について、図面および数式等を用いて説明する。
(実施の形態1)
図1は、本発明に係る画像符号化方法を用いた画像符号化装置の一実施の形態の構成を示すブロック図である。
画像符号化装置は、図1に示すようにフレームメモリ101、106、直交変換器102、量子化器103、逆量子化器104、逆直交変換器105、画面間予測器107、画面内予測器108、係数個数検出器109、係数個数記憶器110、係数個数符号化器111、係数値符号化器112、符号列生成器113、スイッチ114、115、差分演算器116、および加算演算器117を備えている。
フレームメモリ101は、表示時間順にピクチャ単位で入力された動画像を格納する。画面間予測器107は、符号化装置内で再構成した画像データを参照ピクチャとして用いて、そのピクチャ内の探索領域において最適と予測される位置を示す動きベクトルの検出を行い、この動きベクトルに基づいて予測画像データを生成する。差分演算器116は、フレームメモリ101より読み出された入力画像データと、画面間予測器107より入力された予測画像データとの差分を演算し、予測残差画像データを生成する。
画面内予測器108は、符号化対象ピクチャ内の符号化済み領域の画像データを用いて予測画像データを生成し、入力画像データとの差分を演算することにより予測残差画像データを生成する。
直交変換器102は、入力された予測残差画像データに対して直交変換を行う。量子化器103は、直交変換されたデータに対して量子化を行い、可変長符号化の対象となる空間周波数成分を示す係数を生成する。逆量子化器104は、生成された係数に対して逆量子化を行う。逆直交変換器105は、逆量子化されたデータに対して逆直交変換を行い、再構成予測残差画像データを生成する。加算演算器117は、逆直交変換器105より入力された再構成予測残差画像データと、画面間予測器107より入力された予測画像データとを加算し、再構成画像データを生成する。フレームメモリ106は、生成された再構成画像データを格納する。
係数個数検出器109は、生成された係数の値を調べてブロックごとに0以外の値を持つ係数の個数(以下、単に係数の個数という)を検出する。係数個数記憶器110は、係数個数検出器109で検出された係数の個数を記憶する。係数個数符号化器111は、係数個数記憶器110に記憶されている既に符号化されたブロックの係数の個数の値を参照して、後に説明する方法によって係数の個数の符号化を行う。係数値符号化器112は、係数個数検出器109によって検出された係数の個数を用いて可変長符号化に必要なVLCテーブルを切り替えて参照することにより係数の値そのものの可変長符号化を行う。符号列生成器113は、符号化された係数の個数および係数の値に、画面間予測器107から入力された動きベクトル等のその他の情報を付加することにより符号列を生成する。
次に、上記のように構成された画像符号化装置の動作について説明する。
符号化対象となる動画像は、表示時間順にピクチャ単位でフレームメモリ101に入力され、ここで符号化が行われる順に並び替えられる。各々のピクチャは、マクロブロックと呼ばれる例えば水平16×垂直16画素のブロックに分割され、このマクロブロック単位でこれ以降の処理が行われる。図2(a)は各ピクチャ内でのマクロブロックの処理順の概略を示す模式図であり、図2(b)は符号化対象のブロックが係数の個数を符号化するために参照する符号化済みブロックの属するマクロブロックを示す模式図である。この図2(b)では、マクロブロックMB13が符号化対象マクロブロックである場合を示している。
各ピクチャ内のマクロブロックは、図2(a)に示すように左上のマクロブロックより順に右へ、右端まで来ると一段下に下がり再び左より順に右へというように符号化が行われる。対象とするマクロブロックを画面間予測によって符号化する場合は、まずフレームメモリ101から読み出されたマクロブロックは、画面間予測器107へ入力される。画面間予測器107は、フレームメモリ106に蓄積されている符号化済みのピクチャの再構成画像を参照ピクチャとして用いて、マクロブロックをさらに分割したブロック(例えば水平4×垂直4画素)ごとに動きベクトル検出を行う。画面間予測器107は、検出した動きベクトルによって作成した予測画像データを差分演算器116へ出力する。差分演算器116は、予測画像データと対象のマクロブロックの入力画像データとの差分をとることにより予測残差画像データを生成する。
一方、対象とするマクロブロックを画面内予測によって符号化する場合は、まずフレームメモリ101から読み出されたマクロブロックは、画面内予測器108へ入力される。画面内予測器108は、周辺のブロックの情報を用いて画面内予測を行い、予測残差画像データを生成する。
このように生成された予測残差画像データは、ブロックごとに直交変換器102および量子化器103によって直交変換および量子化が行われ、可変長符号化の対象となる係数に変換される。この係数は、係数個数検出器109、係数値符号化器112および逆量子化器104へ入力される。
係数個数検出器109は、ブロックごとに0以外の値を持つ係数の個数を検出する。ここで検出された係数の個数は係数個数記憶器110に保存される。係数個数符号化器111は、既に符号化されたブロックの係数の個数を係数個数記憶器110から読み込むことによりその値を参照して、符号化対象ブロックの係数の個数の符号化を行う。また、係数値符号化器112は、係数個数検出器109によって検出された係数の個数を用いて係数の値そのものの符号化を行う。最後に、符号列生成器113は、符号化された係数の個数および係数の値を、動きベクトル等のその他の情報とともに符号列へ追加することにより最終的な符号列を生成する。
一方、逆量子化器104へ入力された係数は、逆量子化器104および逆直交変換器105によって、逆量子化および逆直交変換が行われ、再構成予測残差画像データに変換される。次に、加算演算器117は、この再構成予測残差画像データと、画面間予測器107より入力された予測画像データとを加算して再構成画像データを生成し、フレームメモリ106へ格納する。
以上符号化の流れの概要を説明したが、係数個数符号化器111が行う係数の個数の可変長符号化処理について、図3から図9および表1から表7を用いてその詳細を説明する。
図3(a)は係数個数符号化器111の内部構成を詳しく示すブロック図である。
なお、ここでは係数の個数の可変長符号化を行うために、コードテーブルとVLCテーブルという2つのテーブルを使用する例を示している。このときコードテーブルとは、係数の個数をあるコード番号に変換するテーブルであり、VLCテーブルとはコードテーブルによって得られたコード番号を可変長符号に変換するテーブルである。
係数個数符号化器111は、図3(a)に示すように予測値算出器201、コードテーブル記憶器202、コードテーブル選択器203、VLCテーブル選択器204、VLCテーブル記憶器205、および係数個数符号化器206を備えている。
まず、図1に示す係数個数記憶器110から周辺に位置する符号化済ブロックの係数の個数が予測値算出器201へ入力される。予測値算出器201は、これらの値の平均値を取ることにより予測値を決定する。なお、予測値の決定方法として前記平均値の代わりに最大値または最小値または中央値のいずれかを用いることも可能である。
図4(a)は現在符号化の対象としているブロックと参照する符号化済みのブロックとの位置関係を示す模式図である。ここでは符号化の対象としているブロックXに対し、ブロックBおよびCおよびDの位置関係にある3つのブロックを参照ブロックとしている。このときブロックBおよびCおよびDの位置関係にある3つのブロックの中で、符号化されていないもしくはピクチャの外部もしくはピクチャを複数の領域に分割したスライスの外部に位置するブロックが発生した場合は、表1のように参照ブロックの変更がなされる。
Figure 2011061834
表1における○は符号化済ブロック、×は符号化が行われていないもしくはピクチャの外部もしくはスライスの外部に位置するために参照することができないブロックを意味している。例えばCのみが参照することができない場合はA、B、Dを参照することを示している。なお、表1の○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。また、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。
コードテーブル選択器203は、予測値算出器201によって算出された予測値に応じて、コードテーブル記憶器202が持つ複数のコードテーブルの中から実際に使用するコードテーブルを選択する。
表2はコードテーブル記憶器202によって予め用意されている係数の個数とコード番号とを対応付けるコードテーブルの例である。
Figure 2011061834
この例によると、例えばコードテーブル1は係数の個数値に等しいコード番号を割り振り、コードテーブル2は係数の個数値の2が中心となるようにコード番号を割り振っている。なお、ここでは4種類のコードテーブルを用意しているが、テーブルの種類の数およびテーブルの値はこれ以外のものを使用した場合も同様に扱うことができる。また、表3は予測値に基づいたコードテーブルの選択基準を示したものである。
Figure 2011061834
この例によると、コードテーブル選択器203は、予測値算出器201によって算出された予測値が2以下の場合はコードテーブル1を参照し、3以上5以下の場合はコードテーブル2を参照するというように選択を行っている。なお、表3における予測値の割り振り方または参照テーブルの項目はこれ以外のものを使用した場合も同様に扱うことができる。
VLCテーブル選択器204は、予測値算出器201によって算出された予測値に応じて、VLCテーブル記憶器205が持つ複数のVLCテーブルの中から実際に使用するVLCテーブルを選択する。
表4はVLCテーブル記憶器205によって予め用意されているコード番号と可変長符号とを対応付けるVLCテーブルの例である。
Figure 2011061834
この例によると、VLCテーブル1はVLCテーブル4と比較するとコード番号の大きい領域ではビット量が多くなる傾向にあるが、コード番号の小さい領域ではビット量が少なくなるように設計されている。コード番号の出現確率が値の小さい領域に集中している場合はVLCテーブル1の方が、値の大きい領域にまで分散している場合はVLCテーブル4の方が、効率よく可変長符号化を行うことが可能であることを示している。なお、ここでは4種類のVLCテーブルを用意しているが、テーブルの種類の数およびテーブルの値はこれ以外のものを使用した場合も同様に扱うことができる。また、表5は予測値に基づいたVLCテーブルの選択基準を示したものである。
Figure 2011061834
この例によると、VLCテーブル選択器204は、予測値算出器201によって算出された予測値が1以下の場合はVLCテーブル1を参照し、2以上3以下の場合はVLCテーブル2を参照するというように選択を行っている。なお、表5における予測値の割り振り方または参照テーブルの項目はこれ以外のものを使用した場合も同様に扱うことができる。
係数個数符号化器206は、上記の処理によって選択されたコードテーブルおよびVLCテーブルを参照して、入力された符号化対象ブロックの係数の個数の可変長符号化を行う。係数個数符号化器206は、まずコードテーブルを用いて係数の個数をコード番号に変換し、つぎにVLCテーブルを用いてコード番号に対応する可変長符号に変換する。図5は予測値算出器201によって算出された予測値が“6”で符号化対象ブロックの係数の個数が“4”であった場合の符号化の例を示す模式図である。予測値が“6”であることから、コードテーブル選択器203において表3および表2により図5に示すコードテーブル3が選択され、またVLCテーブル選択器204において表5および表4により図5に示すVLCテーブル3が選択される。係数個数符号化器206は、入力された係数の個数“4”をコードテーブル3によりコード番号“2”に変換し、さらにVLCテーブル3により最終的な符号列“0100”を生成する。
次に、係数個数記憶器110が行う係数の個数の記憶処理について、その詳細を説明する。図6(a)は予測値算出器201における符号化対象のマクロブロックに対する参照ブロックを示す模式図である。ここで、B1〜B16の符号を付したブロックを含む太枠が符号化対象のマクロブロックを示し、斜線のブロックが符号化対象のマクロブロックに対する参照ブロックを示している。また、ブロックに付した符号の数字は、マクロブロック内での符号化順を示している。
係数個数記憶器110は、例えば図6(a)に示す符号化対象のマクロブロックの処理を開始する時点において、係数個数検出器109によって検出された係数の個数を、少なくとも符号化対象のマクロブロックに対して必要となる図6(a)に斜線で示した参照ブロックについて記憶している。すなわち、係数個数記憶器110は、順次処理される符号化対象のマクロブロックのブロック(B1、B2、B3、…B16)に対して検出された係数の個数を記憶する。例えば、符号化対象ブロックがブロックB6である場合、係数個数記憶器110は、図6(a)に示す参照ブロックに加えて既に処理されたブロックB1、B2、B3、B4、B5の各係数の個数を記憶している。そして、係数個数記憶器110は、係数個数検出器109によりブロックB6の係数の個数が検出されると、このブロックB6の係数の個数を記憶する。このように係数個数記憶器110は、順次処理される符号化対象のマクロブロックのブロック(B1、B2、B3、…)に対して検出された係数の個数を記憶する。
そして、例えば符号化対象のマクロブロックが図2(b)に示すマクロブロックMB11である場合、このマクロブロックMB11の処理が終了し、次のマクロブロックMB12へ処理が移る際に、係数個数記憶器110は、図7(a)に示すようにマクロブロックMB11の下列と右列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。次に、マクロブロックMB12の処理が終了し、その次のマクロブロックMB13へ処理が移る際に、係数個数記憶器110は、同様にマクロブロックMB12の下列と右列のブロックの係数の個数を少なくとも保持しておくとともに、図7(b)に示すようにマクロブロックMB11の下列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
また、例えば符号化対象のマクロブロックが図2(b)に示すマクロブロックMB9のようにピクチャの右端に位置する場合、このマクロブロックMB9の処理が終了し、次のマクロブロックMB10へ処理が移る際に、係数個数記憶器110は、図7(b)に示すようにマクロブロックMB9の下列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
また、例えば符号化対象のマクロブロックが図2(b)に示すマクロブロックMBmのようにピクチャの下端に位置する場合、このマクロブロックMBmの処理が終了し、次のマクロブロックMBnへ処理が移る際に、係数個数記憶器110は、図7(c)に示すようにマクロブロックMBmの右列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
このように係数個数記憶器110は、参照されるブロックに対する係数の個数を保持しておく。なお、上記説明において保持しておくとしたブロック以外の係数の個数の情報は、参照されることがなくなった後であれば任意のタイミングで削除することが可能である。例えば、次のマクロブロックへ処理が移る際に削除することも、もしくはマクロブロックの処理途中で削除することも可能である。また、参照されることのなくなったブロックに対する係数の個数は必ずしも削除するという処理を必要としない。例えば、係数個数記憶器110は、参照されることのなくなったブロックに対する係数の個数を不要であると認識し、必要に応じて上書きするようにしても構わない。
なお、上記説明では、係数個数記憶器110において符号化済みブロックの係数を記憶しておくことによって参照することを可能としているが、係数の個数の値そのものではなく、例えば、空間周波数成分に変換されたブロックの係数の値を記憶しておくことにより、必要に応じて係数の個数を算出するような構成を用いることも可能である。
以上のように本実施の形態では、符号化済の周辺ブロックの係数の個数から予測値を算出し、その予測値に応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の出現頻度が一様でないピクチャに対しても効率よく係数の個数の符号化を行うことが可能である。
また、上記のように予測値に応じてコードテーブルを切り替えて参照することにより、係数の個数の出現確率が最も高い位置の変動に対応することができる。一方、予測値に応じてVLCテーブルを切り替えて参照することにより、係数の個数の出現確率の分散の大きさに対応することができる。これによって、効率よく係数の個数の符号化を行うことが可能である。
なお、予測値算出器201において参照するブロックとして、図4(a)に示すような3つの周辺ブロックの代わりに図4(b)に示すように符号化対象のブロックXに対してブロックBおよびDの位置関係にある2つのブロックのみを用いることも可能である。このときブロックBおよびDの位置関係にある2つのブロックの中で、符号化されていないもしくはピクチャの外部もしくはスライスの外部に位置するブロックが発生した場合は、表6のように参照ブロックの変更がなされる。
Figure 2011061834
表6における○は表1と同様に符号化済ブロック、×は符号化が行われていないもしくはピクチャの外部もしくはスライスの外部に位置するために参照することができないブロックを意味している。なお、表6の○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。この場合、係数個数記憶器110は、係数個数検出器109によって検出された係数の個数を、少なくとも符号化対象のマクロブロックに対して必要となる図6(b)に示す参照ブロックについて記憶していればよい。
なお、予測値算出器201において予測値を算出する方法として、平均値または最大値または最小値または中央値のいずれかに固定するのではなく、例えばその中から最適なものをシーケンスまたはGOPまたはピクチャまたはスライスごとに選択することも可能である。そのとき選択された算出方法を識別するための符号は符号列のシーケンスまたはGOPまたはピクチャまたはスライスのヘッダ領域に追加される。なお、スライスとは1つのピクチャを複数の領域に分けたものを示し、例えばマクロブロック単位で横方向に1列分の領域などがこれにあたる。
また、予測値算出器201において予測値を算出する方法として、例えば平均値または最大値または最小値または中央値のいずれかを符号化済の参照ブロックの係数の個数の平均値によって選択することも可能である。表7はその選択基準を示したものである。
Figure 2011061834
この例によると、例えば平均値が4以下であれば複数の参照ブロックの係数の個数の中の最小値を予測値とし、平均値が5以上8以下であれば平均値を予測値としている。量子化ステップが小さい場合および動きの複雑なブロックでは、係数の個数の大きいものが出現する確率が高くなるため最大値を選択することにより、逆に量子化ステップが大きい場合および動きの単純なブロックでは、係数の個数の小さいものが出現する確率が高くなるため最小値を選択することにより符号化効率向上の効果が期待できる。なお、表7における平均値の割り振り方または予測値算出方法の項目はこれ以外のものを使用した場合も同様に扱うことができる。
なお、本実施の形態では、係数個数符号化器111において係数の個数の値そのものに対して可変長符号化を行っているが、図3(b)に示すように予測値算出器201による予測値と入力された係数の個数の値との差分値を差分演算器207によって算出し、得られた値に対して上記実施の形態と同様の処理によって可変長符号化を行うことも可能である。これにより、輝度および色差の変化が画面全体に渡って単調である場合、周辺ブロック間での係数の個数の変化が小さくなるような画像に対して符号化効率向上の効果が期待できる。
また、本実施の形態では、係数個数符号化器111においてコードテーブルおよびVLCテーブルの両者を周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長符号化を行っているが、それらのどちらか一方を切り替えずに固定して使用することも可能である。その場合はテーブル選択器を用いる代わりにある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用いることにより実現可能である。図8(a)はコードテーブルのみを固定して係数の個数の可変長符号化を行う場合の係数個数符号化器111の構成を示すブロック図である。また、図8(b)はVLCテーブルのみを固定して係数の個数の可変長符号化を行う場合の係数個数符号化器111の構成を示すブロック図である。
コードテーブルのみを固定する場合、図8(a)に示すように係数個数符号化器111は、図3(a)に示すコードテーブル記憶器202およびコードテーブル選択器203に代えてコードテーブル記憶器301を備えている。このコードテーブル記憶器301は、1種類のコードテーブルを有している。そして、係数個数符号化器206は、まずコードテーブル記憶器301が有しているコードテーブルを用いて係数の個数をコード番号に変換し、つぎにVLCテーブル選択器204により選択されたVLCテーブルを用いてコード番号を可変長符号に変換する。
一方、VLCテーブルのみを固定する場合、図8(b)に示すように係数個数符号化器111は、図3(a)に示すVLCテーブル記憶器205およびVLCテーブル選択器204に代えてVLCテーブル記憶器302を備えている。このVLCテーブル記憶器302は、1種類のVLCテーブルを有している。そして、係数個数符号化器206は、まずコードテーブル選択器203により選択されたコードテーブルを用いて係数の個数をコード番号に変換し、つぎにVLCテーブル記憶器302が有しているVLCテーブルを用いてコード番号を可変長符号に変換する。
このようにコードテーブルまたはVLCテーブルのどちらか一方を切り替えずに固定して使用することにより、符号化効率の効果は多少減少するが、テーブル切り替えのための処理量を減らすこと、および複数のテーブルを記憶しておくためのメモリ容量を減らすことが可能となる。
また、係数個数符号化器111において、コードテーブルを用いずにVLCテーブルのみを周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長符号化を行うことも可能である。図8(c)はコードテーブルを用いずにVLCテーブルのみを用いて係数の個数の可変長符号化を行う場合の係数個数符号化器111の構成を示すブロック図である。この場合、図8(c)に示すように係数個数符号化器111は、図3(a)に示すコードテーブル記憶器202およびコードテーブル選択器203は備えていない。係数個数符号化器111では、予測値算出器201によって算出された予測値に基づいてVLCテーブル選択器303が、VLCテーブル記憶器304の有する複数のVLCテーブルの中から実際に使用するVLCテーブルを選択する。そして、係数個数符号化器206は、上記のようにコードテーブルを用いて係数の個数をコード番号に変換することなく、直接、VLCテーブルを用いて係数の個数を可変長符号に変換する。なお、この場合に表4で示すVLCテーブルの例では、コード番号となっている部分が係数の個数値となる。
また、係数個数符号化器111において、係数の個数の値の代わりに予測値との差分値を用いて可変長符号化を行う場合に対しても同様に扱うことが可能である。図9はその例としてコードテーブルおよびVLCテーブルの両者を固定して予測値と係数の個数との差分値に対して可変長符号化を行う場合の係数個数符号化器111の構成を示すブロック図である。この場合、図9に示すように係数個数符号化器111は、図3(a)に示すコードテーブル記憶器202およびコードテーブル選択器203に代えてコードテーブル記憶器301を、VLCテーブル記憶器205およびVLCテーブル選択器204に代えてVLCテーブル記憶器302を備えている。このコードテーブル記憶器301は1種類のコードテーブルを、VLCテーブル記憶器302は1種類のVLCテーブルを有している。そして、係数個数符号化器206は、まずコードテーブル記憶器301が有しているコードテーブルを用いて係数の個数と予測値との差分値をコード番号に変換し、つぎにVLCテーブル記憶器302が有しているVLCテーブルを用いてコード番号を可変長符号に変換する。
(実施の形態2)
本実施の形態における画像符号化装置の構成および符号化処理の概要は、図1に示す係数個数符号化器111を除き実施の形態1と全く同等である。ここでは、この係数個数符号化器111において実施の形態2でなされる係数の個数の可変長符号化処理について、図10から図11を用いてその詳細を説明する。
図10(a)は係数個数符号化器111の内部構成を詳しく示すブロック図である。
図10(a)に示すように係数個数符号化器111は、図3(a)に示すコードテーブル記憶器202およびコードテーブル選択器203に代えてコードテーブル生成器701を備えている。コードテーブル生成器701には、図1の係数個数記憶器110から符号化済ブロックの係数の個数が入力される。コードテーブル生成器701は、係数の個数の値ごとにそれと等しい係数の個数を持つ符号化済ブロックが幾つあるかをカウントし、その統計量に基づいて発生頻度が最も高かった係数の個数から順にコード番号を割り当てコードテーブルを作成する。図11(a)は統計の対象とする符号化済ブロックの位置を表す模式図である。ここで、P1およびP3およびP4は画面間予測符号化を行うピクチャであり、I2は画面内予測符号化を行うピクチャである。現在符号化の対象としているブロックがP3に属しているとすると、同じ方式によって符号化された直前のピクチャであるP1の全てのブロックが統計の対象となる。なお、図11(b)のように現在符号化の対象となっているピクチャ内にある符号化済ブロックも含めた1ピクチャ分のブロックを統計の対象とする場合も同様に扱うことが可能である。また、統計の対象とすることのできる1ピクチャ分の符号化済ブロックが存在しない場合は、初期状態のコードテーブルとして0からの昇順で与えられるテーブルを使用する。なお、ここでは1ピクチャ分のブロックを統計対象としているが、母数としてそれ以外のブロックの個数を用いた場合も同様に扱うことが可能である。なお、図11(a)に示すような参照を行って上記コードテーブルの生成を行う場合は、対象のピクチャの符号化を開始する際に1度だけテーブルの生成を行うだけでよい。
一方、予測値算出器201には、周辺に位置する符号化済ブロックの係数の個数が入力される。予測値算出器201は、これらの値を基に実施の形態1と同様に平均値を取ることにより予測値を決定する。なお、予測値の決定方法として前記平均値の代わりに最大値または最小値または中央値のいずれかを用いることも可能である。このとき参照する符号化済ブロックは実施の形態1と同様に図4(a)に示された符号化対象のブロックXに対してBおよびCおよびDの位置関係にある3つのブロックを用いて表1に従って決定される。なお、表1における○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。
予測値算出器201によって算出された予測値は、VLCテーブル選択器204においてのみ用いられる。VLCテーブル選択器204は、この予測値に応じて、VLCテーブル記憶器205に実施の形態1と同様に表4に示すような予め用意された複数のVLCテーブルの中から表5に示すような選択基準に従って係数の個数の符号化に使用するVLCテーブルを選択する。
係数個数符号化器206は、コードテーブル生成器701によって生成されたコードテーブルおよびVLCテーブル選択器204によって選択されたVLCテーブルを参照して、実施の形態1と同様に入力された符号化対象ブロックの係数の個数の可変長符号化を行う。
以上のように本実施の形態では、符号化済ブロックの係数の個数の統計を取ることによりコードテーブルを作成し、さらに符号化済ブロックの係数の個数から算出された予測値に応じてVLCテーブルを決定し、その両者を参照することにより係数の出現頻度が一様でないピクチャに対しても効率よく係数の個数の符号化を行うことが可能である。
なお、実施の形態1と同様に予測値算出器201において参照する符号化済ブロックは、図4(a)のような3つの周辺ブロックの代わりに図4(b)のように符号化対象のブロックXに対してBおよびDの位置関係にある2つのブロックのみを用いて表6に従って決定することも可能である。また、表6における○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。
また、実施の形態1と同様に予測値算出器201において予測値を算出する方法として、平均値または最大値または最小値または中央値のいずれかに固定するのではなく、例えばその中から最適なものをシーケンスまたはGOPまたはピクチャまたはスライスごとに選択することも可能である。そのとき選択された算出方法を識別するための符号は符号列のシーケンスまたはGOPまたはピクチャまたはスライスのヘッダ領域に追加される。
また、実施の形態1と同様に予測値算出器201において予測値を算出する方法として、例えば平均値または最大値または最小値または中央値のいずれかを符号化済の参照ブロックの係数の個数の平均値によって選択することも可能である。表7はその選択基準を示したものであるが、ここでの平均値の割り振り方または予測値算出方法の項目はこれ以外のものを使用した場合も同様に扱うことができる。
また、本実施の形態では、係数個数符号化器111において係数の個数の値そのものに対して可変長符号化を行っているが、実施の形態1と同様に図10(b)に示すように予測値算出器201による予測値と入力された係数の個数の値との差分値を差分演算器207によって算出し、得られた値に対して上記と同様の処理によって可変長符号化を行うことも可能である。
また、本実施の形態では、係数個数符号化器111においてVLCテーブルを周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長符号化を行っているが、実施の形態1と同様にVLCテーブルを切り替えずに固定して使用することも可能である。その場合はVLCテーブル選択器を用いる代わりにある1種類のVLCテーブルを持ったVLCテーブル記憶器のみを用いることにより実現可能である。
(実施の形態3)
本実施の形態における画像符号化装置の構成および符号化処理の概要は、図1に示す係数個数符号化器111を除き実施の形態1と全く同等である。ここでは、この係数個数符号化器111において実施の形態3でなされる係数の個数の可変長符号化処理について、図12および表8から表9を用いてその詳細を説明する。
図12(a)は係数個数符号化器111の内部構成を詳しく示すブロック図である。
図12(a)に示すように係数個数符号化器111は、図3(a)に示す予測値算出器201を備えていない。これにより、コードテーブル選択器901およびVLCテーブル選択器902は、実施の形態1とは異なり予測値を使用することなく直接符号化済ブロックの係数の個数を使用することによって実際に使用するテーブルを選択する。このとき参照する符号化済ブロックは図4(b)に示すように符号化対象のブロックXに対しB(上)およびD(左)の位置関係にある2つのみを用いる。ただし、上および左に位置するブロックが符号化されていないもしくはピクチャの外部もしくはスライスの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。
表8はコードテーブル選択器901におけるコードテーブルの選択方法を示したものである。
Figure 2011061834
コードテーブル選択器901は、表8に示すように符号化対象ブロックの上および左に位置するブロックの係数の個数それぞれを値に応じて2つのグループに分類し、それらによって形成される4つの組み合わせによってテーブルを選択する。例えば左ブロックの係数の個数が3かつ上ブロックの係数の個数が8であった場合は、コードテーブル2が選択されることになる。なお、表8における上および左ブロックの係数の個数を分類する方法およびコードテーブルの割り当て方についてはこれ以外のものを使用した場合も同様に扱うことができる。
表9はVLCテーブル選択器902におけるVLCテーブルの選択方法を示したものである。
Figure 2011061834
VLCテーブル選択器902は、コードテーブル選択器901の場合と同様に表9に示すような選択方法を用いて実際に参照するVLCテーブルを選択する。
係数個数符号化器206は、コードテーブル選択器901によって選択されたコードテーブルおよびVLCテーブル選択器902によって選択されたVLCテーブルを参照して、実施の形態1と同様に入力された符号化対象ブロックの係数の個数の可変長符号化を行う。
以上のように本実施の形態では、符号化対象ブロックの上および左に位置する符号化済ブロックの係数の個数を値に応じてN個のグループに分類し、そのときに形成されるN×N通りの組み合わせに応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の出現頻度が一様でないピクチャに対しても効率よく係数の個数の符号化を行うことが可能である。
なお、本実施の形態では、係数個数符号化器111において係数の個数の値そのものに対して可変長符号化を行っているが、実施の形態1と同様に図12(b)に示すように予測値算出器201による予測値と入力された係数の個数の値との差分値を差分演算器207によって算出し、得られた値に対して上記と同様の処理によって可変長符号化を行うことも可能である。
また、本実施の形態では、係数個数符号化器111においてコードテーブルおよびVLCテーブルの両者を周辺ブロックの係数の個数によって切り替えて可変長符号化を行っているが、実施の形態1と同様に、それらのどちらか一方を切り替えずに固定して使用することも可能である。その場合はテーブル選択器を用いる代わりにある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用いることにより実現可能である。さらに、実施の形態1と同様に、コードテーブルを用いずにVLCテーブルのみを周辺ブロックの係数の個数によって切り替えて可変長符号化を行うことも可能である。
(実施の形態4)
本実施の形態における画像符号化装置の構成および符号化処理の概要は、図1に示す係数個数符号化器111を除き実施の形態1と全く同等である。ここでは、この係数個数符号化器111において実施の形態4でなされる係数の個数の可変長符号化処理について、図13および図14を用いてその詳細を説明する。
図13(a)は係数個数符号化器111の内部構成を詳しく示すブロック図である。
図13(a)に示すように係数個数符号化器111は、図3(a)に示す予測値算出器201、コードテーブル選択器203、およびVLCテーブル選択器204に代えてテーブル選択器1001を備えている。テーブル選択器1001は、実施の形態1とは異なり予測値を使用することなく直接符号化済ブロックの係数の個数を使用し、コードテーブルおよびVLCテーブルの両者を同時に評価することによって実際に使用するテーブルを選択する。このとき参照する符号化済ブロックは図4(a)にあるように符号化対象のブロックXに対してBおよびCおよびDの位置関係にある3つのブロックを用いる。ただし、これらに位置するブロックが符号化されていないもしくはピクチャの外部もしくはスライスの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。
テーブル選択器1001は、コードテーブルおよびVLCテーブルを同時に用いて参照ブロックの係数の個数を符号化した結果生成される符号列の長さの和を算出し、それを評価値とする。図14は3つの参照ブロックの係数の個数に対しコードテーブルおよびVLCテーブルによって符号化を行い、得られた符号列の長さの和を算出しそれを評価値とする方法を示す模式図である。そして、テーブル選択器1001は、コードテーブル記憶器202およびVLCテーブル記憶器205が有する全てのコードテーブルおよびVLCテーブルの組み合わせに対してこの処理を行い、得られた評価値が最も小さくなるコードテーブルおよびVLCテーブルの組み合わせを選択する。
係数個数符号化器206は、テーブル選択器1001によって選択されたコードテーブルおよびVLCテーブルを参照して、実施の形態1と同様に入力された符号化対象ブロックの係数の個数の可変長符号化を行う。
以上のように本実施の形態では、符号化済の周辺ブロックの係数の個数に対してコードテーブルおよびVLCテーブルを用いて符号化を行い、そのときの符号列の長さの和を評価値とし、これが最小となる組み合わせのコードテーブルおよびVLCテーブルを参照することにより、係数の出現頻度が一様でないピクチャに対しても効率よく係数の個数の符号化を行うことが可能である。
なお、実施の形態1と同様にテーブル選択器1001において参照する符号化済ブロックは、図4(a)のような3つの周辺ブロックの代わりに図4(b)のように符号化対象のブロックXに対してBおよびDの位置関係にある2つのみを用いても同様に扱うことが可能である。ただし、これらに位置するブロックが符号化されていないもしくはピクチャの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。
また、本実施の形態では、係数個数符号化器111において係数の個数の値そのものに対して可変長符号化を行っているが、実施の形態1と同様に図13(b)のように予測値算出器201による予測値と入力された係数の個数の値との差分値を差分演算器207によって算出し、得られた値に対して上記実施の形態と同様の処理によって可変長符号化を行うことも可能である。
また、本実施の形態では、係数個数符号化器111においてコードテーブルおよびVLCテーブルを切り替える対象としているが、それらの一方を切り替えずに固定して使用することも可能である。
(実施の形態5)
図15は本発明に係る画像符号化方法を用いた画像符号化装置の実施の形態5の構成を示すブロック図である。符号化処理の概要は実施の形態1と全く同等であるが、相違点として係数個数記憶器110は使用せず、係数個数符号化器1201において参照する情報として実施の形態1における符号化済ブロックの係数の個数の代わりに画面間予測符号化の場合は画面間予測モードを、また画面内予測符号化の場合は画面内予測モードを用いる。
ここでは、図15に示す係数個数符号化器1201においてなされる係数の個数の可変長符号化処理について、図16および表10から表11を用いてその詳細を説明する。
図16は係数個数符号化器1201の内部構成を詳しく示すブロック図である。
図16に示すように係数個数符号化器1201は、図3(a)に示す予測値算出器201を備えていない。画面間予測符号化の場合は画面間予測器107より画面間予測モードが、また画面内予測符号化の場合は画面内予測器108より画面内予測モードがコードテーブル選択器1301およびVLCテーブル選択器1302に入力される。これにより、コードテーブル選択器1301は、画面間予測符号化の場合は画面間予測モードに、また画面内予測符号化の場合は画面内予測モードに基づいて使用するテーブルを選択する。表10はコードテーブル選択器1301におけるコードテーブルの選択方法を示したものである。
Figure 2011061834
例えば、符号化対象ピクチャが画面間予測によって符号化される場合、対象のブロックが8x8のサイズの予測が選択されると、それに伴って係数の個数を可変長符号化するためのコードテーブルとして2番のテーブルが選択されることになる。なお、表10の各項目についてはこれ以外のものを使用した場合も同様に扱うことができる。
また、表11はVLCテーブル選択器1302におけるVLCテーブルの選択方法を示したものである。
Figure 2011061834
VLCテーブル選択器1302は、コードテーブル選択器1301の場合と同様に表11に示すような選択方法を用いて実際に参照するVLCテーブルを選択する。
係数個数符号化器206は、コードテーブル選択器1301によって選択されたコードテーブルおよびVLCテーブル選択器1302によって選択されたVLCテーブルを参照して、実施の形態1と同様に入力された符号化対象ブロックの係数の個数の可変長符号化を行う。
以上のように本実施の形態では、符号化の対象としているブロックが画面間予測符号化の場合は画面間予測モードに、また画面内予測符号化の場合は画面内予測モードに応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の出現頻度が一様でないピクチャに対しても効率よく係数の個数の符号化を行うことを可能とする符号化方法を示した。
なお、本実施の形態では、係数個数符号化器1201において係数の個数の値そのものに対して可変長符号化を行っているが、実施の形態1と同様に符号化済の周辺ブロックの係数の個数を用いて予測値を決定し、この予測値と入力された係数の個数の値との差分値を求め、得られた値に対して上記実施の形態と同様の処理によって可変長符号化を行うことも可能である。
また、本実施の形態では、係数個数符号化器1201においてコードテーブルおよびVLCテーブルの両者を切り替えて可変長符号化を行っているが、実施の形態1と同様に、それらの一方もしくは両者を切り替えずに固定して使用することも可能である。その場合はある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用意することにより実現可能である。
(実施の形態6)
図17は、本発明に係る画像復号化方法を用いた画像復号化装置の一実施の形態の構成を示すブロック図である。ここでは、実施の形態1の画像符号化装置で生成された符号列が入力されるものとする。
画像復号化装置は、符号列解析器1401、係数個数記憶器1402、係数個数復号化器1403、係数値復号化器1404、逆量子化器1405、逆直交変換器1406、フレームメモリ1407、画面間予測復号器1408、画面内予測復号器1409、およびスイッチ1410を備えている。
符号列解析器1401は、入力された符号列から符号化モード、符号化時に用いられた動きベクトル、係数の個数(ブロック単位の0以外の値を持つ空間周波数成分を示す係数の個数)の符号列および係数の値の符号列等の各種の情報を抽出する。係数個数記憶器1402は、復号化済ブロックの係数の個数を記憶する。係数個数復号化器1403は、復号化済ブロックの係数の個数を参照することによって係数の個数の符号列を復号化する。
係数値復号化器1404は、係数個数復号化器1403によって復号化された係数の個数を用いて係数の値の符号列を復号化する。逆量子化器1405は、復号化された係数に対して逆量子化を行う。逆直交変換器1406は、逆量子化されたデータに対して逆直交変換を行い、予測残差画像データに変換する。
画面間予測復号器1408は、復号化対象とするマクロブロックが画面間予測によって符号化されている場合、符号列解析器1401によって抽出された動きベクトル、および復号化済みピクチャ等に基づいて動き補償画像データを生成する。加算演算器1411は、逆直交変換器1406より入力された予測残差画像データと、画面間予測復号器1408より入力された動き補償画像データとを加算し、復号化画像データを生成する。フレームメモリ1407は、生成された復号化画像データを格納する。
画面内予測復号器1409は、復号化対象とするマクロブロックが画面内予測によって符号化されている場合、周辺の復号化済ブロックの情報を用いて画面内予測を行い、復号化画像データを生成する。
次に、上記のように構成された画像復号化装置の動作について説明する。
まず、符号列は符号列解析器1401へ入力される。符号列解析器1401は、入力された符号列から動きベクトルおよび係数の個数の符号列および係数の値の符号列等の各種の情報を抽出する。そして、符号列解析器1401は、動きベクトルを画面間予測復号器1408へ、係数の個数の符号列を係数個数復号化器1403へ、係数の値の符号列を係数値復号化器1404へそれぞれ出力する。
係数の個数の符号列が入力された係数個数復号化器1403は、この符号列をブロック単位の0以外の値を持つ係数の個数として復号化する。このとき、係数個数復号化器1403は、係数個数記憶器1402に保存されている復号化済ブロックの係数の個数を参照することによって後に説明する方法によって係数の個数の復号化を行う。次に、係数値復号化器1404は、係数個数復号化器1403によって得られた係数の個数情報を用いて可変長復号化に必要なコードテーブルおよびVLCテーブルを切り替えて参照することにより係数の値そのものの復号化を行う。得られた係数は、逆量子化器1405および逆直交変換器1406により予測残差画像データへ変換される。
復号化の対象とするマクロブロックが画面間予測によって符号化されている場合は、符号列解析器1401によって抽出された動きベクトルが画面間予測復号器1408に入力される。画面間予測復号器1408は、フレームメモリ1407に蓄積されている復号化済みのピクチャの復号化画像を参照ピクチャとすることにより動きベクトル情報に基づいて動き補償画像データを生成する。このようにして得られた動き補償画像データは、加算演算器1411において予測残差画像データと加算されることにより復号化画像データとして生成され、フレームメモリ1407に格納される。
一方、復号化の対象とするマクロブロックが画面内予測によって符号化されている場合は、画面内予測復号器1409において周辺の復号化済ブロックの情報を用いて画面内予測がなされ、復号化画像データが生成され、フレームメモリ1407に格納される。そして、最終的な出力画像としてフレームメモリ1407から表示時間順に出力される。
以上復号化の流れの概要を説明したが、係数個数復号化器1403が行う係数の個数の復号化処理について、図18から図21を用いてその詳細を説明する。
図18(a)は係数個数復号化器1403の内部構成を詳しく示すブロック図である。
なお、ここでは係数の個数の可変長復号化を行うために、VLCテーブルとコードテーブルという2つのテーブルを使用する例を示している。このVLCテーブルとは符号列中の可変長符号をコード番号に変換するために使用されるテーブルであり、コードテーブルとはVLCテーブルによって得られたコード番号を係数の個数に変換するために使用されるテーブルである。
係数個数復号化器1403は、図18(a)に示すように予測値算出器1501、コードテーブル記憶器1502、コードテーブル選択器1503、VLCテーブル選択器1504、VLCテーブル記憶器1505、および係数個数復号化器1506を備えている。
まず、図17に示す係数個数記憶器1402から周辺に位置する復号化済ブロックの係数の個数が予測値算出器1501へ入力される。予測値算出器1501は、これらの値の平均値を取ることにより予測値を決定する。なお、予測値の決定方法として前記平均値の代わりに、符号化時の予測値算出方法に合わせて最大値または最小値または中央値のいずれかを用いることも可能である。このとき参照する復号化済ブロックは実施の形態1と同様に図4(a)に示された復号化対象のブロックXに対してBおよびCおよびDの位置関係にある3つのブロックを用いて表1に従って決定される。表1における○は復号化済ブロック、×は復号化が行われていないもしくはピクチャの外部もしくはスライスの外部に位置するために参照することができないブロックを意味している。なお、表1における○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。
コードテーブル選択器1503は、予測値算出器1501によって算出された予測値に応じて、コードテーブル記憶器1502が持つ複数のコードテーブルの中から実際に使用するコードテーブルを選択する。
表2はコードテーブル記憶器1502によって予め用意されている係数の個数とコード番号とを対応付けるコードテーブルの例である。なお、ここでは4種類のコードテーブルを用意しているが、テーブルの種類の数およびテーブルの値はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したテーブルと同じものを使用する。また、表3は予測値に基づいたコードテーブルの選択基準を示したものである。なお、表3における予測値の割り振り方または参照テーブルの項目はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したテーブルと同じものを使用する。
VLCテーブル選択器1504は、予測値算出器1501によって算出された予測値に応じて、VLCテーブル記憶器1505が持つ複数のVLCテーブルの中から実際に使用するVLCテーブルを選択する。
表4はVLCテーブル記憶器1505によって予め用意されている係数の個数とコード番号とを対応付けるVLCテーブルの例を示すものである。なお、ここでは4種類のVLCテーブルを用意しているが、テーブルの種類の数およびテーブルの値はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したテーブルと同じものを使用する。また、表5は予測値に基づいたVLCテーブルの選択基準を示したものである。なお、表5における予測値の割り振り方または参照テーブルの項目はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したテーブルと同じものを使用することが条件となっている。
係数個数復号化器1506は、上記の処理によって選択されたコードテーブルおよびVLCテーブルを参照して、入力された復号化対象ブロックの係数の個数の符号列に対し可変長復号化を行う。係数個数復号化器1506は、まずVLCテーブルを用いて係数の個数の符号列をコード番号に変換し、つぎにコードテーブルを用いてコード番号に対応する係数の個数の値に変換する。図19は予測値算出器1501によって算出された予測値が“6”で復号化対象ブロックの係数の個数の符号列が“0100”であった場合の復号化の例を示す模式図である。予測値が“6”であることから、コードテーブル選択器1503において表3および表2により図19に示すコードテーブル3が選択され、またVLCテーブル選択器1504において表5および表4により図19に示すVLCテーブル3が選択される。係数個数復号化器1506は、入力された符号列“0100”をVLCテーブル3によりコード番号“2”に変換し、さらにコードテーブル3により最終的な係数の個数“4”を決定する。
次に、係数個数記憶器1402が行う係数の個数の記憶処理について、その詳細を説明する。なお、実施の形態1の説明で用いた図6(a)を用いて説明するが、ここではB1〜B16の符号を付したブロックを含む太枠が復号化対象のマクロブロックを示し、斜線のブロックが復号化対象のマクロブロックに対する参照ブロックを示している。また、ブロックに付した符号の数字は、マクロブロック内での復号化順を示している。
係数個数記憶器1402は、例えば図6(a)に示す復号化対象のマクロブロックの処理を開始する時点において、係数個数復号化器1403によって復号化された係数の個数を、少なくとも復号化対象のマクロブロックに対して必要となる図6(a)に斜線で示した参照ブロックについて記憶している。すなわち、係数個数記憶器1402は、順次処理される復号化対象のマクロブロックのブロック(B1、B2、B3、…B16)に対して検出された係数の個数を記憶する。例えば、復号化対象ブロックがブロックB6である場合、係数個数記憶器1402は、図6(a)に示す参照ブロックに加えて既に処理されたブロックB1、B2、B3、B4、B5の各係数の個数を記憶している。そして、係数個数記憶器1402は、係数個数復号化器1403によりブロックB6の係数の個数が復号化されると、このブロックB6の係数の個数を記憶する。このように係数個数記憶器1402は、順次処理される復号化対象のマクロブロックのブロック(B1、B2、B3、…)に対して復号化された係数の個数を記憶する。
そして、例えば復号化対象のマクロブロックが図2(b)に示すマクロブロックMB11である場合、このマクロブロックMB11の処理が終了し、次のマクロブロックMB12へ処理が移る際に、係数個数記憶器1402は、図7(a)に示すようにマクロブロックMB11の下列と右列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。次に、マクロブロックMB12の処理が終了し、その次のマクロブロックMB13へ処理が移る際に、係数個数記憶器1402は、同様にマクロブロックMB12の下列と右列のブロックの係数の個数を少なくとも保持しておくとともに、図7(b)に示すようにマクロブロックMB11の下列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
また、例えば復号化対象のマクロブロックが図2(b)に示すマクロブロックMB9のようにピクチャの右端に位置する場合、このマクロブロックMB9の処理が終了し、次のマクロブロックMB10へ処理が移る際に、係数個数記憶器1402は、図7(b)に示すようにマクロブロックMB9の下列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
また、例えば復号化対象のマクロブロックが図2(b)に示すマクロブロックMBmのようにピクチャの下端に位置する場合、このマクロブロックMBmの処理が終了し、次のマクロブロックMBnへ処理が移る際に、係数個数記憶器1402は、図7(c)に示すようにマクロブロックMBmの右列のブロック(斜線のブロック)の係数の個数を少なくとも保持しておく。
このように係数個数記憶器1402は、参照されるブロックに対する係数の個数を保持しておく。なお、上記説明において保持しておくとしたブロック以外の係数の個数の情報は、参照されることがなくなった後であれば任意のタイミングで削除することが可能である。例えば、次のマクロブロックへ処理が移る際に削除することも、もしくはマクロブロックの処理途中で削除することも可能である。また、参照されることのなくなったブロックに対する係数の個数は必ずしも削除するという処理を必要としない。例えば、係数個数記憶器1402は、参照されることのなくなったブロックに対する係数の個数を不要であると認識し、必要に応じて上書きするようにしても構わない。
なお、上記説明では、係数個数記憶器1402において復号化済みブロックの係数を記憶しておくことによって参照することを可能としているが、係数の個数の値そのものではなく、例えば、空間周波数成分を示すブロックの係数の値を記憶しておくことにより、必要に応じて係数の個数を算出するような構成を用いることも可能である。
以上のように本実施の形態では、復号化済の周辺ブロックの係数の個数から予測値を算出し、その予測値に応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の個数を復号化することができる。
また、上記のように予測値に応じてコードテーブルを切り替えて参照することにより、係数の個数の出現確率が最も高い位置の変動に対応することができる。一方、予測値に応じてVLCテーブルを切り替えて参照することにより、係数の個数の出現確率の分散の大きさに対応することができる。
なお、予測値算出器1501において参照するブロックとして、図4(a)に示すような3つの周辺ブロックの代わりに図4(b)に示すように復号化対象のブロックXに対してブロックBおよびDの位置関係にある2つのブロックのみを用いることも可能である。このときブロックBおよびDの位置関係にある2つのブロックの中で、復号化されていないもしくはピクチャの外部もしくはスライスの外部に位置するブロックが発生した場合は、表6のように参照ブロックの変更がなされる。表6における○は表1と同様に復号化済ブロック、×は復号化が行われていないもしくはピクチャの外部もしくはスライスの外部に位置するために参照することができないブロックを意味している。なお、表6の○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。ただし、この値は符号化時に使用したものと同じ値を使用する。この場合、係数個数記憶器1402は、係数個数復号化器1403によって復号化された係数の個数を、少なくとも復号化対象のマクロブロックに対して必要となる図6(b)に示す参照ブロックについて記憶していればよい。
なお、予測値算出器1501において予測値を算出する方法として、平均値または最大値または最小値または中央値のいずれかに固定するのではなく、例えばその中から最適なものをシーケンスまたはGOPまたはピクチャまたはスライスごとに選択することも可能である。この場合、符号列のシーケンスまたはピクチャまたはスライスのヘッダ領域に記述されている算出方法を識別するための信号を復号化することにより算出方法を決定する。なお、スライスとは1つのピクチャを複数の領域に分けたものを示し、例えばマクロブロック単位で横方向に1列分の領域などがこれにあたる。
なお、予測値算出器1501において予測値を算出する方法として、例えば平均値または最大値または最小値または中央値のいずれかを復号化済の参照ブロックの係数の個数の平均値によって選択することも可能である。表7はその選択基準を示したものである。なお、表7における平均値の割り振り方または予測値算出方法の項目はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したものと同じものを使用する。
なお、本実施の形態では、係数個数復号化器1403において係数の個数の値そのものに対して可変長符号化がなされている符号列の復号化処理方法を示したものであるが、予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行うことも可能である。その場合は図18(b)に示すように予測値算出器1501によって算出された予測値と係数個数復号化器1506によって復号化された係数の個数の差分値とを加算演算器1507において加算することにより係数の個数を決定する。
また、本実施の形態では、係数個数復号化器1403においてコードテーブルおよびVLCテーブルの両者を周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長復号化を行っているが、それらのどちらか一方を切り替えずに固定して使用することも可能である。その場合はある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用意することにより実現可能である。図20(a)はコードテーブルのみを固定して係数の個数の可変長復号化を行う場合の係数個数復号化器1403の構成を示すブロック図である。また、図20(b)はVLCテーブルのみを固定して係数の個数の可変長復号化を行う場合の係数個数復号化器1403の構成を示すブロック図である。コードテーブルのみを固定するその場合は、図20(a)に示すように係数個数復号化器1403は、図18(a)に示すコードテーブル記憶器1502およびコードテーブル選択器1503に代えてコードテーブル記憶器1601を備えている。このコードテーブル記憶器1601は、1種類のコードテーブルを有している。そして、係数個数復号化器1506は、まずVLCテーブル選択器1504により選択されたVLCテーブルを用いて可変長符号をコード番号に変換し、つぎにコードテーブル記憶器1601が有しているコードテーブルを用いてコード番号を係数の個数に変換する。
一方、VLCテーブルのみを固定する場合、図20(b)に示すように係数個数復号化器1403は、図18(a)に示すVLCテーブル記憶器1505およびVLCテーブル選択器1504に代えてVLCテーブル記憶器1602を備えている。このVLCテーブル記憶器1602は、1種類のVLCテーブルを有している。そして、係数個数復号化器1506は、まずVLCテーブル記憶器1602が有しているVLCテーブルを用いて可変長符号をコード番号に変換し、つぎにコードテーブル選択器1503により選択されたコードテーブルを用いてコード番号を係数の個数に変換する。
このようにコードテーブルまたはVLCテーブルのどちらか一方を切り替えずに固定して使用することにより、複数のテーブルを記憶しておくためのメモリ容量を減らすことが可能となる。
また、係数個数復号化器1403において、コードテーブルを用いずにVLCテーブルのみを周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長復号化を行うことも可能である。図20(c)はコードテーブルを用いずにVLCテーブルのみを用いて係数の個数の可変長復号化を行う場合の係数個数復号化器1403の構成を示すブロック図である。この場合、図20(c)に示すように係数個数復号化器1403は、図18(a)に示すコードテーブル記憶器1502およびコードテーブル選択器1503は備えていない。係数個数復号化器1403では、予測値算出器1501によって算出された予測値に基づいてVLCテーブル選択器1603が、VLCテーブル記憶器1604の有する複数のVLCテーブルの中から実際に使用するVLCテーブルを選択する。そして、係数個数復号化器1506は、上記のようにコードテーブルを用いて係数の個数をコード番号に変換することなく、直接、VLCテーブルを用いて可変長符号を係数の個数に変換する。なお、この場合に表4で示すVLCテーブルの例では、コード番号となっている部分が係数の個数値となる。
また、係数個数復号化器1403において、係数の個数の値の代わりに予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行う場合に対しても同様に扱うことが可能である。図21はその例としてコードテーブルおよびVLCテーブルの両者を固定して予測値と係数の個数との差分値に対して可変長復号化を行う場合の係数個数復号化器1403の構成を示すブロック図である。この場合、図21に示すように係数個数復号化器1403は、図18(a)に示すコードテーブル記憶器1502およびコードテーブル選択器1503に代えてコードテーブル記憶器1601を、VLCテーブル記憶器1505およびVLCテーブル選択器1504に代えてVLCテーブル記憶器1602を備えている。このコードテーブル記憶器1601は1種類のコードテーブルを、VLCテーブル記憶器1602は1種類のVLCテーブルを有している。そして、係数個数復号化器1506は、まずVLCテーブル記憶器1602が有しているVLCテーブルを用いて可変長符号をコード番号に変換し、つぎにコードテーブル記憶器1601が有しているコードテーブルを用いてコード番号を予測値と係数の個数との差分値に変換する。さらに加算演算器1507によって前記差分値と予測値とを加算することにより、係数の個数を算出する。
(実施の形態7)
本実施の形態における画像復号化装置の構成および復号化処理の概要は、図17に示す係数個数復号化器1403を除き実施の形態6と全く同等である。ここでは、この係数個数復号化器1403において実施の形態7でなされる係数の個数の可変長復号化処理について、図11および図22を用いてその詳細を説明する。なお、実施の形態2の画像符号化装置で生成された符号列が入力されるものとする。
図22(a)は係数個数復号化器1403の内部構成を詳しく示すブロック図である。
図22(a)に示すように係数個数復号化器1403は、図18(a)に示すコードテーブル記憶器1502およびコードテーブル選択器1503に代えてコードテーブル生成器1901を備えている。コードテーブル生成器1901には、図17に示す係数個数記憶器1402から復号化済ブロックの係数の個数が入力される。コードテーブル生成器1901は、係数の個数の値ごとにそれと等しい係数の個数を持つ復号化済みのブロックが幾つあるかをカウントし、その統計量に基づいて発生頻度が最も高かった係数の個数から順にコード番号を割り当て、コードテーブルを作成する。図11(a)は統計の対象とする復号化済ブロックの位置を表す模式図である。ここで、P1およびP3およびP4は画面間予測復号化を行うピクチャであり、I2は画面内予測復号化を行うピクチャである。現在復号化の対象としているブロックがP3に属しているとすると、同じ方式によって復号化された直前のピクチャであるP1の全てのブロックが統計の対象となる。なお、図11(b)のように現在復号化の対象となっているピクチャ内にある復号化済ブロックも含めた1ピクチャ分のブロックを統計の対象とする場合も同様に扱うことが可能である。また、統計の対象とすることのできる1ピクチャ分の復号化済ブロックが存在しない場合は、初期状態のコードテーブルとして0からの昇順で与えられるテーブルを使用する。なお、ここでは1ピクチャ分のブロックを統計対象としているが、母数としてそれ以外のブロックの個数を用いた場合も同様に扱うことが可能である。ただし、この場合符号化時に使用した個数と同じものを使用する。なお、図11(a)に示すような参照を行って上記コードテーブルの生成を行う場合は、対象のピクチャの復号化を開始する際に1度だけテーブルの生成を行うだけでよい。
一方、予測値算出器1501には、周辺に位置する復号化済ブロックの係数の個数が入力される。予測値算出器1501は、これらの値を基に実施の形態6と同様に平均値を取ることにより予測値を決定する。なお、予測値の決定方法として前記平均値の代わりに最大値または最小値または中央値のいずれかを用いることも可能である。このとき参照する復号化済ブロックは実施の形態6と同様に図4(a)に示された復号化対象のブロックXに対してBおよびCおよびDの位置関係にある3つのブロックを用いて表1に従って決定される。なお、表1における○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。ただし、この値は符号化時に使用したものと同じ値を使用する。
予測値算出器1501によって算出された予測値は、VLCテーブル選択器1504においてのみ用いられる。VLCテーブル選択器1504、この予測値に応じて、VLCテーブル記憶器1505に実施の形態6と同様に表4に示すような予め用意された複数のVLCテーブルの中から表5に示すような選択基準に従って係数の個数の復号化に使用するVLCテーブルを選択する。
係数個数復号化器1506は、コードテーブル生成器1901によって生成されたコードテーブルおよびVLCテーブル選択器1504によって選択されたVLCテーブルを参照して、実施の形態6と同様に入力された係数の個数の符号列に対し可変長復号化を行う。
以上のように本実施の形態では、復号化済ブロックの係数の個数の統計を取ることによりコードテーブルを作成し、さらに復号化済ブロックの係数の個数から算出された予測値に応じてVLCテーブルを決定し、その両者を参照することにより係数の個数の復号化を行うことができる。
なお、実施の形態6と同様に予測値算出器1501において参照する復号化済ブロックは、図4(a)のような3つの周辺ブロックの代わりに図4(b)のように復号化対象のブロックXに対してBおよびDの位置関係にある2つのブロックのみを用いて表6に従って決定することも可能である。また、表6における○×および参照ブロックの項目はこれ以外を用いた場合でも同様に扱うことが可能である。なお、参照ブロックがなしと判断された場合は0もしくはその他の任意の値を直接予測値として与える。ただし、この値は符号化時に使用したものと同じ値を使用する。
また、実施の形態6と同様に予測値算出器1501において予測値を算出する方法として、平均値または最大値または最小値または中央値のいずれかに固定するのではなく、例えばその中から最適なものをシーケンスまたはGOPまたはピクチャまたはスライスごとに選択することも可能である。この場合、符号列のシーケンスまたはGOPまたはピクチャまたはスライスのヘッダ領域に記述されている算出方法を識別するための信号を復号化することにより算出方法を決定する。
また、実施の形態6と同様に予測値算出器1501において予測値を算出する方法として、例えば平均値または最大値または最小値または中央値のいずれかを復号化済の参照ブロックの係数の個数の平均値によって選択することも可能である。表7はその選択基準を示したものであるが、ここでの平均値の割り振り方または予測値算出方法の項目はこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したものと同じものを使用する。
また、本実施の形態では、係数の個数の値そのものに対して可変長符号化がなされている符号列の復号化処理方法を示したものであるが、予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行うことも可能である。その場合は図22(b)に示すように予測値算出器1501による予測値と係数個数復号化器1506によって復号化された係数の個数の差分値とを加算演算器1507において加算することにより係数の個数を決定する。
また、上記実施の形態では、係数個数復号化器1403においてVLCテーブルを周辺ブロックの係数の個数に基づく予測値によって切り替えて可変長復号化を行っているが、実施の形態6と同様にVLCテーブルを切り替えずに固定して使用することも可能である。その場合はVLCテーブル選択器を用いる代わりにある1種類のVLCテーブルを持ったVLCテーブル記憶器のみを用いることにより実現可能である。
(実施の形態8)
本実施の形態における画像復号化装置の構成および復号化処理の概要は、図17に示す係数個数復号化器1403を除き実施の形態6と全く同等である。ここでは、この係数個数復号化器1403において実施の形態8でなされる係数の個数の可変長復号化処理について、図23および表8から表9を用いてその詳細を説明する。なお、実施の形態3の画像符号化装置で生成された符号列が入力されるものとする。
図23(a)は係数個数復号化器1403の内部構成を詳しく示すブロック図である。
図23(a)に示すように係数個数復号化器1403は、図18(a)に示す予測値算出器1501を備えていない。これにより、コードテーブル選択器2001およびVLCテーブル選択器2002は、実施の形態6とは異なり予測値を使用することなく直接復号化済ブロックの係数の個数を使用することによって実際に使用するテーブルを選択する。このとき参照する復号化済ブロックは図4(b)に示すように復号化対象のブロックXに対しB(上)およびD(左)の位置関係にある2つのみを用いる。ただし、上および左に位置するブロックが復号化されていないもしくはピクチャの外部もしくはスライスの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。ただし、この値は符号化時に使用したものと同じ値を使用する。
表8はコードテーブル選択器2001におけるコードテーブルの選択方法を示したものである。コードテーブル選択器2001は、表8に示すように復号化対象ブロックの上および左に位置するブロックの係数の個数それぞれを値に応じて2つのグループに分類し、それによって形成される4つの組み合わせによってコードテーブルを選択する。なお、表8における上および左ブロックの係数の個数を分類する方法およびコードテーブルの割り当て方についてはこれ以外のものを使用した場合も同様に扱うことができる。ただし、この場合符号化時に使用したものと同じものを使用する。また、VLCテーブル選択器2002は、コードテーブル選択器2001の場合と同様に表9に示すような選択方法を用いて実際に参照するVLCテーブルを選択する。
係数個数復号化器1506は、コードテーブル選択器2001によって選択されたコードテーブルおよびVLCテーブル選択器2002によって選択されたVLCテーブルを参照して、実施の形態6と同様に入力された復号化対象ブロックの係数の個数の可変長復号化を行う。
以上のように本実施の形態では、復号化対象ブロックの上および左に位置する復号化済ブロックの係数の個数を値に応じてN個のグループに分類し、そのときに形成されるN×N通りの組み合わせに応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の個数の復号化を行うことができる。
なお、本実施の形態では、係数の個数の値そのものに対して可変長符号化がなされている符号列の復号化処理方法を示したものであるが、予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行うことも可能である。その場合は図23(b)に示すように予測値算出器1501による予測値と係数個数復号化器1506によって復号化された係数の個数の差分値とを加算演算器1507において加算することにより係数の個数を決定する。
また、上記実施の形態では、係数個数復号化器1403においてコードテーブルおよびVLCテーブルの両者を周辺ブロックの係数の個数によって切り替えて可変長復号化を行っているが、実施の形態6と同様に、それらのどちらか一方を切り替えずに固定して使用することも可能である。その場合はテーブル選択器を用いる代わりにある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用いることにより実現可能である。さらに、実施の形態6と同様に、コードテーブルを用いずにVLCテーブルのみを周辺ブロックの係数の個数によって切り替えて可変長復号化を行うことも可能である。
(実施の形態9)
本実施の形態における画像復号化装置の構成および復号化処理の概要は、図17に示す係数個数復号化器1403を除き実施の形態6と全く同等である。ここでは、この係数個数復号化器1403において実施の形態9でなされる係数の個数の可変長復号化処理について、図24および図14を用いてその詳細を説明する。なお、実施の形態4の画像符号化装置で生成された符号列が入力されるものとする。
図24(a)は係数個数復号化器1403の内部構成を詳しく示すブロック図である。
図24(a)に示すように係数個数復号化器1403は、図18(a)に示す予測値算出器1501、コードテーブル選択器1503、およびVLCテーブル選択器1504に代えてテーブル選択器2101を備えている。テーブル選択器2101は、実施の形態6とは異なり予測値を使用することなく直接復号化済ブロックの係数の個数を使用し、コードテーブルおよびVLCテーブルの両者を同時に評価することによって実際に使用するテーブルを選択する。このとき参照する復号化済ブロックは図4(a)にあるように復号化対象のブロックXに対してBおよびCおよびDの位置関係にある3つのブロックを用いる。ただし、これらに位置するブロックが復号化されていないもしくはピクチャの外部もしくはスライスの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。ただし、この値は符号化時に使用したものと同じ値を使用する。
テーブル選択器2101は、図14に示すように実施の形態4と同様にしてコードテーブルおよびVLCテーブルを同時に用いて参照ブロックの係数の個数を符号化した結果生成される符号列の長さの和を算出し、それを評価値とする。そして、テーブル選択器2101は、コードテーブル記憶器1502およびVLCテーブル記憶器1505が有する全てのコードテーブルおよびVLCテーブルの組み合わせに対してこの処理を行い、得られた評価値が最も小さくなるコードテーブルおよびVLCテーブルの組み合わせを選択する。
係数個数復号化器1506は、テーブル選択器2101によって選択されたコードテーブルおよびVLCテーブルを参照して、実施の形態6と同様に入力された復号化対象ブロックの係数の個数の可変長復号化を行う。
以上のように本実施の形態では、復号化済の周辺ブロックの係数の個数に対してコードテーブルおよびVLCテーブルを用いて符号化を行い、そのときの符号列の長さの和を評価値とし、これが最小となる組み合わせのコードテーブルおよびVLCテーブルを参照することにより、係数の個数の復号化を行うことができる。
なお、実施の形態6と同様にテーブル選択器2101において参照する復号化済ブロックは、図4(a)のような3つの周辺ブロックの代わりに図4(b)のように復号化対象のブロックXに対してBおよびDの位置関係にある2つのみを用いても同様に扱うことが可能である。ただし、これらに位置するブロックが復号化されていないもしくはピクチャの外部であった場合は係数の個数として0もしくはその他の任意の値を代用する。ただし、この値は符号化時に使用したものと同じ値を使用する。
また、本実施の形態では、係数の個数の値そのものに対して可変長符号化がなされている符号列の復号化処理方法を示したものであるが、予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行うことも可能である。その場合は図24(b)に示すように予測値算出器1501による予測値と係数個数復号化器1506によって復号化された係数の個数の差分値とを加算演算器1507において加算することにより係数の個数を決定する。
また、本実施の形態では、係数個数復号化器1403においてコードテーブルおよびVLCテーブルを切り替える対象としているが、それらの一方を切り替えずに固定して使用することも可能である。
(実施の形態10)
本実施の形態における画像復号化装置の構成および復号化処理の概要は、図17に示す係数個数復号化器1403を除き実施の形態6と全く同等である。本実施の形態では、係数個数復号化器1403において参照する情報として実施の形態6における復号化済ブロックの係数の個数の代わりに画面間予測復号化の場合は画面間予測モードを、また画面内予測復号化の場合は画面内予測モードを用いる。なお、実施の形態5の画像符号化装置で生成された符号列が入力されるものとする。
ここでは、図17に示す係数個数復号化器1403においてなされる係数の個数の可変長復号化処理について、図25を用いてその詳細を説明する。
図25は係数個数復号化器1403の内部構成を詳しく示すブロック図である。
図25に示すように係数個数復号化器1403は、図18(a)に示す予測値算出器1501を備えていない。画面間予測復号化の場合は画面間予測モードが、また画面内予測復号化の場合は画面内予測モードが、符号列解析器1401よりコードテーブル選択器2201およびVLCテーブル選択器2202に入力される。これにより、コードテーブル選択器2201は、画面間予測符号化の場合は画面間予測モードに、また画面内予測符号化の場合は画面内予測モードに基づいて使用するテーブルを選択する。表10はコードテーブル選択器2201におけるコードテーブルの選択方法を示したものである。
例えば、復号化対象ピクチャが画面間予測によって復号化される場合、対象のブロックが8x8のサイズの予測が選択されると、それに伴って係数の個数を可変長復号化するためのコードテーブルとして2番のテーブルが選択されることになる。なお、表10の各項目についてはこれ以外のものを使用した場合も同様に扱うことができる。ただし、符号化時に使用したものと同じものを使用する。
また、VLCテーブル選択器2202は、コードテーブル選択器2201の場合と同様に表11に示すような選択方法を用いて実際に参照するVLCテーブルを選択する。
係数個数復号化器1506は、コードテーブル選択器2201によって選択されたコードテーブルおよびVLCテーブル選択器2202によって選択されたVLCテーブルを参照して、実施の形態6と同様に入力された復号化対象ブロックの係数の個数の可変長復号化を行う。
以上のように本実施の形態では、復号化の対象としているブロックが画面間予測復号化の場合は画面間予測モードに、また画面内予測復号化の場合は画面内予測モードに応じてコードテーブルおよびVLCテーブルを適応的に切り替えて参照することにより、係数の個数の復号化を行うことができる。
なお、本実施の形態では、係数の個数の値そのものに対して可変長符号化がなされている符号列の復号化処理方法を示したものであるが、予測値と係数の個数との差分値に対して可変長符号化がなされている符号列の復号化を行うことも可能である。その場合は実施の形態6と同様に符号化済の周辺ブロックの係数の個数を用いて予測値を決定し、その値と係数個数復号化器1506によって復号化された係数の個数の差分値とを加算することにより係数の個数を決定する。
また、本実施の形態では、係数個数復号化器1403においてコードテーブルおよびVLCテーブルの両者を切り替えて可変長復号化を行っているが、実施の形態6と同様に、それらの一方もしくは両者を切り替えずに固定して使用することも可能である。その場合はある1種類のコードテーブルもしくはVLCテーブルを持った記憶器のみを用意することにより実現可能である。
(実施の形態11)
さらに、上記各実施の形態で示した符号化処理および復号化処理の構成を実現するための符号化および復号化プログラムを、フレキシブルディスク等のデータ記憶媒体に記録するようにすることにより、上記各実施の形態で示した処理を、独立したコンピュータシステムにおいて簡単に実施することが可能となる。
図26は、上記実施の形態1から10の符号化あるいは復号化処理を、上記符号化および復号化プログラムを格納したフレキシブルディスクを用いて、コンピュータシステムにより実施する場合を説明するための図である。
図26(b)は、フレキシブルディスクの正面からみた外観、断面構造、及びフレキシブルディスクを示し、図26(a)は、記録媒体本体であるフレキシブルディスクの物理フォーマットの例を示している。フレキシブルディスクFDはケースF内に内蔵され、該ディスクの表面には、同心円状に外周からは内周に向かって複数のトラックTrが形成され、各トラックは角度方向に16のセクタSeに分割されている。従って、上記プログラムを格納したフレキシブルディスクでは、上記フレキシブルディスクFD上に割り当てられた領域に、上記プログラムとしてのデータが記録されている。
また、図26(c)は、フレキシブルディスクFDに上記プログラムの記録再生を行うための構成を示す。上記プログラムをフレキシブルディスクFDに記録する場合は、コンピュータシステムCsから上記プログラムとしてのデータをフレキシブルディスクドライブを介して書き込む。また、フレキシブルディスク内のプログラムにより上記符号化および復号化装置をコンピュータシステム中に構築する場合は、フレキシブルディスクドライブによりプログラムをフレキシブルディスクから読み出し、コンピュータシステムに転送する。
なお、上記説明では、データ記録媒体としてフレキシブルディスクを用いて説明を行ったが、光ディスクを用いても同様に行うことができる。また、記録媒体はこれに限らず、ICカード、ROMカセット等、プログラムを記録できるものであれば同様に実施することができる。
さらにここで、上記実施の形態で示した画像符号化方法や画像復号化方法の応用例とそれを用いたシステムを説明する。
図27は、コンテンツ配信サービスを実現するコンテンツ供給システムex100の全体構成を示すブロック図である。通信サービスの提供エリアを所望の大きさに分割し、各セル内にそれぞれ固定無線局である基地局ex107〜ex110が設置されている。
このコンテンツ供給システムex100は、例えば、インターネットex101にインターネットサービスプロバイダex102および電話網ex104、および基地局ex107〜ex110を介して、コンピュータex111、PDA(personal digital assistant)ex112、カメラex113、携帯電話ex114、カメラ付きの携帯電話ex115などの各機器が接続される。
しかし、コンテンツ供給システムex100は図27のような組合せに限定されず、いずれかを組み合わせて接続するようにしてもよい。また、固定無線局である基地局ex107〜ex110を介さずに、各機器が電話網ex104に直接接続されてもよい。
カメラex113はデジタルビデオカメラ等の動画撮影が可能な機器である。また、携帯電話は、PDC(Personal Digital Communications)方式、CDMA(Code Division Multiple Access)方式、W−CDMA(Wideband-Code Division Multiple Access)方式、若しくはGSM(Global System for Mobile Communications)方式の携帯電話機、またはPHS(Personal Handyphone System)等であり、いずれでも構わない。
また、ストリーミングサーバex103は、カメラex113から基地局ex109、電話網ex104を通じて接続されており、カメラex113を用いてユーザが送信する符号化処理されたデータに基づいたライブ配信等が可能になる。撮影したデータの符号化処理はカメラex113で行っても、データの送信処理をするサーバ等で行ってもよい。また、カメラex116で撮影した動画データはコンピュータex111を介してストリーミングサーバex103に送信されてもよい。カメラex116はデジタルカメラ等の静止画、動画が撮影可能な機器である。この場合、動画データの符号化はカメラex116で行ってもコンピュータex111で行ってもどちらでもよい。また、符号化処理はコンピュータex111やカメラex116が有するLSIex117において処理することになる。なお、画像符号化・復号化用のソフトウェアをコンピュータex111等で読み取り可能な記録媒体である何らかの蓄積メディア(CD−ROM、フレキシブルディスク、ハードディスクなど)に組み込んでもよい。さらに、カメラ付きの携帯電話ex115で動画データを送信してもよい。このときの動画データは携帯電話ex115が有するLSIで符号化処理されたデータである。
このコンテンツ供給システムex100では、ユーザがカメラex113、カメラex116等で撮影しているコンテンツ(例えば、音楽ライブを撮影した映像等)を上記実施の形態同様に符号化処理してストリーミングサーバex103に送信する一方で、ストリーミングサーバex103は要求のあったクライアントに対して上記コンテンツをストリーム配信する。クライアントとしては、上記符号化処理されたデータを復号化することが可能な、コンピュータex111、PDAex112、カメラex113、携帯電話ex114等がある。このようにすることでコンテンツ供給システムex100は、符号化されたデータをクライアントにおいて受信して再生することができ、さらにクライアントにおいてリアルタイムで受信して復号化し、再生することにより、個人放送をも実現可能になるシステムである。
このシステムを構成する各機器の符号化、復号化には上記各実施の形態で示した画像符号化装置あるいは画像復号化装置を用いるようにすればよい。
その一例として携帯電話について説明する。
図28は、上記実施の形態で説明した画像符号化方法と画像復号化方法を用いた携帯電話ex115を示す図である。携帯電話ex115は、基地局ex110との間で電波を送受信するためのアンテナex201、CCDカメラ等の映像、静止画を撮ることが可能なカメラ部ex203、カメラ部ex203で撮影した映像、アンテナex201で受信した映像等が復号化されたデータを表示する液晶ディスプレイ等の表示部ex202、操作キーex204群から構成される本体部、音声出力をするためのスピーカ等の音声出力部ex208、音声入力をするためのマイク等の音声入力部ex205、撮影した動画もしくは静止画のデータ、受信したメールのデータ、動画のデータもしくは静止画のデータ等、符号化されたデータまたは復号化されたデータを保存するための記録メディアex207、携帯電話ex115に記録メディアex207を装着可能とするためのスロット部ex206を有している。記録メディアex207はSDカード等のプラスチックケース内に電気的に書換えや消去が可能な不揮発性メモリであるEEPROM(Electrically Erasable and Programmable Read Only Memory)の一種であるフラッシュメモリ素子を格納したものである。
さらに、携帯電話ex115について図29を用いて説明する。携帯電話ex115は表示部ex202及び操作キーex204を備えた本体部の各部を統括的に制御するようになされた主制御部ex311に対して、電源回路部ex310、操作入力制御部ex304、画像符号化部ex312、カメラインターフェース部ex303、LCD(Liquid Crystal Display)制御部ex302、画像復号化部ex309、多重分離部ex308、記録再生部ex307、変復調回路部ex306及び音声処理部ex305が同期バスex313を介して互いに接続されている。
電源回路部ex310は、ユーザの操作により終話及び電源キーがオン状態にされると、バッテリパックから各部に対して電力を供給することによりカメラ付ディジタル携帯電話ex115を動作可能な状態に起動する。
携帯電話ex115は、CPU、ROM及びRAM等でなる主制御部ex311の制御に基づいて、音声通話モード時に音声入力部ex205で集音した音声信号を音声処理部ex305によってディジタル音声データに変換し、これを変復調回路部ex306でスペクトラム拡散処理し、送受信回路部ex301でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex201を介して送信する。また携帯電話機ex115は、音声通話モード時にアンテナex201で受信した受信データを増幅して周波数変換処理及びアナログディジタル変換処理を施し、変復調回路部ex306でスペクトラム逆拡散処理し、音声処理部ex305によってアナログ音声データに変換した後、これを音声出力部ex208を介して出力する。
さらに、データ通信モード時に電子メールを送信する場合、本体部の操作キーex204の操作によって入力された電子メールのテキストデータは操作入力制御部ex304を介して主制御部ex311に送出される。主制御部ex311は、テキストデータを変復調回路部ex306でスペクトラム拡散処理し、送受信回路部ex301でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex201を介して基地局ex110へ送信する。
データ通信モード時に画像データを送信する場合、カメラ部ex203で撮像された画像データをカメラインターフェース部ex303を介して画像符号化部ex312に供給する。また、画像データを送信しない場合には、カメラ部ex203で撮像した画像データをカメラインターフェース部ex303及びLCD制御部ex302を介して表示部ex202に直接表示することも可能である。
画像符号化部ex312は、本願発明で説明した画像符号化装置を備えた構成であり、カメラ部ex203から供給された画像データを上記実施の形態で示した画像符号化装置に用いた符号化方法によって圧縮符号化することにより符号化画像データに変換し、これを多重分離部ex308に送出する。また、このとき同時に携帯電話機ex115は、カメラ部ex203で撮像中に音声入力部ex205で集音した音声を音声処理部ex305を介してディジタルの音声データとして多重分離部ex308に送出する。
多重分離部ex308は、画像符号化部ex312から供給された符号化画像データと音声処理部ex305から供給された音声データとを所定の方式で多重化し、その結果得られる多重化データを変復調回路部ex306でスペクトラム拡散処理し、送受信回路部ex301でディジタルアナログ変換処理及び周波数変換処理を施した後にアンテナex201を介して送信する。
データ通信モード時にホームページ等にリンクされた動画像ファイルのデータを受信する場合、アンテナex201を介して基地局ex110から受信した受信データを変復調回路部ex306でスペクトラム逆拡散処理し、その結果得られる多重化データを多重分離部ex308に送出する。
また、アンテナex201を介して受信された多重化データを復号化するには、多重分離部ex308は、多重化データを分離することにより画像データのビットストリームと音声データのビットストリームとに分け、同期バスex313を介して当該符号化画像データを画像復号化部ex309に供給すると共に当該音声データを音声処理部ex305に供給する。
次に、画像復号化部ex309は、本願発明で説明した画像復号化装置を備えた構成であり、画像データのビットストリームを上記実施の形態で示した符号化方法に対応した復号化方法で復号することにより再生動画像データを生成し、これをLCD制御部ex302を介して表示部ex202に供給し、これにより、例えばホームページにリンクされた動画像ファイルに含まれる動画データが表示される。このとき同時に音声処理部ex305は、音声データをアナログ音声データに変換した後、これを音声出力部ex208に供給し、これにより、例えばホームページにリンクされた動画像ファイルに含まる音声データが再生される。
なお、上記システムの例に限られず、最近は衛星、地上波によるディジタル放送が話題となっており、図30に示すようにディジタル放送用システムにも上記実施の形態の少なくとも画像符号化装置または画像復号化装置のいずれかを組み込むことができる。具体的には、放送局ex409では映像情報のビットストリームが電波を介して通信または放送衛星ex410に伝送される。これを受けた放送衛星ex410は、放送用の電波を発信し、この電波を衛星放送受信設備をもつ家庭のアンテナex406で受信し、テレビ(受信機)ex401またはセットトップボックス(STB)ex407などの装置によりビットストリームを復号化してこれを再生する。また、記録媒体であるCDやDVD等の蓄積メディアex402に記録したビットストリームを読み取り、復号化する再生装置ex403にも上記実施の形態で示した画像復号化装置を実装することが可能である。この場合、再生された映像信号はモニタex404に表示される。また、ケーブルテレビ用のケーブルex405または衛星/地上波放送のアンテナex406に接続されたセットトップボックスex407内に画像復号化装置を実装し、これをテレビのモニタex408で再生する構成も考えられる。このときセットトップボックスではなく、テレビ内に画像復号化装置を組み込んでも良い。また、アンテナex411を有する車ex412で衛星ex410からまたは基地局ex107等から信号を受信し、車ex412が有するカーナビゲーションex413等の表示装置に動画を再生することも可能である。
更に、画像信号を上記実施の形態で示した画像符号化装置で符号化し、記録媒体に記録することもできる。具体例としては、DVDディスクex421に画像信号を記録するDVDレコーダや、ハードディスクに記録するディスクレコーダなどのレコーダex420がある。更にSDカードex422に記録することもできる。レコーダex420が上記実施の形態で示した画像復号化装置を備えていれば、DVDディスクex421やSDカードex422に記録した画像信号を再生し、モニタex408で表示することができる。
なお、カーナビゲーションex413の構成は例えば図29に示す構成のうち、カメラ部ex203とカメラインターフェース部ex303、画像符号化部ex312を除いた構成が考えられ、同様なことがコンピュータex111やテレビ(受信機)ex401等でも考えられる。
また、上記携帯電話ex114等の端末は、符号化器・復号化器を両方持つ送受信型の端末の他に、符号化器のみの送信端末、復号化器のみの受信端末の3通りの実装形式が考えられる。
このように、上記実施の形態で示した画像符号化方法あるいは画像復号化方法を上述したいずれの機器・システムに用いることは可能であり、そうすることで、上記実施の形態で説明した効果を得ることができる。
また、本発明はかかる上記実施の形態に限定されるものではなく、本発明の範囲を逸脱することなく種々の変形または修正が可能である。
101 フレームメモリ
102 直交変換器
103 量子化器
104 逆量子化器
105 逆直交変換器
106 フレームメモリ
107 画面間予測器
108 画面内予測器
109 係数個数検出器
110 係数個数記憶器
111 係数個数符号化器
112 係数値符号化器
113 符号列生成器
114 スイッチ
115 スイッチ
116 差分演算器
117 加算演算器
201 予測値算出器
202 コードテーブル記憶器
203 コードテーブル選択器
204 VLCテーブル選択器
205 VLCテーブル記憶器
206 係数個数符号化器
207 差分演算器
301 コードテーブル記憶器
302 VLCテーブル記憶器
303 VLCテーブル選択器
304 VLCテーブル記憶器
701 コードテーブル生成器
901 コードテーブル選択器
902 VLCテーブル選択器
1001 テーブル選択器
1201 係数個数符号化器
1301 コードテーブル選択器
1302 VLCテーブル選択器
1401 符号列解析器
1402 係数個数記憶器
1403 係数個数復号化器
1404 係数値復号化器
1405 逆量子化器
1406 逆直交変換器
1407 フレームメモリ
1408 画面間予測復号器
1409 画面内予測復号器
1410 スイッチ
1411 加算演算器
1501 予測値算出器
1502 コードテーブル記憶器
1503 コードテーブル選択器
1504 VLCテーブル選択器
1505 VLCテーブル記憶器
1506 係数個数復号化器
1507 加算演算器
1601 コードテーブル記憶器
1602 VLCテーブル記憶器
1603 VLCテーブル選択器
1604 VLCテーブル記憶器
1901 コードテーブル生成器
2001 コードテーブル選択器
2002 VLCテーブル選択器
2101 テーブル選択器
2201 コードテーブル選択器
2202 VLCテーブル選択器
Se セクタ
Tr トラック
FD フレキシブルディスク
F フレキシブルディスクケース
Cs コンピュータシステム
FDD フレキシブルディスクドライブ

Claims (1)

  1. ブロック毎に空間周波数成分を示す係数に変換して符号化された画像を復号化する画像復号化方法であって、
    復号化対象ブロックの周辺に位置する復号化済ブロック中に含まれる係数の値が0以外の係数である非ゼロ係数の個数に基づいて、前記復号化対象ブロック中に含まれる非ゼロ係数の個数の予測値を導出する導出ステップと、
    前記導出ステップにより導出された前記予測値に基づいて可変長符号テーブルを選択する選択ステップと、
    前記選択ステップにより選択された前記可変長符号テーブルを用いて、前記復号化対象ブロック中に含まれる非ゼロ係数の個数が符号化されている符号列に対して可変長復号化を行う可変長復号化ステップと
    を含み、
    前記導出ステップでは、前記復号化対象ブロックの周辺に位置する復号化済ブロック中の各ブロックに含まれる非ゼロ係数の個数の中央値に基づいて予測値を導出する
    ことを特徴とする画像復号化方法。
JP2010242682A 2002-04-15 2010-10-28 画像復号化方法 Expired - Lifetime JP4653258B1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2010242682A JP4653258B1 (ja) 2002-04-15 2010-10-28 画像復号化方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002112665 2002-04-15
JP2010242682A JP4653258B1 (ja) 2002-04-15 2010-10-28 画像復号化方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2008241730A Division JP4982459B2 (ja) 2002-04-15 2008-09-19 画像復号化方法、画像復号化装置、画像符号化方法および画像符号化装置

Publications (2)

Publication Number Publication Date
JP4653258B1 JP4653258B1 (ja) 2011-03-16
JP2011061834A true JP2011061834A (ja) 2011-03-24

Family

ID=29243326

Family Applications (22)

Application Number Title Priority Date Filing Date
JP2003083683A Expired - Lifetime JP4130780B2 (ja) 2002-04-15 2003-03-25 画像符号化方法および画像復号化方法
JP2006082555A Expired - Lifetime JP4185106B2 (ja) 2002-04-15 2006-03-24 画像符号化方法および画像符号化装置
JP2008039437A Expired - Lifetime JP4185561B2 (ja) 2002-04-15 2008-02-20 画像符号化方法および画像符号化装置
JP2008039436A Expired - Lifetime JP4185560B2 (ja) 2002-04-15 2008-02-20 画像復号化方法および画像復号化装置
JP2008071085A Expired - Lifetime JP4185563B2 (ja) 2002-04-15 2008-03-19 画像符号化方法および画像符号化装置
JP2008071086A Expired - Lifetime JP4185564B2 (ja) 2002-04-15 2008-03-19 画像復号化方法および画像復号化装置
JP2008180637A Expired - Lifetime JP4191793B1 (ja) 2002-04-15 2008-07-10 受信装置
JP2008214032A Expired - Lifetime JP4382864B2 (ja) 2002-04-15 2008-08-22 画像復号化方法および画像復号化装置
JP2008241730A Expired - Lifetime JP4982459B2 (ja) 2002-04-15 2008-09-19 画像復号化方法、画像復号化装置、画像符号化方法および画像符号化装置
JP2009075226A Expired - Lifetime JP4465026B2 (ja) 2002-04-15 2009-03-25 画像復号化方法、画像復号化装置および画像復号化プログラム
JP2009278930A Expired - Lifetime JP4465036B2 (ja) 2002-04-15 2009-12-08 画像符号化方法、画像符号化装置および画像符号化プログラム
JP2009278929A Expired - Lifetime JP4465035B2 (ja) 2002-04-15 2009-12-08 画像符号化方法および画像符号化装置
JP2010100346A Expired - Lifetime JP5208156B2 (ja) 2002-04-15 2010-04-23 画像符号化・復号化装置
JP2010100347A Expired - Lifetime JP5208157B2 (ja) 2002-04-15 2010-04-23 復号化システム
JP2010176805A Expired - Lifetime JP4598159B2 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176803A Expired - Lifetime JP4628498B2 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176802A Expired - Lifetime JP4598158B1 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176804A Expired - Lifetime JP4628499B2 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010242682A Expired - Lifetime JP4653258B1 (ja) 2002-04-15 2010-10-28 画像復号化方法
JP2011053602A Expired - Lifetime JP4741716B1 (ja) 2002-04-15 2011-03-10 受信装置および受信方法
JP2012280193A Expired - Lifetime JP5485363B2 (ja) 2002-04-15 2012-12-21 画像符号化・復号化装置
JP2013266162A Expired - Lifetime JP5716082B2 (ja) 2002-04-15 2013-12-24 配信方法

Family Applications Before (18)

Application Number Title Priority Date Filing Date
JP2003083683A Expired - Lifetime JP4130780B2 (ja) 2002-04-15 2003-03-25 画像符号化方法および画像復号化方法
JP2006082555A Expired - Lifetime JP4185106B2 (ja) 2002-04-15 2006-03-24 画像符号化方法および画像符号化装置
JP2008039437A Expired - Lifetime JP4185561B2 (ja) 2002-04-15 2008-02-20 画像符号化方法および画像符号化装置
JP2008039436A Expired - Lifetime JP4185560B2 (ja) 2002-04-15 2008-02-20 画像復号化方法および画像復号化装置
JP2008071085A Expired - Lifetime JP4185563B2 (ja) 2002-04-15 2008-03-19 画像符号化方法および画像符号化装置
JP2008071086A Expired - Lifetime JP4185564B2 (ja) 2002-04-15 2008-03-19 画像復号化方法および画像復号化装置
JP2008180637A Expired - Lifetime JP4191793B1 (ja) 2002-04-15 2008-07-10 受信装置
JP2008214032A Expired - Lifetime JP4382864B2 (ja) 2002-04-15 2008-08-22 画像復号化方法および画像復号化装置
JP2008241730A Expired - Lifetime JP4982459B2 (ja) 2002-04-15 2008-09-19 画像復号化方法、画像復号化装置、画像符号化方法および画像符号化装置
JP2009075226A Expired - Lifetime JP4465026B2 (ja) 2002-04-15 2009-03-25 画像復号化方法、画像復号化装置および画像復号化プログラム
JP2009278930A Expired - Lifetime JP4465036B2 (ja) 2002-04-15 2009-12-08 画像符号化方法、画像符号化装置および画像符号化プログラム
JP2009278929A Expired - Lifetime JP4465035B2 (ja) 2002-04-15 2009-12-08 画像符号化方法および画像符号化装置
JP2010100346A Expired - Lifetime JP5208156B2 (ja) 2002-04-15 2010-04-23 画像符号化・復号化装置
JP2010100347A Expired - Lifetime JP5208157B2 (ja) 2002-04-15 2010-04-23 復号化システム
JP2010176805A Expired - Lifetime JP4598159B2 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176803A Expired - Lifetime JP4628498B2 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176802A Expired - Lifetime JP4598158B1 (ja) 2002-04-15 2010-08-05 画像復号化方法
JP2010176804A Expired - Lifetime JP4628499B2 (ja) 2002-04-15 2010-08-05 画像復号化方法

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2011053602A Expired - Lifetime JP4741716B1 (ja) 2002-04-15 2011-03-10 受信装置および受信方法
JP2012280193A Expired - Lifetime JP5485363B2 (ja) 2002-04-15 2012-12-21 画像符号化・復号化装置
JP2013266162A Expired - Lifetime JP5716082B2 (ja) 2002-04-15 2013-12-24 配信方法

Country Status (20)

Country Link
US (14) US7095896B2 (ja)
EP (15) EP2293577B1 (ja)
JP (22) JP4130780B2 (ja)
KR (14) KR101152507B1 (ja)
CN (7) CN100527841C (ja)
AT (13) ATE511733T1 (ja)
AU (1) AU2003227248B2 (ja)
BR (2) BRPI0303566B1 (ja)
CA (2) CA2444357C (ja)
CY (2) CY1111051T1 (ja)
DE (8) DE60311530T2 (ja)
DK (5) DK2131593T3 (ja)
ES (13) ES2329822T3 (ja)
HK (4) HK1136730A1 (ja)
MX (1) MXPA03010115A (ja)
MY (4) MY141699A (ja)
PT (6) PT2254340E (ja)
SI (1) SI1478188T1 (ja)
TW (4) TWI314838B (ja)
WO (1) WO2003088675A1 (ja)

Families Citing this family (81)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DK1413139T3 (da) * 2001-11-22 2011-11-21 Panasonic Corp Fremgangsmåde til kodning og dekodning med variabel længde
JP4130780B2 (ja) * 2002-04-15 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
CN1214649C (zh) * 2003-09-18 2005-08-10 中国科学院计算技术研究所 用于视频预测残差系数编码的熵编码方法
JP3879741B2 (ja) * 2004-02-25 2007-02-14 ソニー株式会社 画像情報符号化装置および画像情報符号化方法
US7376277B2 (en) * 2004-06-15 2008-05-20 Pegasus Imaging Corporation Data transform for improved compression of multicomponent images
US7477741B1 (en) * 2004-10-01 2009-01-13 The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration Analysis resistant cipher method and apparatus
US8633985B2 (en) * 2005-08-05 2014-01-21 Vigil Systems Pty. Ltd. Computerized information collection and training method and apparatus
US8599841B1 (en) 2006-03-28 2013-12-03 Nvidia Corporation Multi-format bitstream decoding engine
US8593469B2 (en) * 2006-03-29 2013-11-26 Nvidia Corporation Method and circuit for efficient caching of reference video data
KR100745765B1 (ko) * 2006-04-13 2007-08-02 삼성전자주식회사 화상 데이터의 공간상 예측 장치 및 방법과 그를 이용한부호화 장치 및 방법, 화상 데이터의 공간상 예측 보상장치 및 방법과 그를 이용한 복호화 장치 및 방법
US7884742B2 (en) * 2006-06-08 2011-02-08 Nvidia Corporation System and method for efficient compression of digital data
US20080056381A1 (en) * 2006-08-30 2008-03-06 Chih-Ta Star Sung Image compression and decompression with fast storage device accessing
EP2099210B1 (en) * 2006-11-24 2015-10-21 NEC Corporation Coding and decoding device, coding and decoding method and program
US7733249B2 (en) * 2007-01-18 2010-06-08 Qin Zhang Method and system of compressing and decompressing data
CA2679764C (en) 2007-03-14 2014-02-04 Nippon Telegraph And Telephone Corporation Quantization control method and apparatus, program therefor, and storage medium which stores the program
KR101083379B1 (ko) 2007-03-14 2011-11-14 니폰덴신뎅와 가부시키가이샤 움직임 벡터 탐색 방법 및 장치 그리고 프로그램을 기록한 기록매체
WO2008111458A1 (ja) 2007-03-14 2008-09-18 Nippon Telegraph And Telephone Corporation 符号化ビットレート制御方法及び装置、そのプログラム並びにプログラムを記録した記録媒体
KR101074870B1 (ko) 2007-03-14 2011-10-19 니폰덴신뎅와 가부시키가이샤 부호량 추정 방법, 장치, 그 프로그램 및 기록매체
US20080260023A1 (en) * 2007-04-18 2008-10-23 Chih-Ta Star Sung Digital video encoding and decoding with refernecing frame buffer compression
NO328295B1 (no) * 2007-12-20 2010-01-25 Tandberg Telecom As VLC-fremgangsmate og -innretning
US8213502B2 (en) * 2007-12-31 2012-07-03 Ceva D.S.P. Ltd. Method and system for real-time adaptive quantization control
CN101500159B (zh) * 2008-01-31 2012-01-11 华为技术有限公司 一种图像熵编码、熵解码的方法及装置
WO2009107777A1 (ja) * 2008-02-27 2009-09-03 株式会社 東芝 動画像符号化/復号装置
JP2010103969A (ja) * 2008-09-25 2010-05-06 Renesas Technology Corp 画像復号方法、画像復号装置、画像符号化方法及び画像符号化装置
KR101458471B1 (ko) 2008-10-01 2014-11-10 에스케이텔레콤 주식회사 영상 부호화/복호화 방법 및 장치
CN101742278B (zh) * 2008-11-12 2012-11-07 富士通半导体股份有限公司 获取图像的运动矢量和边界强度的方法和系统
JP2012124542A (ja) * 2009-03-03 2012-06-28 Hitachi Ltd 動画像符号化方法及び動画像復号化方法
JP5258664B2 (ja) * 2009-04-14 2013-08-07 株式会社エヌ・ティ・ティ・ドコモ 画像符号化装置、方法およびプログラム、並びに、画像復号装置、方法およびプログラム
EP2433367B1 (en) * 2009-05-19 2019-02-20 Nokia Technologies Oy Method for variable length coding and apparatus
US9628794B2 (en) 2009-06-18 2017-04-18 Kabushiki Kaisha Toshiba Video encoding apparatus and a video decoding apparatus
ES2850074T3 (es) * 2009-06-18 2021-08-25 Toshiba Kk Aparato de decodificación de vídeo y procedimiento de decodificación de vídeo
US20110158310A1 (en) * 2009-12-30 2011-06-30 Nvidia Corporation Decoding data using lookup tables
MX2012010863A (es) * 2010-04-01 2012-10-15 Sony Corp Dispositivo y metodo de procesamiento de imagenes.
KR102480988B1 (ko) 2010-04-13 2022-12-26 지이 비디오 컴프레션, 엘엘씨 샘플 영역 병합
CN102939750B (zh) 2010-04-13 2016-07-06 Ge视频压缩有限责任公司 跨平面预测
CN106231328B (zh) 2010-04-13 2020-06-12 Ge视频压缩有限责任公司 解码器、解码方法、编码器以及编码方法
LT3697089T (lt) 2010-04-13 2022-01-10 Ge Video Compression, Llc Paveldėjimas ėminių masyvo multimedžio poskaidinyje
US8638863B1 (en) * 2010-05-18 2014-01-28 Google Inc. Apparatus and method for filtering video using extended edge-detection
US8817882B2 (en) * 2010-07-30 2014-08-26 Qualcomm Incorporated Coding blocks of data using a generalized form of golomb codes
JP5064547B2 (ja) * 2010-09-15 2012-10-31 豊田合成株式会社 車両用放電装置
US9025661B2 (en) 2010-10-01 2015-05-05 Qualcomm Incorporated Indicating intra-prediction mode selection for video coding
JP5652101B2 (ja) * 2010-10-05 2015-01-14 富士通株式会社 画像処理装置及び画像処理方法
US8913662B2 (en) 2011-01-06 2014-12-16 Qualcomm Incorporated Indicating intra-prediction mode selection for video coding using CABAC
US9210442B2 (en) 2011-01-12 2015-12-08 Google Technology Holdings LLC Efficient transform unit representation
US9380319B2 (en) 2011-02-04 2016-06-28 Google Technology Holdings LLC Implicit transform unit representation
JP5801614B2 (ja) * 2011-06-09 2015-10-28 キヤノン株式会社 画像処理装置、画像処理方法
JP5839848B2 (ja) 2011-06-13 2016-01-06 キヤノン株式会社 画像処理装置、画像処理方法
CN105245892B (zh) * 2011-06-17 2017-03-29 Jvc建伍株式会社 图像解码装置、图像解码方法及接收装置、接收方法
TWI653880B (zh) * 2011-10-31 2019-03-11 日商Jvc建伍股份有限公司 動態影像編碼裝置及動態影像編碼方法
JP2013126093A (ja) * 2011-12-14 2013-06-24 Sony Corp 画像処理装置及び画像処理方法
TWI618401B (zh) * 2011-12-28 2018-03-11 Jvc Kenwood Corp Motion picture coding device, motion picture coding method and memory medium
JP5977544B2 (ja) * 2012-03-09 2016-08-24 キヤノン株式会社 情報処理装置、情報処理方法
JP5975685B2 (ja) 2012-03-09 2016-08-23 キヤノン株式会社 情報処理装置、情報処理方法
JP6000579B2 (ja) 2012-03-09 2016-09-28 キヤノン株式会社 情報処理装置、情報処理方法
US9219915B1 (en) 2013-01-17 2015-12-22 Google Inc. Selection of transform size in video coding
JP5547312B2 (ja) * 2013-02-07 2014-07-09 株式会社東芝 動画像復号化装置及び方法
JP5498597B2 (ja) * 2013-02-07 2014-05-21 株式会社東芝 動画像符号化装置及び方法
US9544597B1 (en) 2013-02-11 2017-01-10 Google Inc. Hybrid transform in video encoding and decoding
US9967559B1 (en) 2013-02-11 2018-05-08 Google Llc Motion vector dependent spatial transformation in video coding
US9674530B1 (en) 2013-04-30 2017-06-06 Google Inc. Hybrid transforms in video coding
WO2015109598A1 (en) * 2014-01-27 2015-07-30 Mediatek Singapore Pte. Ltd. Methods for motion parameter hole filling
US10477204B2 (en) * 2014-06-20 2019-11-12 Sharp Kabushiki Kaisha Harmonized palette coding
US9565451B1 (en) 2014-10-31 2017-02-07 Google Inc. Prediction dependent transform coding
JP6561644B2 (ja) * 2014-12-25 2019-08-21 オムロン株式会社 導光板、表示装置及び遊技機
US10171810B2 (en) 2015-06-22 2019-01-01 Cisco Technology, Inc. Transform coefficient coding using level-mode and run-mode
US9769499B2 (en) 2015-08-11 2017-09-19 Google Inc. Super-transform video coding
WO2017043763A1 (ko) * 2015-09-10 2017-03-16 삼성전자 주식회사 부호화 장치, 복호화 장치, 그 부호화 및 복호화 방법
US10277905B2 (en) 2015-09-14 2019-04-30 Google Llc Transform selection for non-baseband signal coding
US9807423B1 (en) 2015-11-24 2017-10-31 Google Inc. Hybrid transform scheme for video coding
WO2018030293A1 (ja) * 2016-08-10 2018-02-15 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 符号化装置、復号装置、符号化方法及び復号方法
JP6434172B2 (ja) * 2018-01-12 2018-12-05 マクセル株式会社 復号化方法
CN111869205B (zh) 2018-01-19 2022-06-10 Pcms控股公司 具有变化位置的多焦平面
MX2020009791A (es) 2018-03-23 2020-11-11 Pcms Holdings Inc Método basado en planos multifocales para producir puntos de vista estereoscópicos en un sistema de renderizado de imágenes basado en profundidad (mfp-dibr).
WO2020010018A1 (en) * 2018-07-05 2020-01-09 Pcms Holdings, Inc. Method and system for near-eye focal plane overlays for 3d perception of content on 2d displays
CN109360253B (zh) * 2018-09-28 2023-08-11 共享智能装备有限公司 一种大像素bmp格式图像的绘制方法
US10666985B1 (en) * 2018-11-18 2020-05-26 Sony Corporation Sub-block based entropy coding for image coding
US11122297B2 (en) 2019-05-03 2021-09-14 Google Llc Using border-aligned block functions for image compression
US11663730B2 (en) * 2021-02-19 2023-05-30 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for an improved camera system using a graded lens and filters to estimate depth
CN113436289B (zh) * 2021-08-04 2023-08-22 成都工业学院 一种基于方向向量相关系数的图像编码及分类方法
CN113678849B (zh) * 2021-08-15 2023-06-23 万杰智能科技股份有限公司 一种油条坯转送及拉长装置
CN117498873B (zh) * 2023-11-07 2024-03-29 东莞市杜氏诚发精密弹簧有限公司 一种血管栓塞弹簧组件智能加工系统

Family Cites Families (57)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4541012A (en) * 1982-01-04 1985-09-10 Compression Labs, Inc. Video bandwidth reduction system employing interframe block differencing and transform domain coding
US5010401A (en) 1988-08-11 1991-04-23 Mitsubishi Denki Kabushiki Kaisha Picture coding and decoding apparatus using vector quantization
JPH04100390A (ja) 1990-08-20 1992-04-02 Hitachi Ltd 高能率符号化方式
JP3207198B2 (ja) 1990-11-26 2001-09-10 株式会社東芝 液晶表示プロジェクタの冷却装置
JPH04223773A (ja) * 1990-12-26 1992-08-13 Casio Comput Co Ltd 符号化装置
EP0533195A2 (en) * 1991-09-20 1993-03-24 Sony Corporation Picture signal encoding and/or decoding apparatus
US5475501A (en) * 1991-09-30 1995-12-12 Sony Corporation Picture encoding and/or decoding method and apparatus
US5510840A (en) * 1991-12-27 1996-04-23 Sony Corporation Methods and devices for encoding and decoding frame signals and recording medium therefor
JP3016456B2 (ja) * 1992-06-15 2000-03-06 日本電信電話株式会社 適応的可変長符号化方法
US5842033A (en) * 1992-06-30 1998-11-24 Discovision Associates Padding apparatus for passing an arbitrary number of bits through a buffer in a pipeline system
JP3278948B2 (ja) * 1993-02-05 2002-04-30 日本電信電話株式会社 可変長符号化方法
KR940023248A (ko) * 1993-03-15 1994-10-22 오오가 노리오 화상 신호 부호화 방법 및 장치와, 화상 신호 복호화 방법 및 장치
JPH07107492A (ja) * 1993-10-04 1995-04-21 N T T Data Tsushin Kk 画像符号化方式
US5708659A (en) * 1993-10-20 1998-01-13 Lsi Logic Corporation Method for hashing in a packet network switching system
US5887187A (en) * 1993-10-20 1999-03-23 Lsi Logic Corporation Single chip network adapter apparatus
US5539663A (en) 1993-11-24 1996-07-23 Intel Corporation Process, apparatus and system for encoding and decoding video signals using temporal filtering
US5576765A (en) * 1994-03-17 1996-11-19 International Business Machines, Corporation Video decoder
US5500678A (en) * 1994-03-18 1996-03-19 At&T Corp. Optimized scanning of transform coefficients in video coding
US5563593A (en) * 1994-03-18 1996-10-08 Lucent Technologies Inc. Video coding with optimized low complexity variable length codes
TW393856B (en) 1994-09-07 2000-06-11 Ind Tech Res Inst Video compression method and device
JP4223571B2 (ja) * 1995-05-02 2009-02-12 ソニー株式会社 画像符号化方法及び装置
US5740283A (en) * 1995-07-06 1998-04-14 Rubin, Bednarek & Associates, Inc. Digital video compression utilizing mixed vector and scalar outputs
JP3484834B2 (ja) * 1995-07-28 2004-01-06 ソニー株式会社 データ符号化/復号化方法および装置
JPH0955935A (ja) * 1995-08-15 1997-02-25 Nippon Steel Corp 画像および音声符号化装置
JP3552811B2 (ja) * 1995-09-29 2004-08-11 三菱電機株式会社 ディジタル映像信号符号化装置および復号化装置
US5883678A (en) * 1995-09-29 1999-03-16 Kabushiki Kaisha Toshiba Video coding and video decoding apparatus for reducing an alpha-map signal at a controlled reduction ratio
US5777679A (en) * 1996-03-15 1998-07-07 International Business Machines Corporation Video decoder including polyphase fir horizontal filter
US5668599A (en) * 1996-03-19 1997-09-16 International Business Machines Corporation Memory management for an MPEG2 compliant decoder
JP2848326B2 (ja) * 1996-03-28 1999-01-20 日本電気株式会社 Mpeg符号化画像復号装置
EP1085763B1 (en) 1996-05-28 2003-01-22 Matsushita Electric Industrial Co., Ltd. Image predictive coding apparatus and method.
JPH1023425A (ja) * 1996-07-01 1998-01-23 Sony Corp 画像符号化装置および方法、画像復号化装置および方法、並びに画像記録媒体
US6341144B1 (en) * 1996-09-20 2002-01-22 At&T Corp. Video coder providing implicit coefficient prediction and scan adaptation for image coding and intra coding of video
JP3208101B2 (ja) * 1996-11-07 2001-09-10 松下電器産業株式会社 画像符号化方法および画像符号化装置並びに画像符号化プログラムを記録した記録媒体
KR100332175B1 (ko) * 1996-11-07 2002-04-12 모리시타 요이찌 화상 부호화 장치 및 그 방법
US5821887A (en) * 1996-11-12 1998-10-13 Intel Corporation Method and apparatus for decoding variable length codes
US6614845B1 (en) * 1996-12-24 2003-09-02 Verizon Laboratories Inc. Method and apparatus for differential macroblock coding for intra-frame data in video conferencing systems
US5974184A (en) 1997-03-07 1999-10-26 General Instrument Corporation Intra-macroblock DC and AC coefficient prediction for interlaced digital video
CN1110963C (zh) * 1997-03-26 2003-06-04 松下电器产业株式会社 图象解码装置
US6680976B1 (en) * 1997-07-28 2004-01-20 The Board Of Trustees Of The University Of Illinois Robust, reliable compression and packetization scheme for transmitting video
JP3356663B2 (ja) * 1997-10-22 2002-12-16 松下電器産業株式会社 画像符号化装置、画像符号化方法および画像符号化プログラムを記録した記録媒体
JP3738939B2 (ja) * 1998-03-05 2006-01-25 Kddi株式会社 動画像のカット点検出装置
US6563953B2 (en) * 1998-11-30 2003-05-13 Microsoft Corporation Predictive image compression using a single variable length code for both the luminance and chrominance blocks for each macroblock
US6625211B1 (en) * 1999-02-25 2003-09-23 Matsushita Electric Industrial Co., Ltd. Method and apparatus for transforming moving picture coding system
US6658157B1 (en) * 1999-06-29 2003-12-02 Sony Corporation Method and apparatus for converting image information
JP2001028748A (ja) * 1999-07-12 2001-01-30 Sony Corp データ再生伝送装置及びデータ再生伝送方法
FI116819B (fi) * 2000-01-21 2006-02-28 Nokia Corp Menetelmä kuvien lähettämiseksi ja kuvakooderi
JP2001251616A (ja) * 2000-03-02 2001-09-14 Media Glue Corp 多重化音響・動画圧縮符号化信号変換方法、装置および変換プログラムを記録した媒体
KR100349650B1 (ko) * 2000-07-11 2002-08-24 주식회사 큐리텔 동영상 압축 부호화장치의 가변길이부호화 테이블 분할가변길이 부호화 장치 및 그 방법
KR100349649B1 (ko) * 2000-07-11 2002-08-24 주식회사 큐리텔 동영상압축 부호화장치의 가변 길이 부호화기
KR20020006250A (ko) * 2000-07-12 2002-01-19 린 와이-푸 점술을 중심으로 하는 네트워크 마케팅 시스템 및 그 방법
US6748020B1 (en) * 2000-10-25 2004-06-08 General Instrument Corporation Transcoder-multiplexer (transmux) software architecture
WO2002078355A1 (en) * 2001-03-23 2002-10-03 Nokia Corporation Variable length coding
KR100454501B1 (ko) 2001-12-26 2004-10-28 브이케이 주식회사 영상신호를 부호화 또는 복호화하기 위한 예측 장치 및 방법
JP4130780B2 (ja) 2002-04-15 2008-08-06 松下電器産業株式会社 画像符号化方法および画像復号化方法
FI114679B (fi) * 2002-04-29 2004-11-30 Nokia Corp Satunnaisaloituspisteet videokoodauksessa
JP4223773B2 (ja) 2002-09-13 2009-02-12 株式会社東芝 無線通信端末
JP4100390B2 (ja) 2004-10-07 2008-06-11 三菱自動車工業株式会社 車両の前部車体構造

Also Published As

Publication number Publication date
EP2254341A1 (en) 2010-11-24
KR101038154B1 (ko) 2011-05-31
AU2003227248A1 (en) 2003-10-27
DK1746841T3 (da) 2009-11-30
EP1744562A3 (en) 2007-02-07
ATE439738T1 (de) 2009-08-15
CN1976470A (zh) 2007-06-06
CA2444357C (en) 2012-03-20
EP1753246B1 (en) 2009-08-12
JP2008160887A (ja) 2008-07-10
ES2329712T3 (es) 2009-11-30
EP1744561B1 (en) 2009-11-04
JP2010081646A (ja) 2010-04-08
CN1917643A (zh) 2007-02-21
JP2006246499A (ja) 2006-09-14
KR20100012061A (ko) 2010-02-04
US20080175315A1 (en) 2008-07-24
TWI281352B (en) 2007-05-11
US20080056362A1 (en) 2008-03-06
US20060239575A1 (en) 2006-10-26
ES2376639T3 (es) 2012-03-15
ES2376639T9 (es) 2012-06-07
KR20100074327A (ko) 2010-07-01
KR101001753B1 (ko) 2010-12-15
US20080063055A1 (en) 2008-03-13
KR20100024495A (ko) 2010-03-05
CN1976469A (zh) 2007-06-06
DE60328837D1 (de) 2009-09-24
EP1746841A1 (en) 2007-01-24
KR101154606B1 (ko) 2012-06-08
US20040184538A1 (en) 2004-09-23
DE60328836D1 (de) 2009-09-24
EP2254340B1 (en) 2012-01-18
MXPA03010115A (es) 2004-03-10
JP2014079003A (ja) 2014-05-01
KR100954244B1 (ko) 2010-04-23
ES2330661T3 (es) 2009-12-14
ATE445294T1 (de) 2009-10-15
KR100987548B1 (ko) 2010-10-12
ES2369653T3 (es) 2011-12-02
ES2330661T4 (es) 2010-06-02
EP2131592B1 (en) 2011-10-26
JP2010093842A (ja) 2010-04-22
EP2131592A1 (en) 2009-12-09
EP1750451A3 (en) 2007-02-21
CN1976468A (zh) 2007-06-06
US7095896B2 (en) 2006-08-22
US7184598B2 (en) 2007-02-27
EP1750451B1 (en) 2009-08-12
KR100990314B1 (ko) 2010-10-26
CN100527841C (zh) 2009-08-12
JP2011010340A (ja) 2011-01-13
DE60329639D1 (de) 2009-11-19
JP2013070428A (ja) 2013-04-18
JP2004007506A (ja) 2004-01-08
ATE524020T1 (de) 2011-09-15
KR20060040753A (ko) 2006-05-10
CN1976471A (zh) 2007-06-06
EP2134097A1 (en) 2009-12-16
EP1744561A3 (en) 2007-02-07
ATE482570T1 (de) 2010-10-15
EP1744562A2 (en) 2007-01-17
CN100527840C (zh) 2009-08-12
US20130034308A1 (en) 2013-02-07
CN100527846C (zh) 2009-08-12
JP5716082B2 (ja) 2015-05-13
MY141699A (en) 2010-06-15
JP4465035B2 (ja) 2010-05-19
JP4628499B2 (ja) 2011-02-09
JP2010206823A (ja) 2010-09-16
KR101227720B1 (ko) 2013-01-29
EP2239948B1 (en) 2011-06-01
US8265403B2 (en) 2012-09-11
CY1111051T1 (el) 2015-06-11
US7769238B2 (en) 2010-08-03
JP4185106B2 (ja) 2008-11-26
US7308144B2 (en) 2007-12-11
JP4185563B2 (ja) 2008-11-26
KR20110016508A (ko) 2011-02-17
US7305134B2 (en) 2007-12-04
EP1596608A3 (en) 2005-11-30
KR20120039761A (ko) 2012-04-25
BR0303566A (pt) 2004-04-20
TWI314837B (en) 2009-09-11
ATE511733T1 (de) 2011-06-15
US20080117969A1 (en) 2008-05-22
EP1478188A1 (en) 2004-11-17
ATE439740T1 (de) 2009-08-15
JP2010193509A (ja) 2010-09-02
WO2003088675A1 (en) 2003-10-23
CN100527839C (zh) 2009-08-12
JP2008312226A (ja) 2008-12-25
KR20060040752A (ko) 2006-05-10
ATE312478T1 (de) 2005-12-15
EP2293578B1 (en) 2012-11-21
JP4465026B2 (ja) 2010-05-19
ATE439739T1 (de) 2009-08-15
DK1596608T3 (da) 2007-03-05
US20060269154A1 (en) 2006-11-30
ES2329823T3 (es) 2009-12-01
EP2131593A1 (en) 2009-12-09
EP1744561A2 (en) 2007-01-17
TW200307465A (en) 2003-12-01
PT2254340E (pt) 2012-02-02
JP4382864B2 (ja) 2009-12-16
JP4982459B2 (ja) 2012-07-25
PT2254341E (pt) 2011-10-17
ATE531202T1 (de) 2011-11-15
SI1478188T1 (sl) 2006-04-30
CA2732005C (en) 2012-12-04
ES2252666T3 (es) 2006-05-16
JP4628498B2 (ja) 2011-02-09
JP4741716B1 (ja) 2011-08-10
PT2239948E (pt) 2011-06-09
TWI314838B (en) 2009-09-11
ATE447828T1 (de) 2009-11-15
ES2398516T3 (es) 2013-03-19
TW200629911A (en) 2006-08-16
JP4598159B2 (ja) 2010-12-15
JP5485363B2 (ja) 2014-05-07
KR20110099348A (ko) 2011-09-07
ES2277313T3 (es) 2007-07-01
HK1136730A1 (en) 2010-07-02
HK1146562A1 (en) 2011-06-17
EP2239948A1 (en) 2010-10-13
KR20040099093A (ko) 2004-11-26
DE60302652T2 (de) 2006-08-10
KR20060040751A (ko) 2006-05-10
KR20100012103A (ko) 2010-02-05
TW200629910A (en) 2006-08-16
JP5208157B2 (ja) 2013-06-12
US8526748B2 (en) 2013-09-03
DK2131593T3 (da) 2010-10-25
EP1596608B1 (en) 2007-01-24
US7693340B2 (en) 2010-04-06
CA2732005A1 (en) 2003-10-23
EP1746841B1 (en) 2009-10-07
US7308143B2 (en) 2007-12-11
JP2008193725A (ja) 2008-08-21
EP1478188B1 (en) 2005-12-07
PT2131593E (pt) 2010-10-11
US8139878B2 (en) 2012-03-20
DE60328838D1 (de) 2009-09-24
KR20100074325A (ko) 2010-07-01
JP4191793B1 (ja) 2008-12-03
US20060233450A1 (en) 2006-10-19
EP2254341B1 (en) 2011-10-05
JP2008178128A (ja) 2008-07-31
PT1744562E (pt) 2009-09-04
CN1565130A (zh) 2005-01-12
CN100527838C (zh) 2009-08-12
KR100956926B1 (ko) 2010-05-11
TWI330986B (en) 2010-09-21
US8290286B2 (en) 2012-10-16
US7308149B2 (en) 2007-12-11
CA2444357A1 (en) 2003-10-14
EP2254340A1 (en) 2010-11-24
JP2011010338A (ja) 2011-01-13
EP1744562B1 (en) 2009-08-12
US7697770B2 (en) 2010-04-13
US20130315495A1 (en) 2013-11-28
CN1929608A (zh) 2007-03-14
EP1596608A2 (en) 2005-11-16
ES2329822T3 (es) 2009-12-01
EP2134097B1 (en) 2011-09-07
JP2008182756A (ja) 2008-08-07
JP4653258B1 (ja) 2011-03-16
MY146793A (en) 2012-09-28
EP1750451A2 (en) 2007-02-07
JP2010268514A (ja) 2010-11-25
EP2293577A1 (en) 2011-03-09
JP4185564B2 (ja) 2008-11-26
DK1478188T3 (da) 2006-02-13
JP2009005396A (ja) 2009-01-08
KR20100074326A (ko) 2010-07-01
US20090034616A1 (en) 2009-02-05
DE60311530T2 (de) 2007-11-15
JP4185561B2 (ja) 2008-11-26
ATE542370T1 (de) 2012-02-15
MY140969A (en) 2010-02-12
KR101152507B1 (ko) 2012-06-01
JP4130780B2 (ja) 2008-08-06
JP4598158B1 (ja) 2010-12-15
JP5208156B2 (ja) 2013-06-12
ATE352951T1 (de) 2007-02-15
DE60334341D1 (de) 2010-11-04
KR100980987B1 (ko) 2010-09-07
DK1744562T3 (da) 2009-10-12
KR100956920B1 (ko) 2010-05-11
CN1917643B (zh) 2010-12-01
JP4185560B2 (ja) 2008-11-26
HK1146561A1 (en) 2011-06-17
KR20120091468A (ko) 2012-08-17
MY135378A (en) 2008-04-30
EP1753246A1 (en) 2007-02-14
JP4465036B2 (ja) 2010-05-19
EP2293577B1 (en) 2012-11-21
AU2003227248B2 (en) 2007-08-23
JP2009171602A (ja) 2009-07-30
JP2011172236A (ja) 2011-09-01
DE60329945D1 (de) 2009-12-17
BRPI0303566B1 (pt) 2018-02-06
TW200629912A (en) 2006-08-16
US8867855B2 (en) 2014-10-21
JP2009022039A (ja) 2009-01-29
ES2362563T3 (es) 2011-07-07
PT1746841E (pt) 2009-11-03
US20080063056A1 (en) 2008-03-13
JP2011010339A (ja) 2011-01-13
KR100987541B1 (ko) 2010-10-12
EP2293578A1 (en) 2011-03-09
ATE527819T1 (de) 2011-10-15
DE60311530D1 (de) 2007-03-15
EP2131593B1 (en) 2010-09-22
ES2399226T3 (es) 2013-03-26
DE60302652D1 (de) 2006-01-12
US20060233449A1 (en) 2006-10-19
HK1148150A1 (en) 2011-08-26
ES2348325T3 (es) 2010-12-02
ES2369065T3 (es) 2011-11-25
US20060233451A1 (en) 2006-10-19
EP1478188A4 (en) 2004-11-17
KR100956927B1 (ko) 2010-05-11
CN1293762C (zh) 2007-01-03
KR101257212B1 (ko) 2013-04-23
CY1111971T1 (el) 2015-11-04

Similar Documents

Publication Publication Date Title
JP5716082B2 (ja) 配信方法

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101124

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

R150 Certificate of patent or registration of utility model

Ref document number: 4653258

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131224

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S131 Request for trust registration of transfer of right

Free format text: JAPANESE INTERMEDIATE CODE: R313135

SZ02 Written request for trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R313Z02

S131 Request for trust registration of transfer of right

Free format text: JAPANESE INTERMEDIATE CODE: R313135

SZ02 Written request for trust registration

Free format text: JAPANESE INTERMEDIATE CODE: R313Z02

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S131 Request for trust registration of transfer of right

Free format text: JAPANESE INTERMEDIATE CODE: R313135

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term