JP2007036463A - 画像処理装置、画像処理方法およびプログラム - Google Patents
画像処理装置、画像処理方法およびプログラム Download PDFInfo
- Publication number
- JP2007036463A JP2007036463A JP2005214494A JP2005214494A JP2007036463A JP 2007036463 A JP2007036463 A JP 2007036463A JP 2005214494 A JP2005214494 A JP 2005214494A JP 2005214494 A JP2005214494 A JP 2005214494A JP 2007036463 A JP2007036463 A JP 2007036463A
- Authority
- JP
- Japan
- Prior art keywords
- data
- block data
- block
- filter
- circuit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims description 8
- 238000013139 quantization Methods 0.000 claims abstract description 64
- 238000000034 method Methods 0.000 claims description 48
- 230000008569 process Effects 0.000 claims description 38
- 238000006243 chemical reaction Methods 0.000 claims description 17
- 238000001914 filtration Methods 0.000 claims description 15
- 230000009466 transformation Effects 0.000 claims description 15
- 238000004364 calculation method Methods 0.000 description 19
- 239000000872 buffer Substances 0.000 description 17
- 238000010586 diagram Methods 0.000 description 13
- 230000008707 rearrangement Effects 0.000 description 12
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000009825 accumulation Methods 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 5
- 239000012536 storage buffer Substances 0.000 description 3
- 101150039623 Clip1 gene Proteins 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- NAWXUBYGYWOOIX-SFHVURJKSA-N (2s)-2-[[4-[2-(2,4-diaminoquinazolin-6-yl)ethyl]benzoyl]amino]-4-methylidenepentanedioic acid Chemical compound C1=CC2=NC(N)=NC(N)=C2C=C1CCC1=CC=C(C(=O)N[C@@H](CC(=C)C(O)=O)C(O)=O)C=C1 NAWXUBYGYWOOIX-SFHVURJKSA-N 0.000 description 1
- 101001139126 Homo sapiens Krueppel-like factor 6 Proteins 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/117—Filters, e.g. for pre-processing or post-processing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
- H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
Abstract
【課題】 ブロック単位で符号化された画像データを復号する場合に、ブロック歪を抑制できる画像処理装置を提供する。
【解決手段】 ＤＥＢ制御回路３９は、ＭＰＥＧ２の画像データＳ９内の処理対象のマクロブロックＭＢのＭＢタイプを特定する。ＤＥＢ制御回路３９は、上記ＭＰタイプを基に、当該マクロブロックＭＢのブロック境界強度データＢｓおよび量子化パラメータＱＰを生成し、デブロックフィルタ４７に出力する。デブロックフィルタ４７は、これらを基にデブロックフィルタ処理を行う。
【選択図】 図２
【解決手段】 ＤＥＢ制御回路３９は、ＭＰＥＧ２の画像データＳ９内の処理対象のマクロブロックＭＢのＭＢタイプを特定する。ＤＥＢ制御回路３９は、上記ＭＰタイプを基に、当該マクロブロックＭＢのブロック境界強度データＢｓおよび量子化パラメータＱＰを生成し、デブロックフィルタ４７に出力する。デブロックフィルタ４７は、これらを基にデブロックフィルタ処理を行う。
【選択図】 図２
Description
本発明は、符号化された画像データを復号する画像処理装置、画像処理方法およびプログラムに関する。
近年、画像データデジタルとして取り扱い、その際、効率の高い情報の伝送、蓄積を目的とし、画像情報特有の冗長性を利用して、離散コサイン変換等の直交変換と動き補償により圧縮するＭＰＥＧ(Moving Picture Experts Group)などの方式に準拠した装置が、放送局などの情報配信、及び一般家庭における情報受信の双方において普及しつつある。
ＭＰＥＧ２，４方式に続いてＨ．２６４／ＡＶＣ(Advanced Video Coding)と呼ばれる符号化方式が提案されている。
このようなＨ．２６４／ＡＶＣの符号化装置では、符号化対象の画像データから得たブロック境界強度データＢｓと量子化パラメータＱＰとに基づいて、予測符号化における再構成画像データにデブロックフィルタ処理を施して、次の予測符号化に用いる参照画像データを生成する。デブロックフィルタ処理は、例えば、ＤＣＴ処理などを４ｘ４ブロック単位で行うことによって生じるブロック歪を抑制する処理である。
また、上記Ｈ．２６４／ＡＶＣの符号化装置は、ブロック境界強度データＢｓと量子化パラメータＱＰとを符号化データに付加する。
このようなＨ．２６４／ＡＶＣの符号化装置では、符号化対象の画像データから得たブロック境界強度データＢｓと量子化パラメータＱＰとに基づいて、予測符号化における再構成画像データにデブロックフィルタ処理を施して、次の予測符号化に用いる参照画像データを生成する。デブロックフィルタ処理は、例えば、ＤＣＴ処理などを４ｘ４ブロック単位で行うことによって生じるブロック歪を抑制する処理である。
また、上記Ｈ．２６４／ＡＶＣの符号化装置は、ブロック境界強度データＢｓと量子化パラメータＱＰとを符号化データに付加する。
Ｈ．２６４／ＡＶＣの復号装置は、符号化データに付加されたブロック境界強度データＢｓと量子化パラメータＱＰとを基に、再構成画像データにデブロックフィルタ処理を施す。
ところで、ＭＰＥＧ２，４などのＨ．２６４／ＡＶＣ以外のＤＣＴ処理などの直交変換処理をブロック単位で行って生成された符号化データを復号する復号装置においても、ブロック歪を抑制するために、上述したデブロックフィルタ処理を行いたいという要請がある。
しかしながら、このような復号装置が復号対象とする符号化データには、上述したブロック境界強度データＢｓおよび量子化パラメータＱＰが含まれておらず、当該復号装置において、デブロックフィルタ処理を行うことができず、ブロック歪が残存して復号画像の画質が低下してしまう。
しかしながら、このような復号装置が復号対象とする符号化データには、上述したブロック境界強度データＢｓおよび量子化パラメータＱＰが含まれておらず、当該復号装置において、デブロックフィルタ処理を行うことができず、ブロック歪が残存して復号画像の画質が低下してしまう。
本発明はかかる事情に鑑みてなされたものであり、ブロック単位で符号化され、フィルタ処理内容を規定する情報が付加されていない画像データを復号する場合でも、ブロック歪を抑制できる画像処理装置、画像処理方法およびプログラムを提供することを目的とする。
上述した従来技術の問題点を解決し、上述した目的を達成するため、第１の観点の発明の画像処理装置は、各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理装置であって、フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する制御手段と、前記制御手段が選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施すフィルタ手段とを有する。
また、本発明の画像処理装置は、各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理装置であって、復号対象の画像データのブロックデータを可逆復号する可逆復号回路と、前記可逆復号回路が可逆復号したブロックデータを逆量子化する逆量子化回路と、前記逆量子化回路が逆量子化したブロックデータを逆直交変換する逆直交変換回路と、前記逆直交変換回路が生成したブロックデータと、予測画像データとを基に再構成画像データを生成する加算回路と、前記復号対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する制御手段と、前記制御手段が選択した前記フィルタ処理内容に従って、前記加算回路生成した再構成画像データにフィルタ処理を施すフィルタ手段とを有する。
また、本発明の画像処理方法は、各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理方法であって、フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する第１の工程と、前記第１の工程で選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施す第２の工程とを有する。
また、本発明のプログラムは、各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号するコンピュータが実行するプログラムであって、フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する第１の手順と、前記第１の手順で選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施す第２の手順とを前記コンピュータに実行させる。
本発明によれば、ブロック単位で符号化され、フィルタ処理内容を規定する情報が付加されていない画像データを復号する場合でも、ブロック歪を抑制できる画像処理装置、画像処理方法およびプログラムを提供することができる。
以下、本発明の実施形態の通信システムについて説明する。
先ず、本実施形態の構成と本発明の構成との関係を説明する。
図２に示すＤＥＢ制御回路３９が本発明の制御手段の一例であり、デブロックフィルタ４７が本発明のフィルタ手段の一例である。
また、マクロブロックＭＢが本発明のブロックデータの一例である。
また、４ｘ４（あるいは８ｘ８）のブロックデータが、本発明のサブブロックデータの一例である。
また、本実施形態の量子化パラメータＱＰが本発明の量子化パラメータの一例であり、ブロック境界強度データＢｓが本発明のブロック境界強度データの一例である。
また、図１４に示すプログラムＰＲＧが本発明のプログラムの一例であり、メモリ２５２が記録媒体の一例である。
記録媒体は、半導体メモリの他、光ディスク、光磁気ディスクあるいは磁気ディスクなどであってもよい。
先ず、本実施形態の構成と本発明の構成との関係を説明する。
図２に示すＤＥＢ制御回路３９が本発明の制御手段の一例であり、デブロックフィルタ４７が本発明のフィルタ手段の一例である。
また、マクロブロックＭＢが本発明のブロックデータの一例である。
また、４ｘ４（あるいは８ｘ８）のブロックデータが、本発明のサブブロックデータの一例である。
また、本実施形態の量子化パラメータＱＰが本発明の量子化パラメータの一例であり、ブロック境界強度データＢｓが本発明のブロック境界強度データの一例である。
また、図１４に示すプログラムＰＲＧが本発明のプログラムの一例であり、メモリ２５２が記録媒体の一例である。
記録媒体は、半導体メモリの他、光ディスク、光磁気ディスクあるいは磁気ディスクなどであってもよい。
図１は、本実施形態の通信システム１の概念図である。
図１に示すように、通信システム１は、送信側に設けられた符号化装置２と、受信側に設けられた復号装置３とを有する。
図１に示すように、通信システム１は、送信側に設けられた符号化装置２と、受信側に設けられた復号装置３とを有する。
通信システム１では、送信側の符号化装置２において、離散コサイン変換やカルーネン・レーベ変換などの直交変換と動き補償によって圧縮したフレーム画像データ（ビットストリーム）を生成し、当該フレーム画像データを変調した後に、衛星放送波、ケーブルＴＶ網、電話回線網、携帯電話回線網などの伝送媒体を介して送信する。
受信側では、復号装置３において受信した画像信号を復調した後に、上記変調時の直交変換の逆変換と動き補償によって伸張したフレーム画像データを生成して利用する。
なお、上記伝送媒体は、光ディスク、磁気ディスクおよび半導体メモリなどの記録媒体であってもよい。
受信側では、復号装置３において受信した画像信号を復調した後に、上記変調時の直交変換の逆変換と動き補償によって伸張したフレーム画像データを生成して利用する。
なお、上記伝送媒体は、光ディスク、磁気ディスクおよび半導体メモリなどの記録媒体であってもよい。
以下、図１に示す復号装置３について説明する。
図２は、図１に示す復号装置３の全体構成図である。
図２に示すように、復号装置３は、例えば、ＭＰＥＧ２復号装置１０と、ＡＶＣ復号装置１２とを有する。
＜ＭＰＥＧ２復号装置１０＞
図２に示すように、ＭＰＥＧ２復号装置１０は、例えば、蓄積バッファ３０、可逆復号回路３１、逆量子化回路３２、逆直交変換回路３３、加算回路３４、フレームメモリ３５、動き予測・補償回路３６、イントラ予測回路３７、画面並べ替えバッファ３８、ＤＥＢ制御回路３９、並びにＤ／Ａ変換回路４１を有する。
図２は、図１に示す復号装置３の全体構成図である。
図２に示すように、復号装置３は、例えば、ＭＰＥＧ２復号装置１０と、ＡＶＣ復号装置１２とを有する。
＜ＭＰＥＧ２復号装置１０＞
図２に示すように、ＭＰＥＧ２復号装置１０は、例えば、蓄積バッファ３０、可逆復号回路３１、逆量子化回路３２、逆直交変換回路３３、加算回路３４、フレームメモリ３５、動き予測・補償回路３６、イントラ予測回路３７、画面並べ替えバッファ３８、ＤＥＢ制御回路３９、並びにＤ／Ａ変換回路４１を有する。
蓄積バッファ３０には、復号装置３が入力（受信）したＭＰＥＧ方式で符号化された画像データＳ９が書き込まれる。
可逆復号回路３１は、画像データＳ９内の処理対象のマクロブロックＭＢがインター符号化されていると判断した場合には、そのヘッダ部に書き込まれている動きベクトルを復号して動き予測・補償回路３６に出力する。
可逆復号回路３１は、画像データＳ９内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路３７に出力する。
また、可逆復号回路３１は、画像データＳ９を復号して逆量子化回路３２に出力する。
また、可逆復号回路３１は、画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥと、ＭＢ(Macro Block)タイプとをＤＥＢ制御回路３９に出力する。
可逆復号回路３１は、画像データＳ９内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路３７に出力する。
また、可逆復号回路３１は、画像データＳ９を復号して逆量子化回路３２に出力する。
また、可逆復号回路３１は、画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥと、ＭＢ(Macro Block)タイプとをＤＥＢ制御回路３９に出力する。
逆量子化回路３２は、可逆復号回路３１で復号された画像データ（直交変換係数）を、可逆復号回路３１から入力した量子化スケールＱ＿ＳＣＡＬＥを基に逆量子化して逆直交変換回路３３に出力する。
逆直交変換回路３３は、逆量子化回路３２から入力した画像データ（直交変換係数）に８ｘ８の逆直交変換処理を施して差分画像データを生成し、それを加算回路３４に出力する。
加算回路３４は、動き予測・補償回路３６あるいはイントラ予測回路３７からの予測画像データＰＩと、逆直交変換回路３３からの差分画像データとを加算して画像データを生成し、これをフレームメモリ３５および画面並べ替えバッファ３８に書き込む。
動き予測・補償回路３６は、フレームメモリ３５から読み出した参照画像データと、可逆復号回路３１から入力した動きベクトルとを基に、予測画像データＰＩを生成し、これを加算回路３４に出力する。
イントラ予測回路３７は、可逆復号回路３１から入力したイントラ予測モードを基に予測画像データＰＩを生成し、これを加算回路３４に出力する。
画面並べ替えバッファ３８は、加算回路３４から書き込まれた復号後の画像データを、図２および図３に示すＡＶＣ復号装置１２のデブロックフィルタ５３によるフィルタ処理後に、表示順にＤ／Ａ変換回路４１に読み出す。
ＤＥＢ制御回路３９は、可逆復号回路３１から入力した各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥと、ＭＢタイプとを基に、ブロック境界強度データＢｓと、量子化パラメータＱＰとを生成し、これをＡＶＣ復号装置１２のデブロックフィルタ５３に出力する。
ＤＥＢ制御回路３９の処理については、後に詳細に説明する。
ＤＥＢ制御回路３９の処理については、後に詳細に説明する。
Ｄ／Ａ変換回路４１は、画面並べ替えバッファ３８から入力した画像データにＤ／Ａ変換処理を施して画像信号Ｓ１０を生成し、これを復号装置３の外部に出力する。
＜ＡＶＣ復号装置１２＞
図３に示すように、ＡＶＣ復号装置１２は、例えば、蓄積バッファ５０、可逆復号回路５１、逆量子化回路５２、逆直交変換回路５３、加算回路５４、フレームメモリ５５、動き予測・補償回路５６、イントラ予測回路５７、画面並べ替えバッファ５８、Ｄ／Ａ変換回路６１、デブロックフィルタ４７を有する。
図３に示すように、ＡＶＣ復号装置１２は、例えば、蓄積バッファ５０、可逆復号回路５１、逆量子化回路５２、逆直交変換回路５３、加算回路５４、フレームメモリ５５、動き予測・補償回路５６、イントラ予測回路５７、画面並べ替えバッファ５８、Ｄ／Ａ変換回路６１、デブロックフィルタ４７を有する。
蓄積バッファ５０には、復号装置３が入力（受信）したＡＶＣ方式で符号化された画像データＳ１３が書き込まれる。
可逆復号回路５１は、画像データＳ１３内の処理対象のマクロブロックＭＢがインター符号化されていると判断した場合には、そのヘッダ部に書き込まれている動きベクトルを復号して動き予測・補償回路５６に出力する。
可逆復号回路５１は、画像データＳ１３内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路５７に出力する。
また、可逆復号回路５１は、画像データＳ１３を復号して逆量子化回路５２に出力する。
また、可逆復号回路５１は、画像データＳ１３に含まれる各マクロブロックＭＢの量子化パラメータＱＰと、ブロック境界強度データＢｓとをデブロックフィルタ４７に出力する。
可逆復号回路５１は、画像データＳ１３内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路５７に出力する。
また、可逆復号回路５１は、画像データＳ１３を復号して逆量子化回路５２に出力する。
また、可逆復号回路５１は、画像データＳ１３に含まれる各マクロブロックＭＢの量子化パラメータＱＰと、ブロック境界強度データＢｓとをデブロックフィルタ４７に出力する。
逆量子化回路５２は、可逆復号回路５１で復号された画像データ（直交変換係数）を、可逆復号回路３１から入力した量子化パラメータＱＰを基に逆量子化して逆直交変換回路５３に出力する。
逆直交変換回路５３は、逆量子化回路５２から入力した画像データ（直交変換係数）に４ｘ４の逆直交変換処理を施して差分画像データを生成し、それを加算回路５４に出力する。
加算回路５４は、動き予測・補償回路５６あるいはイントラ予測回路５７からの予測画像データＰＩと、逆直交変換回路５３からの差分画像データとを加算して画像データを生成し、これをデブロックフィルタ４７に出力する。
デブロックフィルタ４７は、逆量子化回路５２から入力した量子化パラメータＱＰとブロック境界強度データＢｓとを基に、加算回路５４から入力した画像データにデブロックフィルタ処理を施して、処理後の画像データをフレームメモリ５５および画面並べ替えバッファ３８に書き込む。
動き予測・補償回路５６は、フレームメモリ５５から読み出した参照画像データと、可逆復号回路５１から入力した動きベクトルとを基に、予測画像データＰＩを生成し、これを加算回路５４に出力する。
イントラ予測回路５７は、可逆復号回路５１から入力したイントラ予測モードを基に予測画像データＰＩを生成し、これを加算回路５４に出力する。
画面並べ替えバッファ５８は、デブロックフィルタ４７から書き込まれた復号後の画像データを、表示順にＤ／Ａ変換回路６１に読み出す。
Ｄ／Ａ変換回路６１は、画面並べ替えバッファ５８から入力した画像データにＤ／Ａ変換処理を施して画像信号Ｓ１４を生成し、これを復号装置３の外部に出力する。
＜デブロックフィルタ４７＞
デブロックフィルタ４７は、入力した画像データに含まれるブロック歪を減少するようにフィルタ処理を施す。
具体的には、デブロックフィルタ４７は、入力した量子化パラメータＱＰとブロック境界強度データＢｓに基づいて、図４に示すように、１６ｘ１６のマクロブロックＭＢ内の４ｘ４のブロックデータを単位として、水平方向および垂直方向のフィルタ処理を行う。
デブロックフィルタ４７は、入力した画像データに含まれるブロック歪を減少するようにフィルタ処理を施す。
具体的には、デブロックフィルタ４７は、入力した量子化パラメータＱＰとブロック境界強度データＢｓに基づいて、図４に示すように、１６ｘ１６のマクロブロックＭＢ内の４ｘ４のブロックデータを単位として、水平方向および垂直方向のフィルタ処理を行う。
ブロック境界強度データＢｓは、例えば、Ｈ．２６４／ＡＶＣにより、図５に示すように規定されている。
ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐあるいはｑの何れか一方がイントラ符号化されるマクロブロックＭＢに属し、且つ、当該画素データがマクロブロックＭＢの境界に位置する場合に、最もフィルタ強度が高い「４」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐあるいはｑの何れか一方がイントラ符号化されるマクロブロックＭＢに属し、且つ、当該画素データがマクロブロックＭＢの境界に位置しない場合に、「４」の次にフィルタ強度が高い「３」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐおよびｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、且つ、いずれかの画素データが変換係数を持つ場合に、「３」の次にフィルタ強度が高い「２」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐおよびｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、且つ、いずれかの画素データが変換係数を持たないという条件を場合に満たし、且つ、参照フレームが異なるか、参照フレームの枚数が異なるか、動きベクトルが異なるかの何れかの条を満たす場合に、「１」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐ，ｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、どちらの画素データも変換係数を持たず、且つ、参照フレームおよび動きベクトルが同じ場合には、フィルタ処理を行わないことを意味する「０」が割り当てられている。
ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐあるいはｑの何れか一方がイントラ符号化されるマクロブロックＭＢに属し、且つ、当該画素データがマクロブロックＭＢの境界に位置する場合に、最もフィルタ強度が高い「４」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐあるいはｑの何れか一方がイントラ符号化されるマクロブロックＭＢに属し、且つ、当該画素データがマクロブロックＭＢの境界に位置しない場合に、「４」の次にフィルタ強度が高い「３」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐおよびｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、且つ、いずれかの画素データが変換係数を持つ場合に、「３」の次にフィルタ強度が高い「２」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐおよびｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、且つ、いずれかの画素データが変換係数を持たないという条件を場合に満たし、且つ、参照フレームが異なるか、参照フレームの枚数が異なるか、動きベクトルが異なるかの何れかの条を満たす場合に、「１」が割り当てられている。
また、ブロック境界強度データＢｓは、例えば、図５に示すように、画素データｐ，ｑの双方がイントラ符号化されるマクロブロックＭＢに属するものではなく、どちらの画素データも変換係数を持たず、且つ、参照フレームおよび動きベクトルが同じ場合には、フィルタ処理を行わないことを意味する「０」が割り当てられている。
図６は、デブロックフィルタ４７の構成図である。
図６に示すように、デブロックフィルタ４７は、例えば、α・β取得部８１、ｉｎｄｅｘ算出部８２、ｔｃ０取得部８３、並びにフィルタ演算部８４を有する。
図６に示すように、デブロックフィルタ４７は、例えば、α・β取得部８１、ｉｎｄｅｘ算出部８２、ｔｃ０取得部８３、並びにフィルタ演算部８４を有する。
α・β取得部８１は、入力した量子化パラメータＱＰをキーとして、図７に示す表データＴＡＢＬＥ１を参照して、データα，βを取得する。
ここで、α、βは、デフォルトでは、図７に示すように、各マクロブロックの量子化パラメータＱＰに応じてその値が定められている。
ただし、α、βの値は、復号対象の画像データ（bitstream）中のSlice ヘッダデータに含まれるslice_alpha_c0_offset_div2及びslice_beta_offset_div2という2つのパラメータに拠って、ユーザが調整することが可能である。
ここで、α、βは、デフォルトでは、図７に示すように、各マクロブロックの量子化パラメータＱＰに応じてその値が定められている。
ただし、α、βの値は、復号対象の画像データ（bitstream）中のSlice ヘッダデータに含まれるslice_alpha_c0_offset_div2及びslice_beta_offset_div2という2つのパラメータに拠って、ユーザが調整することが可能である。
ｉｎｄｅｘ算出部８２は、隣接するマクロブロックＭＢ（Ｐ）とＭＢ（Ｑ）の量子化パラメータＱＰを入力し、下記式（１）に従って、データｉｎｄｅｘＡ，Ｂを算出する。
なお、下記式（１）において、ＦｉｌｔｅｒＯｆｆｓｅｔＡ及びＦｉｌｔｅｒＯｆｆｓｅｔＢが、ユーザによる調整分に相当する。
図６において、ｑＰｐはマクロブロックＭＢ（Ｐ）の量子化パラメータＱＰを示し、ｑＰｑはマクロブロックＭＢ（Ｑ）の量子化パラメータＱＰを示す。
なお、下記式（１）において、ＦｉｌｔｅｒＯｆｆｓｅｔＡ及びＦｉｌｔｅｒＯｆｆｓｅｔＢが、ユーザによる調整分に相当する。
図６において、ｑＰｐはマクロブロックＭＢ（Ｐ）の量子化パラメータＱＰを示し、ｑＰｑはマクロブロックＭＢ（Ｑ）の量子化パラメータＱＰを示す。
［数１］
ｑＰａｖ＝（ｑＰｐ＋ｑＰｑ＋１）＞＞１
ｉｎｄｅｘＡ＝Ｃｌｉｐ３（０，５１，ｑＰａｖ＋ＦｉｌｔｅｒＯｆｆｓｅｔＡ）
ｉｎｄｅｘＢ＝Ｃｌｉｐ３（０，５１，ｑＰａｖ＋ＦｉｌｔｅｒＯｆｆｓｅｔＢ）
…（１）
ｑＰａｖ＝（ｑＰｐ＋ｑＰｑ＋１）＞＞１
ｉｎｄｅｘＡ＝Ｃｌｉｐ３（０，５１，ｑＰａｖ＋ＦｉｌｔｅｒＯｆｆｓｅｔＡ）
ｉｎｄｅｘＢ＝Ｃｌｉｐ３（０，５１，ｑＰａｖ＋ＦｉｌｔｅｒＯｆｆｓｅｔＢ）
…（１）
ｔｃ０取得部８３は、ブロック境界強度データＢｓと、ｉｎｄｅｘ算出部８２から入力したデータｉｎｄｅｘＡとをキーとして、図８に示す表データＴＡＢＬＥ２を基に、データｔｃ０を取得し、これをフィルタ演算部８４に出力する。
フィルタ演算部８４は、以下に示すように、「Ｂｓ＜４」の場合と、「Ｂｓ＝４」の場合とで異なるフィルタ処理を行う。
先ず、「Ｂｓ＜４」の場合を説明する。
フィルタ演算部８４は、下記式（２）に示す演算を行って、フィルタ処理後の画素データｐ０’，ｑ０’を算出する。
下記式（２）において、Ｃｌｉｐ３は、クリッピング処理を示す。
先ず、「Ｂｓ＜４」の場合を説明する。
フィルタ演算部８４は、下記式（２）に示す演算を行って、フィルタ処理後の画素データｐ０’，ｑ０’を算出する。
下記式（２）において、Ｃｌｉｐ３は、クリッピング処理を示す。
［数２］
ｐ０’＝Ｃｌｉｐ１（ｐ０＋Δ）
ｑ０’＝Ｃｌｉｐ１（ｑ０＋Δ）
Δ＝Ｃｌｉｐ３（−ｔｃ，ｔｃ（（（（ｑ０−ｐ０）＜＜２）＋（ｐ１−ｑ１）＋４）＞＞３））
…（２）
ｐ０’＝Ｃｌｉｐ１（ｐ０＋Δ）
ｑ０’＝Ｃｌｉｐ１（ｑ０＋Δ）
Δ＝Ｃｌｉｐ３（−ｔｃ，ｔｃ（（（（ｑ０−ｐ０）＜＜２）＋（ｐ１−ｑ１）＋４）＞＞３））
…（２）
フィルタ演算部８４は、上記式（２）の「ｔｃ」を、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示す場合に下記式（３）に基づいて算出し、それ以外の場合に下記式（４）に基づいて算出する。
下記式（３）において、「（ ）？１：０」は、（ ）内の条件を満たすと「１」、それ以外の場合は「０」を示す。
下記式（３）において、「（ ）？１：０」は、（ ）内の条件を満たすと「１」、それ以外の場合は「０」を示す。
［数３］
ｔｃ＝ｔｃ０＋（（ａｐ＜β）？１：０）＋（ａｑ＜β）？１：０）
…（３）
ｔｃ＝ｔｃ０＋（（ａｐ＜β）？１：０）＋（ａｑ＜β）？１：０）
…（３）
［数４］
ｔｃ＝ｔｃ０＋１
…（４）
ｔｃ＝ｔｃ０＋１
…（４）
また、フィルタ演算部８４は、上記式（３）のａｐ，ａｑを下記式（５）に従って算出する。
［数５］
ａｐ＝｜ｐ２−ｐ０｜
ａｑ＝｜ｑ２−ｑ０｜
…（５）
ａｐ＝｜ｐ２−ｐ０｜
ａｑ＝｜ｑ２−ｑ０｜
…（５）
フィルタ演算部８４は、フィルタ処理後の画素データｐ１’を、ｃｈｒｏｍａＥｄｇｅＦｌａｇが０で、且つ、ａｐがβ以下である場合に下記式（６）に示す演算を行って算出し、それ以外の場合に下記式（７）により取得する。
［数６］
ｐ１’＝ｐ１＋Ｃｌｉｐ３（−ｔｃ０，ｔｃ０，（ｐ２＋（（ｐ０＋ｑ０＋１）＞＞１）−（ｐ１＜＜１））＞＞１）
…（６）
ｐ１’＝ｐ１＋Ｃｌｉｐ３（−ｔｃ０，ｔｃ０，（ｐ２＋（（ｐ０＋ｑ０＋１）＞＞１）−（ｐ１＜＜１））＞＞１）
…（６）
［数７］
ｐ１’＝ｐ１
…（７）
ｐ１’＝ｐ１
…（７）
フィルタ演算部８４は、フィルタ処理後の画素データｑ１’を、ｃｈｒｏｍａＥｄｇｅＦｌａｇが０で、且つ、ａｑがβ以下である場合に下記式（８）に示す演算を行って算出し、それ以外の場合に下記式（９）により取得する。
［数８］
ｑ１’＝ｑ１＋Ｃｌｉｐ３（−ｔｃ０，ｔｃ０，（ｑ２＋（（ｐ０＋ｑ０＋１）＞＞１）−（ｑ１＜＜１））＞＞１）
…（８）
ｑ１’＝ｑ１＋Ｃｌｉｐ３（−ｔｃ０，ｔｃ０，（ｑ２＋（（ｐ０＋ｑ０＋１）＞＞１）−（ｑ１＜＜１））＞＞１）
…（８）
［数９］
ｑ１’＝ｑ１
…（９）
ｑ１’＝ｑ１
…（９）
次に、「Ｂｓ＝４」の場合を説明する。
フィルタ演算部８４は、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示し、且つ、下記式（１０）の条件を満たす場合に、画素データｐ０’，ｐ１’，ｐ２’を下記式（１１）に従って算出する。
フィルタ演算部８４は、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示し、且つ、下記式（１０）の条件を満たす場合に、画素データｐ０’，ｐ１’，ｐ２’を下記式（１１）に従って算出する。
［数１０］
ａｐ＜β ＆＆ ｜ｐ０−ｑ０｜＜（（α＞＞２）＋２）
…（１０）
ａｐ＜β ＆＆ ｜ｐ０−ｑ０｜＜（（α＞＞２）＋２）
…（１０）
［数１１］
ｐ０’＝（ｐ２＋２・ｐ１＋２・ｐ０＋２・ｑ０＋ｑ１＋４）＞＞３
ｐ１’＝（ｐ２＋ｐ１＋ｐ０＋ｑ０＋２）＞＞２
ｐ２’＝（２・ｐ３＋３・ｐ２＋ｐ１＋ｐ０＋ｑ０＋４）＞＞３
…（１１）
ｐ０’＝（ｐ２＋２・ｐ１＋２・ｐ０＋２・ｑ０＋ｑ１＋４）＞＞３
ｐ１’＝（ｐ２＋ｐ１＋ｐ０＋ｑ０＋２）＞＞２
ｐ２’＝（２・ｐ３＋３・ｐ２＋ｐ１＋ｐ０＋ｑ０＋４）＞＞３
…（１１）
フィルタ演算部８４は、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示し、且つ、下記式（１０）の条件を満たさない場合に、画素データｐ０’，ｐ１’，ｐ２’を下記式（１２）に従って算出する。
［数１２］
ｐ０’＝（２・ｐ１＋ｐ０＋ｑ１＋２）＞＞２
ｐ１’＝ｐ１
ｐ２’＝ｐ２
ｐ０’＝（２・ｐ１＋ｐ０＋ｑ１＋２）＞＞２
ｐ１’＝ｐ１
ｐ２’＝ｐ２
フィルタ演算部８４は、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示し、且つ、下記式（１３）の条件を満たす場合に、画素データｑ０’，ｑ１’，ｑ２’を下記式（１４）に従って算出する。
［数１３］
ａｑ＜β ＆＆ ｜ｐ０−ｑ０｜＜（（α＞＞２）＋２）
…（１３）
ａｑ＜β ＆＆ ｜ｐ０−ｑ０｜＜（（α＞＞２）＋２）
…（１３）
［数１４］
ｑ０’＝（ｐ１＋２・ｐ０＋２・ｑ０＋２・ｑ１＋ｑ２＋４）＞＞３
ｑ１’＝（ｐ０＋ｑ０＋ｑ１＋ｑ２＋２）＞＞２
ｑ２’＝（２・ｑ３＋３・ｑ２＋ｑ１＋ｑ０＋ｐ４＋４）＞＞３
…（１４）
ｑ０’＝（ｐ１＋２・ｐ０＋２・ｑ０＋２・ｑ１＋ｑ２＋４）＞＞３
ｑ１’＝（ｐ０＋ｑ０＋ｑ１＋ｑ２＋２）＞＞２
ｑ２’＝（２・ｑ３＋３・ｑ２＋ｑ１＋ｑ０＋ｐ４＋４）＞＞３
…（１４）
フィルタ演算部８４は、フラグｃｈｒｏｍａＥｄｇｅＦｌａｇが「０」を示し、且つ、下記式（１０）の条件を満たさない場合に、画素データｑ０’，ｑ１’，ｑ２’を下記式（１５）に従って算出する。
［数１５］
ｑ０’＝（２・ｑ１＋ｑ０＋ｐ１＋２）＞＞２
ｑ１’＝ｑ１
ｑ２’＝ｑ２
…（１５）
ｑ０’＝（２・ｑ１＋ｑ０＋ｐ１＋２）＞＞２
ｑ１’＝ｑ１
ｑ２’＝ｑ２
…（１５）
［ＤＥＢ制御回路３９］
以下、図２に示すＤＥＢ制御回路３９の処理について詳細に説明する。
ＤＥＢ制御回路３９は、以下に示すように、量子化パラメータＱＰの生成処理と、ブロック境界強度データＢｓの生成処理とを行う。
以下、図２に示すＤＥＢ制御回路３９の処理について詳細に説明する。
ＤＥＢ制御回路３９は、以下に示すように、量子化パラメータＱＰの生成処理と、ブロック境界強度データＢｓの生成処理とを行う。
先ず、ＤＥＢ制御回路３９による量子化パラメータＱＰの生成処理を説明する。
図９は、図２に示すＤＥＢ制御回路３９が行う量子化パラメータＱＰの生成処理を説明するためのフローチャートである。
ステップＳＴ１１：
前述したように、ＤＥＢ制御回路３９は、可逆復号回路３１からＭＰＥＧ２方式の画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥを入力する。
図９は、図２に示すＤＥＢ制御回路３９が行う量子化パラメータＱＰの生成処理を説明するためのフローチャートである。
ステップＳＴ１１：
前述したように、ＤＥＢ制御回路３９は、可逆復号回路３１からＭＰＥＧ２方式の画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥを入力する。
ステップＳＴ１２：
ＤＥＢ制御回路３９は、ステップＳＴ１１で入力した量子化スケールＱ＿ＳＣＡＬＥに対応する量子化パラメータＱＰを特定する。
ところで、Ｈ．２６４／ＡＶＣの量子化パラメータＱＰ（レンジ０〜３１）と、ＭＰＥＧ２の量子化スケールＱ＿ＳＣＡＬＥとの間には、下記式（１６）が成り立つ。
ＤＥＢ制御回路３９は、ステップＳＴ１１で入力した量子化スケールＱ＿ＳＣＡＬＥに対応する量子化パラメータＱＰを特定する。
ところで、Ｈ．２６４／ＡＶＣの量子化パラメータＱＰ（レンジ０〜３１）と、ＭＰＥＧ２の量子化スケールＱ＿ＳＣＡＬＥとの間には、下記式（１６）が成り立つ。
［数１６］
Ｑ＿ＳＣＡＬＥ＝２２０／（６７６×Ａ（ＱＰ））
…（１６）
Ｑ＿ＳＣＡＬＥ＝２２０／（６７６×Ａ（ＱＰ））
…（１６）
上記式（１６）内のＡ（ＱＰ）は、ＱＰ＝０〜３１の各々について、下記式（１７）のように規定される。
［数１７］
Ａ(ＱＰ＝0,..,31)=[620,553,492,439,391,348,310,276,246,219,195,174,155,138,123,110,98,87,78,69,62,55,49,44,39,35,31,27,24,22,19,17]
…（１７）
Ａ(ＱＰ＝0,..,31)=[620,553,492,439,391,348,310,276,246,219,195,174,155,138,123,110,98,87,78,69,62,55,49,44,39,35,31,27,24,22,19,17]
…（１７）
上記式（１６），（１７）から、下記式（１８）の関係が成り立つ。
［数１８］
Ｑ＿ＳＣＡＬＥ（ＱＰ＝0, ... ,31)=[2.5019, 2.8050, 3.1527, 3.5334, 3.9671, 4.4573, 5.0037, 5.6201, 6.3055, 7.0829, 7.9546, 8.9146, 10.0074, 11.2402, 12.6110, 14.1013, 15.8280, 17.8293, 19.8865, 22.4804, 25.0185, 28.2027, 31.6561, 35.2534, 39.7730, 44.3185, 50.0370, 57.4499, 64.6312, 70.5067, 81.6394, 91.2440]
…（１８）
Ｑ＿ＳＣＡＬＥ（ＱＰ＝0, ... ,31)=[2.5019, 2.8050, 3.1527, 3.5334, 3.9671, 4.4573, 5.0037, 5.6201, 6.3055, 7.0829, 7.9546, 8.9146, 10.0074, 11.2402, 12.6110, 14.1013, 15.8280, 17.8293, 19.8865, 22.4804, 25.0185, 28.2027, 31.6561, 35.2534, 39.7730, 44.3185, 50.0370, 57.4499, 64.6312, 70.5067, 81.6394, 91.2440]
…（１８）
ＤＥＢ制御回路３９は、入力した量子化スケールＱ＿ＳＣＡＬＥをキーとして、上記式（１８）に示す関係を規定した表データを用いて、それに対応する量子化パラメータＱＰを取得する。
次に、上述した量子化パラメータＱＰのレンジが０〜３１であり、Ｈ．２６４／ＡＶＣで規定した量子化パラメータＱＰのレンジが０〜５１であるため、下記式（１９）により新たな量子化パラメータＱＰを算出し、これをデブロックフィルタ４７に出力する。
次に、上述した量子化パラメータＱＰのレンジが０〜３１であり、Ｈ．２６４／ＡＶＣで規定した量子化パラメータＱＰのレンジが０〜５１であるため、下記式（１９）により新たな量子化パラメータＱＰを算出し、これをデブロックフィルタ４７に出力する。
［数１９］
ＱＰ＝ＱＰ＋１２
…（１９）
ＱＰ＝ＱＰ＋１２
…（１９）
次に、ＤＥＢ制御回路３９によるブロック境界強度データＢｓの生成処理について説明する。
図１０〜図１２は、ＤＥＢ制御回路３９によるブロック境界強度データＢｓの生成処理について説明するためのフローチャートである。
ステップＳＴ２１：
ＤＥＢ制御回路３９は、可逆復号回路３１からＭＰＥＧ方式の画像データＳ９の処理対象のマクロブロックＭＢのＭＢタイプ（ＭＢタイプ指示データ）を入力する。
図１０〜図１２は、ＤＥＢ制御回路３９によるブロック境界強度データＢｓの生成処理について説明するためのフローチャートである。
ステップＳＴ２１：
ＤＥＢ制御回路３９は、可逆復号回路３１からＭＰＥＧ方式の画像データＳ９の処理対象のマクロブロックＭＢのＭＢタイプ（ＭＢタイプ指示データ）を入力する。
ステップＳＴ２２：
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「Ｉｎｔｒａ」あるいは「Ｉｎｔｒａ＋Ｑ」であると判断するとステップＳＴ２３に進み、そうでない場合にはステップＳＴ２４に進む。
ここで、「Ｉｎｔｒａ」はマクロブロックＭＢがイントラ符号化されたことを示している。
また、「Ｉｎｔｒａ＋Ｑ」は、マクロブロックＭＢがイントラ符号化され、且つ、量子化ステップの更新があることを示している。
ＭＰＥＧ２の「Ｉｎｔｒａ」，「Ｉｎｔｒａ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｒａ」に対応している。
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「Ｉｎｔｒａ」あるいは「Ｉｎｔｒａ＋Ｑ」であると判断するとステップＳＴ２３に進み、そうでない場合にはステップＳＴ２４に進む。
ここで、「Ｉｎｔｒａ」はマクロブロックＭＢがイントラ符号化されたことを示している。
また、「Ｉｎｔｒａ＋Ｑ」は、マクロブロックＭＢがイントラ符号化され、且つ、量子化ステップの更新があることを示している。
ＭＰＥＧ２の「Ｉｎｔｒａ」，「Ｉｎｔｒａ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｒａ」に対応している。
ステップＳＴ２３：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「４」を設定し、ブロック境界強度データＢｓ［２］に「３」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「４」を設定し、ブロック境界強度データＢｓ［２］に「３」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ２４：
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「ＭＣ＋Ｃｏｄｅｄ」または「ＭＣ＋Ｃｏｄｅｄ＋Ｑ」または「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」または「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ＋Ｑ」であると判断するとステップＳＴ２５に進み、そうでない場合にはステップＳＴ２６に進む。
ここで、「ＭＣ＋Ｃｏｄｅｄ」は、インター予測符号化（動き予測・補償）を要すること、すなわちインター予測符号化が行われたことを意味している。ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、インター予測符号化が行われ、量子化値の変換が行われたことを意味している。
「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」は、動き補償は行わず、ＤＣＴ係数の復号のみが行われたことを意味している。「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」は、動き補償は行わず、量子化値の変換が行われたことを意味している。
ＭＰＥＧ２の「ＭＣ＋Ｃｏｄｅｄ」および「ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｅｒ１６ｘ１６」に対応している。
「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」および「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「ＭＣ＋Ｃｏｄｅｄ」または「ＭＣ＋Ｃｏｄｅｄ＋Ｑ」または「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」または「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ＋Ｑ」であると判断するとステップＳＴ２５に進み、そうでない場合にはステップＳＴ２６に進む。
ここで、「ＭＣ＋Ｃｏｄｅｄ」は、インター予測符号化（動き予測・補償）を要すること、すなわちインター予測符号化が行われたことを意味している。ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、インター予測符号化が行われ、量子化値の変換が行われたことを意味している。
「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」は、動き補償は行わず、ＤＣＴ係数の復号のみが行われたことを意味している。「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」は、動き補償は行わず、量子化値の変換が行われたことを意味している。
ＭＰＥＧ２の「ＭＣ＋Ｃｏｄｅｄ」および「ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｅｒ１６ｘ１６」に対応している。
「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ」および「Ｎｏｔ ＭＣ＋Ｃｏｄｅｄ＋Ｑ」は、Ｈ．２６４／ＡＶＣの「Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ステップＳＴ２５：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］、Ｂｓ「２」に「２」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ２６：
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」であると判断するとステップＳＴ２７に進み、そうでない場合にはステップＳＴ３０に進む。
ここで、「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」は、動き補償は行うが、ＤＣＴ係数の復号は行わないことを意味している。
ＭＰＥＧ２の「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｅｒ１６ｘ１６」に対応している。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］、Ｂｓ「２」に「２」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ２６：
ＤＥＢ制御回路３９は、ステップＳＴ２１で入力したＭＢタイプが「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」であると判断するとステップＳＴ２７に進み、そうでない場合にはステップＳＴ３０に進む。
ここで、「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」は、動き補償は行うが、ＤＣＴ係数の復号は行わないことを意味している。
ＭＰＥＧ２の「ＭＣ＋Ｎｏｔ Ｃｏｄｅｄ」は、Ｈ．２６４／ＡＶＣの「Ｉｎｔｅｒ１６ｘ１６」に対応している。
ステップＳＴ２７：
ＤＥＢ制御回路３９は、処理対象のマクロブロックＭＢに隣接するマクロブロックＭＢが有効な直交変換係数（ＤＣＴ係数）を有していると判断するとステップＳＴ２８に進み、そうでない場合にステップＳＴ２９に進む。
ＤＥＢ制御回路３９は、処理対象のマクロブロックＭＢに隣接するマクロブロックＭＢが有効な直交変換係数（ＤＣＴ係数）を有していると判断するとステップＳＴ２８に進み、そうでない場合にステップＳＴ２９に進む。
ステップＳＴ２８：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「２」を設定する。
このとき、ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「２」を設定する。
このとき、ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ２９：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］およびＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］およびＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ３０：
ＳＴ３０に来た場合、ＭＢタイプは「Ｓｋｉｐ」である。
ここで、「Ｓｋｉｐ」は、動きベクトルを符号化しないことを意味している。
ＭＰＥＧ２においては、Ｐピクチャであるか、またはＢピクチャであるかにより処理が異なる。
ＰピクチャにおけるＭＰＥＧ２の「Ｓｋｉｐ」は、Ｈ．２６４／ＡＶＣの「Ｔｅｍｐｏｒａｌ Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ＢピクチャにおけるＭＰＥＧ２の「Ｓｋｉｐ」は、Ｈ．２６４／ＡＶＣの「Ｓｐａｔｉａｌ Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ＤＥＢ制御回路３９は、現在のピクチャタイプがＰピクチャであると判断するとステップＳＴ３１に進み、そうでない場合にはステップＳＴ３２に進む。
ステップＳＴ３１：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］、Ｂｓ「２」に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＳＴ３０に来た場合、ＭＢタイプは「Ｓｋｉｐ」である。
ここで、「Ｓｋｉｐ」は、動きベクトルを符号化しないことを意味している。
ＭＰＥＧ２においては、Ｐピクチャであるか、またはＢピクチャであるかにより処理が異なる。
ＰピクチャにおけるＭＰＥＧ２の「Ｓｋｉｐ」は、Ｈ．２６４／ＡＶＣの「Ｔｅｍｐｏｒａｌ Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ＢピクチャにおけるＭＰＥＧ２の「Ｓｋｉｐ」は、Ｈ．２６４／ＡＶＣの「Ｓｐａｔｉａｌ Ｄｉｒｅｃｔ１６ｘ１６」に対応している。
ＤＥＢ制御回路３９は、現在のピクチャタイプがＰピクチャであると判断するとステップＳＴ３１に進み、そうでない場合にはステップＳＴ３２に進む。
ステップＳＴ３１：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］、Ｂｓ「２」に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ３２：
ＤＥＢ制御回路３９は、処理対象のマクロブロックＭＢに隣接するマクロブロックＭＢが有効な直交変換係数（ＤＣＴ係数）を有していると判断するとステップＳＴ３３に進み、そうでない場合にステップＳＴ３４に進む。
ＤＥＢ制御回路３９は、処理対象のマクロブロックＭＢに隣接するマクロブロックＭＢが有効な直交変換係数（ＤＣＴ係数）を有していると判断するとステップＳＴ３３に進み、そうでない場合にステップＳＴ３４に進む。
ステップＳＴ３３：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「２」を設定する。
このとき、ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］に「２」を設定する。
このとき、ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ３４：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］およびＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［０］およびＢｓ［２］に「０」を設定する。
その後、ＤＥＢ制御回路３９は、図１２に示すステップＳＴ３５に進む。
ステップＳＴ３５：
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［１］，「３」に「０」を設定する。
ＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［１］，「３」に「０」を設定する。
以下、図２に示す復号装置３の動作例を説明する。
ここでは、ＭＰＥＧ２方式の画像データＳ９を復号する場合を説明する。
画像データＳ９は、蓄積バッファ３０に蓄積された後、可逆復号回路３１に出力される。
次に、可逆復号回路３１が、画像データＳ９内の処理対象のマクロブロックＭＢがインター符号化されていると判断した場合には、そのヘッダ部に書き込まれている動きベクトルを復号して動き予測・補償回路３６に出力する。
また、可逆復号回路３１は、画像データＳ９内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路３７に出力する。
また、可逆復号回路３１は、画像データＳ９を復号して逆量子化回路３２に出力する。
また、可逆復号回路３１は、画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥと、ＭＢタイプとをＤＥＢ制御回路３９に出力する。
ここでは、ＭＰＥＧ２方式の画像データＳ９を復号する場合を説明する。
画像データＳ９は、蓄積バッファ３０に蓄積された後、可逆復号回路３１に出力される。
次に、可逆復号回路３１が、画像データＳ９内の処理対象のマクロブロックＭＢがインター符号化されていると判断した場合には、そのヘッダ部に書き込まれている動きベクトルを復号して動き予測・補償回路３６に出力する。
また、可逆復号回路３１は、画像データＳ９内の処理対象のマクロブロックＭＢがイントラ符号化されていると判断した場合には、そのヘッダ部に書き込まれているイントラ予測モード情報を復号してイントラ予測回路３７に出力する。
また、可逆復号回路３１は、画像データＳ９を復号して逆量子化回路３２に出力する。
また、可逆復号回路３１は、画像データＳ９に含まれる各マクロブロックＭＢの量子化スケールＱ＿ＳＣＡＬＥと、ＭＢタイプとをＤＥＢ制御回路３９に出力する。
次に、逆量子化回路３２が、可逆復号回路３１で復号された画像データ（直交変換係数）を、可逆復号回路３１から入力した量子化スケールＱ＿ＳＣＡＬＥを基に逆量子化して逆直交変換回路３３に出力する。
次に、逆直交変換回路３３が、逆量子化回路３２から入力した画像データ（直交変換係数）に８ｘ８の逆直交変換処理を施して差分画像データを生成し、それを加算回路３４に出力する。
次に、加算回路３４が、動き予測・補償回路３６あるいはイントラ予測回路３７からの予測画像データＰＩと、逆直交変換回路３３からの差分画像データとを加算して画像データを生成し、これをフレームメモリ３５および画面並べ替えバッファ３８に書き込む。
次に、逆直交変換回路３３が、逆量子化回路３２から入力した画像データ（直交変換係数）に８ｘ８の逆直交変換処理を施して差分画像データを生成し、それを加算回路３４に出力する。
次に、加算回路３４が、動き予測・補償回路３６あるいはイントラ予測回路３７からの予測画像データＰＩと、逆直交変換回路３３からの差分画像データとを加算して画像データを生成し、これをフレームメモリ３５および画面並べ替えバッファ３８に書き込む。
上述した処理と並行して、ＤＥＢ制御回路３９が、図９に示す処理を行って、量子化パラメータＱＰをデブロックフィルタ４７に出力する。
また、ＤＥＢ制御回路３９が、図１０〜図１２に示す処理を行って、ブロック境界強度データＢｓをデブロックフィルタ４７に出力する。
また、ＤＥＢ制御回路３９が、図１０〜図１２に示す処理を行って、ブロック境界強度データＢｓをデブロックフィルタ４７に出力する。
そして、デブロックフィルタ４７が、ＤＥＢ制御回路３９から入力した量子化パラメータＱＰおよびブロック境界強度データＢｓを基に、画面並べ替えバッファ３８に記憶された画像データにデブロックフィルタ処理を施す。
その後、画像データが、表示順に可逆復号回路３１に読み出され、画像信号Ｓ１０に変換される。
その後、画像データが、表示順に可逆復号回路３１に読み出され、画像信号Ｓ１０に変換される。
一方、Ｈ．２６４／ＡＶＣ方式の画像データＳ１３を復号する場合には、ＡＶＣ復号装置１２が、一般的なＡＶＣ復号装置と同様に画像データＳ１３を復号して画像信号Ｓ１４を出力する。
以上説明したように、復号装置３によれば、ＭＰＥＧ２方式の画像データＳ９に対して、デブロックフィルタ４７によるデブロックフィルタ処理を施すことができ、ブロック歪が抑制された高品質な復号後の画像信号Ｓ１０を生成できる。
また、復号装置３によれば、ＡＶＣ復号装置１２のデブロックフィルタ４７を、ＭＰＥＧ２復号装置１０において利用するため、装置の大規模化を回避できる。
また、復号装置３によれば、ＡＶＣ復号装置１２のデブロックフィルタ４７を、ＭＰＥＧ２復号装置１０において利用するため、装置の大規模化を回避できる。
＜第１の変形例＞
ＭＰＥＧ２復号装置１０は、入力した画像データＳ９がインターレース信号だった場合に以下の処理を行う。
ＭＰＥＧ２では、インターレース信号に対して、フレーム予測に加えてフィールド予測やデュアルプライム予測、残差信号に対してフレームＤＣＴおよびフィールドＤＣＴが用いられる。これにより、フレーム信号とは異なるブロック歪みが現れる。
ＭＰＥＧ２復号装置１０は、符号化装置においてフィールド信号でＤＣＴ処理が行われ、且つ、画像データＳ９の処理対象のマクロブロックＭＢがフレーム構造である場合、図１３に示すように、画像データＳ９をフィールド構造に変換した後にデブロックフィルタ処理を行う。ここで、処理対象のマクロブロックＭＢは、フィールド構造に変換されて、横１６ｘ縦８ピクセルのブロックになる。
そして、ＭＰＥＧ２復号装置１０のＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［１］、［３］に、それぞれ第１実施形態で説明したブロック境界強度データＢｓ［０］，［２］と同じ値を設定する。
これにより、実際にＤＣＴ処理が行われたブロックを基準としてデブロックフィルタ処理を施すことができる。
ＭＰＥＧ２復号装置１０は、入力した画像データＳ９がインターレース信号だった場合に以下の処理を行う。
ＭＰＥＧ２では、インターレース信号に対して、フレーム予測に加えてフィールド予測やデュアルプライム予測、残差信号に対してフレームＤＣＴおよびフィールドＤＣＴが用いられる。これにより、フレーム信号とは異なるブロック歪みが現れる。
ＭＰＥＧ２復号装置１０は、符号化装置においてフィールド信号でＤＣＴ処理が行われ、且つ、画像データＳ９の処理対象のマクロブロックＭＢがフレーム構造である場合、図１３に示すように、画像データＳ９をフィールド構造に変換した後にデブロックフィルタ処理を行う。ここで、処理対象のマクロブロックＭＢは、フィールド構造に変換されて、横１６ｘ縦８ピクセルのブロックになる。
そして、ＭＰＥＧ２復号装置１０のＤＥＢ制御回路３９は、ブロック境界強度データＢｓ［１］、［３］に、それぞれ第１実施形態で説明したブロック境界強度データＢｓ［０］，［２］と同じ値を設定する。
これにより、実際にＤＣＴ処理が行われたブロックを基準としてデブロックフィルタ処理を施すことができる。
＜第２の変形例＞
本変形例では、ＤＣＴタイプの違いによるブロック境界強度データＢｓの設定方法について述べる。
ＭＰＥＧ２では、マクロブロックＭＢ毎にフレームＤＣＴとフィールドＤＣＴの２種類を選択可能である。
ここで、水平方向に隣接する２つのマクロブロックＭＢが、異なるＤＣＴタイプであった場合、ブロック歪みが生じる可能性は高い。一般に、ＭＰＥＧ２の符号化装置においてフレームＤＣＴが選択されるのは時間相関の高い部分で、フィールドＤＣＴが選択されるのはフィールド間で動きが生じている部分である。そのため、隣接マクロブロックＭＢにおいて画像の性質が異なると予想されるためである。
そのため、本変形例では、ＤＥＢ制御回路３９は、デブロックフィルタ処理の対象のマクロブロックＭＢと、それに水平方向に隣接するマクロブロックＭＢとの間でＤＣＴタイプが異なる場合に、例えば、水平方向のブロック境界強度データＢｓ［０］に「３」を設定する。すなわち、ＤＥＢ制御回路３９は、デブロックフィルタ処理の対象のマクロブロックＭＢと、それに水平方向に隣接するマクロブロックＭＢとの間でＤＣＴタイプが異なる場合に、同じ場合に比べて、境界部分に強いデブロックフィルタ処理を施すように制御する。
本変形例では、ＤＣＴタイプの違いによるブロック境界強度データＢｓの設定方法について述べる。
ＭＰＥＧ２では、マクロブロックＭＢ毎にフレームＤＣＴとフィールドＤＣＴの２種類を選択可能である。
ここで、水平方向に隣接する２つのマクロブロックＭＢが、異なるＤＣＴタイプであった場合、ブロック歪みが生じる可能性は高い。一般に、ＭＰＥＧ２の符号化装置においてフレームＤＣＴが選択されるのは時間相関の高い部分で、フィールドＤＣＴが選択されるのはフィールド間で動きが生じている部分である。そのため、隣接マクロブロックＭＢにおいて画像の性質が異なると予想されるためである。
そのため、本変形例では、ＤＥＢ制御回路３９は、デブロックフィルタ処理の対象のマクロブロックＭＢと、それに水平方向に隣接するマクロブロックＭＢとの間でＤＣＴタイプが異なる場合に、例えば、水平方向のブロック境界強度データＢｓ［０］に「３」を設定する。すなわち、ＤＥＢ制御回路３９は、デブロックフィルタ処理の対象のマクロブロックＭＢと、それに水平方向に隣接するマクロブロックＭＢとの間でＤＣＴタイプが異なる場合に、同じ場合に比べて、境界部分に強いデブロックフィルタ処理を施すように制御する。
本発明は上述した実施形態には限定されない。
すなわち、当業者は、本発明の技術的範囲またはその均等の範囲内において、上述した実施形態の構成要素に関し、様々な変更、コンビネーション、サブコンビネーション、並びに代替を行ってもよい。
例えば、上述した復号装置３の機能の全部あるいは一部を、図１３に示すように、メモリ２５２に記憶されたプログラムＰＲＧの記述に従ってＣＰＵ(Central Processing Unit)などの処理回路２５３が実行してもよい。
この場合に、インターフェース２５１を介して、復号対象の画像データが入力され、その処理結果が出力される。
すなわち、当業者は、本発明の技術的範囲またはその均等の範囲内において、上述した実施形態の構成要素に関し、様々な変更、コンビネーション、サブコンビネーション、並びに代替を行ってもよい。
例えば、上述した復号装置３の機能の全部あるいは一部を、図１３に示すように、メモリ２５２に記憶されたプログラムＰＲＧの記述に従ってＣＰＵ(Central Processing Unit)などの処理回路２５３が実行してもよい。
この場合に、インターフェース２５１を介して、復号対象の画像データが入力され、その処理結果が出力される。
また、上述した例では、ＭＰＥＧ−２を入力とする場合について述べてきたが、本発明の範囲はこれに限らず、離散コサイン変換等の直交変換を利用するＪＰＥＧ、ＭＰＥＧ、Ｈ．２６ｘに代表される画像符号化方式一般に、適用可能である。
１…通信システム、２…符号化装置、３…復号装置、１０…ＭＰＥＧ２復号装置、１２…ＡＶＣ復号装置、３０…蓄積バッファ、３１…可逆復号回路、３２…逆量子化回路、３３…逆直交変換回路、３４…加算回路、３５…フレームメモリ、３６…動き予測・補償回路、３７…イントラ予測回路、３８…画面並べ替えバッファ、３９…蓄積バッファ、４１…Ｄ／Ａ変換回路、４７…デブロックフィルタ、５０…蓄積バッファ、５１…可逆復号回路、５２…逆量子化回路、５３…逆直交変換回路、５４…加算回路、５５…フレームメモリ、５６…動き予測・補償回路、５７…イントラ予測回路、５８…画面並べ替えバッファ、８１…α・β取得部、８２…ｉｎｄｅｘ算出部、８３…ｔｃ０取得部、８４…フィルタ演算部
Claims (12)
- 各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理装置であって、
フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する制御手段と、
前記制御手段が選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施すフィルタ手段と
を有する画像処理装置。 - 前記制御手段は、前記符号化タイプに基づいて、前記処理対象のブロックデータを構成する複数のサブブロックデータの境界部分のフィルタ強度を示すブロック境界強度データを生成し、
前記フィルタ手段は、前記制御手段が生成した前記ブロック境界強度データが示すフィルタ強度で、前記複数のサブブロックデータの境界部分にフィルタ処理を施す
請求項１に記載の画像処理装置。 - 前記制御手段は、前記処理対象のブロックデータの符号化タイプがイントラ符号化である場合に、インター符号化である場合に比べて強いフィルタ強度を示す前記ブロック境界強度データを生成する
請求項２に記載の画像処理装置。 - 前記画像データは、前記複数のサブブロックデータを単位として直交変換して生成された画像データであり、
前記制御手段は、前記サブブロックデータの境界部分のうち、前記直交変換の単位の境界部分に、前記直交変換の単位の境界部分に比べて強いフィルタ処理を施すように、前記ブロック境界強度データを生成する
請求項２に記載の画像処理装置。 - 前記フィルタ手段は、単数の前記サブブロックデータを単位として直交変換して生成された画像データのフィルタ処理を、前記処理対象のブロックデータに対応付けられたブロック境界強度データが示すフィルタ強度で行う
請求項２に記載の画像処理装置。 - 前記符号化タイプは、イントラ予測符号、インター予測符号、スキップ、並びに量子化ステップ更新の有無の少なくとも一つを示している
請求項１に記載の画像処理装置。 - 前記制御手段は、前記ブロックデータの量子化スケールを量子化パラメータに変換し、当該量子化パラメータを前記フィルタ手段に出力し、
前記フィルタ手段は、前記制御手段から入力した前記量子化パラメータにさらに基づいて、前記フィルタ処理を行う
請求項１に記載の画像処理装置。 - 処理対象の画像データを、当該画像データが符号化された際のピクチャ構造に変換する変換手段
をさらに有し、
前記制御手段は、前記変換手段による前記変換後の前記サブブロックデータの境界部分に応じて前記ブロック境界強度データを生成する
請求項２に記載の画像処理装置。 - 前記ブロックデータが符号化時に直交変換されている場合に、
前記制御手段は、前記処理対象のブロックデータの前記直交変換のタイプと、当該処理対象のブロックデータに隣接するブロックデータの前記直交変換のタイプとが異なる場合に、同じ場合に比べて、当該２つのブロックデータの境界部分の前記フィルタ強度を強くするように前記ブロック境界強度データを生成する
請求項２に記載の画像処理装置。 - 各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理装置であって、
復号対象の画像データのブロックデータを可逆復号する可逆復号回路と、
前記可逆復号回路が可逆復号したブロックデータを逆量子化する逆量子化回路と、
前記逆量子化回路が逆量子化したブロックデータを逆直交変換する逆直交変換回路と、
前記逆直交変換回路が生成したブロックデータと、予測画像データとを基に再構成画像データを生成する加算回路と、
前記復号対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する制御手段と、
前記制御手段が選択した前記フィルタ処理内容に従って、前記加算回路生成した再構成画像データにフィルタ処理を施すフィルタ手段と
を有する画像処理装置。 - 各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号する画像処理方法であって、
フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する第１の工程と、
前記第１の工程で選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施す第２の工程と
を有する画像処理方法。 - 各ブロックデータをそれぞれのブロックデータに規定された符号化タイプで符号化して生成された画像データを復号するコンピュータが実行するプログラムであって、
フィルタ処理対象のブロックデータの前記符号化タイプに基づいて、当該ブロックデータに施すフィルタ処理内容を選択する第１の手順と、
前記第１の手順で選択した前記フィルタ処理内容に従って、前記処理対象のブロックデータにフィルタ処理を施す第２の手順と
を前記コンピュータに実行させるプログラム。
Priority Applications (14)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005214494A JP4784188B2 (ja) | 2005-07-25 | 2005-07-25 | 画像処理装置、画像処理方法およびプログラム |
| TW095126973A TW200715869A (en) | 2005-07-25 | 2006-07-24 | Image processing device, image processing method, and program |
| EP20130184285 EP2675164A1 (en) | 2005-07-25 | 2006-07-25 | Image processing system, image processing method and program |
| KR1020087004324A KR101241728B1 (ko) | 2005-07-25 | 2006-07-25 | 화상 처리 장치, 화상 처리 방법 및 프로그램을 기록한 컴퓨터 판독가능 기록 매체 |
| US11/996,720 US8396307B2 (en) | 2005-07-25 | 2006-07-25 | Image processing system, image processing method and program |
| EP06781551A EP1909504A4 (en) | 2005-07-25 | 2006-07-25 | IMAGE PROCESSING DEVICE, IMAGE PROCESSING METHOD, AND PROGRAM |
| CN2010105284707A CN101969563B (zh) | 2005-07-25 | 2006-07-25 | 图像处理装置以及图像处理方法 |
| PCT/JP2006/314639 WO2007013437A1 (ja) | 2005-07-25 | 2006-07-25 | 画像処理装置、画像処理方法およびプログラム |
| CN2006800353261A CN101273638B (zh) | 2005-07-25 | 2006-07-25 | 图像处理装置以及图像处理方法 |
| HK08113956A HK1120694A1 (en) | 2005-07-25 | 2008-12-24 | Image processing system and image processing method |
| US14/081,223 US8923637B2 (en) | 2005-07-25 | 2013-11-15 | Image processing system, image processing method and program |
| US14/554,343 US9402077B2 (en) | 2005-07-25 | 2014-11-26 | Image processing system, image processing method and program |
| US15/192,027 US10271070B2 (en) | 2005-07-25 | 2016-06-24 | Image processing system, image processing method and program |
| US16/297,925 US10681385B2 (en) | 2005-07-25 | 2019-03-11 | Image processing system, image processing method and program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2005214494A JP4784188B2 (ja) | 2005-07-25 | 2005-07-25 | 画像処理装置、画像処理方法およびプログラム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2007036463A true JP2007036463A (ja) | 2007-02-08 |
| JP4784188B2 JP4784188B2 (ja) | 2011-10-05 |
Family
ID=37683333
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2005214494A Active JP4784188B2 (ja) | 2005-07-25 | 2005-07-25 | 画像処理装置、画像処理方法およびプログラム |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US8396307B2 (ja) |
| EP (2) | EP1909504A4 (ja) |
| JP (1) | JP4784188B2 (ja) |
| KR (1) | KR101241728B1 (ja) |
| CN (2) | CN101969563B (ja) |
| HK (1) | HK1120694A1 (ja) |
| TW (1) | TW200715869A (ja) |
| WO (1) | WO2007013437A1 (ja) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009055416A (ja) * | 2007-08-28 | 2009-03-12 | Nec Corp | 映像再符号化方法、映像再符号化装置及び映像再符号化プログラム |
| JP2009194617A (ja) * | 2008-02-14 | 2009-08-27 | Sony Corp | 画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体 |
| JP2011501534A (ja) * | 2007-10-10 | 2011-01-06 | クゥアルコム・インコーポレイテッド | 普遍的なブロック歪みの訂正 |
| JP2011515981A (ja) * | 2008-03-27 | 2011-05-19 | エルジー エレクトロニクス インコーポレイティド | ビデオ信号のエンコーディングまたはデコーディング方法及び装置 |
| WO2011145601A1 (ja) | 2010-05-18 | 2011-11-24 | ソニー株式会社 | 画像処理装置と画像処理方法 |
| JP2013501449A (ja) * | 2009-08-04 | 2013-01-10 | サムスン エレクトロニクス カンパニー リミテッド | 映像データのデブロッキングフィルタリング装置及び方法とそれを用いるビデオ復号化装置及び方法 |
| JP2014533027A (ja) * | 2011-11-04 | 2014-12-08 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 改良型画像ブロック境界強度導出法を用いたデブロッキングフィルタリング処理 |
| US9077989B2 (en) | 2010-04-09 | 2015-07-07 | Sony Corporation | Image processing apparatus and image processing method for removing blocking artifacts |
Families Citing this family (21)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US8625914B2 (en) | 2013-02-04 | 2014-01-07 | Sony Corporation | Image processing system, image processing method and program |
| WO2009092454A1 (en) * | 2008-01-21 | 2009-07-30 | Telefonaktiebolaget Lm Ericsson (Publ) | Prediction-based image processing |
| AU2009220567A1 (en) * | 2008-03-07 | 2009-09-11 | Kabushiki Kaisha Toshiba | Dynamic image encoding/decoding device |
| KR101552639B1 (ko) * | 2008-07-11 | 2015-09-14 | 한국전자통신연구원 | 인트라 매크로 블록의 디블록킹 필터 및 필터링 방법 |
| KR101051871B1 (ko) * | 2009-08-24 | 2011-07-25 | 성균관대학교산학협력단 | 디블록킹 필터에서의 경계면 세기 계수 판단 장치 및 방법 |
| JP2011049740A (ja) * | 2009-08-26 | 2011-03-10 | Sony Corp | 画像処理装置および方法 |
| JP2011151431A (ja) * | 2009-12-25 | 2011-08-04 | Sony Corp | 画像処理装置および方法 |
| KR20110123651A (ko) | 2010-05-07 | 2011-11-15 | 한국전자통신연구원 | 생략 부호화를 이용한 영상 부호화 및 복호화 장치 및 그 방법 |
| JP6056122B2 (ja) * | 2011-01-24 | 2017-01-11 | ソニー株式会社 | 画像符号化装置と画像復号装置およびその方法とプログラム |
| CA2801215C (en) | 2011-02-22 | 2020-06-30 | Panasonic Corporation | Filtering method, moving picture coding apparatus, moving picture decoding apparatus, and moving picture coding and decoding apparatus |
| US8660375B2 (en) | 2011-02-22 | 2014-02-25 | Panasonic Corporation | Image coding method, image decoding method, image coding apparatus, image decoding apparatus, and image coding and decoding apparatus |
| WO2012119540A1 (en) * | 2011-03-10 | 2012-09-13 | Mediatek Singapore Pte. Ltd. | Method and apparatus of deblocking filter |
| HUE049204T2 (hu) | 2011-07-19 | 2020-09-28 | Tagivan Ii Llc | Szûrési eljárás, mozgókép dekódoló eljárás, mozgókép kódoló eljárás, mozgókép dekódoló berendezés, mozgókép kódoló berendezés, mozgókép kódoló/dekódoló berendezés |
| JP5159927B2 (ja) * | 2011-07-28 | 2013-03-13 | 株式会社東芝 | 動画像復号装置及び動画像復号方法 |
| WO2013076978A1 (ja) * | 2011-11-25 | 2013-05-30 | パナソニック株式会社 | 画像処理方法および画像処理装置 |
| JP2013150215A (ja) | 2012-01-20 | 2013-08-01 | Fujitsu Ltd | 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム |
| JP6000763B2 (ja) * | 2012-08-31 | 2016-10-05 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
| JP6317720B2 (ja) * | 2015-11-09 | 2018-04-25 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム |
| JP2016054514A (ja) * | 2015-11-09 | 2016-04-14 | 富士通株式会社 | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム |
| CN114173118B (zh) * | 2016-12-27 | 2023-10-20 | 松下电器（美国）知识产权公司 | 编码方法、解码方法及发送方法 |
| KR20220049520A (ko) | 2019-08-23 | 2022-04-21 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 코딩 블록 또는 서브블록 경계에서의 디블로킹 필터링 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001078187A (ja) * | 1999-09-01 | 2001-03-23 | Matsushita Electric Ind Co Ltd | 画像復号化装置 |
| JP2001224031A (ja) * | 2000-02-10 | 2001-08-17 | Sharp Corp | 動画像復号装置 |
| JP2001346207A (ja) * | 2000-05-30 | 2001-12-14 | Sony Corp | 画像情報変換装置及び方法 |
| JP2005033411A (ja) * | 2003-07-10 | 2005-02-03 | Kddi Corp | 動画像配信装置 |
| JP2006509444A (ja) * | 2002-12-10 | 2006-03-16 | タット・システムズ・インコーポレイテッド | ピクチュアベースの先読みウィンドウによるレート制御 |
Family Cites Families (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5454051A (en) * | 1991-08-05 | 1995-09-26 | Eastman Kodak Company | Method of reducing block artifacts created by block transform compression algorithms |
| US6222881B1 (en) * | 1994-10-18 | 2001-04-24 | Intel Corporation | Using numbers of non-zero quantized transform signals and signal differences to determine when to encode video signals using inter-frame or intra-frame encoding |
| TW293227B (ja) | 1994-11-24 | 1996-12-11 | Victor Company Of Japan | |
| FI117534B (fi) * | 2000-01-21 | 2006-11-15 | Nokia Corp | Menetelmä digitaalisten kuvien suodattamiseksi ja suodatin |
| EP2320660B8 (en) | 2001-11-29 | 2015-09-09 | Godo Kaisha IP Bridge 1 | Coding distortion removal method |
| MXPA03006715A (es) | 2001-11-29 | 2003-10-24 | Matsushita Electric Ind Co Ltd | Metodo para la remocion de la distorsion de la codificacion, metodo codificador de video, metodo descodificador de video y aparato y programa para los mismos. |
| JP2003179921A (ja) | 2001-12-10 | 2003-06-27 | Matsushita Electric Ind Co Ltd | 符号化映像復号化装置 |
| CN1285214C (zh) * | 2004-01-14 | 2006-11-15 | 华中科技大学 | 一种环路滤波方法和环路滤波器 |
| US7778480B2 (en) * | 2004-11-23 | 2010-08-17 | Stmicroelectronics Asia Pacific Pte. Ltd. | Block filtering system for reducing artifacts and method |
| US7620261B2 (en) * | 2004-11-23 | 2009-11-17 | Stmicroelectronics Asia Pacific Pte. Ltd. | Edge adaptive filtering system for reducing artifacts and method |
-
2005
- 2005-07-25 JP JP2005214494A patent/JP4784188B2/ja active Active
-
2006
- 2006-07-24 TW TW095126973A patent/TW200715869A/zh unknown
- 2006-07-25 EP EP06781551A patent/EP1909504A4/en not_active Withdrawn
- 2006-07-25 CN CN2010105284707A patent/CN101969563B/zh active Active
- 2006-07-25 CN CN2006800353261A patent/CN101273638B/zh active Active
- 2006-07-25 US US11/996,720 patent/US8396307B2/en active Active
- 2006-07-25 WO PCT/JP2006/314639 patent/WO2007013437A1/ja active Application Filing
- 2006-07-25 EP EP20130184285 patent/EP2675164A1/en not_active Ceased
- 2006-07-25 KR KR1020087004324A patent/KR101241728B1/ko active IP Right Grant
-
2008
- 2008-12-24 HK HK08113956A patent/HK1120694A1/xx unknown
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2001078187A (ja) * | 1999-09-01 | 2001-03-23 | Matsushita Electric Ind Co Ltd | 画像復号化装置 |
| JP2001224031A (ja) * | 2000-02-10 | 2001-08-17 | Sharp Corp | 動画像復号装置 |
| JP2001346207A (ja) * | 2000-05-30 | 2001-12-14 | Sony Corp | 画像情報変換装置及び方法 |
| JP2006509444A (ja) * | 2002-12-10 | 2006-03-16 | タット・システムズ・インコーポレイテッド | ピクチュアベースの先読みウィンドウによるレート制御 |
| JP2005033411A (ja) * | 2003-07-10 | 2005-02-03 | Kddi Corp | 動画像配信装置 |
Cited By (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2009055416A (ja) * | 2007-08-28 | 2009-03-12 | Nec Corp | 映像再符号化方法、映像再符号化装置及び映像再符号化プログラム |
| JP2011501534A (ja) * | 2007-10-10 | 2011-01-06 | クゥアルコム・インコーポレイテッド | 普遍的なブロック歪みの訂正 |
| US8619880B2 (en) | 2007-10-10 | 2013-12-31 | Qualcomm Incorporated | Universal blockiness correction |
| JP2009194617A (ja) * | 2008-02-14 | 2009-08-27 | Sony Corp | 画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体 |
| US8711950B2 (en) | 2008-02-14 | 2014-04-29 | Sony Corporation | Apparatus and method for adapted deblocking filtering strength |
| US8634479B2 (en) | 2008-03-27 | 2014-01-21 | Lg Electronics Inc. | Decoding a video signal using in-loop filter |
| JP2011515981A (ja) * | 2008-03-27 | 2011-05-19 | エルジー エレクトロニクス インコーポレイティド | ビデオ信号のエンコーディングまたはデコーディング方法及び装置 |
| US8385411B2 (en) | 2008-03-27 | 2013-02-26 | Lg Electronics Inc. | Method and an apparatus for encoding or decoding a video signal |
| CN101981933B (zh) * | 2008-03-27 | 2013-05-29 | Lg电子株式会社 | 用于编码或者解码视频信号的方法和设备 |
| JP2013501449A (ja) * | 2009-08-04 | 2013-01-10 | サムスン エレクトロニクス カンパニー リミテッド | 映像データのデブロッキングフィルタリング装置及び方法とそれを用いるビデオ復号化装置及び方法 |
| US9077989B2 (en) | 2010-04-09 | 2015-07-07 | Sony Corporation | Image processing apparatus and image processing method for removing blocking artifacts |
| US9613400B2 (en) | 2010-04-09 | 2017-04-04 | Sony Corporation | Image processing apparatus and image processing method |
| US10373295B2 (en) | 2010-04-09 | 2019-08-06 | Sony Corporation | Image processing apparatus and image processing method |
| WO2011145601A1 (ja) | 2010-05-18 | 2011-11-24 | ソニー株式会社 | 画像処理装置と画像処理方法 |
| US8855434B2 (en) | 2010-05-18 | 2014-10-07 | Sony Corporation | Image processing device and image processing method |
| US9167267B2 (en) | 2010-05-18 | 2015-10-20 | Sony Corporation | Image processing device and image processing method |
| US9253506B2 (en) | 2010-05-18 | 2016-02-02 | Sony Corporation | Image processing device and image processing method |
| KR20180121670A (ko) | 2010-05-18 | 2018-11-07 | 소니 주식회사 | 화상 처리 장치와 화상 처리 방법 |
| US10477206B2 (en) | 2010-05-18 | 2019-11-12 | Sony Corporation | Image processing device and image processing method |
| JP2014533027A (ja) * | 2011-11-04 | 2014-12-08 | パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカＰａｎａｓｏｎｉｃ Ｉｎｔｅｌｌｅｃｔｕａｌ Ｐｒｏｐｅｒｔｙ Ｃｏｒｐｏｒａｔｉｏｎ ｏｆ Ａｍｅｒｉｃａ | 改良型画像ブロック境界強度導出法を用いたデブロッキングフィルタリング処理 |
| JP2017085651A (ja) * | 2011-11-04 | 2017-05-18 | サン パテント トラスト | フィルタリング方法およびフィルタリング装置 |
| JP2018033160A (ja) * | 2011-11-04 | 2018-03-01 | サン パテント トラスト | 符号化方法、プログラムおよび符号化装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US8396307B2 (en) | 2013-03-12 |
| TWI351880B (ja) | 2011-11-01 |
| EP2675164A1 (en) | 2013-12-18 |
| US20100142835A1 (en) | 2010-06-10 |
| CN101273638B (zh) | 2010-12-22 |
| WO2007013437A1 (ja) | 2007-02-01 |
| KR20080042839A (ko) | 2008-05-15 |
| TW200715869A (en) | 2007-04-16 |
| HK1120694A1 (en) | 2009-04-03 |
| EP1909504A1 (en) | 2008-04-09 |
| KR101241728B1 (ko) | 2013-03-11 |
| CN101969563B (zh) | 2012-07-18 |
| CN101273638A (zh) | 2008-09-24 |
| EP1909504A4 (en) | 2011-03-16 |
| CN101969563A (zh) | 2011-02-09 |
| JP4784188B2 (ja) | 2011-10-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4784188B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
| KR101538704B1 (ko) | 보간 필터를 적응적으로 사용하여 영상을 부호화 및 복호화하는 방법 및 장치 | |
| JP5889392B2 (ja) | イントラ予測モードにおける映像復号化方法 | |
| RU2497303C2 (ru) | Видео кодирование с использованием преобразования больше чем 4×4 и 8×8 | |
| TWI604733B (zh) | 一種後期處理重建畫面的設備 | |
| WO2011145601A1 (ja) | 画像処理装置と画像処理方法 | |
| WO2011125729A1 (ja) | 画像処理装置と画像処理方法 | |
| US10681385B2 (en) | Image processing system, image processing method and program | |
| JP2017513326A (ja) | ピクセル距離を使用したデブロックフィルタ処理 | |
| KR20110071231A (ko) | 부호화 방법, 복호화 방법 및 장치 | |
| KR20060109290A (ko) | 화상 복호 장치 및 화상 복호 방법과 화상 복호 프로그램 | |
| US20050129125A1 (en) | Method and apparatus for pitcure compression using variable block of arbitrary size | |
| JP2004328634A (ja) | 画像復号化装置及び方法 | |
| MX2014011602A (es) | Dispositivo y metodo para el procesamiento de imagenes. | |
| JP2005110083A (ja) | データ処理装置およびその方法と符号化装置 | |
| JP2007053554A (ja) | 符号化装置、符号化方法、復号装置、復号方法およびプログラム | |
| JP2008219205A (ja) | 画像情報符号化装置及び画像情報符号化方法 | |
| JP2007006390A (ja) | 画像処理装置、画像処理方法及びプログラム | |
| JP2005223631A (ja) | データ処理装置およびその方法と符号化装置および復号装置 | |
| JP2005252609A (ja) | データ処理装置およびその方法と符号化装置 | |
| KR100710338B1 (ko) | 멀티 포맷 비디오 디코더 및 디블로킹 필터링 방법 | |
| KR101204385B1 (ko) | 인트라 예측 모드에서의 영상 복호화 방법 | |
| JP2008109424A (ja) | 動画像符号化装置、動画像符号化プログラム、動画像復号化装置及び動画像復号化プログラム | |
| KR20130049604A (ko) | 엔트로피 부호화에서 모드 전환 방법 | |
| JP2006352238A (ja) | 画像処理装置、画像処理方法及びプログラム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080714 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100706 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100804 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110222 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20110425 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110614 |
|
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110627 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 4784188 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140722 Year of fee payment: 3 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D02 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: R3D04 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313113 |
|
| R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |