JP2007287031A - 画像処理装置及び画像処理方法 - Google Patents
画像処理装置及び画像処理方法 Download PDFInfo
- Publication number
- JP2007287031A JP2007287031A JP2006115792A JP2006115792A JP2007287031A JP 2007287031 A JP2007287031 A JP 2007287031A JP 2006115792 A JP2006115792 A JP 2006115792A JP 2006115792 A JP2006115792 A JP 2006115792A JP 2007287031 A JP2007287031 A JP 2007287031A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image data
- block
- blocks
- filter
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title description 3
- 238000000034 method Methods 0.000 claims description 61
- 238000009499 grossing Methods 0.000 claims description 2
- 238000001914 filtration Methods 0.000 description 56
- 238000010586 diagram Methods 0.000 description 9
- 238000013139 quantization Methods 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 3
- 230000006835 compression Effects 0.000 description 3
- 238000007906 compression Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000009466 transformation Effects 0.000 description 2
- 101000969688 Homo sapiens Macrophage-expressed gene 1 protein Proteins 0.000 description 1
- 102100021285 Macrophage-expressed gene 1 protein Human genes 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
Images
Abstract
【解決手段】水平及び垂直方向に配列された複数の画素で構成される画像を処理する画像処理装置において、画像データを水平方向及び垂直方向に画素を所定の数ずつ配置して構成される画素ブロックごとに画像処理をするフィルタ処理部204、フィルタ処理部204によって処理される画像データを保存するデブロッキング・フィルタ用バッファ203、デブロッキング・フィルタ用バッファ203に保存されている画像データを更新する読込み制御部201、書込み制御部202を設ける。そして、デブロッキング・フィルタ用バッファ203を、4×4ブロックが水平方向、垂直方向の少なくとも一方向に沿って配置され、かつ互いに隣接する構成を単位にして画像データを保存する。
【選択図】図2
Description
本発明は、このような点に鑑みてなされたものであり、フィルタ処理等の画像の演算処理に使用されるメモリをより小型化し、より小型かつ低廉な画像処理装置を提供することを目的とする。
このような発明によれば、フィルタ処理等の画素ブロック境界の処理に必要最低限の画像データだけを保存してフィルタ処理等の画像の演算処理に使用されるメモリをより小型化し、より小型かつ低廉な画像処理装置を提供することができる。
このような発明によれば、1画素ブロック分のフィルタ処理等の画素ブロック境界の処理に必要であって最低限の画像データだけを保存することができる。このため、フィルタ処理等の画像の演算処理に使用されるメモリをより小型化し、より小型かつ低廉な画像処理装置を提供することができる。
このような発明によれば、フィルタ処理等の画素ブロック境界の処理に必要最低限の画像データだけを保存してフィルタ処理等の画像の演算処理に使用されるメモリをより小型化し、より小型かつ低廉な画像処理装置を提供することができる。
このような発明によれば、フィルタ処理等の画素ブロック境界の処理に必要最低限の画像データだけを保存してフィルタ処理等の画像の演算処理に使用されるメモリをより小型化し、より小型かつ低廉な画像処理装置を提供することができる。
このような発明によれば、いったん保存された画素ブロックの画像データを、画素ブロックの水平、垂直両方向の境界について画像データを更新することなく演算処理することができる。このため、画像データの転送回数を低減し、画像処理をより効率化することができる。
このような発明によれば、画像保存手段に保存されている画像データを書出し、読込み等することなく、画像データの保存場所を速やかに順次更新することができる。
図1は、本実施形態に共通の画像処理装置がデブロッキング・フィルタ1に適用された符号化器を示している。図1に示した符号化器は、入力画像データを、DCT変換を含む処理する整数トランスフォーム部113、量子化する量子化部114、量子化を制御する符号化制御部112、符号化するエントロピー符号化部111を備えている。以上の構成は、プロセッサ101上で動作するソフトウェアに対応する。
予測画像データを生成する構成は、逆量子化部115、逆整数トランスフォーム部116、加算器117、デブロッキング・フィルタ1、フレームメモリ118、119、イントラ予測部120、インター予測部121、動きベクトル検出部122、選択器123を備えている。
また、符号化器は、いったん量子化された画像データを再び逆量子化部115によって逆量子化した後、逆整数トランスフォーム部116によって逆変換し、予測画像データと加算する。デブロッキング・フィルタ1は、加算して得られた画像データをフィルタリングしてインター予測用のフレームメモリ119に送出する。インター予測部121は、フレームメモリ119から画像データを読込んでインター予測し、選択器123に送る。なお、動きベクトル検出部122は、インター予測画像データから動きベクトルを検出する。
選択器123は、インター予測画像データ、イントラ予測画像データのうち、より高い圧縮率を得られるものを選択する。そして、選択された予測画像データを加算器117に送出すると共に、次の1フレーム分の入力画像データとの差分をとるため減算器に出力する。
上記した構成のうち、本実施形態では、デブロッキング・フィルタ用バッファ203が画像保存手段、フィルタ処理部204が画像処理更新手段、読込み制御部201及び書出し制御部202として機能する。
次に、本発明の実施形態1について説明する。図3(a)、(b)、(c)は、実施形態1のデブロッキング・フィルタ用バッファ203を説明するための図である。実施形態1は、フレームメモリ119に保存されている1フレーム分の画像データを、図3(a)に示すマクロブロック(16×16個の画素でなるブロックとする)301をさらに分割して得られる画素ブロック(4×4ブロック)302が水平方向、垂直方向の少なくとも一方向に沿って配置され、かつ互いに隣接する構成を単位にして画像データを保存する構成を有している。
フィルタ処理は、隣接する画素ブロックに含まれる画素の画素値を、画素とマクロブロック境界との位置関係に対応する変換係数(強度)によって変換する処理をいう。また、フィルタ処理には、フィルタをかけるか否か(オン、オフ)の判定、フィルタオンの場合のフィルタ強度の決定、決定した強度による画像データの変換が含まれる。
なお、フィルタ強度等の条件は、マクロブロック301境界と画素の位置関係によって決まる。したがって、図3(a)に示したマクロブロック301のうち、同じ行に属する4×4ブロック、同じ列に属する4×4ブロックには同様の条件でフィルタ処理がなされるものとする。
1マクロブロック分の画像データの処理が終了した場合には(S705:Yes)、さらに、1フレーム分の画像データのフィルタ処理が終了したか否か判断する(S706)。1フレーム分の画像データのフィルタリングが未完であれば(S706:No)、次の1マクロブロック分の画像データを入力し、上記した処理を続行する。
フィルタ処理部204は、2つの4×4ブロックの画像データの境界についてのフィルタ処理が完了したか否か判断する(S605)。なお、バッファ部304は、画像データを4×4ブロックが水平方向に配列されるように保存するので、境界では垂直方向に配列された画素の画像データ同士が接する。このため、バッファ部303に保存されたデータをフィルタ処理部204で処理した場合、4×4ブロック302の水平方向の境界がフィルタ処理されることになる。実施形態1では、この処理の終了をブロック水平ライン終了と記す。
より具体的には、バッファ部304の更新は次のように行われる。すなわち、書出し制御部202は、画像処理がされた4×4ブロック(0,−1)、4×4ブロック(0,0)の画像データのうち、一部の4×4ブロック(0,−1)を外部に書出す。読込み制御部201は、未処理の4×4ブロック(0,1)の画像データを読込む。4×4ブロック(0,1)の画像データのデータ量は、書出された4×4ブロック(0,−1)のデータ量に相当する。
垂直方向フィルタ処理では、先ず、読込み制御部201が、処理対象となる4×4ブロック302のフィルタのオン、またはオフを判定する(S610)。なお、本実施形態では、ステップ610が、フィルタオンの場合のフィルタ強度の判定を含むものとする。フィルタ強度等の処理条件が決定した後、読込み制御部201が1ブロック分(バッファ部303に保存できる画像データ量)の画像データをフレームメモリ119から読出す(バッファ部303に読込む)(S611)。
実施形態1では、図3(a)に示した−1,0の位置にある4×4ブロック(4×4ブロック(−1,0))と0,0の位置にある4×4ブロック(4×4ブロック(0,0))とがバッファ部303に読込まれる。そして、4×4ブロック(−1,0)、4×4ブロック(0,0)に含まれる画素の値が設定されたフィルタ強度によって変換される。
より具体的には、バッファ部303の更新は次のように行われる。すなわち、書出し制御部202は、画像処理がされた4×4ブロック(−1,0)、4×4ブロック(0,0)の画像データのうち、一部の4×4ブロック(−1,0)を外部に書出す。そして、読込み制御部201が、未処理の4×4ブロック(1,0)の画像データを読込む。4×4ブロック(1,0)の画像データのデータ量は、書出された4×4ブロック(−1,0)のデータ量に相当する。
次に、本発明の実施形態2の画像処理装置を説明する。なお、実施形態2において、実施形態1で説明したのと同様の内容については一部説明を略すものとする。
図6(a)、(b)、(c)は、実施形態2のデブロッキング・フィルタ用バッファ203を説明するための図である。実施形態2のデブロッキング・フィルタ用バッファ203は、図6(a)に示す4×4ブロック302を水平方向に沿って配置した4×4ブロック302の行の2行分保存するバッファ部63(図6(b))、垂直方向に沿って配置された画素ブロックの列の2列分の保存するバッファ部64(図6(c))で構成されている。
フィルタ処理部204は、バッファ部64に読込まれた画像データの水平方向に配列された4×4ブロック302同士の境界にデブロックフィルタ処理をする(S704)。実施形態2では、先ず、図6(a)に示した4×4ブロック(0,−1)〜4×4ブロック(3,−1)、4×4ブロック(0,0)〜4×4ブロック(3,0)がバッファ部64に読込まれる。そして、4×4ブロック(0,−1)〜4×4ブロック(3,−1)、4×4ブロック(0,0)〜4×4ブロック(3,0)に含まれる画素の値が設定されたフィルタ強度によって変換される。
以上述べた実施形態2によれば、デブロッキング・フィルタ用フィルタを従来よりも小型化、低廉化できる上、いったん読込まれた4×4ブロック分のデータを更新することなくフィルタ処理をすることができる。
次に、本発明の実施形態3の画像処理装置を説明する。なお、実施形態3において、実施形態1、実施形態2で説明したのと同様の内容については一部説明を略すものとする。
図8は、実施形態3のデブロッキング・フィルタ用バッファ203を説明するための図である。実施形態3のデブロッキング・フィルタ用バッファ203は、水平方向及び垂直方向に沿って配置され、かつ互いに隣接する3つの4×4ブロック302の画像データだけを保存するバッファ部801を備えている。
また、実施形態3では、フィルタ処理部204が、バッファ部801に保存された画像データを、4×4ブロック302の水平方向及び垂直方向に沿う境界を交互にフィルタ処理するものである。
書込み制御部201は、図9のstep1に示すように4×4ブロック(−1,0)、4×4ブロック(0,0)、4×4ブロック(0,−1)の画像データを読込む。フィルタ処理部204は、4×4ブロック(−1,0)、4×4ブロック(0,0)、4×4ブロック(0,−1)境界をフィルタ処理する。続いて、実施形態3では、バッファ801に保存されている画像データを更新することなく、フィルタ処理部204が、4×4ブロック(−1,0)、4×4ブロック(0,0)間の境界をフィルタ処理する。(step2)。
このような実施形態3によれば、読込まれた4×4ブロック302を書出すことなく垂直、水平の両方向についてフィルタ処理することができる。このため、フィルタ処理のためにデータ転送する回数を低減し、処理を効率化することができる。
マクロブロック301のフィルタ処理が終了していない場合(S1011:No)、読込み制御部201が、次の行の4×4ブロック3個分をバッファ部801に読込む。また、1マクロブロック分のフィルタ処理が完了した場合(S1011:Yes)、デブロッキング・フィルタ1における1マクロブロック分のフィルタ処理が終了する。
このため、実施形態1よりもデータ転送の回数を低減し、画像処理を効率化することができる。
次に、本発明の実施形態3の画像処理装置を説明する。なお、実施形態3において、実施形態1、実施形態2、実施形態4で説明したのと同様の内容については一部説明を略すものとする。
図11は、実施形態4のデブロッキング・フィルタ用バッファ203を説明するための図である。実施形態4のデブロッキング・フィルタ用バッファ203は、マクロブロック301が4×4ブロック302が水平方向及び垂直方向に沿ってn個ずつ配置されている場合、垂直方向に沿ってn+1個配置された4×4ブロック302の列2列分の画素ブロックに相当する画像データだけを保存するバッファ部1101を備えている。
図12は、実施形態4の画像データのフィルタ処理の順序を説明するための図である。なお、図12中の−1,0や0,0等の数字は、図3(a)、図6(a)に示した4×4ブロックの位置を示す座標を示している。
次に、書出し制御部202は、4×4ブロック(0,1)〜4×4ブロック(3,−1)の画像データを書出す。そして、書出されなかった4×4ブロック(−1,0)〜4×4ブロック(3,0)のアドレスを、書出された4×4ブロック(0,1)〜4×4ブロック(3,−1)の画像データが保存されていたアドレスによって更新する。さらに、読込み制御部201が、未処理の4×4ブロック(−1,1)〜4×4ブロック(3,1)を書出された画像データが保存されていたアドレスに保存する。(step3)。
図13は、実施形態4の画像処理装置のフィルタ処理を説明するためのフローチャートである。実施形態4では、先ず、読込み制御部201が、4×4ブロック302を1列分バッファ部1101に読込む(S1301)。フィルタ処理部204は、バッファ部1101に保存されている画像データのうち、水平方向に配列された4×4ブロック302同士の境界をフィルタ処理する水平方向フィルタ処理を開始する(S1302)。また、フィルタ処理部204は、1列分の4×4ブロック302に対するフィルタのオン、またはオフを判定する(S1303)。
マクロブロック301のフィルタ処理が終了していない場合(S1314:No)、読込み制御部201が、次の列の4×4ブロック302をバッファ部1101に読込む。また、1マクロブロック分のフィルタ処理が完了した場合(S1314:Yes)、デブロッキング・フィルタ1における1マクロブロック分のフィルタ処理が終了する。
このため、実施形態2よりもデータ転送の回数を低減し、画像処理を効率化することができる。
Claims (8)
- 水平及び垂直方向に配列された複数の画素で構成される画像を処理する画像処理装置であって、
前記画像の画素にかかるデータである画像データを、水平方向及び垂直方向に画素を所定の数ずつ配置して構成される画素ブロックごとに画像処理をする画像処理手段と、
前記画像処理手段によって処理される画像データを保存する画像保存手段と、
前記画像保存手段に保存されている画像データを更新する更新手段と、を備え、
前記画像保存手段は、
前記画素ブロックが水平方向、垂直方向の少なくとも一方向に沿って配置され、かつ互いに隣接する構成を単位にして画像データを保存することを特徴とする画像処理装置。 - 前記画像保存手段は、
水平方向、垂直方向の少なくとも一方向に沿って配置され、かつ互いに隣接する2つの画素ブロックの画像データだけを保存することを特徴とする請求項1に記載の画像処理装置。 - 前記画像保存手段は、
水平方向に沿って配置された画素ブロック2行分、垂直方向に沿って配置された画素ブロック2列分の少なくとも一方に相当する画像データだけを保存することを特徴とする請求項1に記載の画像処理装置。 - 前記画像保存手段は、
水平方向及び垂直方向に沿って配置され、かつ互いに隣接する3つの画素ブロックの画像データだけを保存することを特徴とする請求項1に記載の画像処理装置。 - 前記画素ブロックが、さらに水平方向及び垂直方向にn個数ずつ配置されてマクロブロックを構成し、
前記画像保存手段は、
水平方向に沿ってn+1個配置された画素ブロック2行分、垂直方向に沿ってn+1個配置された画素ブロック2列分に相当する画像データだけを保存することを特徴とする請求項1に記載の画像処理装置。 - 前記画像処理手段は、
前記画像保存手段に保存されている画像データの画素ブロックの水平方向及び垂直方向に沿う境界を交互に画像処理することを特徴とする請求項4または5に記載の画像処理装置。 - 前記画像処理手段によってなされる画像処理が、画素ブロック境界のデータを平滑化するフィルタ処理であることを特徴とする請求項6に記載の画像処理装置。
- 前記更新手段は、
前記画像処理手段によって画像処理がされた画像データの一部を外部に書出して書出された画像データのデータ量に相当するデータ量分読込むと共に、
書出された画像データの一部の前記画像保存手段におけるアドレスによって書出されなかった画像データの前記画像保存手段におけるアドレスを更新し、書出されなかった画像データの前記画像保存手段におけるアドレスに読込まれたデータを保存することによって前記画像保存手段を更新することを特徴とする請求項1から7のいずれか1項に記載の画像処理装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006115792A JP4997817B2 (ja) | 2006-04-19 | 2006-04-19 | 画像処理装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006115792A JP4997817B2 (ja) | 2006-04-19 | 2006-04-19 | 画像処理装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2007287031A true JP2007287031A (ja) | 2007-11-01 |
JP2007287031A5 JP2007287031A5 (ja) | 2009-04-09 |
JP4997817B2 JP4997817B2 (ja) | 2012-08-08 |
Family
ID=38758726
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006115792A Expired - Fee Related JP4997817B2 (ja) | 2006-04-19 | 2006-04-19 | 画像処理装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4997817B2 (ja) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001006461A1 (fr) * | 1999-07-15 | 2001-01-25 | Hitachi, Ltd. | Procede et dispositif de dessin |
JP2006174486A (ja) * | 2004-12-17 | 2006-06-29 | Samsung Electronics Co Ltd | ビデオデータの水平及び垂直フィルタリングを同時に行うデブロッキングフィルタ及び動作方法 |
JP2007274478A (ja) * | 2006-03-31 | 2007-10-18 | Toshiba Corp | 画像処理装置、画像処理方法及び画像処理プログラム |
JP2008529412A (ja) * | 2005-01-25 | 2008-07-31 | アドバンスト・マイクロ・ディバイシズ・インコーポレイテッド | 中間ループフィルタデータを格納するスクラッチパッド |
-
2006
- 2006-04-19 JP JP2006115792A patent/JP4997817B2/ja not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2001006461A1 (fr) * | 1999-07-15 | 2001-01-25 | Hitachi, Ltd. | Procede et dispositif de dessin |
JP2006174486A (ja) * | 2004-12-17 | 2006-06-29 | Samsung Electronics Co Ltd | ビデオデータの水平及び垂直フィルタリングを同時に行うデブロッキングフィルタ及び動作方法 |
JP2008529412A (ja) * | 2005-01-25 | 2008-07-31 | アドバンスト・マイクロ・ディバイシズ・インコーポレイテッド | 中間ループフィルタデータを格納するスクラッチパッド |
JP2007274478A (ja) * | 2006-03-31 | 2007-10-18 | Toshiba Corp | 画像処理装置、画像処理方法及び画像処理プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4997817B2 (ja) | 2012-08-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4699685B2 (ja) | 信号処理装置及びそれを用いた電子機器 | |
JP4495580B2 (ja) | 面内予測装置および面内予測方法 | |
JP2022521515A (ja) | 交差成分フィルタリングのための方法、装置、およびプログラム | |
EP2755388A1 (en) | Method, device, and program for encoding and decoding image | |
JP6989699B2 (ja) | ビデオ符号化のためのインター予測機器及び方法の補間フィルタ | |
KR20210077799A (ko) | 부호화 장치, 부호화 방법 및 프로그램 | |
JP2013150215A (ja) | 動画像復号装置、動画像符号化装置、動画像復号方法、動画像符号化方法、動画像復号プログラム及び動画像符号化プログラム | |
JP2011041037A (ja) | 画像処理装置および方法 | |
JP2007097145A (ja) | 画像符号化装置及び画像符号化方法 | |
WO2013089264A1 (en) | Image quantization apparatus, method and program, and image inverse quantization apparatus, method and program | |
JP2007214641A (ja) | 符号化装置、復号化装置、画像処理装置及び画像処理方法をコンピュータに実行させるためのプログラム | |
WO2007091588A1 (ja) | 動画像復号装置、復号画像記録装置、それらの方法及びプログラム | |
JP2008182527A (ja) | 画像符号化装置及び方法、並びに撮像システム | |
KR20200022491A (ko) | 영상을 인코딩 및 디코딩하기 위한 방법, 인코딩 및 디코딩 장치, 및 해당 컴퓨터 프로그램 | |
JP2014007469A (ja) | 画像符号化装置及び画像符号化方法 | |
JP4997817B2 (ja) | 画像処理装置 | |
WO2018061503A1 (ja) | 符号化装置、符号化方法、復号化装置、及び復号化方法 | |
WO2013145174A1 (ja) | 動画像符号化方法、動画像復号方法、動画像符号化装置及び動画像復号装置 | |
JP6065090B2 (ja) | 動画像復号装置、動画像復号方法、動画像復号プログラム | |
JP6317720B2 (ja) | 動画像符号化装置、動画像符号化方法、動画像符号化プログラム | |
JP2006101153A (ja) | 画像生成装置およびその方法 | |
JP7451131B2 (ja) | 画像符号化装置、画像符号化方法、及びプログラム | |
JP2012151690A (ja) | デブロッキングフィルタ装置、デブロッキングフィルタ処理方法、それを用いた符号化装置および復号化装置 | |
EP3494699B1 (en) | Processing apparatuses | |
JP6311821B2 (ja) | 動画像処理装置及び動画像処理方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090223 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20090223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20110906 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20111104 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120117 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120319 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120417 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120430 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150525 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |