JP2003333597A - 画像処理装置及び画像処理プログラム、並びに画像処理方法 - Google Patents

画像処理装置及び画像処理プログラム、並びに画像処理方法

Info

Publication number
JP2003333597A
JP2003333597A JP2003026155A JP2003026155A JP2003333597A JP 2003333597 A JP2003333597 A JP 2003333597A JP 2003026155 A JP2003026155 A JP 2003026155A JP 2003026155 A JP2003026155 A JP 2003026155A JP 2003333597 A JP2003333597 A JP 2003333597A
Authority
JP
Japan
Prior art keywords
pixel
target
block
value
target pixel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003026155A
Other languages
English (en)
Other versions
JP4114494B2 (ja
Inventor
Hirotsuna Miura
弘綱 三浦
Masaki Ishikawa
真己 石川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2003026155A priority Critical patent/JP4114494B2/ja
Priority to US10/372,215 priority patent/US7162090B2/en
Priority to DE2003607935 priority patent/DE60307935T8/de
Priority to EP20030004286 priority patent/EP1376468B1/en
Priority to AT03004286T priority patent/ATE338315T1/de
Priority to CNB031068901A priority patent/CN1220390C/zh
Publication of JP2003333597A publication Critical patent/JP2003333597A/ja
Priority to HK04100753A priority patent/HK1057958A1/xx
Application granted granted Critical
Publication of JP4114494B2 publication Critical patent/JP4114494B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/20—Image enhancement or restoration using local operators
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80—Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)
  • Image Analysis (AREA)
  • Facsimile Image Signal Circuits (AREA)

Abstract

(57)【要約】 【課題】 画像復号化時のフィルタ処理の簡素化および
高速化を図るとともに、効果的なフィルタ効果を実現す
るのに好適な画像処理装置を提供する。 【解決手段】 デブロックフィルタ処理は、対象画素ｖ
0〜ｖ7の値と参照画素ｒ y0〜ｒy7の値との差分値が閾値
を超えているか否かを判定し、対象画素ｖ0〜ｖ7につい
ての水平方向のフィルタ演算を、対象画素ｖ0〜ｖ7の値
と参照画素ｒx0，ｒx1の値とにのみ基づいて行い、対象
画素ｖ0〜ｖ7について垂直方向のフィルタ演算を行うか
否かを、上記判定結果にのみ基づいて決定するととも
に、対象画素ｖ0〜ｖ7についての垂直方向のフィルタ演
算を、対象画素ｖ0〜ｖ7の値と参照画素ｒy0〜ｒy7の値
とにのみ基づいて行う。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、ＪＰＥＧ（Joint
Photographic coding Experts Group）またはＭＰＥＧ
（Moving Picture Experts Group）等により圧縮された
圧縮画像データに基づいてブロック単位で画像を展開す
る際に、展開画像に対してフィルタ処理を行う装置およ
びプログラム、並びに方法に係り、特に、画像復号化時
のフィルタ処理の簡素化および高速化を図るとともに、
効果的なフィルタ効果を実現するのに好適な画像処理装
置および画像処理プログラム、並びに画像処理方法に関
する。
【０００２】
【従来の技術】静止画像についての圧縮技術としてＪＰ
ＥＧ方式が、動画像についての圧縮技術としてＭＰＥＧ
方式が広く知られている。これらの画像圧縮方式におい
ては、８画素×８画素のブロックを処理の１単位として
扱い、ＤＣＴ（Discrete Cosine Transform：離散コサ
イン変換）処理を行う。ＤＣＴ処理は、元の画像を空間
的な周波数成分に分解する処理であり、空間的に冗長な
情報を削減することによって、画像を圧縮することがで
きる。
【０００３】ところで、ＪＰＥＧ方式またはＭＰＥＧ方
式を採用する場合、次のような２種類のノイズが発生
し、このノイズが画質を劣化させる原因となる。すなわ
ち、ＪＰＥＧ方式およびＭＰＥＧ方式においては、８画
素×８画素のブロックを処理の単位としているので、画
像によっては、このブロックの境界がノイズとして見え
てしまう。これは、ＤＣＴ処理が、画像の空間的な周波
数成分のうち直流成分に相当するものを除去する処理で
あり、それを各ブロックごとに行うため、各ブロックの
輝度の平均値が異なってしまうことが原因である。この
境界部分のノイズは、ブロックノイズと呼ばれている。
【０００４】また、ＪＰＥＧ方式およびＭＰＥＧ方式に
おけるＤＣＴ処理では、画像の空間的な周波数成分のう
ち高調波成分ほど冗長な情報として除去する結果、周辺
との輝度差が大きい部分にノイズが表れる。例えば、自
然画の背景に文字が存在する場合等、ブロック内に輝度
の大きな変化がある場合、ＤＣＴ処理を行うと、本来の
境界部分を構成するデータから高調波成分が除去され、
境界周辺にモヤモヤとしたノイズが表れる。このノイズ
は、モスキートノイズと呼ばれている。
【０００５】ブロックノイズおよびモスキートノイズを
軽減するための技術が特開平3-46482号公報に記載され
ている。同公報に記載されている技術（以下、第１の従
来例という。）においては、互いに隣接するブロック間
の境界線を挟んで位置する境界画素間の信号レベル差が
第１の閾値より大きく、ブロックの各々において境界画
素と列上の画素のうちその境界画素に同一ブロック内で
隣接する画素との間の信号レベル差がそれぞれ第２の閾
値より小さい場合に、フィルタ処理をする。
【０００６】このとき、図１４において、ブロック境界
の両側に位置する画素配置Ｘ１およびＸ０、画素配置
Ｘ’０およびＸ’１についての信号レベルＳ1、Ｓ0、
Ｓ’0、Ｓ’1の差分値ｄ０，ｄ１，ｄ２に基づいて、画
素配置Ｘ０、Ｘ’０についての信号レベルを修正する。
すなわち新たな信号レベルＳ0-new、Ｓ’0-newは、 Ｓ0-new＝（Ｓ1＋２・Ｓ0＋Ｓ’0）／４ Ｓ’0-new＝（Ｓ0＋２・Ｓ’0＋Ｓ’1）／４ となる。
【０００７】また、ブロックノイズおよびモスキートノ
イズを軽減する他の方法として、ＭＰＥＧ４についての
ＶＭ(Verification Model)や特開平11-98505号公報に記
載されている技術（以下、第２の従来例という。）も知
られている。第２の従来例においては、図１５に示され
ている垂直方向および水平方向のブロック境界につい
て、デフォルトモードかＤＣオフセットモードかを判定
し、それぞれの処理を行う。
【０００８】この場合、ブロックの境界Ｂ１，Ｂ２を基
点としてピクセルセットＳ０，Ｓ１，Ｓ２を定義し、モ
ード決定値からブロック歪現象の程度に基づいて選択的
にデブロッキングモードをデフォルトモードかＤＣオフ
セットモードかに決める。そして、デフォルトモードと
決定されると、４ポイントＤＣＴカーネルを用いて各ピ
クセルに対するブロック境界周辺の周波数情報を求め
る。モード決定段階でＤＣオフセットモードと決定され
ると、ＤＣオフセットモードの実行が必要であるかどう
かを判断し、必要であればブロック歪み現象を除去す
る。
【０００９】
【発明が解決しようとする課題】しかしながら、第１の
従来例では、境界画素のみを補正しているので、ブロッ
ク歪みを除去する処理として充分ではないという欠点が
ある。また、ＶＭや第２の従来例では、処理が複雑で計
算負荷が大きすぎるという欠点がある。また、これらの
技術をハードウェアにより実現しようとすると、処理が
比較的複雑であるため、回路規模を小型化するのが困難
であるという問題がある。小型化を図る観点からは、多
少画質を犠牲にしても処理をできるだけ簡略化すること
が望ましい。また、搭載できるメモリの容量にも一定の
制限があるため、フィルタ処理において演算のために占
有するメモリ容量もできるだけ最小限に抑えることが望
ましい。
【００１０】そこで、本発明は、このような従来の技術
の有する未解決の課題に着目してなされたものであっ
て、画像復号化時のフィルタ処理の簡素化および高速化
を図るとともに、効果的なフィルタ効果を実現するのに
好適な画像処理装置および画像処理プログラム、並びに
画像処理方法を提供することを第１の目的としている。
また、画像復号化時のフィルタ処理において演算のため
に占有するメモリ容量を低減するのに好適な画像処理装
置および画像処理プログラム、並びに画像処理方法を提
供することを第２の目的としている。
【００１１】
【課題を解決するための手段】上記目的を達成するため
に、本発明に係る請求項１記載の画像処理装置は、離散
コサイン変換処理および量子化処理を所定のブロック単
位で行う画像圧縮処理により圧縮された圧縮画像データ
に基づいて前記ブロック単位で画像を展開する際または
展開した後に、展開画像に対してフィルタ処理を行う装
置であって、対象ブロックに隣接するブロックを参照ブ
ロックとし、さらに、前記対象ブロック内の一の画素を
対象画素とし、前記参照ブロック内の一の画素を参照画
素とした場合に、前記フィルタ処理は、前記対象画素の
値と前記参照画素の値との差分値が閾値を超えているか
否かを判定し、前記対象画素についてフィルタ演算を行
うか否かを、前記判定結果にのみ基づいて決定するとと
もに、前記対象画素についてのフィルタ演算を、前記対
象画素の値と前記参照画素の値とにのみ基づいて行うよ
うになっている。
【００１２】このような構成であれば、圧縮画像データ
に基づいてブロック単位で画像を展開する際または展開
した後には、フィルタ処理により、対象画素の値と参照
画素の値との差分値が閾値を超えているか否かが判定さ
れ、対象画素についてフィルタ演算を行うか否かが、そ
の判定結果にのみ基づいて決定される。そして、対象画
素についてフィルタ処理を行うことが決定されると、対
象画素についてのフィルタ演算が、対象画素の値と参照
画素の値とにのみ基づいて行われる。
【００１３】ここで、フィルタ演算を行うか否かを一の
判定結果にのみ基づいて決定するとは、例えば、対象画
素について垂直方向にのみフィルタ処理を行う場合な
ど、１つの対象画素につき参照画素を１つしか用いない
場合は、対象画素の値とその参照画素の値との差分値が
閾値を超えているか否かを判定した結果にのみ基づいて
決定することをいう。また、例えば、対象画素について
水平方向および垂直方向にフィルタ処理を行う場合な
ど、１つの対象画素につき参照画素を複数用いる場合
は、各方向ごとのフィルタ処理について「のみ」の要件
を解釈する。すなわち、この場合、対象画素について垂
直方向のフィルタ演算を行うか否かは、一の判定結果に
のみ基づいて決定するが、同一の対象画素について水平
方向のフィルタ演算を行うか否かは、複数の判定結果に
基づいて決定するような構成においては、垂直方向のフ
ィルタ処理が本発明でいう「のみ」の要件を満たすこと
となる。もちろん、その逆の場合は、水平方向のフィル
タ処理が本発明でいう「のみ」の要件を満たすこととな
る。以下、請求項２記載の画像処理装置、請求項９およ
び１０記載の画像処理プログラム、並びに請求項１１お
よび１２記載の画像処理方法において同じである。
【００１４】また、フィルタ演算を２つの画素値にのみ
基づいて行うとは、例えば、対象画素について垂直方向
にのみフィルタ処理を行う場合など、１つの対象画素に
つき参照画素を１つしか用いない場合は、対象画素の値
とその参照画素の値とにのみ基づいて行うことをいう。
また、例えば、対象画素について水平方向および垂直方
向にフィルタ処理を行う場合など、１つの対象画素につ
き参照画素を複数用いる場合は、各方向ごとのフィルタ
処理について「のみ」の要件を解釈する。すなわち、こ
の場合、対象画素について垂直方向のフィルタ演算は、
２つの画素値にのみ基づいて行うが、同一の対象画素に
ついて水平方向のフィルタ演算は、３つ以上の画素値に
基づいて行うような構成においては、垂直方向のフィル
タ処理が本発明でいう「のみ」の要件を満たすこととな
る。もちろん、その逆の場合は、水平方向のフィルタ処
理が本発明でいう「のみ」の要件を満たすこととなる。
以下、請求項２記載の画像処理装置、請求項９および１
０記載の画像処理プログラム、並びに請求項１１および
１２記載の画像処理方法において同じである。
【００１５】さらに、本発明に係る請求項２記載の画像
処理装置は、離散コサイン変換処理および量子化処理を
所定のブロック単位で行う画像圧縮処理により圧縮され
た圧縮画像データに基づいて前記ブロック単位で画像を
展開する際または展開した後に、展開画像に対してフィ
ルタ処理を行う装置であって、対象ブロックに対し水平
方向に隣接するブロックを水平参照ブロックとし、前記
対象ブロックに対し垂直方向に隣接するブロックを垂直
参照ブロックとし、さらに、前記対象ブロック内の一の
画素を対象画素とし、前記水平参照ブロック内の一の画
素であって前記対象ブロックとの境界線に位置しかつ前
記対象画素と垂直方向の位置が同一のものを水平参照画
素とし、前記垂直参照ブロック内の一の画素であって前
記対象ブロックとの境界線に位置しかつ前記対象画素と
水平方向の位置が同一のものを垂直参照画素とした場合
に、前記フィルタ処理は、前記対象画素の値と前記垂直
参照画素の値との差分値が閾値を超えているか否かを判
定し、前記対象画素についての水平方向のフィルタ演算
を、前記対象画素の値と前記水平参照画素の値とにのみ
基づいて行い、前記対象画素について垂直方向のフィル
タ演算を行うか否かを、前記判定結果にのみ基づいて決
定するとともに、前記対象画素についての垂直方向のフ
ィルタ演算を、前記対象画素の値と前記垂直参照画素の
値とにのみ基づいて行うようになっている。
【００１６】このような構成であれば、圧縮画像データ
に基づいてブロック単位で画像を展開する際または展開
した後には、フィルタ処理により、対象画素についての
水平方向のフィルタ演算が、対象画素の値と水平参照画
素の値とにのみ基づいて行われる。また、対象画素の値
と垂直参照画素の値との差分値が閾値を超えているか否
かが判定され、対象画素について垂直方向のフィルタ演
算を行うか否かが、その判定結果にのみ基づいて決定さ
れる。そして、対象画素について垂直方向のフィルタ処
理を行うことが決定されると、対象画素についての垂直
方向のフィルタ演算が、対象画素の値と垂直参照画素の
値とにのみ基づいて行われる。
【００１７】さらに、本発明に係る請求項３記載の画像
処理装置は、請求項２記載の画像処理装置において、前
記展開画像を記憶する画像記憶手段に利用可能に接続
し、前記フィルタ処理を行うための画素データを記憶す
る作業用記憶手段を備え、前記対象ブロック内の画素で
あって前記水平参照ブロックとの境界線から水平方向に
連続する複数の画素を前記対象画素とした場合に、前記
フィルタ処理は、前記複数の対象画素および前記水平参
照画素からなる第１画素列の画素データ、並びに前記各
対象画素に対応する垂直参照画素からなる第２画素列の
画素データを前記作業用記憶手段に一括で読み込み、前
記作業用記憶手段の画素データに基づいて前記各対象画
素ごとに前記判定を行い、前記各対象画素についての水
平方向のフィルタ演算を、前記作業用記憶手段の画素デ
ータを参照し当該対象画素の値と前記水平参照画素の値
とにのみ基づいて行い、前記各対象画素について垂直方
向のフィルタ演算を行うか否かを、当該対象画素に対応
する前記判定結果にのみ基づいて決定するとともに、前
記各対象画素についての垂直方向のフィルタ演算を、前
記作業用記憶手段の画素データを参照し当該対象画素の
値と前記垂直参照画素の値とにのみ基づいて行うように
なっている。
【００１８】このような構成であれば、フィルタ処理に
より、第１画素列の画素データおよび第２画素列の画素
データが作業用記憶手段に一括で読み込まれ、各対象画
素についての水平方向のフィルタ演算が、作業用記憶手
段の画素データが参照されその対象画素の値と水平参照
画素の値とにのみ基づいて行われる。また、作業用記憶
手段の画素データに基づいて、各対象画素ごとに、その
対象画素の値と垂直参照画素の値との差分値が閾値を超
えているか否かが判定され、各対象画素について垂直方
向のフィルタ演算を行うか否かが、その対象画素に対応
する判定結果にのみ基づいて決定される。そして、対象
画素について垂直方向のフィルタ演算を行うことが決定
されると、その対象画素についての垂直方向のフィルタ
演算が、作業用記憶手段の画素データが参照されその対
象画素の値と垂直参照画素の値とにのみ基づいて行われ
る。
【００１９】ここで、作業用記憶手段は、画素データを
あらゆる手段でかつあらゆる時期に記憶するものであ
り、画素データをあらかじめ記憶してあるものであって
もよいし、画素データをあらかじめ記憶することなく、
本装置の動作時に外部からの入力等によって画素データ
を記憶するようになっていてもよい。このことは、画像
記憶手段に展開画像を格納する場合についても同じであ
る。
【００２０】さらに、本発明に係る請求項４記載の画像
処理装置は、請求項３記載の画像処理装置において、前
記各ブロックを、水平方向２ｎ（ｎ≧１）個の画素でか
つ垂直方向２ｍ（ｍ≧１）個の画素からなる矩形の画素
領域として構成するとともに、水平方向ｎ個の画素でか
つ垂直方向ｍ個の画素からなる左上、右上、左下および
右下の４つの領域に区分し、さらに、前記第１画素列
を、前記４つの領域のうち同一の領域に属する画素およ
び前記水平参照画素で構成し、前記フィルタ処理は、前
記画素データの読込、前記判定および前記フィルタ演算
を一連の処理として繰り返し行いながら前記展開画像の
すべての画素に対して前記フィルタ演算を試み、前記対
象ブロックの左上の領域に属する対象画素については、
前記対象ブロックの左および上に隣接する水平参照ブロ
ックおよび垂直参照ブロックの参照画素の値を、前記判
定および前記フィルタ演算に用い、前記対象ブロックの
右上の領域に属する対象画素については、前記対象ブロ
ックの右および上に隣接する水平参照ブロックおよび垂
直参照ブロックの参照画素の値を、前記判定および前記
フィルタ演算に用い、前記対象ブロックの左下の領域に
属する対象画素については、前記対象ブロックの左およ
び下に隣接する水平参照ブロックおよび垂直参照ブロッ
クの参照画素の値を、前記判定および前記フィルタ演算
に用い、前記対象ブロックの右下の領域に属する対象画
素については、前記対象ブロックの右および下に隣接す
る水平参照ブロックおよび垂直参照ブロックの参照画素
の値を、前記判定および前記フィルタ演算に用いるよう
になっている。
【００２１】このような構成であれば、フィルタ処理に
より、画素データの読込、判定およびフィルタ演算が一
連の処理として繰り返し行われながら展開画像のすべて
の画素に対してフィルタ処理が行われる。具体的に、対
象ブロックの左上の領域に属する対象画素については、
対象ブロックの左に隣接する水平参照ブロックの参照画
素の値、および対象ブロックの上に隣接する垂直参照ブ
ロックの参照画素の値が、判定およびフィルタ演算に用
いられる。
【００２２】また、対象ブロックの右上の領域に属する
対象画素については、対象ブロックの右に隣接する水平
参照ブロックの参照画素の値、および対象ブロックの上
に隣接する垂直参照ブロックの参照画素の値が、判定お
よびフィルタ演算に用いられる。また、対象ブロックの
左下の領域に属する対象画素については、対象ブロック
の左に隣接する水平参照ブロックの参照画素の値、およ
び対象ブロックの下に隣接する垂直参照ブロックの参照
画素の値が、判定およびフィルタ演算に用いられる。
【００２３】また、対象ブロックの右下の領域に属する
対象画素については、対象ブロックの右に隣接する水平
参照ブロックの参照画素の値、および対象ブロックの下
に隣接する垂直参照ブロックの参照画素の値が、判定お
よびフィルタ演算に用いられる。ここで、ｎは、ｎ≧１
の条件を満たすことが必要であるが、発明の性質上小数
点の値をとることはないので、ｎは、ｎ≧１でかつ整数
である。また、ｍは、ｎとは独立の値をとり、ｍ≧１の
条件を満たすことが必要であるが、発明の性質上小数点
の値をとることはないので、ｍ≧１でかつ整数である。
【００２４】さらに、本発明に係る請求項５記載の画像
処理装置は、請求項４記載の画像処理装置において、前
記画像記憶手段は、前記展開画像を構成する各画素の画
素データを左から右の順序および上から下の順序で格納
するようになっており、前記フィルタ処理は、前記画像
記憶手段における前記第２画素列の画素データの格納ア
ドレスを指し示す垂直参照画素用ポインタを参照して前
記第２画素列の画素データを前記作業用記憶手段に読み
込み、さらに、前記展開画像の水平方向の画素数をＸと
し、前記対象ブロックにおける対象画素の垂直方向の座
標をｙとした場合に、前記一連の処理ごとに、当該処理
で一括に処理する対象画素の数に相当する値を前記垂直
参照画素用ポインタの値に加算し、次に処理すべき対象
ブロックが前記展開画像における左端のブロックで、か
つｙを２ｍで除算したときの余数が「０」であるとき
は、前記垂直参照画素用ポインタの値から２Ｘを減算
し、次に処理すべき対象ブロックが前記展開画像におけ
る左端のブロックで、かつｙを２ｍで除算したときの余
数がｍであるときは、前記垂直参照画素用ポインタの値
に２ｍＸを加算し、次に処理すべき対象ブロックが前記
展開画像における左端のブロックで、かつｙを２ｍで除
算したときの余数が「０」またはｍ以外の値であるとき
は、前記垂直参照画素用ポインタの値からＸを減算する
ようになっている。
【００２５】このような構成であれば、フィルタ処理に
より、垂直参照画素用ポインタが参照されて第２画素列
の画素データが作業用記憶手段に読み込まれる。垂直参
照画素用ポインタの更新は、次の条件に従って行われ
る。第１に、一連の処理ごとに、その処理で一括に処理
する対象画素の数に相当する値が垂直参照画素用ポイン
タの値に加算される。したがって、垂直参照画素用ポイ
ンタは、一連の処理ごとに、その処理で一括に処理する
対象画素の数だけ右に移動していく。この移動は、所定
数を加算するだけなので、ハードウェアで構成する場合
は加算器だけで実現できる。
【００２６】第２に、次に処理すべき対象ブロックが展
開画像における左端のブロックで、かつｙを２ｍで除算
したときの余数が「０」またはｍ以外の値であると、垂
直参照画素用ポインタの値からＸが減算される。したが
って、展開画像における同一水平線上のすべての画素に
ついて一連の処理が完了すると、垂直参照画素用ポイン
タは、対象ブロックの上に隣接する垂直参照ブロックの
最下段に移動する。この移動は、Ｘを減算するだけなの
で、ハードウェアで構成する場合は加算器だけで実現で
きる。
【００２７】第３に、次に処理すべき対象ブロックが展
開画像における左端のブロックで、かつｙを２ｍで除算
したときの余数がｍであると、垂直参照画素用ポインタ
の値に２ｍＸが加算される。したがって、展開画像にお
ける同一水平線上のすべての画素について一連の処理が
完了し、対象ブロック内の下半分の領域に処理が移行す
ると、垂直参照画素用ポインタは、対象ブロックの下に
隣接する垂直参照ブロックの最上段に移動する。この移
動は、Ｘを２ｍ倍しそれを加算するだけなので、ハード
ウェアで構成する場合はシフタおよび加算器だけで実現
できる。
【００２８】第４に、次に処理すべき対象ブロックが展
開画像における左端のブロックで、かつｙを２ｍで除算
したときの余数が「０」であると、垂直参照画素用ポイ
ンタの値から２Ｘが減算される。したがって、展開画像
における同一水平線上のすべての画素について一連の処
理が完了し、下の段のブロックに処理が移行すると、垂
直参照画素用ポインタは、対象ブロックの上に隣接する
垂直参照ブロックの最下段に移動する。この移動は、Ｘ
を２倍しそれを減算するだけなので、ハードウェアで構
成する場合はシフタおよび加算器だけで実現できる。
【００２９】さらに、本発明に係る請求項６記載の画像
処理装置は、請求項５記載の画像処理装置において、前
記対象ブロック内の同一水平線上の画素のうち左半分の
ものからなる画素列を第１対象画素列とし、右半分のも
のからなる画素列を第２対象画素列とし、さらに、前記
水平参照ブロック内の画素列であって前記第１対象画素
列に左に隣接しかつ前記第２対象画素列の画素数と同数
の画素からなるものを第１水平参照画素列とし、前記水
平参照ブロック内の画素列であって前記第２対象画素列
に右に隣接しかつ前記第１対象画素列の画素数と同数の
画素からなるものを第２水平参照画素列とし、さらに、
前記第１対象画素列の各対象画素に対応する垂直参照画
素からなる画素列を第１垂直参照画素列とし、前記第２
対象画素列の各対象画素に対応する垂直参照画素からな
る画素列を第２垂直参照画素列とした場合に、前記フィ
ルタ処理は、前記各一連の処理ごとに、前記第２対象画
素列、前記第２水平参照画素列、前記第１垂直参照画素
列および前記第２垂直参照画素列の画素データを前記作
業用記憶手段に読み込むとともに、一つ前の処理におい
て読み込んだ前記第２対象画素列および前記第２水平参
照画素列の画素データを前記第１水平参照画素列および
前記第１対象画素列の画素データとしてそれぞれ再利用
し、前記第１対象画素列および前記第２対象画素列のす
べての対象画素について前記判定および前記フィルタ演
算を行うようになっている。
【００３０】このような構成であれば、フィルタ処理に
より、各一連の処理ごとに、第２対象画素列、第２水平
参照画素列、第１垂直参照画素列および第２垂直参照画
素列の画素データが作業用記憶手段に読み込まれるとと
もに、一つ前の処理において読み込まれた第２対象画素
列および第２水平参照画素列の画素データが第１水平参
照画素列および第１対象画素列の画素データとしてそれ
ぞれ再利用される。そして、第１対象画素列および第２
対象画素列のすべての対象画素について判定およびフィ
ルタ演算が行われる。
【００３１】ここで、読込と再利用は、どちらを先に行
ってもよいが、１つ前の処理において読み込んだ第２対
象画素列および第２水平参照画素列の画素データを格納
する記憶領域と、今回の処理において読み込むべき第２
対象画素列および第２水平参照画素列の画素データを格
納する記憶領域とを作業用記憶手段において共用する場
合は、再利用の後に読込を行う必要がある。
【００３２】また、再利用とは、一つ前の処理において
読み込んだ第２対象画素列および第２水平参照画素列の
画素データの一部または全部を第１水平参照画素列およ
び第１対象画素列の画素データの一部または全部として
それぞれ再利用することをいい、一部を利用する場合
は、第１水平参照画素列として利用される画素データの
なかに参照画素となり得る画素のデータを含む必要があ
る。
【００３３】また、再利用とは、作業用記憶手段におい
て、１つ前の処理において読み込んだ第２対象画素列お
よび第２水平参照画素列の画素データを第１水平参照画
素列および第１対象画素列の画素データとしてそのまま
利用することのほか、作業用記憶手段において、１つ前
の処理において読み込んだ第２対象画素列および第２水
平参照画素列の画素データに基づいて第１水平参照画素
列および第１対象画素列の画素データを生成（コピーを
含む。）することをいう。
【００３４】さらに、本発明に係る請求項７記載の画像
処理装置は、請求項６記載の画像処理装置において、前
記展開画像について最初に行う前記一連の処理は、前記
第１対象画素列、前記第２対象画素列、前記第２水平参
照画素列、前記第１垂直参照画素列および前記第２垂直
参照画素列の画素データを前記作業用記憶手段に読み込
み、前記展開画像について２回目以降に行う前記一連の
処理は、前記第２対象画素列、前記第２水平参照画素
列、前記第１垂直参照画素列および前記第２垂直参照画
素列の画素データを前記作業用記憶手段に読み込むとと
もに、一つ前の処理において読み込んだ前記第２対象画
素列および前記第２水平参照画素列の画素データを前記
第１水平参照画素列および前記第１対象画素列の画素デ
ータとしてそれぞれ再利用するようになっている。
【００３５】このような構成であれば、展開画像につい
て最初にあっては、一連の処理により、第１対象画素
列、第２対象画素列、第２水平参照画素列、第１垂直参
照画素列および第２垂直参照画素列の画素データが作業
用記憶手段に読み込まれる。展開画像について２回目以
降にあっては、一連の処理により、第２対象画素列、第
２水平参照画素列、第１垂直参照画素列および第２垂直
参照画素列の画素データが作業用記憶手段に読み込まれ
るとともに、一つ前の処理において読み込まれた第２対
象画素列および第２水平参照画素列の画素データが第１
水平参照画素列および第１対象画素列の画素データとし
てそれぞれ再利用される。
【００３６】したがって、最初だけ５つの画素列の画素
データが読み込まれるが、２回目以降は、４つの画素列
の画素データが読み込まれる。さらに、本発明に係る請
求項８記載の画像処理装置は、請求項６および７のいず
れかに記載の画像処理装置において、一つ前の処理にお
いて読み込んだ前記第２対象画素列および前記第２水平
参照画素列の画素データを前記第１水平参照画素列およ
び前記第１対象画素列の画素データとしてそれぞれコピ
ーする処理を第１フェーズとし、前記第１垂直参照画素
列の画素データを前記作業用記憶手段に読み込む処理を
第２フェーズとし、前記第２垂直参照画素列の画素デー
タを前記作業用記憶手段に読み込む処理を第３フェーズ
とし、前記第２対象画素列の画素データを前記作業用記
憶手段に読み込む処理を第４フェーズとし、前記第２水
平参照画素列の画素データを前記作業用記憶手段に読み
込む処理を第５フェーズとし、前記第１水平参照画素列
の画素データに基づいて、前記第１対象画素列の各対象
画素について水平方向の前記フィルタ演算を行う処理を
第６フェーズとし、前記第６フェーズの処理結果および
前記第１垂直参照画素列の画素データに基づいて、前記
第１対象画素列の各対象画素について前記判定および垂
直方向の前記フィルタ演算を行う処理を第７フェーズと
し、前記第２水平参照画素列の画素データに基づいて、
前記第２対象画素列の各対象画素について水平方向の前
記フィルタ演算を行う処理を第８フェーズとし、前記第
８フェーズの処理結果および前記第２垂直参照画素列の
画素データに基づいて、前記第２対象画素列の各対象画
素について前記判定および垂直方向の前記フィルタ演算
を行う処理を第９フェーズとした場合に、前記一連の処
理は、前記第１フェーズ、前記第２フェーズ、前記第３
フェーズ、前記第４フェーズおよび前記第５フェーズを
その順序で実行し、前記第６フェーズおよび前記第７フ
ェーズをその順序で実行し、前記第５フェーズ、前記第
８フェーズおよび前記第９フェーズをその順序で実行す
るとともに、前記第２フェーズおよび前記第６フェーズ
の実行を同時に、前記第３フェーズおよび前記第７フェ
ーズの実行を同時に開始するようになっている。
【００３７】このような構成であれば、一連の処理によ
り、第１フェーズが実行されることにより、一つ前の処
理において読み込まれた第２対象画素列および第２水平
参照画素列の画素データが第１水平参照画素列および第
１対象画素列の画素データとしてコピーされる。第１対
象画素列の各対象画素について水平方向のフィルタ演算
を行うには、第１水平参照画素列および第１対象画素列
の画素データが必要となるが、これらは、第１フェーズ
の実行により利用可能となっているため、第２フェーズ
の実行開始時点で第６フェーズを実行することができ
る。したがって、第２フェーズおよび第６フェーズの実
行が同時に開始される。これにより、第１垂直参照画素
列の画素データが作業用記憶手段に読み込まれるととも
に、第１水平参照画素列の画素データに基づいて、第１
対象画素列の各対象画素について水平方向のフィルタ演
算が行われる。
【００３８】さらに、第１対象画素列の各対象画素につ
いて判定および垂直方向のフィルタ演算を行うには、水
平方向のフィルタ演算結果および第１垂直参照画素列の
画素データが必要となるが、これらは、第２フェーズお
よび第６フェーズの実行により利用可能となっているた
め、第３フェーズの実行開始時点で第７フェーズを実行
することができる。したがって、第３フェーズおよび第
７フェーズの実行が同時に開始される。これにより、第
２垂直参照画素列の画素データが作業用記憶手段に読み
込まれるとともに、第６フェーズの処理結果および第１
垂直参照画素列の画素データに基づいて、第１対象画素
列の各対象画素について判定および垂直方向のフィルタ
演算が行われる。
【００３９】そして、第４フェーズおよび第５フェーズ
がその順序で実行されることにより、第２対象画素列お
よび第２水平参照画素列の画素データが作業用記憶手段
に読み込まれる。第２対象画素列の各対象画素について
水平方向のフィルタ演算を行うには、第２水平参照画素
列および第２対象画素列の画素データが必要となるが、
これらは、第４フェーズおよび第５フェーズの実行によ
り利用可能となっているため、第５フェーズの終了に続
けて第８フェーズを実行することができる。これによ
り、第２水平参照画素列の画素データに基づいて、第２
対象画素列の各対象画素について水平方向のフィルタ演
算が行われる。
【００４０】さらに、第２対象画素列の各対象画素につ
いて判定および垂直方向のフィルタ演算を行うには、水
平方向のフィルタ演算結果および第２垂直参照画素列の
画素データが必要となるが、これらは、第３フェーズお
よび第８フェーズの実行により利用可能となっているた
め、第８フェーズの終了に続けて第９フェーズを実行す
ることができる。これにより、第８フェーズの処理結果
および第２垂直参照画素列の画素データに基づいて、第
２対象画素列の各対象画素について判定および垂直方向
のフィルタ演算が行われる。
【００４１】一方、上記目的を達成するために、本発明
に係る請求項９記載の画像処理プログラムは、離散コサ
イン変換処理および量子化処理を所定のブロック単位で
行う画像圧縮処理により圧縮された圧縮画像データに基
づいて前記ブロック単位で画像を展開する際または展開
した後に、展開画像に対してフィルタ処理をコンピュー
タに実行させるためのプログラムであって、対象ブロッ
クに隣接するブロックを参照ブロックとし、さらに、前
記対象ブロック内の一の画素を対象画素とし、前記参照
ブロック内の一の画素を参照画素とした場合に、前記フ
ィルタ処理は、前記対象画素の値と前記参照画素の値と
の差分値が閾値を超えているか否かを判定し、前記対象
画素についてフィルタ演算を行うか否かを、前記判定結
果にのみ基づいて決定するとともに、前記対象画素につ
いてのフィルタ演算を、前記対象画素の値と前記参照画
素の値とにのみ基づいて行うようになっている。
【００４２】このような構成であれば、コンピュータに
よってプログラムが読み取られ、読み取られたプログラ
ムに従ってコンピュータが処理を実行すると、請求項１
記載の画像処理装置と同等の作用が得られる。さらに、
本発明に係る請求項１０記載の画像処理プログラムは、
離散コサイン変換処理および量子化処理を所定のブロッ
ク単位で行う画像圧縮処理により圧縮された圧縮画像デ
ータに基づいて前記ブロック単位で画像を展開する際ま
たは展開した後に、展開画像に対してフィルタ処理をコ
ンピュータに実行させるためのプログラムであって、対
象ブロックに対し水平方向に隣接するブロックを水平参
照ブロックとし、前記対象ブロックに対し垂直方向に隣
接するブロックを垂直参照ブロックとし、さらに、前記
対象ブロック内の一の画素を対象画素とし、前記水平参
照ブロック内の一の画素であって前記対象ブロックとの
境界線に位置しかつ前記対象画素と垂直方向の位置が同
一のものを水平参照画素とし、前記垂直参照ブロック内
の一の画素であって前記対象ブロックとの境界線に位置
しかつ前記対象画素と水平方向の位置が同一のものを垂
直参照画素とした場合に、前記フィルタ処理は、前記対
象画素の値と前記垂直参照画素の値との差分値が閾値を
超えているか否かを判定し、前記対象画素についての水
平方向のフィルタ演算を、前記対象画素の値と前記水平
参照画素の値とにのみ基づいて行い、前記対象画素につ
いて垂直方向のフィルタ演算を行うか否かを、前記判定
結果にのみ基づいて決定するとともに、前記対象画素に
ついての垂直方向のフィルタ演算を、前記対象画素の値
と前記垂直参照画素の値とにのみ基づいて行うようにな
っている。
【００４３】このような構成であれば、コンピュータに
よってプログラムが読み取られ、読み取られたプログラ
ムに従ってコンピュータが処理を実行すると、請求項２
記載の画像処理装置と同等の作用が得られる。一方、上
記目的を達成するために、本発明に係る請求項１１記載
の画像処理方法は、離散コサイン変換処理および量子化
処理を所定のブロック単位で行う画像圧縮処理により圧
縮された圧縮画像データに基づいて前記ブロック単位で
画像を展開する際または展開した後に、展開画像に対し
てフィルタ処理を行う方法であって、対象ブロックに隣
接するブロックを参照ブロックとし、さらに、前記対象
ブロック内の一の画素を対象画素とし、前記参照ブロッ
ク内の一の画素を参照画素とした場合に、前記フィルタ
処理は、前記対象画素の値と前記参照画素の値との差分
値が閾値を超えているか否かを判定し、前記対象画素に
ついてフィルタ演算を行うか否かを、前記判定結果にの
み基づいて決定するとともに、前記対象画素についての
フィルタ演算を、前記対象画素の値と前記参照画素の値
とにのみ基づいて行う。
【００４４】さらに、本発明に係る請求項１２記載の画
像処理方法は、離散コサイン変換処理および量子化処理
を所定のブロック単位で行う画像圧縮処理により圧縮さ
れた圧縮画像データに基づいて前記ブロック単位で画像
を展開する際または展開した後に、展開画像に対してフ
ィルタ処理を行う方法であって、対象ブロックに対し水
平方向に隣接するブロックを水平参照ブロックとし、前
記対象ブロックに対し垂直方向に隣接するブロックを垂
直参照ブロックとし、さらに、前記対象ブロック内の一
の画素を対象画素とし、前記水平参照ブロック内の一の
画素であって前記対象ブロックとの境界線に位置しかつ
前記対象画素と垂直方向の位置が同一のものを水平参照
画素とし、前記垂直参照ブロック内の一の画素であって
前記対象ブロックとの境界線に位置しかつ前記対象画素
と水平方向の位置が同一のものを垂直参照画素とした場
合に、前記フィルタ処理は、前記対象画素の値と前記垂
直参照画素の値との差分値が閾値を超えているか否かを
判定し、前記対象画素についての水平方向のフィルタ演
算を、前記対象画素の値と前記水平参照画素の値とにの
み基づいて行い、前記対象画素について垂直方向のフィ
ルタ演算を行うか否かを、前記判定結果にのみ基づいて
決定するとともに、前記対象画素についての垂直方向の
フィルタ演算を、前記対象画素の値と前記垂直参照画素
の値とにのみ基づいて行う。
【００４５】
【発明の実施の形態】以下、本発明の実施の形態を図面
を参照しながら説明する。図１ないし図１３は、本発明
に係る画像処理装置および画像処理プログラム、並びに
画像処理方法の実施の形態を示す図である。本実施の形
態は、本発明に係る画像処理装置および画像処理プログ
ラム、並びに画像処理方法を、図１に示すように、コン
ピュータ１００において、マルチタスクで動作するＯＳ
（Operating System）により、ＭＰＥＧ形式で圧縮され
た動画データをデコードして動画を再生する際に、再生
画像に対して、ブロックノイズを低減するフィルタ処理
（以下、デブロックフィルタ処理という。）を行う場合
について適用したものである。
【００４６】まず、本発明を適用するコンピュータシス
テムの構成を図１を参照しながら説明する。図１は、本
発明を適用するコンピュータシステムの構成を示すブロ
ック図である。コンピュータ１００は、図１に示すよう
に、制御プログラムに基づいて演算およびシステム全体
を制御するＣＰＵ３０と、所定領域にあらかじめＣＰＵ
３０の制御プログラム等を格納しているＲＯＭ３２と、
ＲＯＭ３２等から読み出したデータやＣＰＵ３０の演算
過程で必要な演算結果を格納するためのＲＡＭ３４と、
ＲＡＭ３４の特定領域のデータを画像信号に変換してＬ
ＣＤ（Liquid Crystal Display）４４に出力するＬＣＤ
Ｃ３６と、動画データをデコードするデコーダ３８と、
ＲＡＭ３４の特定領域のデータを読み出してデブロック
フィルタ処理を行うポストフィルタ部４０と、ポストフ
ィルタ部４０からのデータに対して色素変換を行うＲＧ
Ｂ変換部４２と、ＲＧＢ変換部４２からのデータに基づ
いて表示を行うＬＣＤ４４とで構成されている。そし
て、ＣＰＵ３０、ＲＯＭ３２、ＲＡＭ３４、ＬＣＤＣ３
６およびデコーダ３８は、データを転送するための信号
線であるバス３９で相互にかつデータ授受可能に接続さ
れている。
【００４７】ＲＡＭ３４は、特定領域として、ＬＣＤ４
４に表示するデータを格納するためのＶＲＡＭ３５を有
しており、ＶＲＡＭ３５は、ＣＰＵ３０等のバス３９に
接続された機器とポストフィルタ部４０とで独立にアク
セスが可能となっている。また、ＶＲＡＭ３５は、ＬＣ
Ｄ４４の１画面分の画像データを格納可能な領域を少な
くとも２つ有し、一方の領域を、デコーダ３８が動画デ
ータを展開するためのものとし、他方の領域を、ポスト
フィルタ部４０が読み出すためのものとし、それら領域
は、所定周期で交互に切り換えて使用される。
【００４８】ＬＣＤＣ３６は、ポストフィルタ部４０お
よびＲＧＢ変換部４２を制御することにより、ＶＲＡＭ
３５のデータを先頭アドレスから所定周期で順次読み出
し、読み出したデータを画像信号に変換してＬＣＤ４４
に出力するようになっている。すなわち、ポストフィル
タ部４０は、ＬＣＤＣ３６の制御により、ＶＲＡＭ３５
からデータを読み出し、読み出したデータに対してデブ
ロックフィルタ処理を行ってＲＧＢ変換部４２に出力
し、ＲＧＢ変換部４２は、ＬＣＤＣ３６の制御により、
ポストフィルタ部４０からのデータに対してＲＧＢ変換
を行ってＬＣＤ４４に出力する。
【００４９】デコーダ３８は、所定時間Ｔ（例えば、２
０[ｍｓ]）ごとに動画データに含まれている画像データ
を順次デコードするようになっており、具体的には、Ｃ
ＰＵ３０からのデコード開始命令により、ＭＰＥＧ形式
で圧縮された動画データをＲＡＭ３４から読み出し、読
み出した動画データに基づいて、ＭＰＥＧ形式で画像デ
ータをＶＲＡＭ３５にデコードする。ＶＲＡＭ３５に
は、ＬＣＤ４４の一画素の色度合いを示す画素データ
（ＹＵＶデータ）を単位として画像データが展開され
る。また、デコーダ３８では、ＭＰＥＧ形式による復号
化処理のうちＩＤＣＴ（Inverse Discrete Cosine Tran
sorm：逆離散コサイン変換）処理および動き補償処理を
行う。なお、ＭＰＥＧ形式による圧縮処理および復号化
処理については、従来の例による。
【００５０】次に、ポストフィルタ部４０の構成を詳細
に説明する。ポストフィルタ部４０は、その構成および
内部処理をハードウェアにより実現するものであって、
２１画素分の画素データを格納可能なバッファを有し、
再生画像を複数のブロックに区分し、ＶＲＡＭ３５から
バッファに画素データを読み込みながら、読み込んだ画
素データに基づいてブロック単位でデブロックフィルタ
処理を行う。各ブロックは、水平方向８画素でかつ垂直
方向８画素からなる矩形の画素領域として構成するとと
もに、さらに、水平方向４画素でかつ垂直方向４画素か
らなる左上、右上、左下および右下の４つの領域に区分
する。
【００５１】本発明に係るデブロックフィルタ処理の原
理を図２ないし図４を参照しながら詳細に説明する。図
２および図４は、再生画像においてデブロックフィルタ
処理の対象となる対象ブロックおよびその隣接ブロック
を示す図である。図２において、対象ブロック１０の左
右には、境界線BL0を挟んで水平参照ブロック１２が、
境界線BL1を挟んで水平参照ブロック１４がそれぞれ隣
接している。また、対象ブロック１０の上下には、境界
線BL2を挟んで垂直参照ブロック１６が、境界線BL3を挟
んで垂直参照ブロック１８がそれぞれ隣接している。
【００５２】本発明に係るデブロックフィルタ処理は、
対象ブロック１０内の同一水平線上の画素を対象画素と
し、それら８画素分の対象画素を一括でフィルタ処理す
る。図２の例では、対象ブロック１０の上半分の領域に
属する同一水平線上の画素を対象画素ｖ0〜ｖ7としてい
る。ここで、その同一水平線上の画素のうち左半分の４
画素からなる画素列を第１対象画素列ＬSLとし、右半分
の４画素からなる画素列を第２対象画素列ＬSRとした場
合、第１対象画素列ＬSLには、対象画素ｖ0〜ｖ3が左か
ら順に含まれ、第２対象画素列ＬSRには、対象画素ｖ4
〜ｖ7が左から順に含まれる。
【００５３】また、水平参照ブロック１２内の画素列で
あって第１対象画素列ＬSLに左に隣接しかつ４画素から
なるものを第１水平参照画素列ＬXLとし、水平参照ブロ
ック１４内の画素列であって第２対象画素列ＬSRに右に
隣接しかつ４画素からなるものを第２水平参照画素列Ｌ
XRとした場合、第１水平参照画素列ＬXLには、その右端
に参照画素ｒx0が含まれ、第２水平参照画素列ＬXRに
は、その左端に参照画素ｒx1が含まれる。参照画素ｒx0
は、対象画素ｖ0〜ｖ3について水平方向のフィルタ演算
に用いられ、参照画素ｒx1は、対象画素ｖ4〜ｖ7につい
て水平方向のフィルタ演算に用いられる。
【００５４】また、垂直参照ブロック１６の最下段の画
素列であって第１対象画素列ＬSLの上方に位置しかつ４
画素からなるものを第１垂直参照画素列ＬYLとし、垂直
参照ブロック１６の最下段のものであって第２対象画素
列ＬSRの上方に位置しかつ４画素からなる画素列を第２
垂直参照画素列ＬYRとしとした場合、第１垂直参照画素
列ＬYLには、参照画素ｒy0〜ｒy3が左から順に含まれ、
第２垂直参照画素列Ｌ YRには、参照画素ｒy4〜ｒy7が左
から順に含まれる。参照画素ｒy0〜ｒy3は、対象画素ｖ
0〜ｖ3について垂直方向のフィルタ演算に用いられ、参
照画素ｒy4〜ｒ y7は、対象画素ｖ4〜ｖ7について垂直方
向のフィルタ演算に用いられる。
【００５５】図２の例において、本発明に係るデブロッ
クフィルタ処理により、対象画素ｖ 0〜ｖ7について水平
方向のフィルタ演算を行った場合、デブロックフィルタ
処理後の各対象画素の値ｖx0'〜ｖx7'は、下式（１）〜
（８）のフィルタ演算式により算出する。なお、下式
（１）〜（８）において、ｖ0〜ｖ7は、対象画素の値を
示し、ｒx0，ｒx1は、参照画素の値を示している。 ｖx0'＝(ｖ0＋ｒx0)／２＋(ｖ0−ｒx0)／８ …（１） ｖx1'＝(ｖ1＋ｒx0)／２＋(ｖ1−ｒx0)／４ …（２） ｖx2'＝ｖ2−(ｖ2−ｒx0)／８ …（３） ｖx3'＝ｖ3 …（４） ｖx4'＝ｖ4 …（５） ｖx5'＝(ｖ5＋ｒx1)／２＋(ｖ5−ｒx1)／４ …（６） ｖx6'＝(ｖ6＋ｒx1)／２＋(ｖ6−ｒx1)／８ …（７） ｖx7'＝(ｖ7＋ｒx1)／２ …（８） 上式（１）〜（８）のフィルタ演算式は、次のように導
出される。図３は、互いに隣接するブロックＡ，Ｂにお
いて同一水平線上の対象画素の値ｖ0〜ｖ7を示した棒グ
ラフである。
【００５６】互いに隣接するブロック間Ａ，Ｂでは、図
３（ａ）に示すように、圧縮時のＤＣＴ処理により画像
の空間的な周波数成分のうち直流成分に相当するものが
除去されることから、輝度の平均値が異なることによる
段差が発生している。この段差がブロックノイズとな
る。そこで、ブロックノイズを低減するために、ブロッ
クＡ，Ｂの画像を滑らかに接続する場合を考える。ブロ
ックＡ内の４画素の平均値ＶA、およびブロックＢ内の
４画素の平均値ＶBは、下式（９），（10）により算出
することができる。 ＶA＝(ｖ4＋ｖ5＋ｖ6＋ｖ7)／４ …（９） ＶB＝(ｖ0＋ｖ1＋ｖ2＋ｖ3)／４ …（10） 各対象画素の値ｖiの平均値ＶA，ＶBからのずれ量をδ
ｖiとすると、各対象画素の値ｖiは、下式（11），（1
2）により表すことができる。 ｖi＝ＶA＋δｖi （ｉ＝４〜７） …（11） ｖi＝ＶB＋δｖi （ｉ＝０〜３） …（12） さて、ブロックＡ，Ｂの画像を滑らかに接続するために
は、平均値ＶA，ＶBの差を「０」にすればよく、図３
（ｂ）に示すように、階段状に各対象画素の値ｖ iを補
正してやればよい。各階段の段差Δは、 Δ＝(ＶB−ＶA)／８ …（13） なので、例えば、対象画素の値ｖ0の補正後の値ｖx0'
は、下式（14）により算出することができる。 ｖx0'＝(ＶB＋ＶA)／２＋Δ＋δｖ0 ＝(５ＶB＋３ＶA)／８＋δｖ0 ＝{５(ｖ0−δｖ0)＋３(ｖ7−δｖ7)}／８＋δｖ0 ＝{５ｖ0＋３ｖ7＋３(δｖ0−δｖ7)}／８ …（14） ここで、正確な値を算出するためには、上式（14）に従
わなければならないが、上式（14）において、(δｖ0−
δｖ7)が小さいと仮定して省略し、下式（15）の近似式
を得る。 ｖx0'＝(５ｖ0＋３ｖ7)／８ …（15） また、ブロックＢ内の他の対象画素についても同様に、
補正後の値ｖx1'〜ｖx 3'は、下式（16）〜（18）により
算出することができる。 ｖx1'＝(ＶB＋ＶA)／２＋２Δ＋δｖ1 ＝{６ｖ1＋２ｖ7＋２(δｖ1−δｖ7)}／８ …（16） ｖx2'＝(ＶB＋ＶA)／２＋３Δ＋δｖ2 ＝{７ｖ2＋ｖ7＋(δｖ2−δｖ7)}／８ …（17） ｖx3'＝(ＶB＋ＶA)／２＋４Δ＋δｖ3 ＝ｖ3 …（18） これにより、下式（19），（20）の近似式を得る。 ｖx1'＝(３ｖ1＋ｖ7)／４ …（19） ｖx2'＝(７ｖ2＋ｖ7)／８ …（20） また、ブロックＡ内の対象画素については、参照画素の
値がｖ0となる点で異なる以外は同様であり、補正後の
値ｖx4'〜ｖx7'は、下式（21）〜（24）により算出する
ことができる。 ｖx4'＝(ＶB＋ＶA)／２−３Δ＋δｖ4 ＝{７ｖ4＋ｖ0＋(δｖ4−δｖ0)}／８ …（21） ｖx5'＝(ＶB＋ＶA)／２−２Δ＋δｖ5 ＝{６ｖ5＋２ｖ0＋２(δｖ5−δｖ0)}／８ …（22） ｖx6'＝(ＶB＋ＶA)／２−Δ＋δｖ6 ＝{５ｖ6＋３ｖ0＋(δｖ6−δｖ0)}／８ …（23） ｖx7'＝(ＶB＋ＶA)／２＋δｖ7 ＝(ｖ7＋ｖ0＋２δｖ7)／２ …（24） これにより、下式（25）〜（28）の近似式を得る。 ｖx4'＝ｖ4 …（25） ｖx5'＝(３ｖ5＋ｖ0)／４ …（26） ｖx6'＝(５ｖ6＋３ｖ0)／８ …（27） ｖx7'＝(ｖ7＋ｖ0)／２ …（28） また、実際の演算では、除算演算よりもビットシフトの
方が処理を高速化することができるため、上式（15），
（19），（20），（18），（25）〜（28）を上式（１）
〜（８）に変形して用いる。このデブロックフィルタ処
理を水平方向の画素列および垂直方向の画素列に対して
それぞれ行う。演算量としては、１画素に対して、加算
および減算がそれぞれ２回、ビットシフトが４回です
む。ビットシフトは、ハードウェア化する際にはさほど
負荷にならない。従来のポストフィルタでは、１画素に
ついて最大７×７画素分の重み付け平均をとっていたの
で、それと比べて大幅に演算量を減らすことができる。
【００５７】同様にして、図２の例において、本発明に
係るデブロックフィルタ処理により、対象画素ｖx0'〜
ｖx7'について垂直方向のフィルタ演算を行った場合、
デブロックフィルタ処理後の各対象画素の値ｖyi'（ｉ
＝０〜７）は、下式（29）のフィルタ演算式により算出
することができる。なお、下式（29）〜（36）におい
て、ｒyiは、参照画素の値を示している。 ｖyi'＝ｖxi−(ｖxi'−ｒyi)／８ …（29） 図２の例では、対象画素ｖ0〜ｖ7は、対象ブロック１０
において３段目に位置しているので、上式（29）のフィ
ルタ演算式は、上式（３）に対応するものとなる。した
がって、対象画素ｖ0〜ｖ7が１，２，４段目に位置する
ときは、フィルタ演算式は、下式（30）〜（32）に示す
ように、上式（１），（２），（４）に対応したものと
なり、対象画素ｖ0〜ｖ7が５〜８段目に位置するとき
は、フィルタ演算式は、下式（33）〜（36）に示すよう
に、上式（５）〜（８）に対応したものとなる。ただ
し、対象画素ｖ0〜ｖ7が５〜８段目に位置するときは、
図４に示すように、第１垂直参照画素列ＬYLは、垂直参
照ブロック１８の最上段の画素列であって第１対象画素
列ＬSLの下方に位置しかつ４画素からなるものとなり、
第２垂直参照画素列ＬYRは、垂直参照ブロック１８の最
上段の画素列であって第２対象画素列ＬSRの下方に位置
しかつ４画素からなるものとなる。 ｖyi'＝(ｖxi'＋ｒyi)／２＋(ｖxi'−ｒyi)／８ …（30） ｖyi'＝(ｖxi'＋ｒyi)／２＋(ｖxi'−ｒyi)／４ …（31） ｖyi'＝ｖxi' …（32） ｖyi'＝ｖxi' …（33） ｖyi'＝(ｖxi'＋ｒyi)／２＋(ｖxi'−ｒyi)／４ …（34） ｖyi'＝(ｖxi'＋ｒyi)／２＋(ｖxi'−ｒyi)／８ …（35） ｖyi'＝(ｖxi'＋ｒyi)／２ …（36） 本発明に係るデブロックフィルタ処理は、具体的に、図
５ないし図１０のフローチャートに示す主制御処理、画
素データ読込処理、第１水平フィルタ処理、第１垂直フ
ィルタ処理、第２水平フィルタ処理および第２垂直フィ
ルタ処理により実現することができる。
【００５８】まず、主制御処理を図５を参照しながら詳
細に説明する。図５は、主制御処理を示すフローチャー
トである。主制御処理は、ポストフィルタ部４０におい
て実行されると、図５に示すように、まず、ステップＳ
１００に移行するようになっている。ステップＳ１００
では、ＶＲＡＭ３５において最初に処理すべき第１対象
画素列ＬSLの左端画素の画素データが格納されているア
ドレスを対象画素用ポインタ*sxに、ＶＲＡＭ３５にお
いて最初に処理すべき第１垂直参照画素列ＬYLの左端画
素の画素データが格納されているアドレスを垂直参照画
素用ポインタ*cyにそれぞれ設定する。ここで、対象画
素用ポインタ*sxは、第１対象画素列ＬSL、第２対象画
素列ＬSRおよび第２水平参照画素列ＬXRの画素データを
ＶＲＡＭ３５から読み込むのに用いられる。また、垂直
参照画素用ポインタ*cyは、第１垂直参照画素列ＬYLお
よび第２垂直参照画素列ＬYRをＶＲＡＭ３５から読み込
むのに用いられる。
【００５９】次いで、ステップＳ１０２に移行して、対
象画素用ポインタ*sxおよび垂直参照画素用ポインタ*cy
を参照して、第１対象画素列ＬSL、第２対象画素列
ＬSR、第２水平参照画素列ＬXR、第１垂直参照画素列Ｌ
YLおよび第２垂直参照画素列Ｌ YRをＶＲＡＭ３５から読
み込むべき読込要求を出力し、ステップＳ１０４に移行
する。
【００６０】ステップＳ１０４では、後述する第１垂直
フィルタ処理および第２垂直フィルタ処理により、第１
対象画素列ＬSLおよび第２対象画素列ＬSRの対象画素に
ついてフィルタ処理後の画素データがすべてＲＧＢ変換
部４２に出力されたか否かを判定し、フィルタ処理後の
画素データがすべてＲＧＢ変換部４２に出力されたと判
定したとき(Yes)は、ステップＳ１０６に移行するが、
そうでないと判定したとき(No)は、フィルタ処理後の画
素データがすべてＲＧＢ変換部４２に出力されるまでス
テップＳ１０４で待機する。
【００６１】ステップＳ１０６では、対象画素用ポイン
タ*sxおよび垂直参照画素用ポインタ*cyを更新するポイ
ンタ更新処理を実行し、ステップＳ１０８に移行して、
再生画像のすべての画素についてフィルタ処理が終了し
たか否かを判定し、再生画像のすべての画素についてフ
ィルタ処理が終了したと判定したとき(Yes)は、一連の
処理を終了して元の処理に復帰させる。
【００６２】一方、ステップＳ１０８で、再生画像のす
べての画素についてフィルタ処理が終了していないと判
定したとき(No)は、ステップＳ１０２に移行する。次
に、画素データ読込処理を図６を参照しながら詳細に説
明する。図６は、画素データ読込処理を示すフローチャ
ートである。画素データ読込処理は、読込要求に応じ
て、第１対象画素列ＬSL、第２対象画素列ＬSR、第２水
平参照画素列ＬXR、第１垂直参照画素列ＬYLおよび第２
垂直参照画素列ＬYRをＶＲＡＭ３５からバッファに読み
込む処理であって、ポストフィルタ部４０において実行
されると、図６に示すように、まず、ステップＳ２００
に移行するようになっている。
【００６３】ステップＳ２００では、読込要求が出力さ
れたか否かを判定し、読込要求が出力されたと判定した
とき(Yes)は、ステップＳ２０２に移行するが、そうで
ないと判定したとき(No)は、読込要求が出力されるまで
ステップＳ２００で待機する。ステップＳ２０２では、
対象画素用ポインタ*sxを参照して、第１対象画素列Ｌ
SLの各対象画素ｖ0〜ｖ3の画素データのうちＵ成分を示
すＵデータを読み込む。本実施の形態では、Ｕデータ
を、２画素ごとに１つのデータとして構成しているた
め、ステップＳ２０２では、対象画素ｖ0，ｖ1のＵデー
タ、および対象画素ｖ2，ｖ3のＵデータを読み込む。な
お、Ｕデータについては、フィルタ処理を行ってもさほ
どフィルタ効果が得られないことから、処理の高速化を
優先してデブロックフィルタ処理は行わない。
【００６４】次いで、ステップＳ２０４に移行して、対
象画素用ポインタ*sxを参照して、第２対象画素列ＬSR
の各対象画素ｖ4〜ｖ7の画素データのうちＵデータを読
み込み、ステップＳ２０６に移行する。次いで、ステッ
プＳ２０６に移行して、対象画素用ポインタ*sxを参照
して、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3の画素
データのうちＶ成分を示すＶデータを読み込む。本実施
の形態では、Ｖデータを、２画素ごとに１つのデータと
して構成しているため、ステップＳ２０６では、対象画
素ｖ0，ｖ1のＶデータ、および対象画素ｖ2，ｖ3のＶデ
ータを読み込む。なお、Ｖデータについては、フィルタ
処理を行ってもさほどフィルタ効果が得られないことか
ら、処理の高速化を優先してデブロックフィルタ処理は
行わない。
【００６５】次いで、ステップＳ２０８に移行して、対
象画素用ポインタ*sxを参照して、第２対象画素列ＬSR
の各対象画素ｖ4〜ｖ7の画素データのうちＶデータを読
み込み、ステップＳ２１０に移行する。ステップＳ２１
０では、再生画像について最初の読込であるか否かを判
定し、最初の読込であると判定したとき(Yes)は、ステ
ップＳ２１２に移行して、対象画素用ポインタ*sxを参
照して、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3の画
素データのうちＹ成分を示すＹデータを読み込む。本実
施の形態では、Ｙデータを、１画素ごとに１つのデータ
として構成しているため、ステップＳ２１２では、対象
画素ｖ0〜ｖ3のそれぞれのＶデータを読み込む。
【００６６】次いで、ステップＳ２１４に移行して、垂
直参照画素用ポインタ*cyを参照して、第１垂直参照画
素列ＬYLの各参照画素ｒy0〜ｒy3の画素データのうちＹ
データを読み込み、ステップＳ２１６に移行して、垂直
参照画素用ポインタ*cyを参照して、第２垂直参照画素
列ＬYRの各参照画素ｒy4〜ｒy7の画素データのうちＹデ
ータを読み込み、ステップＳ２１８に移行する。
【００６７】ステップＳ２１８では、対象画素用ポイン
タ*sxを参照して、第２対象画素列ＬSRの各対象画素ｖ4
〜ｖ7の画素データのうちＹデータを読み込み、ステッ
プＳ２２０に移行して、対象画素用ポインタ*sxを参照
して、第２水平参照画素列ＬX Rの各画素（参照画素ｒx1
を含む。）の画素データのうちＹデータを読み込み、一
連の処理を終了して元の処理に復帰させる。
【００６８】一方、ステップＳ２１０で、再生画像につ
いて２回目以降の読込であると判定したとき(No)は、ス
テップＳ２２２に移行して、ステップＳ２２０で前回読
み込んだ第２水平参照画素列ＬXRの画素データを、第１
対象画素列ＬSLの各対象画素ｖ0〜ｖ3の画素データとし
てバッファ内でコピーし、ステップＳ２２４に移行し
て、ステップＳ２２０で前回読み込んだ第２対象画素列
ＬSRの画素データのうち右端画素に係るものを、第１水
平参照画素列ＬXLの参照画素ｒx0の画素データとしてバ
ッファ内でコピーし、ステップＳ２１４に移行する。
【００６９】次に、第１水平フィルタ処理を図７を参照
しながら詳細に説明する。図７は、第１水平フィルタ処
理を示すフローチャートである。第１水平フィルタ処理
は、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3について
水平方向のフィルタ演算を行う処理であって、ポストフ
ィルタ部４０において実行されると、図７に示すよう
に、まず、ステップＳ３００に移行するようになってい
る。
【００７０】ステップＳ３００では、画素データ読込処
理により、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3お
よび第１水平参照画素列ＬXLの参照画素ｒx0のＹデータ
がバッファにおいて利用可能となったか否かを判定し、
読込またはコピーにより画素データが利用可能となった
と判定したとき(Yes)は、ステップＳ３０２〜Ｓ３１２
に移行するが、そうでないと判定したとき(No)は、画素
データが利用可能となるまでステップＳ３００で待機す
る。
【００７１】ステップＳ３０２〜Ｓ３１２は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ３０２では、対象画素
ｖ0の値と参照画素ｒx0の値との差分の絶対値が定数値
Ｃ1を超えているか否かの判定値Ｌ0を下式（37）により
算出し、ステップＳ３１４，Ｓ３２０，Ｓ３２６，Ｓ３
３２に移行する。ここで、定数値Ｃ1は、画素の値の最
大値を「２５５」として「３２」に設定する。その理由
としては、定数値Ｃ1は、「３２」よりも大きく設定し
過ぎると、フィルタ処理を行わなくてもよいのに行って
しまい、処理負荷が増加し、フィルタ処理の高速化を図
ることができなくなり、逆に、「３２」よりも小さく設
定し過ぎると、フィルタ処理を行うべきなのに行われ
ず、効果的なフィルタ効果が期待できないからである。 Ｌ0＝(｜ｖ0−ｒx0｜≦Ｃ1) …（37） 上式（37）において、Ｌ0は、括弧内の演算式が成立し
たときは「１」となり、括弧内の演算式が成立しないと
きは「０」となる。以下、ステップＳ３０４，Ｓ３０
６，Ｓ４０４，Ｓ４１３，Ｓ４２０，Ｓ４２９，Ｓ５０
２，Ｓ５０４，Ｓ５０６，Ｓ６０４，Ｓ６１３，Ｓ６２
０，Ｓ６２９において同じである。
【００７２】ステップＳ３０４では、対象画素ｖ1の値
と対象画素ｖ0の値との差分の絶対値が定数値Ｃ2を超え
ているか否かの判定値Ｌ1を下式（38）により算出し、
ステップＳ３１４，Ｓ３２０，Ｓ３２６，Ｓ３３２に移
行する。ここで、定数値Ｃ2は、画素の値の最大値を
「２５５」として「１６」に設定する。その理由として
は、定数値Ｃ2は、「１６」よりも大きく設定し過ぎる
と、フィルタ処理を行わなくてもよいのに行ってしま
い、処理負荷が増加し、フィルタ処理の高速化を図るこ
とができなくなり、逆に、「１６」よりも小さく設定し
過ぎると、フィルタ処理を行うべきなのに行われず、効
果的なフィルタ効果が期待できないからである。 Ｌ1＝(｜ｖ1−ｖ0｜≦Ｃ2) …（38） ステップＳ３０６では、対象画素ｖ2の値と対象画素ｖ1
の値との差分の絶対値が定数値Ｃ2を超えているか否か
の判定値Ｌ2を下式（39）により算出し、ステップＳ３
１４，Ｓ３２０，Ｓ３２６，Ｓ３３２に移行する。 Ｌ2＝(｜ｖ2−ｖ1｜≦Ｃ2) …（39） ステップＳ３０８では、対象画素ｖ0について水平方向
のフィルタ演算後の値ｖx0''を上式（１）により算出
し、ステップＳ３１４，Ｓ３２０，Ｓ３２６，Ｓ３３２
に移行する。ステップＳ３０８では、上式（１）の
ｖx0'に設定すべき値をｖx0''に設定する。
【００７３】ステップＳ３１０では、対象画素ｖ1につ
いて水平方向のフィルタ演算後の値ｖx1''を上式（２）
により算出し、ステップＳ３１４，Ｓ３２０，Ｓ３２
６，Ｓ３３２に移行する。ステップＳ３１０では、上式
（２）のｖx1'に設定すべき値をｖx1''に設定する。ス
テップＳ３１２では、対象画素ｖ2について水平方向の
フィルタ演算後の値ｖx2''を上式（３）により算出し、
ステップＳ３１４，Ｓ３２０，Ｓ３２６，Ｓ３３２に移
行する。ステップＳ３１２では、上式（３）のｖx2'に
設定すべき値をｖx2''に設定する。
【００７４】ステップＳ３１４，Ｓ３２０，Ｓ３２６，
Ｓ３３２は、ポストフィルタ部４０においてパイプライ
ン処理として同時に実行される処理である。ステップＳ
３１４では、判定値Ｌ0が「１」であるか否かを判定
し、判定値Ｌ0が「１」であると判定したとき(Yes)は、
ステップＳ３１６に移行して、対象画素ｖ0の新たな値
ｖx0'としてｖx0''を設定し、一連の処理を終了して元
の処理に復帰させる。
【００７５】ステップＳ３２０では、判定値Ｌ0，Ｌ1の
論理積が「１」であるか否かを判定し、判定値Ｌ0，Ｌ1
の論理積が「１」であると判定したとき(Yes)は、ステ
ップＳ３２２に移行して、対象画素ｖ1の新たな値ｖx1'
としてｖx1''を設定し、一連の処理を終了して元の処理
に復帰させる。ステップＳ３２６では、判定値Ｌ0〜Ｌ2
の論理積が「１」であるか否かを判定し、判定値Ｌ0〜
Ｌ2の論理積が「１」であると判定したとき(Yes)は、ス
テップＳ３２８に移行して、対象画素ｖ2の新たな値ｖ
x2'としてｖx2''を設定し、一連の処理を終了して元の
処理に復帰させる。
【００７６】ステップＳ３３２では、対象画素ｖ3の新
たな値ｖx3'としてｖ3を設定し、一連の処理を終了して
元の処理に復帰させる。一方、ステップＳ３１４で、判
定値Ｌ0が「０」であると判定したとき(No)は、ステッ
プＳ３１８に移行して、対象画素ｖ0の新たな値ｖx0'と
してｖ0を設定し、一連の処理を終了して元の処理に復
帰させる。
【００７７】一方、ステップＳ３２０で、判定値Ｌ0，
Ｌ1の論理積が「０」であると判定したとき(No)は、ス
テップＳ３２４に移行して、対象画素ｖ1の新たな値ｖ
x1'としてｖ1を設定し、一連の処理を終了して元の処理
に復帰させる。一方、ステップＳ３２６で、判定値Ｌ0
〜Ｌ2の論理積が「０」であると判定したとき(No)は、
ステップＳ３３０に移行して、対象画素ｖ2の新たな値
ｖx2'としてｖ2を設定し、一連の処理を終了して元の処
理に復帰させる。
【００７８】次に、第１垂直フィルタ処理を図８を参照
しながら詳細に説明する。図８は、第１垂直フィルタ処
理を示すフローチャートである。第１垂直フィルタ処理
は、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3について
垂直方向のフィルタ演算を行う処理であって、ポストフ
ィルタ部４０において実行されると、図８に示すよう
に、まず、ステップＳ４００に移行するようになってい
る。
【００７９】ステップＳ４００では、画素データ読込処
理により、第１垂直参照画素列ＬYLの参照画素ｒy0〜ｒ
y3のＹデータがバッファにおいて利用可能となったか否
かを判定し、読込またはコピーにより画素データが利用
可能となったと判定したとき(Yes)は、ステップＳ４０
２に移行するが、そうでないと判定したとき(No)は、画
素データが利用可能となるまでステップＳ４００で待機
する。
【００８０】ステップＳ４０２では、第１水平フィルタ
処理により、第１対象画素列ＬSLの各対象画素ｖ0〜ｖ3
について水平方向のフィルタ処理が完了しているか否か
を判定し、フィルタ処理が完了していると判定したとき
(Yes)は、ステップＳ４０４，Ｓ４０６に移行するが、
そうでないと判定したとき(No)は、ステップＳ４００に
移行する。
【００８１】ステップＳ４０４，Ｓ４０６は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ４０４では、対象画素
ｖx0'の値と参照画素ｒy0の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ0を下式（40）によ
り算出し、ステップＳ４０８に移行する。ここで、定数
値Ｃ2を用いているが、対象ブロック１０において第１
対象画素列ＬSLが最上段または最下段に位置している場
合は、これに代えて定数値Ｃ1を用いる。以下、ステッ
プＳ４１３，Ｓ４２０，Ｓ４２９において同じである。 Ｌ0＝(｜ｖx0'−ｒy0｜≦Ｃ2) …（40） ステップＳ４０６では、対象画素ｖx0'について垂直方
向のフィルタ演算後の値ｖy0''を、対象ブロック１０に
おける第１対象画素列ＬSLの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ４０８に移
行する。ステップＳ４０６では、上式（29）〜（36）の
ｖy0'に設定すべき値をｖy0''に設定する。
【００８２】ステップＳ４０８では、判定値Ｌ0が
「１」であるか否かを判定し、判定値Ｌ0が「１」であ
ると判定したとき(Yes)は、ステップＳ４１０に移行し
て、対象画素ｖ0の新たな値ｖy0'としてｖy0''を設定
し、ステップＳ４１１に移行して、対象画素ｖ0，ｖ1の
ＵデータおよびＶデータをＲＧＢ変換部４２に出力し、
ステップＳ４１２に移行して、対象画素ｖ0のＹデータ
ｖy0''をＲＧＢ変換部４２に出力し、ステップＳ４１
３，Ｓ４１４に移行する。
【００８３】ステップＳ４１３，Ｓ４１４は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ４１３では、対象画素
ｖx1'の値と参照画素ｒy1の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ1を下式（41）によ
り算出し、ステップＳ４１６に移行する。 Ｌ1＝(｜ｖx1'−ｒy1｜≦Ｃ2) …（41） ステップＳ４１４では、対象画素ｖx1'について垂直方
向のフィルタ演算後の値ｖy1''を、対象ブロック１０に
おける第１対象画素列ＬSLの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ４１６に移
行する。ステップＳ４１４では、上式（29）〜（36）の
ｖy1'に設定すべき値をｖy1''に設定する。
【００８４】ステップＳ４１６では、判定値Ｌ1が
「１」であるか否かを判定し、判定値Ｌ1が「１」であ
ると判定したとき(Yes)は、ステップＳ４１８に移行し
て、対象画素ｖ1の新たな値ｖy1'としてｖy1''を設定
し、ステップＳ４１９に移行して、対象画素ｖ1のＹデ
ータｖy1''をＲＧＢ変換部４２に出力し、ステップＳ４
２０，Ｓ４２２に移行する。
【００８５】ステップＳ４２０，Ｓ４２２は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ４２０では、対象画素
ｖx2'の値と参照画素ｒy2の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ2を下式（42）によ
り算出し、ステップＳ４２４に移行する。 Ｌ2＝(｜ｖx2'−ｒy2｜≦Ｃ2) …（42） ステップＳ４２２では、対象画素ｖx2'について垂直方
向のフィルタ演算後の値ｖy2''を、対象ブロック１０に
おける第１対象画素列ＬSLの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ４２４に移
行する。ステップＳ４２２では、上式（29）〜（36）の
ｖy2'に設定すべき値をｖy2''に設定する。
【００８６】ステップＳ４２４では、判定値Ｌ2が
「１」であるか否かを判定し、判定値Ｌ2が「１」であ
ると判定したとき(Yes)は、ステップＳ４２６に移行し
て、対象画素ｖ2の新たな値ｖy2'としてｖy2''を設定
し、ステップＳ４２７に移行して、対象画素ｖ2，ｖ3の
ＵデータおよびＶデータをＲＧＢ変換部４２に出力し、
ステップＳ４２８に移行して、対象画素ｖ2のＹデータ
ｖy2''をＲＧＢ変換部４２に出力し、ステップＳ４２
９，Ｓ４３０に移行する。
【００８７】ステップＳ４２９，Ｓ４３０は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ４２９では、対象画素
ｖx3'の値と参照画素ｒy3の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ3を下式（43）によ
り算出し、ステップＳ４３２に移行する。 Ｌ3＝(｜ｖx3'−ｒy3｜≦Ｃ2) …（43） ステップＳ４３０では、対象画素ｖx3'について垂直方
向のフィルタ演算後の値ｖy3''を、対象ブロック１０に
おける第１対象画素列ＬSLの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ４３２に移
行する。ステップＳ４３０では、上式（29）〜（36）の
ｖy3'に設定すべき値をｖy3''に設定する。
【００８８】ステップＳ４３２では、判定値Ｌ3が
「１」であるか否かを判定し、判定値Ｌ3が「１」であ
ると判定したとき(Yes)は、ステップＳ４３４に移行し
て、対象画素ｖ3の新たな値ｖy3'としてｖy3''を設定
し、ステップＳ４４６に移行して、対象画素ｖ3のＹデ
ータｖy3''をＲＧＢ変換部４２に出力し、一連の処理を
終了して元の処理に復帰させる。
【００８９】一方、ステップＳ４３２で、判定値Ｌ3が
「０」であると判定したとき(No)は、ステップＳ４４８
に移行して、対象画素ｖ3の新たな値ｖy3'としてｖx3'
を設定し、ステップＳ４４６に移行する。一方、ステッ
プＳ４２４で、判定値Ｌ2が「０」であると判定したと
き(No)は、ステップＳ４５０に移行して、対象画素ｖ2
の新たな値ｖy2'としてｖx2'を設定し、ステップＳ４２
７に移行する。
【００９０】一方、ステップＳ４１６で、判定値Ｌ1が
「０」であると判定したとき(No)は、ステップＳ４５２
に移行して、対象画素ｖ1の新たな値ｖy1'としてｖx1'
を設定し、ステップＳ４１９に移行する。一方、ステッ
プＳ４０８で、判定値Ｌ0が「０」であると判定したと
き(No)は、ステップＳ４５４に移行して、対象画素ｖ0
の新たな値ｖy0'としてｖx0'を設定し、ステップＳ４１
１に移行する。
【００９１】次に、第２水平フィルタ処理を図９を参照
しながら詳細に説明する。図９は、第２水平フィルタ処
理を示すフローチャートである。第２水平フィルタ処理
は、第２対象画素列ＬSRの各対象画素ｖ4〜ｖ7について
水平方向のフィルタ演算を行う処理であって、ポストフ
ィルタ部４０において実行されると、図９に示すよう
に、まず、ステップＳ５００に移行するようになってい
る。
【００９２】ステップＳ５００では、画素データ読込処
理により、第２対象画素列ＬSRの各対象画素ｖ4〜ｖ7お
よび第２水平参照画素列ＬXRの参照画素ｒx1のＹデータ
がバッファにおいて利用可能となったか否かを判定し、
読込またはコピーにより画素データが利用可能となった
と判定したとき(Yes)は、ステップＳ５０２〜Ｓ５１２
に移行するが、そうでないと判定したとき(No)は、画素
データが利用可能となるまでステップＳ５００で待機す
る。
【００９３】ステップＳ５０２〜Ｓ５１２は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ５０２では、対象画素
ｖ7の値と参照画素ｒx1の値との差分の絶対値が定数値
Ｃ1を超えているか否かの判定値Ｌ7を下式（44）により
算出し、ステップＳ５１４，Ｓ５２０，Ｓ５２６，Ｓ５
３２に移行する。 Ｌ7＝(｜ｖ7−ｒx1｜≦Ｃ1) …（44） ステップＳ５０４では、対象画素ｖ6の値と対象画素ｖ7
の値との差分の絶対値が定数値Ｃ2を超えているか否か
の判定値Ｌ6を下式（45）により算出し、ステップＳ５
１４，Ｓ５２０，Ｓ５２６，Ｓ５３２に移行する。 Ｌ6＝(｜ｖ6−ｖ7｜≦Ｃ2) …（45） ステップＳ５０６では、対象画素ｖ5の値と対象画素ｖ6
の値との差分の絶対値が定数値Ｃ2を超えているか否か
の判定値Ｌ5を下式（46）により算出し、ステップＳ５
１４，Ｓ５２０，Ｓ５２６，Ｓ５３２に移行する。 Ｌ5＝(｜ｖ5−ｖ6｜≦Ｃ2) …（46） ステップＳ５０８では、対象画素ｖ7について水平方向
のフィルタ演算後の値ｖx7''を上式（８）により算出
し、ステップＳ５１４，Ｓ５２０，Ｓ５２６，Ｓ５３２
に移行する。ステップＳ５０８では、上式（８）の
ｖx7'に設定すべき値をｖx7''に設定する。
【００９４】ステップＳ５１０では、対象画素ｖ6につ
いて水平方向のフィルタ演算後の値ｖx6''を上式（７）
により算出し、ステップＳ５１４，Ｓ５２０，Ｓ５２
６，Ｓ５３２に移行する。ステップＳ５１０では、上式
（７）のｖx6'に設定すべき値をｖx6''に設定する。ス
テップＳ５１２では、対象画素ｖ5について水平方向の
フィルタ演算後の値ｖx5''を上式（６）により算出し、
ステップＳ５１４，Ｓ５２０，Ｓ５２６，Ｓ５３２に移
行する。ステップＳ５１２では、上式（６）のｖx5'に
設定すべき値をｖx5''に設定する。
【００９５】ステップＳ５１４，Ｓ５２０，Ｓ５２６，
Ｓ５３２は、ポストフィルタ部４０においてパイプライ
ン処理として同時に実行される処理である。ステップＳ
５１４では、判定値Ｌ7が「１」であるか否かを判定
し、判定値Ｌ7が「１」であると判定したとき(Yes)は、
ステップＳ５１６に移行して、対象画素ｖ7の新たな値
ｖx7'としてｖx7''を設定し、一連の処理を終了して元
の処理に復帰させる。
【００９６】ステップＳ５２０では、判定値Ｌ7，Ｌ6の
論理積が「１」であるか否かを判定し、判定値Ｌ7，Ｌ6
の論理積が「１」であると判定したとき(Yes)は、ステ
ップＳ５２２に移行して、対象画素ｖ6の新たな値ｖx6'
としてｖx6''を設定し、一連の処理を終了して元の処理
に復帰させる。ステップＳ５２６では、判定値Ｌ7〜Ｌ5
の論理積が「１」であるか否かを判定し、判定値Ｌ7〜
Ｌ5の論理積が「１」であると判定したとき(Yes)は、ス
テップＳ５２８に移行して、対象画素ｖ5の新たな値ｖ
x5'としてｖx5''を設定し、一連の処理を終了して元の
処理に復帰させる。
【００９７】ステップＳ５３２では、対象画素ｖ4の新
たな値ｖx4'としてｖ4を設定し、一連の処理を終了して
元の処理に復帰させる。一方、ステップＳ５１４で、判
定値Ｌ7が「０」であると判定したとき(No)は、ステッ
プＳ５１８に移行して、対象画素ｖ7の新たな値ｖx7'と
してｖ7を設定し、一連の処理を終了して元の処理に復
帰させる。
【００９８】一方、ステップＳ５２０で、判定値Ｌ7，
Ｌ6の論理積が「０」であると判定したとき(No)は、ス
テップＳ５２４に移行して、対象画素ｖ6の新たな値ｖ
x6'としてｖ6を設定し、一連の処理を終了して元の処理
に復帰させる。一方、ステップＳ５２６で、判定値Ｌ7
〜Ｌ5の論理積が「０」であると判定したとき(No)は、
ステップＳ５３０に移行して、対象画素ｖ5の新たな値
ｖx5'としてｖ5を設定し、一連の処理を終了して元の処
理に復帰させる。
【００９９】次に、第２垂直フィルタ処理を図１０を参
照しながら詳細に説明する。図１０は、第２垂直フィル
タ処理を示すフローチャートである。第２垂直フィルタ
処理は、第２対象画素列ＬSRの各対象画素ｖ4〜ｖ7につ
いて垂直方向のフィルタ演算を行う処理であって、ポス
トフィルタ部４０において実行されると、図１０に示す
ように、まず、ステップＳ６００に移行するようになっ
ている。
【０１００】ステップＳ６００では、画素データ読込処
理により、第２垂直参照画素列ＬYRの参照画素ｒy4〜ｒ
y7のＹデータがバッファにおいて利用可能となったか否
かを判定し、読込またはコピーにより画素データが利用
可能となったと判定したとき(Yes)は、ステップＳ６０
２に移行するが、そうでないと判定したとき(No)は、画
素データが利用可能となるまでステップＳ６００で待機
する。
【０１０１】ステップＳ６０２では、第２水平フィルタ
処理により、第２対象画素列ＬSRの各対象画素ｖ4〜ｖ7
について水平方向のフィルタ処理が完了しているか否か
を判定し、フィルタ処理が完了していると判定したとき
(Yes)は、ステップＳ６０４，Ｓ６０６に移行するが、
そうでないと判定したとき(No)は、ステップＳ６００に
移行する。
【０１０２】ステップＳ６０４，Ｓ６０６は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ６０４では、対象画素
ｖx7'の値と参照画素ｒy7の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ7を下式（47）によ
り算出し、ステップＳ６０８に移行する。ここで、定数
値Ｃ2を用いているが、対象ブロック１０において第２
対象画素列ＬSRが最上段または最下段に位置している場
合は、これに代えて定数値Ｃ1を用いる。以下、ステッ
プＳ６１３，Ｓ６２０，Ｓ６２９において同じである。 Ｌ7＝(｜ｖx7'−ｒy7｜≦Ｃ2) …（47） ステップＳ６０６では、対象画素ｖx7'について垂直方
向のフィルタ演算後の値ｖy7''を、対象ブロック１０に
おける第２対象画素列ＬSRの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ６０８に移
行する。ステップＳ６０６では、上式（29）〜（36）の
ｖy7'に設定すべき値をｖy7''に設定する。
【０１０３】ステップＳ６０８では、判定値Ｌ7が
「１」であるか否かを判定し、判定値Ｌ7が「１」であ
ると判定したとき(Yes)は、ステップＳ６１０に移行し
て、対象画素ｖ7の新たな値ｖy7'としてｖy7''を設定
し、ステップＳ６１１に移行して、対象画素ｖ7，ｖ6の
ＵデータおよびＶデータをＲＧＢ変換部４２に出力し、
ステップＳ６１２に移行して、対象画素ｖ7のＹデータ
ｖy7''をＲＧＢ変換部４２に出力し、ステップＳ６１
３，Ｓ６１４に移行する。
【０１０４】ステップＳ６１３，Ｓ６１４は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ６１３では、対象画素
ｖx6'の値と参照画素ｒy6の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ6を下式（48）によ
り算出し、ステップＳ６１６に移行する。 Ｌ6＝(｜ｖx6'−ｒy6｜≦Ｃ2) …（48） ステップＳ６１４では、対象画素ｖx6'について垂直方
向のフィルタ演算後の値ｖy6''を、対象ブロック１０に
おける第２対象画素列ＬSRの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ６１６に移
行する。ステップＳ６１４では、上式（29）〜（36）の
ｖy6'に設定すべき値をｖy6''に設定する。
【０１０５】ステップＳ６１６では、判定値Ｌ6が
「１」であるか否かを判定し、判定値Ｌ6が「１」であ
ると判定したとき(Yes)は、ステップＳ６１８に移行し
て、対象画素ｖ6の新たな値ｖy6'としてｖy6''を設定
し、ステップＳ６１９に移行して、対象画素ｖ6のＹデ
ータｖy6''をＲＧＢ変換部４２に出力し、ステップＳ６
２０，Ｓ６２２に移行する。
【０１０６】ステップＳ６２０，Ｓ６２２は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ６２０では、対象画素
ｖx5'の値と参照画素ｒy5の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ5を下式（49）によ
り算出し、ステップＳ６２４に移行する。 Ｌ5＝(｜ｖx5'−ｒy5｜≦Ｃ2) …（49） ステップＳ６２２では、対象画素ｖx5'について垂直方
向のフィルタ演算後の値ｖy5''を、対象ブロック１０に
おける第２対象画素列ＬSRの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ６２４に移
行する。ステップＳ６２２では、上式（29）〜（36）の
ｖy5'に設定すべき値をｖy5''に設定する。
【０１０７】ステップＳ６２４では、判定値Ｌ5が
「１」であるか否かを判定し、判定値Ｌ5が「１」であ
ると判定したとき(Yes)は、ステップＳ６２６に移行し
て、対象画素ｖ5の新たな値ｖy5'としてｖy5''を設定
し、ステップＳ６２７に移行して、対象画素ｖ5，ｖ4の
ＵデータおよびＶデータをＲＧＢ変換部４２に出力し、
ステップＳ６２８に移行して、対象画素ｖ5のＹデータ
ｖy5''をＲＧＢ変換部４２に出力し、ステップＳ６２
９，Ｓ６３０に移行する。
【０１０８】ステップＳ６２９，Ｓ６３０は、ポストフ
ィルタ部４０においてパイプライン処理として同時に実
行される処理である。ステップＳ６２９では、対象画素
ｖx4'の値と参照画素ｒy4の値との差分の絶対値が定数
値Ｃ2を超えているか否かの判定値Ｌ4を下式（50）によ
り算出し、ステップＳ６３２に移行する。 Ｌ4＝(｜ｖx4'−ｒy4｜≦Ｃ2) …（50） ステップＳ６３０では、対象画素ｖx4'について垂直方
向のフィルタ演算後の値ｖy4''を、対象ブロック１０に
おける第２対象画素列ＬSRの垂直方向の位置に応じて上
式（29）〜（36）により算出し、ステップＳ６３２に移
行する。ステップＳ６３０では、上式（29）〜（36）の
ｖy4'に設定すべき値をｖy4''に設定する。
【０１０９】ステップＳ６３２では、判定値Ｌ4が
「１」であるか否かを判定し、判定値Ｌ4が「１」であ
ると判定したとき(Yes)は、ステップＳ６３４に移行し
て、対象画素ｖ4の新たな値ｖy4'としてｖy4''を設定
し、ステップＳ６４６に移行して、対象画素ｖ4のＹデ
ータｖy4''をＲＧＢ変換部４２に出力し、一連の処理を
終了して元の処理に復帰させる。
【０１１０】一方、ステップＳ６３２で、判定値Ｌ4が
「０」であると判定したとき(No)は、ステップＳ６４８
に移行して、対象画素ｖ4の新たな値ｖy4'としてｖx4'
を設定し、ステップＳ６４６に移行する。一方、ステッ
プＳ６２４で、判定値Ｌ5が「０」であると判定したと
き(No)は、ステップＳ６５０に移行して、対象画素ｖ5
の新たな値ｖy5'としてｖx5'を設定し、ステップＳ６２
７に移行する。
【０１１１】一方、ステップＳ６１６で、判定値Ｌ6が
「０」であると判定したとき(No)は、ステップＳ６５２
に移行して、対象画素ｖ6の新たな値ｖy6'としてｖx6'
を設定し、ステップＳ６１９に移行する。一方、ステッ
プＳ６０８で、判定値Ｌ7が「０」であると判定したと
き(No)は、ステップＳ６５４に移行して、対象画素ｖ7
の新たな値ｖy7'としてｖx7'を設定し、ステップＳ６１
１に移行する。
【０１１２】次に、上記ステップＳ１０６のポインタ更
新処理を図１１を参照しながら詳細に説明する。図１１
は、ポインタ更新処理を示すフローチャートである。ポ
インタ更新処理は、上記ステップＳ１０６において実行
されると、図１１に示すように、まず、ステップＳ７０
０に移行するようになっている。なお、以下のステップ
において、再生画素の水平方向の画素数をＸとし、対象
ブロック１０における第１対象画素列ＬSLおよび第２対
象画素列ＬSRの垂直方向の座標をｙとする。
【０１１３】ステップＳ７００では、対象画素用ポイン
タ*sxおよび垂直参照画素用ポインタ*cyの値に８画素分
加算する。この加算により、対象ブロック１０および垂
直参照画素用ポインタ*cyは、一つ右のブロックに移動
する。ただし、加算前の対象ブロック１０が再生画像に
おいて右端のブロックである場合は、一つ下段の左端の
ブロックに移動する。この移動は、所定数を加算するだ
けなので、ハードウェアで構成する場合は加算器だけで
実現できる。
【０１１４】次いで、ステップＳ７０２では、再生画像
において右端のブロックの対象画素についてフィルタ処
理が終了したか否かを判定し、フィルタ処理が終了した
と判定したとき(Yes)は、ステップＳ７０４に移行する
が、そうでないと判定したとき(No)は、一連の処理を終
了して元の処理に復帰させる。ステップＳ７０４では、
ｙを「８」で除算したときの余数を算出し、ステップＳ
７０６に移行して、算出した余数が「０」であるか否か
を判定し、余数が「０」であると判定したとき(Yes)
は、ステップＳ７０８に移行して、垂直参照画素用ポイ
ンタ*cyの値から２Ｘを減算し、一連の処理を終了して
元の処理に復帰させる。この減算により、垂直参照画素
用ポインタ*cyは、対象ブロック１０の上に隣接する垂
直参照ブロック１６の最下段に移動する。この移動は、
Ｘを２倍しそれを減算するだけなので、ハードウェアで
構成する場合はシフタおよび加算器だけで実現できる。
【０１１５】一方、ステップＳ７０６で、算出した余数
が「０」でないと判定したとき(No)は、ステップＳ７１
０に移行して、算出した余数が「４」であるか否かを判
定し、余数が「４」であると判定したとき(Yes)は、ス
テップＳ７１２に移行して、垂直参照画素用ポインタ*c
yの値に８Ｘを加算し、一連の処理を終了して元の処理
に復帰させる。この加算により、垂直参照画素用ポイン
タ*cyは、対象ブロック１０の下に隣接する垂直参照ブ
ロック１８の最上段に移動する。この移動は、Ｘを８倍
しそれを加算するだけなので、ハードウェアで構成する
場合はシフタおよび加算器だけで実現できる。
【０１１６】一方、ステップＳ７１０で、算出した余数
が「４」でないと判定したとき(No)は、ステップＳ７１
４に移行して、垂直参照画素用ポインタ*cyの値からＸ
を減算し、一連の処理を終了して元の処理に復帰させ
る。この減算により、垂直参照画素用ポインタ*cyは、
対象ブロック１０の上に隣接する垂直参照ブロック１６
の最下段に移動する。この移動は、Ｘを減算するだけな
ので、ハードウェアで構成する場合は加算器だけで実現
できる。
【０１１７】次に、本実施の形態の動作を図面を参照し
ながら説明する。図１２は、デブロックフィルタ処理の
実行過程を示すタイムチャートである。以下、時刻ｔ0
〜ｔ1 2は、ポストフィルタ部４０の１クロックに相当す
る所定時間Ｔ経過ごとの時刻を示したものであり、すな
わち、各時刻ｔ0〜ｔ12は、一つ前の時刻から所定時間
Ｔ経過した時刻を表している。
【０１１８】まず、時刻ｔ0において、ステップＳ１０
０を経て、ポストフィルタ部４０により、ＶＲＡＭ３５
において最初に処理すべき第１対象画素列ＬSLの左端画
素の画素データが格納されているアドレスが、対象画素
用ポインタ*sxに設定され、ＶＲＡＭ３５において最初
に処理すべき第１垂直参照画素列ＬYLの左端画素の画素
データが格納されているアドレスが、垂直参照画素用ポ
インタ*cyに設定される。そして、ステップＳ１０２を
経て、対象画素用ポインタ*sxおよび垂直参照画素用ポ
インタ*cyが参照されて、第１対象画素列ＬSL、第２対
象画素列ＬSR、第２水平参照画素列ＬXR、第１垂直参照
画素列ＬYLおよび第２垂直参照画素列Ｌ YRを読み込むべ
き読込要求が出力される。
【０１１９】読込要求が出力されると、時刻ｔ1におい
て、ステップＳ２０２，Ｓ２０４を経て、対象画素
ｖ0，ｖ1のＵデータ、対象画素ｖ2，ｖ3のＵデータ、対
象画素ｖ 4，ｖ5のＵデータ、および対象画素ｖ6，ｖ7の
ＵデータがＶＲＡＭ３５に読み込まれる。次いで、時刻
ｔ2において、ステップＳ２０６，Ｓ２０８を経て、対
象画素ｖ0，ｖ1のＶデータ、対象画素ｖ2，ｖ3のＶデー
タ、対象画素ｖ4，ｖ5のＶデータ、および対象画素
ｖ6，ｖ7のＶデータがＶＲＡＭ３５に読み込まれる。
【０１２０】一方、同時刻ｔ2においては、ステップＳ
２２２，Ｓ２２４を経て、図１３に示すように、前回読
み込んだ第２水平参照画素列ＬXRの画素データが、第１
対象画素列ＬSLの各対象画素ｖ0〜ｖ3の画素データとし
てバッファ内でコピーされ、前回読み込んだ第２対象画
素列ＬSRの画素データのうち右端画素に係るものが、第
１水平参照画素列ＬXLの参照画素ｒx0の画素データとし
てバッファ内でコピーされる。図１３は、画素データを
コピーして再利用する場合を説明するための図である。
【０１２１】次いで、時刻ｔ3において、ステップＳ２
１４を経て、垂直参照画素用ポインタ*cyが参照され
て、第１垂直参照画素列ＬYLの各参照画素ｒy0〜ｒy3の
画素データのうちＹデータがＶＲＡＭ３５に読み込まれ
る。一方、同時刻ｔ3において、第１対象画素列ＬSLの
各対象画素ｖ0〜ｖ3および第１水平参照画素列ＬXLの参
照画素ｒx0のＹデータがバッファにおいて利用可能とな
っているので、ステップＳ３０２〜Ｓ３１２を経て、判
定値Ｌ0〜Ｌ2が上式（37）〜（39）により算出されると
ともに、ｖx0''〜ｖx2''が上式（１）〜（３）により算
出される。このとき、判定値Ｌ0が「１」であれば、ス
テップＳ３１６を経て、対象画素ｖ0の新たな値ｖx0'と
してｖx0''が設定され、判定値Ｌ0が「０」であれば、
ステップＳ３１８を経て、対象画素ｖ0の新たな値ｖx0'
としてｖ0が設定される。また、判定値Ｌ0，Ｌ1の論理
積が「１」であれば、ステップＳ３２２を経て、対象画
素ｖ1の新たな値ｖx1'としてｖx1''が設定され、論理積
が「０」であれば、ステップＳ３２４を経て、対象画素
ｖ1の新たな値ｖx1'としてｖ1が設定される。また、判
定値Ｌ0〜Ｌ2の論理積が「１」であれば、ステップＳ３
２８を経て、対象画素ｖ2の新たな値ｖx2'としてｖx2''
が設定され、論理積が「０」であれば、ステップＳ３３
０を経て、対象画素ｖ2の新たな値ｖx2'としてｖ2が設
定される。また、ステップＳ３３２を経て、対象画素ｖ
3の新たな値ｖx3'としてｖ3が設定される。
【０１２２】次いで、時刻ｔ4において、ステップＳ２
１６を経て、垂直参照画素用ポインタ*cyが参照され
て、第２垂直参照画素列ＬYRの各参照画素ｒy4〜ｒy7の
画素データのうちＹデータがＶＲＡＭ３５に読み込まれ
る。一方、同時刻ｔ4において、第１垂直参照画素列Ｌ
YLの参照画素ｒy0〜ｒy3のＹデータがバッファにおいて
利用可能となり、かつ、第１対象画素列ＬSLの各対象画
素ｖ0〜ｖ3について水平方向のフィルタ処理が完了して
いるので、ステップＳ４０４，Ｓ４０６を経て、判定値
Ｌ0が上式（40）により算出されるとともに、ｖy0''が
上式（29）〜（36）のいずれかにより算出される。この
とき、判定値Ｌ0が「１」であれば、ステップＳ４１０
を経て、対象画素ｖ0の新たな値ｖy0'としてｖy0''が設
定され、判定値Ｌ0が「０」であれば、ステップＳ４５
４を経て、対象画素ｖ0の新たな値ｖy0'としてｖx0'が
設定される。そして、ステップＳ４１１，Ｓ４１２を経
て、対象画素ｖ0，ｖ1のＵデータおよびＶデータがＲＧ
Ｂ変換部４２に出力され、対象画素ｖ0のＹデータ
ｖy0''がＲＧＢ変換部４２に出力される。これにより、
対象画素ｖ0についてデブロックフィルタ処理が完了す
る。
【０１２３】次いで、時刻ｔ5において、ステップＳ２
１８を経て、対象画素用ポインタ*sxが参照されて、第
２対象画素列ＬSRの各対象画素ｖ4〜ｖ7の画素データの
うちＹデータがＶＲＡＭ３５に読み込まれる。一方、同
時刻ｔ5においては、ステップＳ４１３，Ｓ４１４を経
て、判定値Ｌ1が上式（41）により算出されるととも
に、ｖy1''が上式（29）〜（36）のいずれかにより算出
される。このとき、判定値Ｌ1が「１」であれば、ステ
ップＳ４１８を経て、対象画素ｖ1の新たな値ｖy1'とし
てｖy1''が設定され、判定値Ｌ1が「０」であれば、ス
テップＳ４５２を経て、対象画素ｖ1の新たな値ｖy1'と
してｖx1'が設定される。そして、ステップＳ４１９を
経て、対象画素ｖ1のＹデータｖy1''がＲＧＢ変換部４
２に出力される。これにより、対象画素ｖ1についてデ
ブロックフィルタ処理が完了する。
【０１２４】次いで、時刻ｔ6において、ステップＳ２
２０を経て、対象画素用ポインタ*sxが参照されて、第
２水平参照画素列ＬXRの各画素（参照画素ｒx1を含
む。）の画素データのうちＹデータがＶＲＡＭ３５に読
み込まれる。一方、同時刻ｔ6においては、ステップＳ
４２０，Ｓ４２２を経て、判定値Ｌ2が上式（42）によ
り算出されるとともに、ｖy2''が上式（29）〜（36）の
いずれかにより算出される。このとき、判定値Ｌ2が
「１」であれば、ステップＳ４２６を経て、対象画素ｖ
2の新たな値ｖy2'としてｖy2''が設定され、判定値Ｌ2
が「０」であれば、ステップＳ４５０を経て、対象画素
ｖ2の新たな値ｖy2'としてｖx2'が設定される。そし
て、ステップＳ４２７，Ｓ４２８を経て、対象画素
ｖ2，ｖ3のＵデータおよびＶデータがＲＧＢ変換部４２
に出力され、対象画素ｖ2のＹデータｖy2''がＲＧＢ変
換部４２に出力される。これにより、対象画素ｖ2につ
いてデブロックフィルタ処理が完了する。
【０１２５】次いで、時刻ｔ7においては、ステップＳ
４２９，Ｓ４３０を経て、判定値Ｌ3が上式（43）によ
り算出されるとともに、ｖy3''が上式（29）〜（36）の
いずれかにより算出される。このとき、判定値Ｌ3が
「１」であれば、ステップＳ４３４を経て、対象画素ｖ
3の新たな値ｖy3'としてｖy3''が設定され、判定値Ｌ3
が「０」であれば、ステップＳ４４８を経て、対象画素
ｖ3の新たな値ｖy3'としてｖx3'が設定される。そし
て、ステップＳ４４６を経て、対象画素ｖ3のＹデータ
ｖy3''がＲＧＢ変換部４２に出力される。これにより、
対象画素ｖ3についてデブロックフィルタ処理が完了す
る。
【０１２６】一方、同時刻ｔ7において、第２対象画素
列ＬSRの各対象画素ｖ4〜ｖ7および第２水平参照画素列
ＬXRの参照画素ｒx1のＹデータがバッファにおいて利用
可能となっているので、ステップＳ５０２〜Ｓ５１２を
経て、判定値Ｌ7〜Ｌ5が上式（44）〜（46）により算出
されるとともに、ｖx7''〜ｖx5''が上式（８）〜（６）
により算出される。このとき、判定値Ｌ7が「１」であ
れば、ステップＳ５１６を経て、対象画素ｖ7の新たな
値ｖx7'としてｖx7''が設定され、判定値Ｌ7が「０」で
あれば、ステップＳ５１８を経て、対象画素ｖ7の新た
な値ｖx7'としてｖ7が設定される。また、判定値Ｌ7，
Ｌ6の論理積が「１」であれば、ステップＳ５２２を経
て、対象画素ｖ6の新たな値ｖx6'としてｖx6''が設定さ
れ、論理積が「０」であれば、ステップＳ５２４を経
て、対象画素ｖ6の新たな値ｖx6'としてｖ6が設定され
る。また、判定値Ｌ7〜Ｌ5の論理積が「１」であれば、
ステップＳ５２８を経て、対象画素ｖ5の新たな値ｖx5'
としてｖx5''が設定され、論理積が「０」であれば、ス
テップＳ５３０を経て、対象画素ｖ5の新たな値ｖx5'と
してｖ5が設定される。また、ステップＳ５３２を経
て、対象画素ｖ4の新たな値ｖx4'としてｖ4が設定され
る。
【０１２７】次いで、時刻ｔ8において、第２垂直参照
画素列ＬYRの参照画素ｒy4〜ｒy7のＹデータがバッファ
において利用可能となり、かつ、第２対象画素列ＬSRの
各対象画素ｖ4〜ｖ7について水平方向のフィルタ処理が
完了しているので、ステップＳ６０４，Ｓ６０６を経
て、判定値Ｌ7が上式（47）により算出されるととも
に、ｖy7''が上式（29）〜（36）のいずれかにより算出
される。このとき、判定値Ｌ7が「１」であれば、ステ
ップＳ６１０を経て、対象画素ｖ7の新たな値ｖy7'とし
てｖy7''が設定され、判定値Ｌ7が「０」であれば、ス
テップＳ６５４を経て、対象画素ｖ7の新たな値ｖy7'と
してｖx7'が設定される。そして、ステップＳ６１１，
Ｓ６１２を経て、対象画素ｖ7，ｖ6のＵデータおよびＶ
データがＲＧＢ変換部４２に出力され、対象画素ｖ7の
Ｙデータｖy7''がＲＧＢ変換部４２に出力される。これ
により、対象画素ｖ7についてデブロックフィルタ処理
が完了する。
【０１２８】なお、同時刻ｔ8においては、ステップＳ
７００〜Ｓ７１４を経て、対象ブロック１０の右に隣接
するブロックに対象画素用ポインタ*sxおよび垂直参照
画素用ポインタ*cyが移動し、そのブロックに対して時
刻ｔ0における処理と同様の処理が行われる。次いで、
時刻ｔ9においては、ステップＳ６１３，Ｓ６１４を経
て、判定値Ｌ6が上式（48）により算出されるととも
に、ｖy6''が上式（29）〜（36）のいずれかにより算出
される。このとき、判定値Ｌ6が「１」であれば、ステ
ップＳ６１８を経て、対象画素ｖ6の新たな値ｖy6'とし
てｖy6''が設定され、判定値Ｌ6が「０」であれば、ス
テップＳ６５２を経て、対象画素ｖ6の新たな値ｖy6'と
してｖx6'が設定される。そして、ステップＳ６１９を
経て、対象画素ｖ6のＹデータｖy6''がＲＧＢ変換部４
２に出力される。これにより、対象画素ｖ6についてデ
ブロックフィルタ処理が完了する。
【０１２９】なお、同時刻ｔ9においては、対象ブロッ
ク１０の右に隣接するブロックに対して時刻ｔ1におけ
る処理と同様の処理が行われる。次いで、時刻ｔ10にお
いては、ステップＳ６２０，Ｓ６２２を経て、判定値Ｌ
5が上式（49）により算出されるとともに、ｖy5''が上
式（29）〜（36）のいずれかにより算出される。このと
き、判定値Ｌ5が「１」であれば、ステップＳ６２６を
経て、対象画素ｖ5の新たな値ｖy5'としてｖy5''が設定
され、判定値Ｌ5が「０」であれば、ステップＳ６５０
を経て、対象画素ｖ5の新たな値ｖy5'としてｖx5'が設
定される。そして、ステップＳ６２７，Ｓ６２８を経
て、対象画素ｖ5，ｖ4のＵデータおよびＶデータがＲＧ
Ｂ変換部４２に出力され、対象画素ｖ 5のＹデータ
ｖy5''がＲＧＢ変換部４２に出力される。これにより、
対象画素ｖ5についてデブロックフィルタ処理が完了す
る。
【０１３０】なお、同時刻ｔ10においては、対象ブロッ
ク１０の右に隣接するブロックに対して時刻ｔ2におけ
る処理と同様の処理が行われる。次いで、時刻ｔ11にお
いては、ステップＳ６２９，Ｓ６３０を経て、判定値Ｌ
4が上式（50）により算出されるとともに、ｖy4''が上
式（29）〜（36）のいずれかにより算出される。このと
き、判定値Ｌ4が「１」であれば、ステップＳ６３４を
経て、対象画素ｖ4の新たな値ｖy4'としてｖy4''が設定
され、判定値Ｌ4が「０」であれば、ステップＳ６４８
を経て、対象画素ｖ4の新たな値ｖy4'としてｖx4'が設
定される。そして、ステップＳ６４６を経て、対象画素
ｖ4のＹデータｖy4''がＲＧＢ変換部４２に出力され
る。これにより、対象画素ｖ4についてデブロックフィ
ルタ処理が完了する。
【０１３１】なお、同時刻ｔ11においては、対象ブロッ
ク１０の右に隣接するブロックに対して時刻ｔ3におけ
る処理と同様の処理が行われる。このようにして、本実
施の形態では、デブロックフィルタ処理は、対象画素ｖ
0〜ｖ7の値と参照画素ｒy0〜ｒy7の値との差分値が閾値
を超えているか否かを判定し、対象画素ｖ0〜ｖ7につい
ての水平方向のフィルタ演算を、対象画素ｖ0〜ｖ7の値
と参照画素ｒx0，ｒx1の値とにのみ基づいて行い、対象
画素ｖ0〜ｖ7について垂直方向のフィルタ演算を行うか
否かを、上記判定結果にのみ基づいて決定するととも
に、対象画素ｖ0〜ｖ7についての垂直方向のフィルタ演
算を、対象画素ｖ0〜ｖ7の値と参照画素ｒy0〜ｒy7の値
とにのみ基づいて行うようになっている。
【０１３２】これにより、フィルタ演算を行うかの判定
およびフィルタ演算を行うにあたって、対象画素ｖ0〜
ｖ7、参照画素ｒx0，ｒx1および参照画素ｒy0〜ｒy7だ
けを参照すればよいので、従来に比して、デブロックフ
ィルタ処理を簡素化することができる。例えば、本実施
の形態のように、デブロックフィルタ処理をハードウェ
アにより実現する場合には、回路規模を小型化すること
ができるし、デブロックフィルタ処理をソフトウェアに
より実現する場合には、プログラムサイズを低減するこ
とができる。特に、参照画素ｒx0，ｒx1および参照画素
ｒy0〜ｒy7として水平参照ブロック１２，１４および垂
直参照ブロック１６，１８内の境界線に位置する画素を
用いるので、フィルタ効果をさほど低減することなく、
デブロックフィルタ処理を簡素化することができる。さ
らに、ＶＲＡＭ３５に対するアクセス回数を低減するこ
とができるので、処理の高速化が期待できる。
【０１３３】さらに、本実施の形態では、デブロックフ
ィルタ処理は、画素データの読込、判定およびフィルタ
演算を一連の処理として繰り返し行いながら再生画像の
すべての画素に対してフィルタ演算を試み、対象ブロッ
ク１０の左上の領域に属する対象画素については、対象
ブロック１０の左および上に隣接する水平参照ブロック
１２および垂直参照ブロック１６の参照画素の値を、判
定およびフィルタ演算に用い、対象ブロック１０の右上
の領域に属する対象画素については、対象ブロック１０
の右および上に隣接する水平参照ブロック１４および垂
直参照ブロック１６の参照画素の値を、判定およびフィ
ルタ演算に用い、対象ブロック１０の左下の領域に属す
る対象画素については、対象ブロック１０の左および下
に隣接する水平参照ブロック１２および垂直参照ブロッ
ク１８の参照画素の値を、判定およびフィルタ演算に用
い、対象ブロック１０の右下の領域に属する対象画素に
ついては、対象ブロック１０の右および下に隣接する水
平参照ブロック１４および垂直参照ブロック１８の参照
画素の値を、判定およびフィルタ演算に用いるようにな
っている。
【０１３４】これにより、４個の対象画素ｖ0〜ｖ3をデ
ブロックフィルタ処理するにあたり、高々、９個の画素
をＶＲＡＭ３５から読み込めばよいので、ＶＲＡＭ３５
への読込回数を低減することができる。また、フィルタ
演算を行うかの判定およびフィルタ演算を行うにあたっ
て、対象画素ｖ0〜ｖ3が属する領域に応じて比較的適切
な参照画素が用いられるので、フィルタ効果を向上する
ことができる。
【０１３５】さらに、本実施の形態では、デブロックフ
ィルタ処理は、垂直参照画素用ポインタ*cyを参照して
画素データをバッファに読み込み、さらに、各一連の処
理ごとに、垂直参照画素用ポインタ*cyの値に８画素分
加算し、次に処理すべき対象ブロック１０が再生画像に
おける左端のブロックで、かつｙを「８」で除算したと
きの余数が「０」であるときは、垂直参照画素用ポイン
タ*cyの値から２Ｘを減算し、次に処理すべき対象ブロ
ック１０が再生画像における左端のブロックで、かつｙ
を「８」で除算したときの余数が「４」であるときは、
垂直参照画素用ポインタ*cyの値に８Ｘを加算し、次に
処理すべき対象ブロック１０が再生画像における左端の
ブロックで、かつｙを「８」で除算したときの余数が
「０」または「４」以外の値であるときは、垂直参照画
素用ポインタ*cyの値からＸを減算するようになってい
る。
【０１３６】これにより、垂直参照画素用ポインタ*cy
の更新をシフタおよび加算器だけで実現することができ
るので、負荷を低減し比較的簡素な構成とすることがで
きる。さらに、本実施の形態では、デブロックフィルタ
処理は、各一連の処理ごとに、第２対象画素列ＬSR、第
２水平参照画素列ＬXR、第１垂直参照画素列ＬYLおよび
第２垂直参照画素列ＬYRの画素データをバッファに読み
込むとともに、一つ前の処理において読み込んだ第２対
象画素列ＬSRおよび第２水平参照画素列ＬXRの画素デー
タを第１水平参照画素列ＬXLおよび第１対象画素列ＬSL
の画素データとしてそれぞれ再利用し、第１対象画素列
ＬSLおよび第２対象画素列ＬSRのすべての対象画素ｖ0
〜ｖ7について判定およびフィルタ演算を行うようにな
っている。
【０１３７】これにより、第１水平参照画素列ＬXLおよ
び第１対象画素列ＬSLの画素データをＶＲＡＭ３５から
再読込しなくてすむので、ＶＲＡＭ３５への読込回数を
さらに低減することができる。さらに、本実施の形態で
は、一つ前の処理において読み込んだ第２対象画素列Ｌ
SRおよび第２水平参照画素列ＬXRの画素データを第１水
平参照画素列ＬXLおよび第１対象画素列ＬSLの画素デー
タとしてそれぞれコピーする処理を第１フェーズとし、
第１垂直参照画素列ＬYLの画素データをバッファに読み
込む処理を第２フェーズとし、第２垂直参照画素列ＬYR
の画素データをバッファに読み込む処理を第３フェーズ
とし、第２対象画素列ＬSRの画素データをバッファに読
み込む処理を第４フェーズとし、第２水平参照画素列Ｌ
XRの画素データをバッファに読み込む処理を第５フェー
ズとし、第１水平参照画素列ＬXLの画素データに基づい
て、第１対象画素列ＬSLの各対象画素について水平方向
のフィルタ演算を行う処理を第６フェーズとし、第６フ
ェーズの処理結果および第１垂直参照画素列ＬYLの画素
データに基づいて、第１対象画素列ＬSLの各対象画素に
ついて判定および垂直方向のフィルタ演算を行う処理を
第７フェーズとし、第２水平参照画素列ＬXRの画素デー
タに基づいて、第２対象画素列ＬSRの各対象画素につい
て水平方向のフィルタ演算を行う処理を第８フェーズと
し、第８フェーズの処理結果および第２垂直参照画素列
ＬYRの画素データに基づいて、第２対象画素列ＬSRの各
対象画素について判定および垂直方向のフィルタ演算を
行う処理を第９フェーズとした場合に、一連の処理は、
第１フェーズ、第２フェーズ、第３フェーズ、第４フェ
ーズおよび第５フェーズをその順序で実行し、第６フェ
ーズおよび第７フェーズをその順序で実行し、第５フェ
ーズ、第８フェーズおよび第９フェーズをその順序で実
行するとともに、第２フェーズおよび第６フェーズの実
行を同時に、第３フェーズおよび第７フェーズの実行を
同時に開始するようになっている。
【０１３８】これにより、フィルタ演算を行うかの判定
およびフィルタ演算を行うにあたって、効率的なパイプ
ライン処理を実現することができるので、処理の高速化
が期待できる。また、画素データの読込を、第１垂直参
照画素列ＬYL、第２垂直参照画素列ＬYR、第２対象画素
列ＬSRおよび第２水平参照画素列ＬXRの画素データの順
序で行うことから、第１垂直参照画素列ＬYLおよび第２
垂直参照画素列ＬYRの画素データの読込、並びに第２対
象画素列ＬSRおよび第２水平参照画素列ＬXRの画素デー
タの読込を連続して行うことができるので、画素データ
の読込処理を簡単にすることができる。
【０１３９】さらに、本実施の形態では、デブロックフ
ィルタ処理は、互いに隣接するブロック間の境界線と直
交する画素列について、デブロックフィルタ後の各画素
の値ｖ0'〜ｖ2'，ｖ5'〜ｖ7'を、上式（１）〜（３），
（６）〜（８）のフィルタ演算式により算出するように
なっている。これにより、一の画素についてのフィルタ
演算を行うにあたって、多数の画素の平均値を用いず、
２つの画素の値のみを用いるので、デブロックフィルタ
処理をさらに簡素化することができる。また、一の画素
の値と、同一画素列の画素であって隣接ブロック内の参
照画素の値とを用いた加減算およびビットシフト（除数
が２の整数倍となる除算）により演算を行うので、デブ
ロックフィルタ処理をさらに簡素化することができるの
に加え、効果的なフィルタ効果を実現することができ
る。
【０１４０】さらに、本実施の形態では、デブロックフ
ィルタ処理は、互いに隣接するブロック間の境界線と直
交する画素列の画素のうち一の画素についてのフィルタ
演算を、その一の画素から、同一画素列の画素であって
隣接ブロック内の境界線に位置する参照画素までの各画
素の相互の差分値がいずれも閾値Ｃ1，Ｃ2を超えていな
いときに行い、閾値Ｃ1，Ｃ2として定数値を用いるよう
になっている。
【０１４１】これにより、閾値Ｃ1，Ｃ2が定数値である
ので、デブロックフィルタ処理の過程において閾値
Ｃ1，Ｃ2を算出する必要がなく、また、各画素の相互の
差分値のいずれかが閾値Ｃ1，Ｃ2を超えていれば、フィ
ルタ演算が行われない。したがって、デブロックフィル
タ処理をさらに簡素化することができるのに加え、従来
に比して、デブロックフィルタ処理を比較的高速化する
ことができる。
【０１４２】さらに、本実施の形態では、参照画素と、
参照画素と隣接する隣接画素との差分値を比較するとき
の閾値Ｃ1を、参照画素と、隣接画素以外の画素との差
分値を比較するときの閾値Ｃ2よりも大きく設定した。
これにより、ブロック間の輝度の平均値が異なるという
特性を考慮したデブロックフィルタ処理を行うことがで
きるので、さらに効果的なフィルタ効果を実現すること
ができる。
【０１４３】さらに、本実施の形態では、参照画素と、
参照画素と隣接する隣接画素との差分値を比較するとき
の閾値Ｃ1を、画素の値の最大値を「２５５」として
「３２」に設定し、参照画素と、隣接画素以外の画素と
の差分値を比較するときの閾値Ｃ2を、「１６」に設定
した。これにより、ブロック間の輝度の平均値が異なる
という特性をより考慮したデブロックフィルタ処理を行
うことができるので、さらに効果的なフィルタ効果を実
現することができる。
【０１４４】さらに、本実施の形態では、デブロックフ
ィルタ処理は、画素についてフィルタ演算を行うか否か
の判定を、参照画素と隣接する隣接画素から順次境界線
より遠ざかる方向に行い、画素についてフィルタ演算を
行わないと判定したときは、その画素およびこれよりも
後段の画素についてはフィルタ演算を行わないようにな
っている。
【０１４５】これにより、画素についてフィルタ演算を
行うか否かの判定回数を低減することができるので、デ
ブロックフィルタ処理をさらに高速化することができ
る。さらに、本実施の形態では、ポストフィルタ部４０
は、２１画素分の画素データを格納可能なバッファを有
し、デブロックフィルタ処理は、画素列のうち一の画素
から参照画素までの全画素データを、ＶＲＡＭ３５から
バッファにまとめて読み込み、バッファの画素データに
基づいてフィルタ演算を行うようになっている。
【０１４６】これにより、画素列の各画素についてデブ
ロックフィルタ処理を行うに必要な画素データをバッフ
ァにまとめて読み込み一括で処理するので、デブロック
フィルタ処理をさらに高速化することができる。さら
に、本実施の形態では、デブロックフィルタ処理は、ブ
ロック内の水平方向の画素列および垂直方向の画素列の
一方に対してフィルタ演算を行った後、他方に対してフ
ィルタ演算を行うようになっている。
【０１４７】これにより、ブロック内の水平方向の画素
列および垂直方向の画素列の両方に対してデブロックフ
ィルタ処理を行うので、さらに効果的なフィルタ効果を
実現することができる。上記実施の形態において、ＭＰ
ＥＧ形式の動画データは、請求項１、２、９ないし１２
記載の圧縮画像データに対応し、ＶＲＡＭ３５は、請求
項３または５記載の画像記憶手段に対応し、ポストフィ
ルタ部４０のバッファは、請求項３、５ないし８記載の
作業用記憶手段に対応している。また、参照画素ｒx0，
ｒx1は、請求項２ないし４、１０または１２記載の水平
参照画素に対応し、参照画素ｒy0〜ｒy7は、請求項２、
３、６、１０または１２記載の垂直参照画素に対応し、
参照画素ｒx0，ｒx1および対象画素ｖ0〜ｖ7は、請求項
３または４記載の第１画素列に対応している。
【０１４８】また、上記実施の形態において、参照画素
ｒy0〜ｒy7は、請求項３または５記載の第２画素列に対
応している。なお、上記実施の形態においては、対象画
素ｖ0〜ｖ7についての水平方向のフィルタ演算を、その
一の画素から、同一画素列の画素であって隣接ブロック
内の境界線に位置する参照画素ｒx0，ｒx1までの各画素
の相互の差分値がいずれも閾値Ｃ1，Ｃ2を超えていない
ときに行うように構成したが、これに限らず、対象画素
ｖ0〜ｖ7についての水平方向のフィルタ演算を行うか否
かを、垂直方向のフィルタ演算と同様に、その一の画素
の値および参照画素ｒx0，ｒx1の値とにのみ基づいて決
定するように構成してもよい。
【０１４９】また、上記実施の形態において、図５ない
し図１１のフローチャートに示す処理を実行するにあた
ってはいずれも、ポストフィルタ部４０のハードウェア
による処理で行う場合について説明したが、これに限ら
ず、ＣＰＵ３０がこれらの処理を実行するようにしても
よく、この場合、上記実施の形態のように、ＲＯＭ３２
にあらかじめ格納されている制御プログラムを実行する
ように構成してもよいが、これらの手順を示したプログ
ラムが記憶された記憶媒体から、そのプログラムをＲＡ
Ｍ３４に読み込んで実行するようにしてもよい。
【０１５０】ここで、記憶媒体とは、ＲＡＭ、ＲＯＭ等
の半導体記憶媒体、ＦＤ、ＨＤ等の磁気記憶型記憶媒
体、ＣＤ、ＣＤＶ、ＬＤ、ＤＶＤ等の光学的読取方式記
憶媒体、ＭＯ等の磁気記憶型／光学的読取方式記憶媒体
であって、電子的、磁気的、光学的等の読み取り方法の
いかんにかかわらず、コンピュータで読み取り可能な記
憶媒体であれば、あらゆる記憶媒体を含むものである。
【０１５１】また、上記実施の形態においては、本発明
に係る画像処理装置および画像処理プログラム、並びに
画像処理方法を、図１に示すように、コンピュータ１０
０において、マルチタスクで動作するＯＳにより、ＭＰ
ＥＧ形式で圧縮された動画データをデコードして動画を
再生する際に、再生画像に対してデブロックフィルタ処
理を行う場合について適用したが、これに限らず、本発
明の主旨を逸脱しない範囲で他の場合にも適用可能であ
る。例えば、ＪＰＥＧ形式で圧縮された画像データに基
づいて画像を表示する場合や、その他離散コサイン変換
処理および量子化変換処理を所定のブロック単位で行う
画像圧縮処理により圧縮された圧縮画像データに基づい
てブロック単位で画像を展開する場合に適用することが
できる。
【０１５２】
【発明の効果】以上説明したように、本発明に係る請求
項１記載の画像処理装置によれば、フィルタ演算を行う
かの判定およびフィルタ演算を行うにあたって、対象画
素および参照画素だけを参照すればよいので、従来に比
して、画像復号化時においてブロックノイズを低減する
フィルタ処理を簡素化することができるという効果が得
られる。また、展開画像がメモリ等の記憶手段に格納さ
れている場合は、記憶手段に対するアクセス回数を低減
することができるので、記憶手段に対するアクセスがク
リティカルパスとなっている画像処理装置では、処理の
高速化が期待できるという効果も得られる。
【０１５３】さらに、本発明に係る請求項２ないし８記
載の画像処理装置によれば、フィルタ演算を行うかの判
定およびフィルタ演算を行うにあたって、対象画素、水
平参照画素および垂直参照画素だけを参照すればよいの
で、従来に比して、画像復号化時においてブロックノイ
ズを低減するフィルタ処理を簡素化することができると
いう効果が得られる。特に、水平参照画素および垂直参
照画素として水平参照ブロックおよび垂直参照ブロック
内の境界線に位置する画素を用いるので、フィルタ効果
をさほど低減することなく、フィルタ処理を簡素化する
ことができるという効果も得られる。さらに、展開画像
がメモリ等の記憶手段に格納されている場合は、記憶手
段に対するアクセス回数を低減することができるので、
記憶手段に対するアクセスがクリティカルパスとなって
いる画像処理装置では、処理の高速化が期待できるとい
う効果も得られる。
【０１５４】さらに、本発明に係る請求項３ないし８記
載の画像処理装置によれば、第１画素列の対象画素をフ
ィルタ処理するにあたり、高々、第１画素列および第２
画素列の画素を画像記憶手段から読み込めばよいので、
画像記憶手段への読込回数を低減することができるとい
う効果も得られる。さらに、本発明に係る請求項４ない
し８記載の画像処理装置によれば、ｎ個の対象画素をフ
ィルタ処理するにあたり、高々、２ｎ＋１個の画素を画
像記憶手段から読み込めばよいので、画像記憶手段への
読込回数を低減することができるという効果も得られ
る。また、フィルタ演算を行うかの判定およびフィルタ
演算を行うにあたって、対象画素が属する領域に応じて
比較的適切な参照画素が用いられるので、フィルタ効果
を向上することができるという効果も得られる。
【０１５５】さらに、本発明に係る請求項５ないし８記
載の画像処理装置によれば、ハードウェアで構成する場
合は、垂直参照画素用ポインタの更新をシフタおよび加
算器だけで実現することができるので、負荷を低減し比
較的簡素な構成とすることができるという効果も得られ
る。さらに、本発明に係る請求項６ないし８記載の画像
処理装置によれば、第１水平参照画素列および第１対象
画素列の画素データを画像記憶手段から再読込しなくて
すむので、画像記憶手段への読込回数をさらに低減する
ことができるという効果も得られる。
【０１５６】さらに、本発明に係る請求項８記載の画像
処理装置によれば、フィルタ演算を行うかの判定および
フィルタ演算を行うにあたって、効率的なパイプライン
処理を実現することができるので、処理の高速化が期待
できるという効果も得られる。また、画素データの読込
を、第１垂直参照画素列、第２垂直参照画素列、第２対
象画素列および第２水平参照画素列の画素データの順序
で行うことから、第１垂直参照画素列および第２垂直参
照画素列の画素データの読込、並びに第２対象画素列お
よび第２水平参照画素列の画素データの読込を連続して
行うことができるので、画素データの読込処理を簡単に
することができるという効果も得られる。さらに、従
来、作業用に少なくとも１フレーム分の作業メモリを使
用していたが、５ｎ＋１画素分の作業メモリで処理でき
るため、ハードウェアとして構成したときに回路規模を
比較的削減することができるという効果も得られる。
【０１５７】一方、本発明に係る請求項９記載の画像処
理プログラムによれば、請求項１記載の画像処理装置と
同等の効果が得られる。さらに、本発明に係る請求項１
０記載の画像処理プログラムによれば、請求項２記載の
画像処理装置と同等の効果が得られる。一方、本発明に
係る請求項１１記載の画像処理方法によれば、請求項１
記載の画像処理装置と同等の効果が得られる。
【０１５８】さらに、本発明に係る請求項１２記載の画
像処理方法によれば、請求項２記載の画像処理装置と同
等の効果が得られる。
【図面の簡単な説明】
【図１】本発明を適用するコンピュータシステムの構成
を示すブロック図である。
【図２】再生画像においてデブロックフィルタ処理の対
象となる対象ブロックおよびその隣接ブロックを示す図
である。
【図３】互いに隣接するブロックＡ，Ｂにおいて同一水
平線上の対象画素の値ｖ0〜ｖ7を示した棒グラフであ
る。
【図４】再生画像においてデブロックフィルタ処理の対
象となる対象ブロックおよびその隣接ブロックを示す図
である。
【図５】主制御処理を示すフローチャートである。
【図６】画素データ読込処理を示すフローチャートであ
る。
【図７】第１水平フィルタ処理を示すフローチャートで
ある。
【図８】第１垂直フィルタ処理を示すフローチャートで
ある。
【図９】第２水平フィルタ処理を示すフローチャートで
ある。
【図１０】第２垂直フィルタ処理を示すフローチャート
である。
【図１１】ポインタ更新処理を示すフローチャートであ
る。
【図１２】デブロックフィルタ処理の実行過程を示すタ
イムチャートである。
【図１３】画素データをコピーして再利用する場合を説
明するための図である。
【図１４】従来の画像処理システムによるフィルタ処理
を示す図である。
【図１５】従来の画像処理システムにおいて参照する画
素を示す図である。
【符号の説明】
１０ 対象ブロック １２，１４ 水平参照ブロック １６，１８ 垂直参照ブロック １００ コンピュータ ３０ ＣＰＵ ３２ ＲＯＭ ３４ ＲＡＭ ３５ ＶＲＡＭ ３６ ＬＣＤＣ ３８ デコーダ ４０ ポストフィルタ部 ４２ ＲＧＢ変換部 ４４ ＬＣＤ ｖ0〜ｖ7 対象画素 ｒx0，ｒx1 参照画素 ｒy0〜ｒy7 参照画素 ＬSL 第１対象画素列 ＬSR 第２対象画素列 ＬXL 第１水平参照画素列 ＬXR 第２水平参照画素列 ＬYL 第１垂直参照画素列 ＬYR 第２垂直参照画素列
───────────────────────────────────────────────────── フロントページの続き Ｆターム(参考） 5C059 KK03 KK04 KK08 KK15 MA00 MA23 MC11 PP01 PP04 PP25 PP30 TA68 TB08 TC02 TC33 TC42 TD05 TD12 UA02 UA05 UA11 UA33 5C078 AA04 BA57 CA21 DA02 5J064 AA02 BB01 BC01 BC11 BC22 BD01

Claims (12)

    【特許請求の範囲】
  1. 【請求項１】 離散コサイン変換処理及び量子化処理を
    所定のブロック単位で行う画像圧縮処理により圧縮され
    た圧縮画像データに基づいて前記ブロック単位で画像を
    展開する際又は展開した後に、展開画像に対してフィル
    タ処理を行う装置であって、 対象ブロックに隣接するブロックを参照ブロックとし、
    さらに、前記対象ブロック内の一の画素を対象画素と
    し、前記参照ブロック内の一の画素を参照画素とした場
    合に、 前記フィルタ処理は、前記対象画素の値と前記参照画素
    の値との差分値が閾値を超えているか否かを判定し、前
    記対象画素についてフィルタ演算を行うか否かを、前記
    判定結果にのみ基づいて決定するとともに、前記対象画
    素についてのフィルタ演算を、前記対象画素の値と前記
    参照画素の値とにのみ基づいて行うようになっているこ
    とを特徴とする画像処理装置。
  2. 【請求項２】 離散コサイン変換処理及び量子化処理を
    所定のブロック単位で行う画像圧縮処理により圧縮され
    た圧縮画像データに基づいて前記ブロック単位で画像を
    展開する際又は展開した後に、展開画像に対してフィル
    タ処理を行う装置であって、 対象ブロックに対し水平方向に隣接するブロックを水平
    参照ブロックとし、前記対象ブロックに対し垂直方向に
    隣接するブロックを垂直参照ブロックとし、さらに、前
    記対象ブロック内の一の画素を対象画素とし、前記水平
    参照ブロック内の一の画素であって前記対象ブロックと
    の境界線に位置し且つ前記対象画素と垂直方向の位置が
    同一のものを水平参照画素とし、前記垂直参照ブロック
    内の一の画素であって前記対象ブロックとの境界線に位
    置し且つ前記対象画素と水平方向の位置が同一のものを
    垂直参照画素とした場合に、 前記フィルタ処理は、前記対象画素の値と前記垂直参照
    画素の値との差分値が閾値を超えているか否かを判定
    し、 前記対象画素についての水平方向のフィルタ演算を、前
    記対象画素の値と前記水平参照画素の値とにのみ基づい
    て行い、 前記対象画素について垂直方向のフィルタ演算を行うか
    否かを、前記判定結果にのみ基づいて決定するととも
    に、前記対象画素についての垂直方向のフィルタ演算
    を、前記対象画素の値と前記垂直参照画素の値とにのみ
    基づいて行うようになっていることを特徴とする画像処
    理装置。
  3. 【請求項３】 請求項２において、 前記展開画像を記憶する画像記憶手段に利用可能に接続
    し、 前記フィルタ処理を行うための画素データを記憶する作
    業用記憶手段を備え、 前記対象ブロック内の画素であって前記水平参照ブロッ
    クとの境界線から水平方向に連続する複数の画素を前記
    対象画素とした場合に、 前記フィルタ処理は、前記複数の対象画素及び前記水平
    参照画素からなる第１画素列の画素データ、並びに前記
    各対象画素に対応する垂直参照画素からなる第２画素列
    の画素データを前記作業用記憶手段に一括で読み込み、
    前記作業用記憶手段の画素データに基づいて前記各対象
    画素ごとに前記判定を行い、 前記各対象画素についての水平方向のフィルタ演算を、
    前記作業用記憶手段の画素データを参照し当該対象画素
    の値と前記水平参照画素の値とにのみ基づいて行い、 前記各対象画素について垂直方向のフィルタ演算を行う
    か否かを、当該対象画素に対応する前記判定結果にのみ
    基づいて決定するとともに、前記各対象画素についての
    垂直方向のフィルタ演算を、前記作業用記憶手段の画素
    データを参照し当該対象画素の値と前記垂直参照画素の
    値とにのみ基づいて行うようになっていることを特徴と
    する画像処理装置。
  4. 【請求項４】 請求項３において、 前記各ブロックを、水平方向２ｎ（ｎ≧１）個の画素で
    且つ垂直方向２ｍ（ｍ≧１）個の画素からなる矩形の画
    素領域として構成するとともに、水平方向ｎ個の画素で
    且つ垂直方向ｍ個の画素からなる左上、右上、左下及び
    右下の４つの領域に区分し、さらに、前記第１画素列
    を、前記４つの領域のうち同一の領域に属する画素及び
    前記水平参照画素で構成し、 前記フィルタ処理は、前記画素データの読込、前記判定
    及び前記フィルタ演算を一連の処理として繰り返し行い
    ながら前記展開画像のすべての画素に対して前記フィル
    タ演算を試み、 前記対象ブロックの左上の領域に属する対象画素につい
    ては、前記対象ブロックの左及び上に隣接する水平参照
    ブロック及び垂直参照ブロックの参照画素の値を、前記
    判定及び前記フィルタ演算に用い、 前記対象ブロックの右上の領域に属する対象画素につい
    ては、前記対象ブロックの右及び上に隣接する水平参照
    ブロック及び垂直参照ブロックの参照画素の値を、前記
    判定及び前記フィルタ演算に用い、 前記対象ブロックの左下の領域に属する対象画素につい
    ては、前記対象ブロックの左及び下に隣接する水平参照
    ブロック及び垂直参照ブロックの参照画素の値を、前記
    判定及び前記フィルタ演算に用い、 前記対象ブロックの右下の領域に属する対象画素につい
    ては、前記対象ブロックの右及び下に隣接する水平参照
    ブロック及び垂直参照ブロックの参照画素の値を、前記
    判定及び前記フィルタ演算に用いるようになっているこ
    とを特徴とする画像処理装置。
  5. 【請求項５】 請求項４において、 前記画像記憶手段は、前記展開画像を構成する各画素の
    画素データを左から右の順序及び上から下の順序で格納
    するようになっており、 前記フィルタ処理は、前記画像記憶手段における前記第
    ２画素列の画素データの格納アドレスを指し示す垂直参
    照画素用ポインタを参照して前記第２画素列の画素デー
    タを前記作業用記憶手段に読み込み、 さらに、前記展開画像の水平方向の画素数をＸとし、前
    記対象ブロックにおける対象画素の垂直方向の座標をｙ
    とした場合に、 前記一連の処理ごとに、当該処理で一括に処理する対象
    画素の数に相当する値を前記垂直参照画素用ポインタの
    値に加算し、 次に処理すべき対象ブロックが前記展開画像における左
    端のブロックで、且つｙを２ｍで除算したときの余数が
    「０」であるときは、前記垂直参照画素用ポインタの値
    から２Ｘを減算し、 次に処理すべき対象ブロックが前記展開画像における左
    端のブロックで、且つｙを２ｍで除算したときの余数が
    ｍであるときは、前記垂直参照画素用ポインタの値に２
    ｍＸを加算し、 次に処理すべき対象ブロックが前記展開画像における左
    端のブロックで、且つｙを２ｍで除算したときの余数が
    「０」又はｍ以外の値であるときは、前記垂直参照画素
    用ポインタの値からＸを減算するようになっていること
    を特徴とする画像処理装置。
  6. 【請求項６】 請求項５において、 前記対象ブロック内の同一水平線上の画素のうち左半分
    のものからなる画素列を第１対象画素列とし、右半分の
    ものからなる画素列を第２対象画素列とし、さらに、前
    記水平参照ブロック内の画素列であって前記第１対象画
    素列に左に隣接し且つ前記第２対象画素列の画素数と同
    数の画素からなるものを第１水平参照画素列とし、前記
    水平参照ブロック内の画素列であって前記第２対象画素
    列に右に隣接し且つ前記第１対象画素列の画素数と同数
    の画素からなるものを第２水平参照画素列とし、さら
    に、前記第１対象画素列の各対象画素に対応する垂直参
    照画素からなる画素列を第１垂直参照画素列とし、前記
    第２対象画素列の各対象画素に対応する垂直参照画素か
    らなる画素列を第２垂直参照画素列とした場合に、 前記フィルタ処理は、前記各一連の処理ごとに、前記第
    ２対象画素列、前記第２水平参照画素列、前記第１垂直
    参照画素列及び前記第２垂直参照画素列の画素データを
    前記作業用記憶手段に読み込むとともに、一つ前の処理
    において読み込んだ前記第２対象画素列及び前記第２水
    平参照画素列の画素データを前記第１水平参照画素列及
    び前記第１対象画素列の画素データとしてそれぞれ再利
    用し、前記第１対象画素列及び前記第２対象画素列のす
    べての対象画素について前記判定及び前記フィルタ演算
    を行うようになっていることを特徴とする画像処理装
    置。
  7. 【請求項７】 請求項６において、 前記展開画像について最初に行う前記一連の処理は、前
    記第１対象画素列、前記第２対象画素列、前記第２水平
    参照画素列、前記第１垂直参照画素列及び前記第２垂直
    参照画素列の画素データを前記作業用記憶手段に読み込
    み、 前記展開画像について２回目以降に行う前記一連の処理
    は、前記第２対象画素列、前記第２水平参照画素列、前
    記第１垂直参照画素列及び前記第２垂直参照画素列の画
    素データを前記作業用記憶手段に読み込むとともに、一
    つ前の処理において読み込んだ前記第２対象画素列及び
    前記第２水平参照画素列の画素データを前記第１水平参
    照画素列及び前記第１対象画素列の画素データとしてそ
    れぞれ再利用するようになっていることを特徴とする画
    像処理装置。
  8. 【請求項８】 請求項６及び７のいずれかにおいて、 一つ前の処理において読み込んだ前記第２対象画素列及
    び前記第２水平参照画素列の画素データを前記第１水平
    参照画素列及び前記第１対象画素列の画素データとして
    それぞれコピーする処理を第１フェーズとし、 前記第１垂直参照画素列の画素データを前記作業用記憶
    手段に読み込む処理を第２フェーズとし、 前記第２垂直参照画素列の画素データを前記作業用記憶
    手段に読み込む処理を第３フェーズとし、 前記第２対象画素列の画素データを前記作業用記憶手段
    に読み込む処理を第４フェーズとし、 前記第２水平参照画素列の画素データを前記作業用記憶
    手段に読み込む処理を第５フェーズとし、 前記第１水平参照画素列の画素データに基づいて、前記
    第１対象画素列の各対象画素について水平方向の前記フ
    ィルタ演算を行う処理を第６フェーズとし、 前記第６フェーズの処理結果及び前記第１垂直参照画素
    列の画素データに基づいて、前記第１対象画素列の各対
    象画素について前記判定及び垂直方向の前記フィルタ演
    算を行う処理を第７フェーズとし、 前記第２水平参照画素列の画素データに基づいて、前記
    第２対象画素列の各対象画素について水平方向の前記フ
    ィルタ演算を行う処理を第８フェーズとし、 前記第８フェーズの処理結果及び前記第２垂直参照画素
    列の画素データに基づいて、前記第２対象画素列の各対
    象画素について前記判定及び垂直方向の前記フィルタ演
    算を行う処理を第９フェーズとした場合に、 前記一連の処理は、前記第１フェーズ、前記第２フェー
    ズ、前記第３フェーズ、前記第４フェーズ及び前記第５
    フェーズをその順序で実行し、前記第６フェーズ及び前
    記第７フェーズをその順序で実行し、前記第５フェー
    ズ、前記第８フェーズ及び前記第９フェーズをその順序
    で実行するとともに、前記第２フェーズ及び前記第６フ
    ェーズの実行を同時に、前記第３フェーズ及び前記第７
    フェーズの実行を同時に開始するようになっていること
    を特徴とする画像処理装置。
  9. 【請求項９】 離散コサイン変換処理及び量子化処理を
    所定のブロック単位で行う画像圧縮処理により圧縮され
    た圧縮画像データに基づいて前記ブロック単位で画像を
    展開する際又は展開した後に、展開画像に対してフィル
    タ処理をコンピュータに実行させるためのプログラムで
    あって、 対象ブロックに隣接するブロックを参照ブロックとし、
    さらに、前記対象ブロック内の一の画素を対象画素と
    し、前記参照ブロック内の一の画素を参照画素とした場
    合に、 前記フィルタ処理は、前記対象画素の値と前記参照画素
    の値との差分値が閾値を超えているか否かを判定し、前
    記対象画素についてフィルタ演算を行うか否かを、前記
    判定結果にのみ基づいて決定するとともに、前記対象画
    素についてのフィルタ演算を、前記対象画素の値と前記
    参照画素の値とにのみ基づいて行うようになっているこ
    とを特徴とする画像処理プログラム。
  10. 【請求項１０】 離散コサイン変換処理及び量子化処理
    を所定のブロック単位で行う画像圧縮処理により圧縮さ
    れた圧縮画像データに基づいて前記ブロック単位で画像
    を展開する際又は展開した後に、展開画像に対してフィ
    ルタ処理をコンピュータに実行させるためのプログラム
    であって、 対象ブロックに対し水平方向に隣接するブロックを水平
    参照ブロックとし、前記対象ブロックに対し垂直方向に
    隣接するブロックを垂直参照ブロックとし、さらに、前
    記対象ブロック内の一の画素を対象画素とし、前記水平
    参照ブロック内の一の画素であって前記対象ブロックと
    の境界線に位置し且つ前記対象画素と垂直方向の位置が
    同一のものを水平参照画素とし、前記垂直参照ブロック
    内の一の画素であって前記対象ブロックとの境界線に位
    置し且つ前記対象画素と水平方向の位置が同一のものを
    垂直参照画素とした場合に、 前記フィルタ処理は、前記対象画素の値と前記垂直参照
    画素の値との差分値が閾値を超えているか否かを判定
    し、 前記対象画素についての水平方向のフィルタ演算を、前
    記対象画素の値と前記水平参照画素の値とにのみ基づい
    て行い、 前記対象画素について垂直方向のフィルタ演算を行うか
    否かを、前記判定結果にのみ基づいて決定するととも
    に、前記対象画素についての垂直方向のフィルタ演算
    を、前記対象画素の値と前記垂直参照画素の値とにのみ
    基づいて行うようになっていることを特徴とする画像処
    理プログラム。
  11. 【請求項１１】 離散コサイン変換処理及び量子化処理
    を所定のブロック単位で行う画像圧縮処理により圧縮さ
    れた圧縮画像データに基づいて前記ブロック単位で画像
    を展開する際又は展開した後に、展開画像に対してフィ
    ルタ処理を行う方法であって、 対象ブロックに隣接するブロックを参照ブロックとし、
    さらに、前記対象ブロック内の一の画素を対象画素と
    し、前記参照ブロック内の一の画素を参照画素とした場
    合に、 前記フィルタ処理は、前記対象画素の値と前記参照画素
    の値との差分値が閾値を超えているか否かを判定し、前
    記対象画素についてフィルタ演算を行うか否かを、前記
    判定結果にのみ基づいて決定するとともに、前記対象画
    素についてのフィルタ演算を、前記対象画素の値と前記
    参照画素の値とにのみ基づいて行うことを特徴とする画
    像処理方法。
  12. 【請求項１２】 離散コサイン変換処理及び量子化処理
    を所定のブロック単位で行う画像圧縮処理により圧縮さ
    れた圧縮画像データに基づいて前記ブロック単位で画像
    を展開する際又は展開した後に、展開画像に対してフィ
    ルタ処理を行う方法であって、 対象ブロックに対し水平方向に隣接するブロックを水平
    参照ブロックとし、前記対象ブロックに対し垂直方向に
    隣接するブロックを垂直参照ブロックとし、さらに、前
    記対象ブロック内の一の画素を対象画素とし、前記水平
    参照ブロック内の一の画素であって前記対象ブロックと
    の境界線に位置し且つ前記対象画素と垂直方向の位置が
    同一のものを水平参照画素とし、前記垂直参照ブロック
    内の一の画素であって前記対象ブロックとの境界線に位
    置し且つ前記対象画素と水平方向の位置が同一のものを
    垂直参照画素とした場合に、 前記フィルタ処理は、前記対象画素の値と前記垂直参照
    画素の値との差分値が閾値を超えているか否かを判定
    し、 前記対象画素についての水平方向のフィルタ演算を、前
    記対象画素の値と前記水平参照画素の値とにのみ基づい
    て行い、 前記対象画素について垂直方向のフィルタ演算を行うか
    否かを、前記判定結果にのみ基づいて決定するととも
    に、前記対象画素についての垂直方向のフィルタ演算
    を、前記対象画素の値と前記垂直参照画素の値とにのみ
    基づいて行うことを特徴とする画像処理方法。
JP2003026155A 2002-03-07 2003-02-03 画像処理装置及び画像処理プログラム、並びに画像処理方法 Expired - Fee Related JP4114494B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2003026155A JP4114494B2 (ja) 2002-03-07 2003-02-03 画像処理装置及び画像処理プログラム、並びに画像処理方法
US10/372,215 US7162090B2 (en) 2002-03-07 2003-02-25 Image processing apparatus, image processing program and image processing method
EP20030004286 EP1376468B1 (en) 2002-03-07 2003-02-27 Image processing apparatus, image processing program and image processing method
AT03004286T ATE338315T1 (de) 2002-03-07 2003-02-27 Bildverarbeitungsverfahren, -programm und - vorrichtung
DE2003607935 DE60307935T8 (de) 2002-03-07 2003-02-27 Bildverarbeitungsverfahren, -programm und -vorrichtung
CNB031068901A CN1220390C (zh) 2002-03-07 2003-03-06 图像处理设备和图像处理方法
HK04100753A HK1057958A1 (en) 2002-03-07 2004-02-05 Image processing apparatus and image processing method

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2002-61940 2002-03-07
JP2002061940 2002-03-07
JP2003026155A JP4114494B2 (ja) 2002-03-07 2003-02-03 画像処理装置及び画像処理プログラム、並びに画像処理方法

Publications (2)

Publication Number Publication Date
JP2003333597A true JP2003333597A (ja) 2003-11-21
JP4114494B2 JP4114494B2 (ja) 2008-07-09

Family

ID=28043682

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003026155A Expired - Fee Related JP4114494B2 (ja) 2002-03-07 2003-02-03 画像処理装置及び画像処理プログラム、並びに画像処理方法

Country Status (7)

Country Link
US (1) US7162090B2 (ja)
EP (1) EP1376468B1 (ja)
JP (1) JP4114494B2 (ja)
CN (1) CN1220390C (ja)
AT (1) ATE338315T1 (ja)
DE (1) DE60307935T8 (ja)
HK (1) HK1057958A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100644618B1 (ko) 2004-07-02 2006-11-10 삼성전자주식회사 블록 단위로 부호화된 영상의 블록경계에서의 불연속성제거필터 및 방법
JP2008034951A (ja) * 2006-07-26 2008-02-14 Sony Corp 映像信号処理方法及び装置、並びに映像信号復号方法
JP2008048181A (ja) * 2006-08-17 2008-02-28 Fujitsu Ltd デブロッキングフィルタ、画像符号化装置および画像復号化装置
KR100843196B1 (ko) 2004-12-17 2008-07-02 삼성전자주식회사 Ｈ.264/ａｖｃ 비디오 디코더의 디블록킹 필터
WO2012077607A1 (ja) * 2010-12-07 2012-06-14 ソニー株式会社 画像処理装置及び画像処理方法
US9912967B2 (en) 2010-12-07 2018-03-06 Sony Corporation Image processing device and image processing method

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100308016B1 (ko) * 1998-08-31 2001-10-19 구자홍 압축 부호화된 영상에 나타나는 블럭현상 및 링현상 제거방법및 영상 복호화기
JP2004318423A (ja) * 2003-04-15 2004-11-11 Konica Minolta Photo Imaging Inc 画像処理方法、画像処理装置及び画像処理プログラム
CN100428269C (zh) * 2003-12-16 2008-10-22 富可视公司 处理图像数据的方法
KR100614647B1 (ko) * 2004-07-02 2006-08-22 삼성전자주식회사 디블록킹 필터에서의 효과적인 에지 필터링 연산을 위한레지스터 어레이 구조
NO322722B1 (no) * 2004-10-13 2006-12-04 Tandberg Telecom As Fremgangsmate for videokoding gjennom reduksjon av blokkartefakter
JP4270125B2 (ja) * 2004-12-16 2009-05-27 ソニー株式会社 データ処理装置、画像処理装置、それらの方法およびプログラム
JP2006254231A (ja) * 2005-03-11 2006-09-21 Toshiba Corp 情報処理装置および同装置で用いられるプログラム
JP2006285402A (ja) * 2005-03-31 2006-10-19 Pioneer Electronic Corp 画像処理装置
US20080055327A1 (en) * 2006-09-06 2008-03-06 Barinder Singh Rai Highly Efficient Display FIFO
US8942472B2 (en) * 2010-05-21 2015-01-27 Sharp Kabushiki Kaisha Color judging apparatus, color judging method, image processing circuit and program
US20150023420A1 (en) * 2012-01-19 2015-01-22 Mitsubishi Electric Corporation Image decoding device, image encoding device, image decoding method, and image encoding method
US9553843B1 (en) 2014-10-08 2017-01-24 Google Inc. Service directory profile for a fabric network
JP6545515B2 (ja) 2015-04-24 2019-07-17 株式会社東芝 画像復号装置
CN105933708B (zh) * 2016-04-15 2019-02-12 杨桦 一种数据压缩和解压缩的方法和装置
CN112136326B (zh) * 2018-05-23 2023-12-12 松下电器（美国）知识产权公司 编码装置、解码装置、编码方法和解码方法
BR112021005561A2 (pt) 2018-09-24 2021-06-29 Huawei Technologies Co., Ltd. dispositivo de processamento de imagem e método para realizar desblocagem otimizada de qualidade

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0714211B2 (ja) 1989-07-14 1995-02-15 国際電信電話株式会社 動画像符号化のブロック歪除去方法および装置
JP2919986B2 (ja) 1991-03-19 1999-07-19 オリンパス光学工業株式会社 画像信号復号化装置
US5796875A (en) * 1996-08-13 1998-08-18 Sony Electronics, Inc. Selective de-blocking filter for DCT compressed images
JPH11187400A (ja) 1997-12-22 1999-07-09 Matsushita Electric Ind Co Ltd 歪除去方法および歪除去フィルタ
KR100244290B1 (ko) 1997-09-09 2000-02-01 구자홍 저속 전송에서의 동영상을 위한 디블록킹 필터링 방법
US6430317B1 (en) * 1997-12-31 2002-08-06 Sarnoff Corporation Method and apparatus for estimating motion using block features obtained from an M-ary pyramid
US6320905B1 (en) * 1998-07-08 2001-11-20 Stream Machine Company Postprocessing system for removing blocking artifacts in block-based codecs

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7738564B2 (en) 2004-07-02 2010-06-15 Samsung Electronics Co., Ltd. Filter for eliminating discontinuity of block-based encoded image, and method thereof
KR100644618B1 (ko) 2004-07-02 2006-11-10 삼성전자주식회사 블록 단위로 부호화된 영상의 블록경계에서의 불연속성제거필터 및 방법
KR100843196B1 (ko) 2004-12-17 2008-07-02 삼성전자주식회사 Ｈ.264/ａｖｃ 비디오 디코더의 디블록킹 필터
JP2008034951A (ja) * 2006-07-26 2008-02-14 Sony Corp 映像信号処理方法及び装置、並びに映像信号復号方法
US8416860B2 (en) 2006-08-17 2013-04-09 Fujitsu Semiconductor Limited Deblocking filter, image encoder, and image decoder
JP2008048181A (ja) * 2006-08-17 2008-02-28 Fujitsu Ltd デブロッキングフィルタ、画像符号化装置および画像復号化装置
JP4712642B2 (ja) * 2006-08-17 2011-06-29 富士通セミコンダクター株式会社 デブロッキングフィルタ、画像符号化装置および画像復号化装置
JP6011341B2 (ja) * 2010-12-07 2016-10-19 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び記録媒体
WO2012077607A1 (ja) * 2010-12-07 2012-06-14 ソニー株式会社 画像処理装置及び画像処理方法
US9912967B2 (en) 2010-12-07 2018-03-06 Sony Corporation Image processing device and image processing method
US9973763B2 (en) 2010-12-07 2018-05-15 Sony Corporation Image processing device and image processing method for applying filtering determination processes in parallel
US9998766B2 (en) 2010-12-07 2018-06-12 Sony Corporation Image processing device and image processing method
US10003827B2 (en) 2010-12-07 2018-06-19 Sony Corporation Image processing device and image processing method
US10334279B2 (en) 2010-12-07 2019-06-25 Sony Corporation Image processing device and image processing method
US10362318B2 (en) 2010-12-07 2019-07-23 Sony Corporation Image processing device and image processing method that horizontal filtering on pixel blocks
US10582202B2 (en) 2010-12-07 2020-03-03 Sony Corporation Image processing device and image processing method that horizontal filtering on pixel blocks
US10785504B2 (en) 2010-12-07 2020-09-22 Sony Corporation Image processing device and image processing method
US10931955B2 (en) 2010-12-07 2021-02-23 Sony Corporation Image processing device and image processing method that horizontal filtering on pixel blocks
US11381846B2 (en) 2010-12-07 2022-07-05 Sony Corporation Image processing device and image processing method

Also Published As

Publication number Publication date
EP1376468A9 (en) 2004-06-30
EP1376468A3 (en) 2004-04-14
DE60307935T8 (de) 2007-07-12
CN1220390C (zh) 2005-09-21
HK1057958A1 (en) 2004-04-23
EP1376468B1 (en) 2006-08-30
US20040005006A1 (en) 2004-01-08
DE60307935T2 (de) 2007-03-15
DE60307935D1 (de) 2006-10-12
US7162090B2 (en) 2007-01-09
ATE338315T1 (de) 2006-09-15
EP1376468A2 (en) 2004-01-02
CN1444408A (zh) 2003-09-24
JP4114494B2 (ja) 2008-07-09

Similar Documents

Publication Publication Date Title
JP2003333597A (ja) 画像処理装置及び画像処理プログラム、並びに画像処理方法
JP4145586B2 (ja) 画像処理装置及び画像処理プログラム、並びに画像処理方法
EP2800369B1 (en) Moving image compressing apparatus, image processing apparatus, moving image compressing method, image processing method, and data structure of moving image compressed file
US10244238B2 (en) Moving picture compression apparatus, image processing apparatus, moving picture compression method, image processing method, and data structure of moving picture compression file
KR20050087729A (ko) 동화상 부호화 장치 및 동화상 처리장치
US20060109904A1 (en) Decoding apparatus and program for executing decoding method on computer
EP1977372B1 (en) Method and apparatus for scaling down a bayer domain image
US20080001975A1 (en) Image processing apparatus and image processing method
JP2003018610A (ja) デジタルカメラ及び画像処理方法
JP2008124742A (ja) 画像処理装置、画像処理方法、およびプログラム
JP2000299864A (ja) 動画像処理方法
CN100364337C (zh) 图像处理方法及图像处理装置
US6990149B2 (en) Circuit and method for full search block matching
JP4744943B2 (ja) 動きベクトル検出方法および動画処理装置
JP2001339695A (ja) 画像信号処理装置及び画像信号処理方法
JP4035903B2 (ja) 動きベクトル検出方法及び装置
JP4109151B2 (ja) 画像処理装置
JP3715273B2 (ja) 画像データの平滑化処理装置、平滑化処理方法及び平滑化処理プログラム
US20030210830A1 (en) Image signal distortion removal apparatus, and image signal distortion removal method
JP2016095667A (ja) 画像処理装置および電子機器
JP3698501B2 (ja) 動きベクトル検出装置
JP4729928B2 (ja) 画像処理装置及び画像処理プログラム
JP2006165825A (ja) 画像処理装置、画像処理方法、画像処理プログラム、及び記憶媒体
JP2004056305A (ja) 動きベクトル検出方法、動きベクトル検出装置、及びプログラム
JP2007329752A (ja) 画像処理装置及び画像処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060201

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20070403

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20071120

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20071225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080222

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080325

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080407

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110425

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110425

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110425

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120425

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130425

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees