WO2006040960A1

WO2006040960A1 - 画像処理装置および画像処理プログラム

Info

Publication number: WO2006040960A1
Application number: PCT/JP2005/018330
Authority: WO
Inventors: Kazunori Sumiya; Manabu Yata; Taro Hizume; Toshiyuki Sano
Original assignee: Matsushita Electric Industrial Co., Ltd.
Priority date: 2004-10-08
Filing date: 2005-10-04
Publication date: 2006-04-20
Also published as: US20080199101A1; JP4724124B2; US7936941B2; CN101036161B; CN101036161A; JPWO2006040960A1

Abstract

　【課題】　ノイズが少なくかつ鮮明な画像を得ることのできる画像処理装置を提供すること。　【解決手段】　注目画素とその左右画素との水平方向におけるエッジ強度を算出する水平エッジ強度算出部２２と、水平方向のエッジ強度に基づいたフィルタ処理を行いノイズ低減およびエッジ強調を選択的に行うプレフィルタ２４と、注目画素とその上下画素との垂直方向におけるエッジ強度を算出する垂直エッジ強度算出部２３と、垂直方向のエッジ強度に基づいたフィルタ処理を行いノイズ低減およびエッジ強調を選択的に行うプレフィルタ２５とを設けることにより、注目画素付近での上下または左右方向における先鋭化を行うことができ、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることができる。

Description

明細書

画像処理装置および画像処理プログラム

技術分野

[0001] 本発明は、ディジタル画像処理にお！/ヽて、特にノイズが少なくかつ鮮明な画像を得ることのできる画像処理装置および画像処理プログラムに関する。

背景技術

[0002] 従来の画像処理装置にお!/、ては、画像を鮮明にするための処理としてエッジ強調処理が広く用いられて、る。これは画像信号に HPF (ノヽィパスフィルター）をかけた信号を加算することで画像信号の変化を強調し、画像のエッジを強調するものである。ところが、このような画像処理装置では、 HPFにより画像信号のノイズ成分も同じように強調されてしま、、 SZN感の悪、画像となってしまう。

[0003] そこで、適応的な精細度補正を実現する画像処理装置が提案されて!、る。このような従来の画像処理装置を、図 7に示し説明する。

[0004] 図 7に示すように、従来の画像処理装置では、入力画像データから画像特徴量としてカラーエッジ情報を算出する画像特徴量算出部 12と、ここで算出された画像特徴量が、第一の値以下の場合は、先鋭度を平滑ィ匕する強調係数を、第一の値よりも大きく第二の値以下の場合は、先鋭度を強調する強調係数を、第二の値よりも大きい場合は、先鋭度の補正を行わない強調係数を、それぞれ算出する強調係数算出部 13と、ここで算出された強調係数に基づいて入力画像データの精細度補正を行う精細度補正部 14とを備えることにより、カラーエッジ情報を算出し、この値を閾値と比較して、それぞれの場合で異なる強調係数に基づ、て入力画像データの精細度補正を行って!/、る（例えば特許文献 1参照)。

特許文献 1 :特開 2002— 83294号公報 (要約、第 1図）

発明の開示

発明が解決しょうとする課題

[0005] し力しながら、このような従来の画像処理装置においては、エッジの方向に対する考慮がなぐエッジ付近ではどの方向に対しても先鋭ィ匕されてしまうという問題があつた。

[0006] 本発明は、このような従来の問題を解決するためになされたもので、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることのできる画像処理装置を提供することを目的とする。

課題を解決するための手段

[0007] 本発明の画像処理装置は、画像データを入力する画像データ入力手段と、前記入力した画像データの注目画素とその周囲画素のレベル差力特定方向のエッジ強度を算出するエッジ強度算出手段と、前記エッジ強度算出手段に算出された特定方向のエッジ強度に基づ、てフィルタを決定し、画素データに前記フィルタによるフィルタ処理を実行して選択的にノイズ低減およびエッジ強調を行うフィルタ処理手段と、前記フィルタ処理された画素データによりエッジ強調信号を生成するエッジ強調信号生成手段と、前記入力した画像データを前記エッジ強調信号に基づ!、て補正する画像補正手段とを備えたことを特徴とした構成を有して、る。

[0008] この構成により、本発明の画像処理装置は、注目画素とその周囲との特定方向におけるエッジ強度にしたがってフィルタがかけられノイズが低減されるので、注目画素付近での特定方向における先鋭ィ匕を行うことができ、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることができる。

[0009] また、本発明の画像処理装置は、前記フィルタ処理手段は、前記特定方向のエツジ強度が第 1の値以下の場合には平滑ィ匕フィルタを、第 2の値より大きい場合にはェッジ強調フィルタを選択することを特徴とした構成を有しても良い。

[0010] この構成により、本発明の画像処理装置は、特定方向のエッジ強度が低い場合には平滑ィ匕フィルタを、高、場合にはエッジ強調フィルタによるフィルタ処理を実行するので、注目画素の特定方向が平坦な場合はより滑らかで、エッジがある場合にはより鮮明にすることができ、ノイズが少なくエッジ方向には鮮明な画像を得ることができる

[0011] さらに、本発明の画像処理装置は、前記フィルタ処理手段は、前記特定方向のエツジ強度力線形一次変換によりフィルタ係数を算出し、線形変化する前記フィルタ係数にしたがって前記注目画素データのノイズ低減およびエッジ強調を選択的に行うことを特徴とした構成を有しても良い。

[0012] この構成により、本発明の画像処理装置は、線形変化するフィルタ係数にしたがつて注目画素データのノイズ低減もしくはエッジ強調が行われるので、注目画素付近のエッジ強度に合わせてフィルタの特性を平滑化から高域強調まで滑らかに変化させることができ、閾値による信号処理切り替えを無くし、切り替わりによる画像の不連続性を排除することができる。

[0013] さらに、本発明の画像処理装置は、前記フィルタ処理手段は、前記特定方向のエツジ強度に対して、傾き係数をかけ、画質の調整を行う画質調整値を加算して予備値を算出し、前記予備値と所定の上限値および下限値と比較をして、前記予備値が上限値を上回る場合は上限値を、前記予備値が下限値を下回る場合は下限値を、前記予備値が上限値を上回らず、かつ下限値を下回らない場合は前記予備値を重み付け係数として決定し、前記注目画素データに前記重み付け係数による重み付けカロ算を行ってノイズ低減およびエッジ強調を選択的に行うことを特徴とした構成を有しても良い。

[0014] この構成により、本発明の画像処理装置は、傾き係数によって画像の変化によるノィズ低減量もしくはエッジ強調量を調整でき、画質調整値によってソフトな画質からシヤープな画質まで様々な画質を選択でき、上下限クリップによってフィルタのかけすぎによる画質劣化を防止することができ、画像の調整を容易に行うことができる。

[0015] さらに、本発明の画像処理装置は、前記フィルタ処理手段は、前記注目画素データの前後の画素データの平均値と前記注目画素データとの差分に前記重み付け係数を掛け合わせた積を前記注目画素データの前後の画素データの平均値に加えて前記重み付け加算を行うことを特徴とした構成を有しても良い。

[0016] この構成により、本発明の画像処理装置は、重み付け係数の値に応じてローパスフィルタおよびノヽィパスフィルタによるフィルタ処理を選択的に実行することができるので、特定方向のエッジ強度が低い場合には平滑ィ匕フィルタを、高い場合にはエッジ強調フィルタによるフィルタ処理を実行するので、注目画素の特定方向が平坦な場合はより滑らかで、エッジがある場合にはより鮮明にすることができ、ノイズが少なくェッジ方向には鮮明な画像を得ることができる。 [0017] さらに、本発明の画像処理装置は、前記傾き係数および前記画質調整値は画像データに含まれるノイズの量に応じて決定されることを特徴とした構成を有しても良い。

[0018] この構成により、本発明の画像処理装置は、画像データに含まれるノイズの量に応じて効果的にフィルタ処理を行うことができる。

[0019] さらに、本発明の画像処理装置は、前記特定方向は少なくとも水平方向と垂直方向を含み、前記エッジ強度算出手段は、前記注目画素データとその左右画素データのレベル差から水平方向のエッジ強度を算出する水平エッジ強度算出部と、前記注目画素データとその上下画素データのレベル差力垂直方向のエッジ強度を算出する垂直エッジ強度算出部とを備え、前記フィルタ処理手段は、前記水平エッジ強度算出部に算出された水平方向のエッジ強度に基づ!/、て水平フィルタを求め、前記水平フィルタにより水平ノイズ低減および水平エッジ強調を選択的に行う水平フィルタ処理部と、前記垂直エッジ強度算出部に算出された垂直方向のエッジ強度に基づ Vヽて垂直フィルタを求め、前記垂直フィルタにより垂直ノイズ低減および垂直エッジ強調を選択的に行う垂直フィルタ処理部とを備え、前記エッジ強調信号生成手段は、前記水平フィルタ処理された画素データおよび前記垂直フィルタ処理された画素データによりエッジ強調信号を生成することを特徴とした構成を有しても良い。

[0020] この構成により、本発明の画像処理装置は、水平および垂直エッジがそれぞれ別々に検出され、水平および垂直方向それぞれのフィルタ処理が行われるので、水平および垂直方向それぞれの単独ノイズが低減され、一方には平滑化、一方には先鋭化を行うことができ、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることができる

[0021] さらに、本発明の画像処理装置は、前記エッジ強度算出手段は、さらに、前記注目画素データとその第 1斜め方向の前後に位置する画素データのレベル差力第 1斜め方向のエッジ強度を算出する第 1斜めエッジ強度算出部と、前記注目画素データとその第 2斜め方向の前後に位置する画素データのレベル差力第 2斜め方向のェッジ強度を算出する第 2斜め方向エッジ強度算出部とを備え、前記フィルタ処理手段は、前記第 1斜め方向エッジ強度算出部に算出された第 1斜め方向のエッジ強度に基づいて第 1斜め方向フィルタを求め、前記第 1斜め方向フィルタにより第 1斜め方向ノイズ低減および第 1斜め方向エッジ強調を選択的に行う第 1斜め方向フィルタ処理部と、前記第 2斜め方向エッジ強度算出部に算出された第 2斜め方向のエッジ強度に基づいて第 2斜め方向フィルタを求め、前記第 2斜め方向フィルタにより第 2斜め方向ノイズ低減および第 2斜め方向エッジ強調を選択的に行う第 2斜め方向フィルタ処理部とを備え、前記エッジ強調信号生成手段は、前記第 1斜め方向フィルタ処理された画素データおよび前記第 2斜め方向フィルタ処理された画素データによりエッジ強調信号を生成することを特徴とした構成を有しても良ヽ。

[0022] この構成により、本発明の画像処理装置は、第 1斜め方向および第 2斜め方向のェッジ強度がそれぞれ別々に検出され、第 1斜め方向および第 2斜め方向それぞれのフィルタ処理が行われるので、第 1斜め方向および第 2斜め方向それぞれの単独ノィズが低減され、一方には平滑化、一方には先鋭ィ匕を行うことができ、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることができる。

[0023] さらに、本発明の画像処理プログラムは、画像データを入力する画像データ入カステツプと、前記入力した画像データの注目画素とその周囲画素のレベル差から特定方向のエッジ強度を算出するエッジ強度算出ステップと、前記エッジ強度算出ステツプで算出された特定方向のエッジ強度に基づ、てフィルタ処理を選択し、前記選択したフィルタ処理により画素データのノイズ低減およびエッジ強調を選択的に行うフィルタ処理ステップと、前記フィルタ処理された画素データによりエッジ強調信号を生成するエッジ強調信号生成ステップと、前記入力した画像データを前記エッジ強調信号に基づいて補正する画像補正ステップとを備えたことを特徴とした構成を有している。

[0024] この構成により、本発明の画像処理プログラムは、注目画素とその周囲との特定方向におけるエッジ強度にしたがってフィルタ処理が行われノイズが低減されるので、注目画素付近での特定方向における先鋭ィ匕を行うことができ、ノイズが少なくかつェッジ方向にも鮮明な画像を得ることができる。

発明の効果

[0025] 本発明は、注目画素とその周囲画素との特定方向におけるエッジ強度を算出するエッジ強度算出手段と、前記特定方向のエッジ強度に基づ、たフィルタ処理を行ヽノイズ低減およびエッジ強調を選択的に行うフィルタ処理手段とを設けることにより、注目画素付近での特定方向における先鋭ィ匕を行うことができ、ノイズが少なくかつェッジ方向にも鮮明な画像を得ることができるとヽぅ効果を有する画像処理装置を提供することができるものである。

図面の簡単な説明

[0026] [図 1]本発明の第 1の実施の形態における画像処理装置のエッジ強調信号生成処理部のブロック図

[図 2]本発明の第 1の実施の形態における画像処理装置のエッジ強調信号生成処理動作を示すフローチャート

[図 3]本発明の第 1の実施の形態におけるエッジ強調信号生成処理の水平方向プレフィルタ処理動作を示すフローチャート

[図 4]本発明の第 2の実施の形態における画像処理装置のエッジ強調信号生成処理部の水平方向プレフィルタ部のブロック図

[図 5]本発明の第 2の実施の形態における画像処理装置のエッジ強度に対する重み付け係数の関係を示したグラフ

[図 6]本発明の第 2の実施の形態におけるエッジ強調信号生成処理の水平方向プレフィルタ処理動作を示すフローチャート

[図 7]従来の画像処理装置のブロック図

符号の説明

[0027] 11 画像入力部

12 画像特徴量算出部

13 強調係数算出部

14 精細度補正部

15 画像出力部

21 画像信号入力部 (画像データ入力手段）

22 水平エッジ強度算出部

23 垂直エッジ強度算出部

24 プレフィルタ（水平フィルタ処理部）プレフィルタ（垂直フィルタ処理部）

水平垂直エッジ強調信号生成部 (エッジ強調信号生成手段) 加算器 (画像補正手段）

画像信号出力部

水平方向プレフィルタ部

垂直方向プレフィルタ部

水平方向プレフィルタ部

水平エッジ強度算出部

プレフィルタ

垂直 LPF

遅延素子

減算器

絶対値算出処理部

加算器

傾き係数設定部

傾き係数乗算部

オフセット設定部

オフセット加算部

上下限クリップ調整部

遅延素子

加算器

1Z2乗算器

遅延素子

減算器

乗算器 87 1Z256乗算器

88 加算器

発明を実施するための最良の形態

[0028] 以下、本発明の実施の形態の画像処理装置について、図面を用いて説明する。

[0029] (第 1の実施の形態）

まず、本発明の第 1の実施の形態における画像処理装置のブロック図を図 1に示し

、説明する。

[0030] 図 1は、画像処理装置のエッジ強調信号生成処理部のブロック図であり、画像信号を入力する画像信号入力部 (画像データ入力手段） 21と、水平方向のエッジ強度にしたがってフィルタ処理を行う水平方向プレフィルタ部 31と、垂直方向のエッジ強度にしたがってフィルタ処理を行う垂直方向プレフィルタ部 32と、エッジ強調信号を生成する水平垂直エッジ強調信号生成部 (エッジ強調信号生成手段) 26と、信号の加算を行う加算器 (画像補正手段) 27と、画像信号を出力する画像信号出力部 28とを備えている。

[0031] また、水平方向プレフィルタ部 31は、水平方向のエッジ強度を算出する水平エッジ強度算出部 22と、水平方向のフィルタ処理を行うプレフィルタ（水平フィルタ処理部） 24と、を有し、垂直方向プレフィルタ部 32は、垂直方向のエッジ強度を算出する垂直エッジ強度算出部 23と、垂直方向のフィルタ処理を行うプレフィルタ（垂直フィルタ処理部） 25と、を有している。

[0032] 画像信号入力部 21は、画素単位の信号を順次入力するものである。ここで、垂直方向のエッジ強調信号を生成するためには、複数ラインの信号が必要なので、ラインメモリ等を使用して複数列の画像信号を並列に入力する。図 1では、 3ライン使用している力ライン数は 3本に限定されるものではない。

[0033] 水平エッジ強度算出部 22は、入力信号に対して、まず垂直方向に LPF (ローパスフィルタ）をかけてから、水平方向の差分の絶対値を算出するものである。この処理により、ノイズの影響を低減して水平方向のエッジの強度を検出することができる。

[0034] 垂直エッジ強度算出部 23は、水平エッジ強度算出部 22と同様に、入力信号に対して水平 LPFをかけてから、垂直方向の差分の絶対値を算出し、垂直方向のエッジの強度を検出するものである。

[0035] プレフィルタ 24は、水平エッジ強度算出部 22で求めた水平エッジ強度が弱い場合には LPFを、強、場合には高域を強調する HPFなどのフィルタ処理を行うものである。この時、注目画素に単独ノイズがあつたとしても水平エッジ強度が弱いため LPF がかけられ、ノイズの影響は低減される。

[0036] プレフィルタ 25は、プレフィルタ 24と同様に、垂直エッジ強度算出部 23で求めた垂直エッジ強度が弱、場合には LPFを、強、場合には高域を強調する HPFなどのなどのフィルタ処理を行うものである。

[0037] プレフィルタ 24とプレフィルタ 25は、それぞれが単独ノイズの低減効果を持つ。注目画素が水平エッジの場合には、水平方向には先鋭化、垂直方向には平滑化し、シヤープなエッジとなる。垂直エッジの場合も同様である。

[0038] 水平垂直エッジ強調信号生成部 26は、プレフィルタ 24、プレフィルタ 25の出力信号を受けエッジ強調信号を生成するものである。

[0039] 加算器 27は、水平垂直エッジ強調信号生成部 26で生成されたエッジ強調信号を

、画像信号入力部 21で入力された本線信号に加算するものであり、画像信号出力部 28は、加算器 27で加算された画像信号を出力するものである。

[0040] なお、図 1では、水平方向と垂直方向の処理を記載したが、同様に斜め方向の処理を追カ卩しても良い。

[0041] 以上のように構成された画像処理装置のエッジ強調信号生成動作について、図 2 にフローチャートを示し、説明する。

[0042] まず、信号入力処理では、画像信号入力部 21が画像信号を入力する（Sl l)。次に、水平方向プレフィルタ処理では、水平方向プレフィルタ部 31が画像信号入力部 21から画像信号を入力し、水平方向のエッジの強度を検出し、強度に応じてフィルタ処理を行う（S12)。この水平方向プレフィルタ処理については、後で詳述する。また、垂直方向プレフィルタ処理では、垂直方向プレフィルタ部 32が画像信号入力部 21 から画像信号を入力し、垂直方向のエッジの強度を検出し、強度に応じてフィルタ処理を行う（S13)。このとき、水平方向プレフィルタ処理と垂直方向プレフィルタ処理は、別々の処理として用意しておいても良いし、 1つの処理のみ用意しておいて、信号の水平と垂直とを入れ替えたものを入力として同じ処理を 2度呼び出しても良い。

[0043] 次に、水平垂直エッジ強調信号生成処理では、水平垂直エッジ強調信号生成部 2 6が水平方向プレフィルタ部 31と垂直方向プレフィルタ部 32とのそれぞれから出力されたプレフィルタの力かった信号を受け取り、エッジ強調信号を生成し、加算器 27が、画像信号入力部 21が入力した画像信号に、水平垂直エッジ強調信号生成部 26に生成された信号を加算し、画像信号出力部 28からエッジ強調された信号を出力する (S14)。

[0044] 以上の処理により、画像のノイズを低減しつつ、画像のエッジを強調した鮮明な画像を得ることができる。

[0045] また、図 3に、水平方向プレフィルタ処理のフローチャートを示し、説明する。

[0046] まず、垂直 LPF処理では、画像信号入力部 21から入力した信号により、複数の垂直方向の画素値によって雑音の除去、低減化を行う（S21)。次に、水平差分絶対値和算出処理では、注目画素と左右両側の画素値との差分絶対値を加算して、水平方向のエッジ強度を得る（S22)。次に、フィルタ選択処理では、得られたエッジ強度にしたがい、エッジ強度が弱ければ LPFなどの平滑フィルタを、エッジ強度が強ければ高域強調となるよう、複数のフィルタ力 HPFなどエッジを強調するフィルタを選択する（S23)。例えば、第 1のしきい値、第 2のしきい値と 2つのしきい値を設け、エッジ強度が第 1のしきい値以下の場合には平滑フィルタを、第 2のしきい値以上の場合にはエッジ強調フィルタを選択するようにしても良い。そして、選択されたフィルタにより

、フィルタ処理を行い出力する（S24)。ここで、エッジ強度が第 1のしきい値と第 2のしき!、値の間の場合はフィルタ処理を行わず、遅延させてフィルタ処理を行った場合と同じタイミングで出力させる。

[0047] これらの処理により、画像のノイズを低減しつつ、画像のエッジを強調した鮮明な画像を得ることができる。

[0048] (第 2の実施の形態）

次に、本発明の第 2の実施の形態における画像処理装置について、説明する。

[0049] 本実施の形態の画像処理装置は、上記第 1の実施の形態における画像処理装置に対して、水平エッジ強調信号生成処理および垂直エッジ強調信号生成処理が異なる。したがって、水平方向プレフィルタ部および垂直方向プレフィルタ部のみが異なり、他の構成作用は同一である。

[0050] 図 4に、本実施の形態における水平方向プレフィルタ部のブロック図を示し、説明する。また、垂直方向プレフィルタ部については、水平方向プレフィルタ部と同様のものなので、説明を省略する。

[0051] 図 4に示すように、水平方向プレフィルタ部 40は、水平方向のエッジ強度を算出する水平エッジ強度算出部 41と、水平方向のエッジ強度にしたがってフィルタ処理を行うプレフイノレタ 42と、を備えている。

[0052] 水平エッジ強度算出部 41は、垂直方向に LPFをかける垂直 LPF51、データの遅延を行う遅延素子 52、遅延素子 53、 2つの信号の差分値を算出する減算器 54、減算器 55、入力値の絶対値を算出する絶対値算出処理部 56、絶対値算出処理部 57 、 2つの入力値を加算する加算器 58を有している。

[0053] 垂直 LPF51は、 3ライン信号を入力し、それぞれ、 1/4, 1/2, 1Z4の係数を掛けて加算することにより、垂直方向に LPFをかけるものである。ただし、縦方向 LPFの係数はこれに限定するものではな!/、。

[0054] 遅延素子 52および遅延素子 53は、入力した画素信号を一旦蓄積し、出力タイミングを遅延するものである。ここで、遅延素子 52、 53はそれぞれ 1画素データ分の時間信号を遅延させるものとする。減算器 54および減算器 55は、遅延素子 52から出力される画素信号を注目画素の画素信号として、それぞれ注目画素と右の信号、注目画素と左の信号との差分値を求めるものである。

[0055] 絶対値算出処理部 56および絶対値算出処理部 57は、それぞれ減算器 54および減算器 55に算出された注目画素と左右の画素の差分値の絶対値を求めるものであり、加算器 58は、絶対値算出処理部 56および絶対値算出処理部 57に算出された注目画素と左右の画素の差分値の絶対値を加算して、注目画素部での画像変化量を求めるものであり、これを局所領域（ここでは 3 * 3画素の領域）の水平方向のエツジ強度とする。

[0056] プレフィルタ 42は、傾き係数を設定する傾き係数設定部 71、傾き係数設定部 71により設定された傾き係数を乗算する傾き係数乗算部 72、オフセット値を設定するオフセット設定部 73、オフセット設定部 73により設定されたオフセット値を加算するオフセット加算部 74、上限値および下限値をクリップする上下限クリップ調整部 75、 2画素データ分のデータの遅延を行う遅延素子 81、加算器 82、 1Z2を乗算する 1Z2乗算器 83、 1画素データ分のデータの遅延を行う遅延素子 84、減算器 85、重み付け係数を乗算する乗算器 86、 1Z256を乗算する 1Z256乗算器 87、加算器 88を有している。

[0057] 傾き係数乗算部 72は、水平エッジ強度算出部 41を構成する加算器 58から出力された水平方向のエッジ強度に対して、傾き係数設定部 71により設定された傾き係数を積算するものであり、オフセット加算部 74は、オフセット設定部 73により設定されたオフセット値を加算するものである。上下限クリップ 75は、上限および下限に所定のクリップをかけるものであり、これにより、重み付け係数を求める。重み付け係数の算出については、後で改めて説明する。

[0058] 遅延素子 81は、入力した画素信号を一旦蓄積し、 2画素分出力タイミングを遅延するものである。加算器 82と 1Z2乗算器 83は、遅延素子 81に 2画素分遅延された画素データと、遅延されていない画素データとを加算し、 1Z2を乗算することにより、 1 画素分遅延される注目画素の左右 2画素の加算平均値を求めるものである。

[0059] 遅延素子 84は、入力した画素信号を一旦蓄積し、 1画素分出力タイミングを遅延するものであり、加算器 82に入力される注目画素の左右 2画素を表す 2つの画素信号の間の画素値、すなわち、注目画素の画素信号を出力するものである。減算器 85は、遅延素子 84に遅延された画素データから、 1Z2乗算器 83から出力された値を減算することにより、注目画素と、左右 2画素の加算平均との差を求めるものである。

[0060] 乗算器 86は、減算器 85からの出力と上下限クリップ 75からの出力とを乗算し、注目画素と、左右 2画素の加算平均との差に、重み付け係数を掛けた積算ゲインを求めるものである。 1Z256乗算器 87は、乗算器 86から出力された積算ゲインを 256で割るものであり、これは、回路での実現のために積算ゲインを 256で 1倍とするためであり、小数演算が可能ならこの必要はない。

[0061] 加算器 88は、乗算器 86、 1Z256乗算器 87からの出力と、加算器 82、 1Z2乗算器 83からの出力とを、加算して、積算ゲインと左右 2画素の加算平均値とを加算するものである。

[0062] ここで、中央の画素（注目画素）を「CENTER」、左右 2画素の加算平均を「AVE」、重み付け係数を「k」とすると、前記処理による出力信号は、

( CENTER - AVE ) * k + AVE 式（1)

と表すことができる。これは、

CENTER * k + AVE * ( 1 - k ) 式（2)

と等価である。つまり本処理は、中央の画素と左右の画素を「k」対（1-k)で重み付け加算するフィルタを通すものである。

[0063] したがって、重み係数を変化させることで、フィルタの構成を変えることなくその特性を変えることができる。上記式（2)より明らかなように、「k」が 1より小さい場合は LPFとなり、逆に「k」が 1より大きい場合は（1-k)は負の数となり、特性は高域強調となる。

[0064] また、重み付け係数の算出について図 5を用いて説明する。図 5は、エッジ強度に対する重み付け係数の関係を示したグラフであり、横軸は水平方向のエッジ強度、縦軸は重み付け係数値である。本実施の形態で、重み付け係数値は重み付け係数

「k」に 256を掛けた値となっている。

[0065] グラフの傾き 101は、傾き係数設定部 71で設定される傾き係数にて定まり、画像の変化に対するフィルタ特性の変化量を調整することができる。傾き係数設定部 71は、例えば、図示されて!ヽな、画像信号入力部に入力される信号に含まれるノイズの量に応じて傾き係数を設定しても良ヽ。

[0066] オフセット 102は、オフセット設定部 73により設定されるオフセット値にて定まり、よりソフトな画質やシャープな画質に画質調整を行うことができる。このオフセット値は画像調整値を構成する。オフセット設定部 73は、例えば、図示されていない画像信号入力部に入力される信号に含まれるノイズの量に応じてオフセット値を設定しても良い。

[0067] さらに、重み付け係数値は、上下限クリップ調整部 75により決定される。すなわち、上下限クリップ調整部 75はオフセット加算部 74から出力された値を上限クリップ値 1 03および下限クリップ値 104と比較し、オフセット加算部 74から出力された値が上限クリップ値 103を上回る場合は上限クリップ値 103を、オフセット加算部 74から出力された値が下限クリップ値 104を下回る場合は下限クリップ値 104を、オフセット加算部 74から出力された値が上限クリップ値 103を上回らず下限クリップ値 104を下回らない場合はオフセット加算部 74から出力された値を出力する。

[0068] 上記式（2)から明らかなように重み係数「k」が 1Z3のとき、中央の画素と左右の画素は均等に 1Z3ずつの重み付けで加算され、これが最も強い LPFとなる。これ以下の値では逆に中央の信号の重み付けが小さくなりすぎるので、 1Z3を重み付け係数の下限値とする。図 5では、積算ゲインを 256で 1倍として 256 * 1/3 = 85を下限クリップの値としている。

[0069] また、「k」が 1以上の時は（1-k)が負となりフィルタの特性は高域強調となる力あまりに強すぎるフィルタ処理を行うとかえつて画質劣化の要因となるので、 k=1.4 (256倍して 360)程度で上限クリップをかける。また、本発明はこれに限定されず、上下限クリップ調整部 75は上限クリップ値、下限クリップ値を可変として、例えば信号に含まれるノイズの量などに応じて設定しても良、ことは言うまでもな、。

[0070] このように、水平方向のエッジ量に合わせて重み付け係数「k」を線形一次変換にて算出することで、重み付け加算によるフィルタの特性を滑らかに変化させることができ、処理の切り替え (フィルタの切り替わり）による画像の不連続性を無くすことができる

[0071] 以上のように、エッジ量の線形一次変換にて重み付け係数を算出し、重み付けカロ算によるフィルタを用いることで、画像の平坦な部分はより滑らかに、エッジの部分はより鮮明な画像を、処理を切り替えることなく得ることができる。

[0072] なお、本実施の形態では、水平方向エッジ強調信号処理を例に挙げて説明を行つた力垂直方向エッジ強調信号処理に関しても同様で、垂直 LPFを水平 LPFに変えて、その他の処理も縦横を入れ替えれば良い。また、斜め方向の処理追加に関しても同様である。

[0073] また、本実施の形態では、エッジ量力重み付け係数の算出に線形一次変換を用いたが、変換方法はこれに限定されるものではない。さらに、本実施の形態では、 3 * 3画素の領域で説明を行った力処理領域はこれに限定されるものではない。

[0074] また、図 6に、本実施の形態における水平方向プレフィルタ処理のフローチャートを示し、説明する。

[0075] 本水平方向プレフィルタ処理は、上記第 1の実施の形態において示した水平方向プレフィルタ処理の一部を変更したもので、変更部分についてのみ説明を行う。

[0076] 本水平方向プレフィルタ処理では、フィルタ選択処理が無くなり、代わりにフィルタ係数算出処理 (S33)が存在する。また、プレフィルタ処理 (S34)も重み付け加算により実現する構成となっている。

[0077] フィルタ係数算出処理 (S33)では、加算器 58により求めたエッジ強度を元に、傾き係数乗算部 72、オフセット加算部 74、上下限クリップ 75によって重み付け係数を算出する。プレフィルタ処理 (S34)では、フィルタ係数算出処理 (S33)で求めた重み付け係数を用いて、乗算器 86、加算器 88等により、重み付け加算処理を行う。

[0078] これにより、エッジの強度に合わせて LPFから高域強調までの特性を滑らかに制御することができ、処理の切り替えによる画像の不連続性を無くすことができる。

[0079] なお、本発明の実施の形態の画像処理装置は、例えば、プロセッサやメモリ等を用いて構成されてもよぐまた、それぞれ電気回路等によって構成されてもよぐまたは上記処理をプロセッサ等によって実行させるプログラムのモジュールでも良い。産業上の利用可能性

[0080] 以上のように、本発明に力かる画像処理装置は、注目画素付近での特定方向における先鋭ィ匕を行うことができ、ノイズが少なくかつエッジ方向にも鮮明な画像を得ることができると!ヽぅ効果を有し、ディジタル画像処理を行う画像処理装置等として有用である。

Claims

請求の範囲

[1] 画像データを入力する画像データ入力手段と、

前記入力した画像データの注目画素とその周囲画素のレベル差から特定方向のエッジ強度を算出するエッジ強度算出手段と、

前記エッジ強度算出手段に算出された特定方向のエッジ強度に基づ!/、てフィルタを決定し、画素データに前記フィルタによるフィルタ処理を実行して選択的にノイズ低減およびエッジ強調を行うフィルタ処理手段と、

前記フィルタ処理された画素データによりエッジ強調信号を生成するエッジ強調信号生成手段と、

前記入力した画像データを前記エッジ強調信号に基づいて補正する画像補正手段とを備えたことを特徴とする画像処理装置。

[2] 前記フィルタ処理手段は、前記特定方向のエッジ強度が第 1の値以下の場合には平滑ィ匕フィルタを、第 2の値より大き、場合にはエッジ強調フィルタを選択することを特徴とする請求項 1に記載の画像処理装置。

[3] 前記フィルタ処理手段は、前記特定方向のエッジ強度力線形一次変換によりフィルタ係数を算出し、線形変化する前記フィルタ係数にしたがって前記注目画素データのノイズ低減およびエッジ強調を選択的に行うことを特徴とする請求項 1に記載の画像処理装置。

[4] 前記フィルタ処理手段は、前記特定方向のエッジ強度に対して、傾き係数をかけ、画質の調整を行う画質調整値を加算して予備値を算出し、前記予備値と所定の上限値および下限値と比較をして、前記予備値が上限値を上回る場合は上限値を、前記予備値が下限値を下回る場合は下限値を、前記予備値が上限値を上回らず、かつ下限値を下回らなヽ場合は前記予備値を重み付け係数として決定し、前記注目画素データに前記重み付け係数による重み付け加算を行ってノイズ低減およびエッジ強調を選択的に行うことを特徴とする請求項 3に記載の画像処理装置。

[5] 前記フィルタ処理手段は、前記注目画素データから前記注目画素データの前後の画素データの平均値を引いた差分に前記重み付け係数を掛け合わせた積を前記注目画素データの前後の画素データの平均値に加えて前記重み付け加算を行うことを特徴とする請求項 4に記載の画像処理装置。

[6] 前記傾き係数および前記画質調整値は画像データに含まれるノイズの量に応じて決定されることを特徴とする請求項 4に記載の画像処理装置。

[7] 前記特定方向は少なくとも水平方向と垂直方向を含み、前記エッジ強度算出手段は、前記注目画素データとその左右画素データのレベル差力水平方向のエッジ強度を算出する水平エッジ強度算出部と、前記注目画素データとその上下の画素データのレベル差力垂直方向のエッジ強度を算出する垂直エッジ強度算出部とを備え、前記フィルタ処理手段は、前記水平エッジ強度算出部に算出された水平方向のェッジ強度に基づ、て水平フィルタを求め、前記水平フィルタにより水平ノイズ低減および水平エッジ強調を選択的に行う水平フィルタ処理部と、前記垂直エッジ強度算出部に算出された垂直方向のエッジ強度に基づいて垂直フィルタを求め、前記垂直フィルタにより垂直ノイズ低減および垂直エッジ強調を選択的に行う垂直フィルタ処理部とを備え、

前記エッジ強調信号生成手段は、前記水平フィルタ処理された画素データおよび前記垂直フィルタ処理された画素データによりエッジ強調信号を生成することを特徴とする請求項 1に記載の画像処理装置。

[8] 前記エッジ強度算出手段は、さらに、前記注目画素データとその第 1斜め方向の前後に位置する画素データのレベル差力第 1斜め方向のエッジ強度を算出する第 1 斜め方向エッジ強度算出部と、前記注目画素データとその第 2斜め方向の前後に位置する画素データのレベル差力第 2斜め方向のエッジ強度を算出する第 2斜め方向エッジ強度算出部とを備え、

前記フィルタ処理手段は、前記第 1斜め方向エッジ強度算出部に算出された第 1斜め方向のエッジ強度に基づいて第 1斜め方向フィルタを求め、前記第 1斜め方向フィルタにより第 1斜め方向ノイズ低減および第 1斜め方向エッジ強調を選択的に行う第 1 斜め方向フィルタ処理部と、前記第 2斜め方向エッジ強度算出部に算出された第 2斜め方向のエッジ強度に基づいて第 2斜め方向フィルタを求め、前記第 2斜め方向フィルタにより第 2斜め方向ノイズ低減および第 2斜め方向エッジ強調を選択的に行う第 2斜め方向フィルタ処理部とを備え、前記エッジ強調信号生成手段は、前記第 1斜め方向フィルタ処理された画素データおよび前記第 2斜め方向フィルタ処理された画素データによりエッジ強調信号を生成することを特徴とする請求項 7に記載の画像処理装置。

画像データを入力する画像データ入力ステップと、

前記入力した画像データの注目画素とその周囲画素のレベル差から特定方向のエッジ強度を算出するエッジ強度算出ステップと、

前記エッジ強度算出ステップで算出された特定方向のエッジ強度に基づ!/、て実行するフィルタ処理を選択し、前記選択したフィルタ処理により画素データのノイズ低減およびエッジ強調を選択的に行うフィルタ処理ステップと、

前記フィルタ処理された画素データによりエッジ強調信号を生成するエッジ強調信号生成ステップと、

前記入力した画像データを前記エッジ強調信号に基づいて補正する画像補正ステップとを備えたことを特徴とする画像処理プログラム。