JP4477618B2

JP4477618B2 - 信頼可能なイメージの鮮明化方法

Info

Publication number: JP4477618B2
Application number: JP2006310640A
Authority: JP
Inventors: 思豪呂; 孟雲殷
Original assignee: 致伸科技股▲ふん▼有限公司
Priority date: 2006-06-30
Filing date: 2006-11-16
Publication date: 2010-06-09
Anticipated expiration: 2026-11-16
Also published as: TWI314301B; US20080002904A1; US7826678B2; JP2008016006A; TW200802184A

Description

本発明は、信頼可能で改変可能な映像鮮明化プロセスにおいて使用するウェート値のイメージ鮮明化方法を特に指す、映像鮮明化に関するものである。

鮮明マスク(Un Sharp Mask, USM)はイメージ鮮明化技術であり、原始イメージにUSM鮮明化処理をすると、前記原始イメージに対応するファジー化イメージをまず追究しなければならず、一般的にガウスマスクを使用して前記原始イメージに対して、コンボリューション演算(Convolution)を行って前記ファジー化イメージを導き出す。続いて、前記原始イメージからファジー化イメージを減算すると、前記原始イメージに対応する微細イメージが導き出される。最後に、前記原始イメージに前記微細イメージを加算し、固定ウェート値との乗算により、前記原始イメージに対応する鮮明化イメージが導き出される。下記に示したのはUSMの概念の数学式である。

ＰSHARP = ＰORIGINAL ＋ α（ＰORIGINAL − ＰBLUR）

αは前記固定ウェート値、ＰORIGINALは前記原始イメージの原始画素値、ＰBLURは前記ファジー化イメージの前記原始画素値に対応するファジー画素値で、（ＰORIGINAL−ＰBLUR）は前記微細イメージの前記原始画素値に対応する微細画素値で、ＰSHARPは前記イメージ鮮明化の前記原始画素値に対応する鮮明化画素値である。

従来の技術では、同一イメージの全ての画素値について、ウェート値αのサイズは一定不変である。固定ウェート値αの設定が過小であれば、鮮明化効果は得られず、また固定ウェート値αの設定が過大であれば、鮮明化効果は得られるものの部分区域では歪みを生じ、不自然な現象が発生する。

本発明の目的の一つは、信頼可能なイメージ鮮明化方法を提供することにより、従来の技術が直面している問題を解決することである。

本発明の実施例は信頼可能なイメージ鮮明化方法を掲示して、原始イメージブロックに対応するイメージ鮮明化ブロックを発生させる。前記原始イメージブロックは複数個の原始画素値を含み、前記方法は、前記原始イメージブロックをファジー化し、前記複数個の原始画素値に対応する複数個のファジー画素値を発生させ、前記原始画素値に対応する複数個の特徴値を計算し、前記複数個の特徴値について統計／分析演算を行い、これにより前記複数個の原始画素値に対応する複数個のウェート値を発生させ、前記複数個の原始画素値、前記複数個のウェート値、及び前記複数個のファジー画素値により複数個の鮮明画素値を発生させ、前記複数個の鮮明画素値はイメージ鮮明化ブロックから構成される。

図１は本発明である信頼可能なイメージ鮮明化方法の実施例フローチャートで、原始イメージブロックに対応するイメージ鮮明化ブロックを発生させる。前記原始イメージブロックは原始イメージ中の子ブロック、前記イメージ鮮明化ブロックはイメージ鮮明化の子ブロックで、前記イメージの鮮明化は前記原始イメージが本発明の方法によって鮮明化した後の結果である。このほかに、前記原始イメージブロックは複数個の原始画素値を含む。例えば、前記原始イメージブロックは前記原始イメージ中の(x,y)、(x＋1,y)、．．．．．．、(x＋6,y)(x＋7,y)という8個の画素位置にある8個の原始画素値ＰORIGINAL_1、ＰORIGINAL_2、．．．．．．、ＰORIGINAL_7、ＰORIGINAL_8を含む。前記イメージ鮮明化ブロックは前記イメージ鮮明化の(x,y)、(x＋1,y)、．．．．．．、(x＋6,y)、(x＋7,y)という8個の画素位置にある8個の原始画素値ＰSHARP_1、ＰSHARP_2、．．．．．．、ＰSHARP_7、ＰSHARP_8を含む。図１のフローチャートには下記の工程を含む。

工程１１０は、前記原始イメージブロックをファジー化し、前記複数個の原始画素値ＰORIGINAL_1〜ＰORIGINAL_8に対応する複数個のファジー画素値ＰBLUR_1〜ＰBLUR_8を発生させる。当該工程はイメージのファジー化可能なマスク（Mask）で行なうことが出来、例えば、１乃至８間の整数Ｘについて、ＰBLUR_xはＰORIGINAL_xを中心として、ガウスマスク（Gaussian mask）を使用してコンボリューション（Convolution）演算で得られたコンボリューション値である。ガウスマスク等のイメージファジー化マスクはイメージ処理熟練技術者の熟知するところにより、ここでは贅言しないこととする。

工程１２０は、前記複数個の原始画素値ＰORIGINAL_1〜ＰORIGINAL_8に対応する複数個の特徴値ＣＶ1〜ＣＶ8を計算する。当該工程は傾斜マスク（Gradient mask）、曲率マスク（Curvature mask）、鮮明マスク（Sharpen mask）、ファジーマスク（Blur mask）等のマスクより、一個若しくは多数のマスクをセレクトして行なう。例えば、当該工程では水平傾斜マスク、垂直傾斜マスク、水平曲率マスク、垂直曲率マスク、鮮明マスク及びファジーマスクの合計６個のマスクで行なう。原始画素値ＰORIGINAL_xについて、ＰORIGINAL_xを中心に前記６個のマスクでコンボリューション演算を行なうと、ＰORIGINAL_xに対応する６個のコンボリューション値ＣＶx_1〜ＣＶx_6が導き出され、さらに前記６個のコンボリューション値ＣＶx_1〜ＣＶx_6によって、ＰORIGINAL_xに対応する特徴値ＣＶxが導き出される。簡潔な方法として、直接６個のコンボリューション値ＣＶx_1〜ＣＶx_6の平均値を特徴値ＣＶxとすることである。即ち、ＣＶx＝（ＣＶx_1＋ＣＶx_2＋ＣＶx_3＋ＣＶx_4＋ＣＶx_5＋ＣＶx_6）/６である。傾斜マスク、曲率マスク、鮮明マスク及びファジーマスク類のマスクは何れもイメージ処理熟練技術者の熟知するところにより、ここでは贅言しないこととする。

工程１３０は、前記複数個の特徴値ＣＶ1〜ＣＶ8について統計／分析演算を行い、前記複数個の原始画素値ＰORIGINAL_1〜ＰORIGINAL_8に対応する複数個のウェート値α1〜α8を発生させる。例えば、当該工程は下記の４子工程を含む。
（a）特徴値ＣＶ1〜ＣＶ8の平均値ＡＶ及び標準差ＳＤを算出する。
（b）標準差ＳＤによって複数個の差異範囲を定義する。例えば、０〜０.５ＳＤを第一差異範囲、０.５ＳＤ〜１ＳＤを第二差異範囲、１ＳＤ〜１.５ＳＤを第三差異範囲、１.５ＳＤ〜２ＳＤを第四差異範囲、２ＳＤ〜２.５ＳＤを第五差異範囲、２.５ＳＤ〜３ＳＤを第六差異範囲、３ＳＤ〜３.５ＳＤを第七差異範囲、３.５ＳＤ〜４ＳＤを第八差異範囲、４ＳＤより大を第九差異範囲と定義する。
（c）前記複数個の原始画素値ＰORIGINAL_1〜ＰORIGINAL_8の各原始画素値ＰORIGINAL_xについて、ＰORIGINAL_xに対応する特徴値ＣＶxと平均値ＡＶ間の絶対差異値ＡＤxを計算する。つまり、ＡＤx＝abs(ＣＶx−ＡＶ)となる。
（d）絶対差異値ＡＤxが前記複数個の差異範囲のどの差異範囲にあるかを判断し、これにより原始画素値ＰORIGINAL_xに対応するウェート値αxを発生させる。例えば、絶対差異値ＡＤxが第一差異範囲にあると、予め設定された第一ウェート値αPREDETERMINED_1をウェート値αxとし、絶対差異値ＡＤxが第二差異範囲にあると、予め設定された第二ウェート値αPREDETERMINED_2をウェート値αxとし、このように類推して、絶対差異値ＡＤxが第九差異範囲にあると、予め設定された第九ウェート値αPREDETERMINED_9をウェート値αxとする。ここでの９個の予め設定されたウェート値αPREDETERMINED_1〜αPREDETERMINED_9は異なったサイズを有し、システム設計者は経験法則、実験データ若しくは鮮明化の必要等により、前記９個の予め設定されたウェート値αPREDETERMINED_1〜αPREDETERMINED_9のサイズを決定できる。工程１３０により、原始画素値ＰORIGINAL_1〜ＰORIGINAL_8に各々対応するウェート値α1〜α8は異なったサイズを有し、従来の技術のように、イメージ全体に存在する画素値に何れも同一のウェート値αを用いるものではない。

工程１４０は、前記複数個の原始画素値ＰORIGINAL_1〜ＰORIGINAL_8、前記複数個のウェート値α1〜α8及び前記複数個のファジー画素値ＰBLUR_1〜ＰBLUR_8によって、複数個の鮮明画素値ＰSHARP_1〜ＰSHARP_8を発生させる。前記複数個の鮮明画素値ＰSHARP_1〜ＰSHARP_8は前記原始イメージブロックに対応する前記イメージ鮮明化ブロックを構成する。つまり、ＵＳＭの概念によって、下記の方程式で画素の鮮明化を行なう。
ＰSHARP_x＝ＰORIGINAL_x＋αx（ＰORIGINAL_x−ＰBLUR_x），
Ｘ＝１〜８

図１の方法により、ＵＳＭ鮮明化プロセスで使用するウェート値αを動態的に修正し、各画素周辺特性の違いにより、異なったウェート値αを使用して鮮明化作業を行なう。本発明方法により、さらなる自然な鮮明化イメージが可能となる。

予め設定されたウェート値αPREDETERMINED_1〜αPREDETERMINED_9を決定する際、下記の原則を参考データとする。周辺の画素及び平坦区にある画素は何れも大きいウェート値でイメージ鮮明化を行ない、画素値が緩慢に変化するエリア内での画素については、小さいウェート値でイメージ鮮明化を行なう。実験によって、本発明が提供する方法で自然なイメージ鮮明化を確実に達成することができる。

上記に述べたことは本発明の最適な実施例というだけで、本発明の請求項により等価な変化、補正をしてもすべて上記の特許請求の範囲内に含まれる。

本発明に係る信頼可能なイメージの鮮明化方法の実施例を示すフローチャート。

Claims

原始イメージブロックに対応する鮮明イメージブロックを発生させ、前記原始イメージブロックに複数個の原始画素値を含む信頼可能なイメージの鮮明化方法であって、
前記原始イメージブロックをファジーにし、前記複数個の原始画素値に対応する複数個のファジー画素値を発生させる工程と、
前記複数個の原始画素値に対応する複数個の特徴値を計算する工程と、
前記複数個の特徴値を統計／分析し、これにより前記複数個の原始イメージ画素値に対応する複数個のウェート数値を発生させる工程と、
前記複数個の原始画素値、前記複数個のウェート数値、前記複数個のファジー画素値により複数個の鮮明画素値を発生する工程と、を含み、
前記複数個の鮮明画素値が前記鮮明イメージブロックを構成し、
前記複数個の特徴値を統計／分析する工程は、
前記複数個の特徴値の平均値と標準差を計算する工程と、
前記標準差により複数個の差異範囲を定義する工程と、及び
前記複数個の原始画素値における各原始画素に、前記原始画素値に対応する特徴値と前記平均値間の絶対差異値が前記複数個の差異範囲のどの差異範囲にあるかを判断し、これにより前記原始画素値に対応するウェート数値を発生させる工程と、を含み、
前記複数個の鮮明画素値を発生させる工程は、
前記複数個の原始画素値における各原始画素値に前記原始画素値を対応させるファジー画素値から減算し微細画素値を発生させる工程と、
前記微細画素値を前記原始画素値に対応するウェート数値を乗ずる工程と、及び
前記原始画素値を前記微細画素と前記ウェート数値の積に加算し、前記原始画素に対応する鮮明画素値を発生させる工程と、を含む
ことを特徴とする、信頼可能なイメージの鮮明化方法。
前記原始イメージブロックをファジーにし、前記複数個の原始イメージ画素値に対応する複数個のファジー画素値を発生させる工程は、ガウスマスクにより前記原始イメージブロックをファジーにし、前記複数個の原始イメージ画素値に対応する複数個のファジー画素値を発生する工程を含むことを特徴とする、請求項1に記載する信頼可能なイメージの鮮明化方法。
前記複数個の原始イメージ画素値に対応する複数個の特徴値を計算する工程は、前記複数個の原始画素値における各原始画素値に、複数個のマスクにより前記原始画素値を中心としてコンボリューション演算を行い、複数個のコンボリューション値を取る工程と、前記複数個のコンボリューション値により前記原始値に対応する特徴値を計算する工程とを含むことを特徴とする、請求項１に記載する信頼可能なイメージの鮮明化方法。
前記複数個のコンボリューション値により前記原始画素値に対応する特徴値を計算する工程は、前記複数個のコンボリューション値の平均値を計算し、前記複数個のコンボリューション値の平均値を前記原始画素値に対応する前記特徴値にする工程を含むことを特徴とする、請求項３に記載する信頼可能なイメージの鮮明化方法。
前記複数個のマスクは自由傾斜マスク、曲率マスク、鮮明マスク、ファジーマスクから構成されるグループから選択することを特徴とする、請求項３に記載する信頼可能なイメージの鮮明化方法。
前記複数個のマスクは水平傾斜マスク、垂直傾斜マスク、水平曲率マスク、垂直曲率マスク、鮮明マスク、ファジーマスクを含むことを特徴とする、請求項３に記載する信頼可能なイメージの鮮明化方法。
前記絶対差異値が前記複数個の差異範囲のどの差異範囲にあるかを判断し、これにより前記原始画素値に対応するウェート数値を発生させる工程は前記絶対差異値が前記複数個の差異範囲の第一差異範囲にあると、予め設定された第一ウェート数値により前記原始画素値に対応する前記ウェート数値とする工程と、前記絶対差異値が前記複数個の差異範囲の第二差異範囲にあり、予め設定された第二ウェート数値により前記原始画素値に対応する前記ウェート数値とする工程を含み、前記予め設定された第一ウェート数値は予め設定された第二ウェート数値と異なることを特徴とする、請求項１に記載する信頼可能なイメージの鮮明化方法。