JP2008310117A - 画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体 - Google Patents

Abstract

【課題】本発明は、画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体に関し、例えばディスプレイ装置等に適用して、従来に比して細部の質感を向上する。
【解決手段】本発明は、入力画像Ｓ１からテクスチャ成分Ｓ４を抽出、縮小して細テクスチャ成分Ｓ３を生成し、この細テクスチャ成分Ｓ３と入力画像Ｓ１とを画像合成する。
【選択図】 図１

Description

本発明は、画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体に関し、例えばディスプレイ装置等に適用することができる。本発明は、入力画像からテクスチャ成分を抽出、縮小して細テクスチャ成分を生成し、この細テクスチャ成分と入力画像とを画像合成することにより、従来に比して細部の質感を向上する。

従来、ディスプレイ装置等の各種映像機器では、輝度信号に含まれる高域成分、エッジ成分等を強調して画質を向上する方法が種々に提案されており、例えば特開平８−５６３１６号公報には、ノイズの増大を防止してコントラストを強調する方法が提案されている。

しかしながらこれらの従来手法では、表示画像のめりはり等を増大し得るものの、草花、木々の葉、岩肌等の細部の質感については向上できない問題がある。

特に、スケーリングにより、ＳＤＴＶ（Standard Definition Television）方式のビデオ信号をＨＤＴＶ（High Definition Television）方式のビデオ信号にフォーマット変換した場合には、これら草花、木々の葉、岩肌等の細部の質感が失われ、従来手法では、この細部の質感を向上できない問題がある。
特開平８−５６３１６号公報

本発明は以上の点を考慮してなされたもので、細部の質感を向上することができる画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体を提案しようとするものである。

上記の課題を解決するため請求項１の発明は、画像処理装置に適用して、入力画像からテクスチャ成分を抽出するテクスチャ抽出部と、前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成部と、前記細テクスチャ成分と前記入力画像とを画像合成するブレンド部と、前記ブレンド部における画像合成比率を設定するテクスチャ付加量制御部とを備えるようにする。

また請求項２の発明は、画像処理方法に適用して、入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備えるようにする。

また請求項１３の発明は、画像処理方法のプログラムに適用して、入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備えるようにする。

また請求項１４の発明は、画像処理方法のプログラムを記録した記録媒体に適用して、前記プログラムは、入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備えるようにする。

請求項１、請求項２、請求項１３又は請求項１４の構成により、入力画像から抽出したテクスチャ成分によるブロックを縮小して基本ブロックを作成し、この基本ブロックを元のブロックに繰り返し配置して細テクスチャ成分を生成し、この細テクスチャ成分と入力画像とを画像合成して出力画像を生成すれば、テクスチャ成分による空間周波数を増大させて細部の質感を向上させることができる。また画像合成比率の設定により、エッジ等における不都合な処理を回避することができる。

本発明によれば、細部の質感を向上することができる。

以下、適宜図面を参照しながら本発明の実施例を詳述する。

（１）実施例の構成
図１は、本発明の実施例１の画像処理装置を示すブロック図である。この映像信号処理装置１は、例えばディスプレイ装置等の各種映像機器に内蔵され、入力映像信号Ｓ１による入力画像の画質を向上して出力映像信号Ｓ２を出力する。なお以下においては、この映像信号処理装置１による処理系統を１系統とし、入力映像信号Ｓ１のうちの輝度信号のみをこの映像信号処理装置１で処理するものとして説明する。しかしながらこの画像処理装置による処理は、処理系統を３系統とし、輝度信号、色差信号を各系統で実行してもよく、また原色色信号、補色色信号を構成する各色信号を各系統で実行してもよい。

ここでこの実施例において、映像信号処理装置１は、所定のプログラムの実行により入力映像信号Ｓ１を処理するプロセッサにより構成され、この実施例ではこのプログラムが事前にインストールされて提供される。しかしながらこれに代えて光ディスク、磁気ディスク、メモリカード等の記録媒体に記録してプログラムを提供するようにしてもよく、インターネット等のネットワークを介したダウンロードによりプログラムを提供するようにしてもよい。またこれに代えて、映像信号処理装置１をハードウエアにより構成してもよい。

この映像信号処理装置１は、入力映像信号Ｓ１から草花、木々の葉、岩肌等の、背景、前景等の一様な部位における細部構造成分（以下、テクスチャ成分と呼ぶ）を抽出する。映像信号処理装置１は、この抽出したテクスチャ成分を縮小してより空間周波数の高い細テクスチャ成分Ｓ３を生成する。またこの細テクスチャ成分Ｓ３を元の入力映像信号Ｓ１に貼りつけるように画像合成し、これにより入力映像信号Ｓ１の細部の質感を向上して出力映像信号Ｓ２による出力画像を出力する。なおここでこの細部構造成分であるテクスチャ成分は、映像の各部を特徴付ける大規模構造の信号成分との相対的なものであり、これにより処理対象の入力映像信号によって、さらには入力映像信号による映像の各部で、周波数帯域が異なるものとなる。しかしながらこの実施例では特性を固定したフィルタにより入力映像信号から高域成分を抽出することにより、入力映像信号からテクスチャ成分を抽出する。

このため映像信号処理装置１において、テクスチャ生成部２は、入力映像信号Ｓ１から高域成分を抽出してテクスチャ成分を抽出し、この抽出したテクスチャ成分を縮小して細テクスチャ成分Ｓ３を生成する。すなわちテクスチャ生成部２において、テクスチャ抽出部３は、入力映像信号Ｓ１を二次元のローパスフィルタ（ＬＰＦ）４に入力し、ここで入力映像信号Ｓ１から低域成分を抽出する。テクスチャ抽出部３は、減算回路５において、この低域成分を入力映像信号Ｓ１から減算し、入力映像信号Ｓ１からテクスチャ成分Ｓ４を抽出する。

細テクスチャ生成部６は、このテクスチャ成分Ｓ４を縮小して細テクスチャ成分を生成する。すなわち図２に示すように、細テクスチャ生成部６において、タイリング部７は、入力画像を分割して形成されるブロック毎に、各ブロックのテクスチャ成分を縮小して基本ブロックを形成する。またこの基本ブロックを元のブロックに配置し直し、これによりテクスチャ成分Ｓ４を縮小して細テクスチャ成分Ｓ５を生成する。

より具体的に、タイリング部７は、例えば図３（Ａ）に示すように、水平方向及び垂直方向にそれぞれ８×２画素のブロックＢＬをテクスチャ成分Ｓ４に設定する。なお１つのブロックＢＬを構成する画素数は、必要に応じて種々に設定することができる。また入力画像を等分割する場合に限らず、例えば入力映像信号Ｓ１の平坦度等に応じて分割する大きさを可変するようにしてもよい。なおこのような平坦度に応じて分割する大きさを可変する場合としては、例えば平坦な部分程、ブロックの大きさを大きくすればよい。また輝度信号及び色差信号等の３系統により処理する場合は、各系統でブロックＢＬに境界が重なり合わないように、系統毎にブロックＢＬの位置をシフトさせてもよい。

タイリング部７は、ブロックＢＬ毎に、ブロックＢＬの中心部分ＢＬＡを切り出し、図３（Ｂ）に示すように、この切り出した部分ＢＬＡをスケーリングにより縮小して基本ブロックＢＢＬを形成する。タイリング部７は、入力映像信号Ｓ１の平坦度に応じて、又はテクスチャ成分Ｓ４の平坦度に応じて、この切り出す部分ＢＬＡの大きさを可変し、これにより画質を向上する。具体的には、平坦度が高い場合程、切り出す部分ＢＬＡを大きくする。なおこの図３（Ｂ）の例では、１６画素×１６画素のブロックＢＬの中心部分、水平方向及び垂直方向に８×ｎ／ｄ画素の部分ＢＬＡを切り出し、この切り出した部分ＢＬＡをスケーリングして８画素×８画素の基本ブロックＢＢＬを作成する。

タイリング部７は、図３（Ｃ）に示すように、この基本ブロックＢＢＬをそれぞれ元のブロックＢＬに配置し直し、細テクスチャ成分Ｓ５を生成する。

段差低減部８（図２）は、細テクスチャ成分Ｓ５における基本ブロックＢＢＬ間の段差を軽減して細テクスチャ成分Ｓ６を出力する。ここで図３（Ｄ）においてハッチングにより示すように、段差低減部８は、基本ブロックＢＢＬの境界に隣接する１画素においてのみ、ローパスフィルタの特性によるフィルタリング処理を実行し、これにより高域成分の劣化を極力低減してブロック境界の段差を軽減する。なお具体的に、符号Ｇ１により示す水平方向に延長する境界にのみに隣接する画素については、タップ係数が１、２、１の垂直方向のローパスフィルタによりフィルタリング処理を実行する。また符号Ｇ２により示す垂直方向に延長する境界にのみに隣接する画素については、タップ係数が１、２、１の水平方向のローパスフィルタによりフィルタリング処理を実行する。また符号Ｇ３により示す垂直方向及び水平方向に延長する境界に隣接する画素については、タップ係数が１、２、１の水平方向及び垂直方向のローパスフィルタによりフィルタリング処理を実行する。

差分拡散部９は、この段差低減部８から出力される細テクスチャ成分Ｓ６と元のテクスチャ成分Ｓ４との差分値を周辺画素に拡散させて細テクスチャ成分Ｓ７を生成する。すなわち差分拡散部９において、減算部１０は、段差低減部８から出力される細テクスチャ成分Ｓ６から元のテクスチャ成分Ｓ４を減算し、これにより次式により示す差分ｅｒｒを計算する。なおここで g（i,j ）は、位置（i,j ）の注目画素におけるテクスチャ成分Ｓ４の値であり、 f（i,j ）は、段差低減部８から出力される細テクスチャ成分Ｓ６の値である。

差分拡散部９は、図４に示す特性のFloyd & Steinberg のエラーフィルタ１１にこの差分ｅｒｒを入力し、減算回路１２において、段差低減部８から出力される細テクスチャ成分Ｓ６からこのエラーフィルタ１１の出力を減算する。これにより差分拡散部９は、次式により示すように、差分ｅｒｒを周辺画素に拡散する。なおこの差分値拡散用のフィルタは、Floyd & Steinberg のフィルタに限らず、種々のフィルタを適用することができる。

なおここで左辺のｆ（i+1,j ）、ｆ（i-1,j+1 ）、ｆ（i,j+1 ）、ｆ（i+1,j+1 ）は、位置（i,j ）の注目画素の差分ｅｒｒを差分拡散した後の隣接画素の細テクスチャ成分値であり、右辺のｆ（i+1,j ）、ｆ（i-1,j+1 ）、ｆ（i,j+1 ）、ｆ（i+1,j+1 ）は、差分拡散する前の隣接画素の細テクスチャ成分値である。なおこの注目画素と隣接画素との関係を図５に示す。

細テクスチャ生成部６は、段差低減部８から出力される誤差拡散処理前の細テクスチャ成分Ｓ６と、減算回路１２から出力される誤差拡散処理した細テクスチャ成分Ｓ７とをテクスチャ合成部１５に出力する（図１）。

テクスチャ合成部１５は、テクスチャ付加量制御部１６から出力されるテクスチャ度texness 、texness _tiling 、変動ゲインｇ_fluct を用いて、次式の演算処理を実行し、細テクスチャ成分Ｓ６及びＳ７を合成して細テクスチャ成分Ｓ３を生成する。ここでTex _{no err diff}は、誤差拡散処理前の細テクスチャ成分Ｓ６の値であり、Tex _{err diff} は、誤差拡散処理した細テクスチャ成分Ｓ７の値である。またテクスチャ度texness 、texness _tiling は、それぞれ細テクスチャ成分Ｓ６及びＳ７について、テクスチャ成分である確からしさを示すパラメータである。また変動ゲインｇ_fluct は、基本ブロックの連続による違和感を防止するための利得であり、この実施例では入力映像信号Ｓ１の高域成分量に応じて生成される。またmin （Ａ，Ｂ）は、Ａ及びＢから値の小さい側を選択する関数である。

これによりテクスチャ合成部１５は、誤差拡散していない細テクスチャ成分Ｓ６の成分量と、誤差拡散した細テクスチャ成分Ｓ６の成分量とを相補的に変化させて、これら細テクスチャ成分Ｓ６及びＳ７を合成し、より処理に適した細テクスチャ成分Ｓ６、Ｓ７により細テクスチャ成分Ｓ３（synthesized tex.）を出力する。具体的に、テクスチャ合成部１５は、草花、木々の葉、岩肌等の細部構造の部位では、誤差拡散していない細テクスチャ成分Ｓ６の成分量を増大させ、各種被写体間の境界、エッジでは誤差拡散した細テクスチャ成分Ｓ７の成分量を増大させる。

ブレンド部１７は、利得tex gain、テクスチャ付加量制御部１６から出力されるブレンド比αにより、次式の演算処理を実行し、テクスチャ生成部２から出力される細テクスチャ成分Ｓ３を入力映像信号Ｓ１に貼り付けるように、これら細テクスチャ成分Ｓ３（texure）、入力映像信号Ｓ１（in）を合成して映像信号Ｓ９（out ）を出力する。なおここで利得tex gainは、この映像信号処理装置１における処理の程度を指示するパラメータであり、この実施例ではユーザーの操作により入力する。しかしながら例えばアニメ、映画等の入力映像信号Ｓ１の属性に応じて、また入力映像信号Ｓ１のオリジナルのソースがＳＤＴＶによるものかＨＤＴＶによるものか等に応じて、さらには平坦度等の入力映像信号Ｓ１の解析により、自動的に設定してもよい。

ピーク検波部１８は、ブレンド部１７から出力される映像信号Ｓ９を入力し、隣接画素からの輝度レベルの立ち上がり量を検出する。すなわち図６に示すように、ピーク検波部１８は、周辺画素ｕｌ〜ｕｒ、ｌ、ｒ、ｂｌ〜ｂｒのうちで最も輝度値の高い画素を検出し、注目画素Ｃの輝度値から減算して減算値を出力する。

ピーク抑圧部１９は、ピーク検波部１８で検出した減算値を所定のしきい値で判定し、周辺画素より輝度値が急激に立ち上がる注目画素を検出する。ピーク抑圧部１９は、この周辺画素より輝度値が急激に立ち上がる注目画素に対して、２次元のローパスフィルタを適用して輝度値を立ち下げ、これにより画素単位で局所的に立ち上がった輝度値を抑圧して出力映像信号Ｓ２を出力する。なおこの局所的に立ち上がった輝度値の抑圧は、例えば周辺画素の何れかの画素値と置き換える場合等、種々の手法を適用することができる。

テクスチャ付加量制御部１６は、入力映像信号Ｓ１の処理により、テクスチャ度texness 、texness _tiling 、変動ゲインｇ_fluct 、ブレンド比αを計算して出力する。すなわち図７に示すように、テクスチャ付加量制御部１６において、変動ゲイン計算部２０は、入力映像信号Ｓ１を処理して変動ゲインｇ_fluct を出力する。ここで図８に示すように、変動ゲイン計算部２０は、入力映像信号Ｓ１をローパスフィルタ（ＬＰＦ）２１に入力して低域成分を抽出し、減算回路２２において、入力映像信号Ｓ１からこの低域成分を減算して入力映像信号Ｓ１の高域成分を検出する。

ゲイン設定部２３は、この高域成分の信号レベルを判定して、図９に示すように、ローパスフィルタ２１の出力値に対する入力映像信号Ｓ１の信号レベルが上限値fluct diff max及び下限値-fluct diff minの範囲では、減算回路２２の出力値に比例して利得が増大するように、またこの上限値fluct diff max及び下限値-fluct diff minの範囲外では、それぞれ上限値fluct gain max及び下限値fluct gain minとなるように変動ゲインｇ_fluct を設定する。なお変動ゲインｇ_fluct は、要は、連続する基本ブロックにおける画素値の変化が自然画における画素値の変化に近づくように、画素値を微妙に変化させるものである。従って変動ゲインｇ_fluct は、この図９に示す特性により生成する場合に限らす、入力映像信号Ｓ１の高域成分量、信号レベル等に応じて種々に生成することができ、例えば図９において破線により示すように、上限値fluct diff max及び下限値-fluct diff minの間で折り返すような特性により設定してもよい。

勾配解析部２５は、入力映像信号Ｓ１を処理して、輝度勾配行列の固有値λ１、λ２を計算し、これにより注目画素のエッジらしさを示すパラメータを検出する。すなわち勾配解析部２５は、入力映像信号Ｓ１の画素毎に、画素値の勾配が最も大きなエッジ勾配方向、このエッジ勾配方向と直交するエッジ方向を検出する。

ここで図１０に示すように、勾配解析部２５は、注目画素を中心とした範囲Ｗにおける画素値を用いた演算処理により、次式により表される輝度勾配の行列Ｇを画素毎に生成する。なおここで図１０は、注目画素を中心にしたｘ方向及びｙ方向の±３画素をこの範囲Ｗに設定した例である。

なおここでｗ(i,j) は、（６）式により表されるガウス型の重みであり、ｇは、画像輝度Ｉのｘ方向の偏微分ｇx と、画像輝度Ｉのｙ方向の偏微分ｇy とにより（７）式で表される輝度勾配である。

これにより勾配解析部２５は、注目画素を中心とした所定範囲Ｗについて、注目画素を基準にして重み付け処理してなる輝度勾配を検出する。

勾配解析部２５は、輝度勾配の行列Ｇを処理することにより、図１１に示すように、注目画素において、画素値の勾配が最も大きい方向であるエッジ勾配方向ｖ１、このエッジ勾配方向ｖ１に直交する方向であるエッジ方向ｖ２について、それぞれ画素値の勾配の分散を示す固有値λ１、λ２を検出する。

具体的に、勾配解析部２５は、次式の演算処理により、固有値λ１、λ２（λ１≧λ２）を検出する。

但し、ａは、次式による。

テクスチャ度計算部２６は、図１２に示すように、値１で飽和する特性によりエッジ勾配方向ｖ１の固有値λ１の値が小さくなるに従って値が増大するコントラストのパラメータｆを計算する。ここでこのエッジ勾配方向ｖ１の固有値λ１の値が大きい場合には、画素値の勾配が最も大きい方向において、この画素値の勾配が大きい場合であることから、注目画素は、コントラストの強い部位であると言える。従ってこの注目画素は、草花、木々の葉、岩肌等の細部構造に係る部位である確率が低いと言え、テクスチャ度が低いと言える。従ってテクスチャ度計算部２６は、この場合、この固有値λ１が増大するに従って値が値１から値０に近づくように、コントラストのパラメータｆを計算する。

またテクスチャ度計算部２６は、図１３に示すように、エッジ勾配方向ｖ１と直交する方向ｖ２の固有値λ２をエッジ勾配方向ｖ１の固有値λ１を割り算して割り算値λ２／λ１を計算する。テクスチャ度計算部２６は、この割り算値λ２／λ１が所定値ａｖｅで値１のピーク値となり、この割り算値λ２／λ１がこの所定値から値が遠ざかるに従って値が減少するようにエッジ揃い度のパラメータｇを生成する。

ここでこの割り算値λ２／λ１は、注目画素がエッジの場合であって、方向がそろっている場合程、値が小さくなる。またノイズ成分が多くなり、エッジが交差しているような場合には、これとは逆に値が大きくなる。これにより割り算値λ２／λ１の値が著しく小さい場合、著しく大きい場合、この注目画素は、草花、木々の葉、岩肌等の細部構造に係る部位である確率が低いと言え、テクスチャ度が低いと言える。これによりテクスチャ度計算部２６は、割り算値λ２／λ１より細部構造に係る部位である確率が増大するに従って値が値０から値１に近づくようにエッジ揃い度のパラメータｇを計算する。

テクスチャ度計算部２６は、この２つのパラメータｆ及びｇを乗算してテクスチャ度texness を出力する。

タイリング部２７は、タイリング部７と同一に、このテクスチャ度texness を処理し、タイリング部７から出力される細テクスチャ成分Ｓ５に対応するテクスチャ度texness _tiling を出力する。なおこの場合、画像勾配部、テクスチャ計算部を別途設け、この画像勾配部、テクスチャ計算部でタイリング部７から出力される細テクスチャ成分Ｓ５又は段差低減部８から出力される細テクスチャ成分Ｓ６を処理してテクスチャ度texness _tiling を求めるようにしてもよい。

タイリング部２８は、タイリング部７と同一に、勾配解析部２５から出力される固有値λ１、λ２を処理して、タイリング部７から出力される細テクスチャ成分Ｓ５に対応する固有値λ１ｔ、λ２ｔを計算する。なおこの場合に、タイリング部２７について上述したと同様に、画像勾配部を別途設け、タイリング部７から出力される細テクスチャ成分Ｓ５又は段差低減部８から出力される細テクスチャ成分Ｓ６を処理して、細テクスチャ成分Ｓ５に対応する固有値λ１ｔ、λ２ｔを計算してもよい。

エッジ解析部２９は、これらのλ１、λ２、λ１ｔ、λ２ｔを処理して、エッジである可能性が高くなるに従って値が減少するエッジによる重み付け係数α_type-Eを生成する。すなわちエッジ解析部２９は、図１４に示すように、固有値λ１に基づいて、値１から値０の範囲で、エッジ勾配方向ｖ１にコントラストが高くなってエッジである確率が高くなるに従って値の増大するパラメータＳを生成する。また図１５に示すように、固有値λ２及びλ１の割り算値λ２／λ１に基づいて、輝度勾配が揃ってエッジである確率が高くなるに従って値の増大するパラメータｔを生成する。エッジ解析部２９は、これら固有値λ１及びλ２から生成したパラメータＳ及びｔを乗算して、入力映像信号Ｓ１における注目画素のエッジらしさを示すパラメータedgness を生成する。

また同様に、細テクスチャ成分Ｓ５に対応する固有値λ１ｔ、λ２ｔを処理して、細テクスチャ成分Ｓ５における注目画素のエッジらしさを示すパラメータedgnesst_tileを生成する。

エッジ解析部２９は、この２つのパラメータedgness 、edgnesst_tileを次式の演算処理により処理し、エッジ等の部位で映像信号Ｓ９における細テクスチャ成分Ｓ３の成分量が低下するようにエッジによる重み付け係数α_type-Eを生成する。

アクティビティ計算部３０は、入力映像信号Ｓ１を次式の演算処理により処理し、近傍画素との間の差分絶対値act(x,y)を計算する。なおここでd(x,y)は、位置(x,y) の注目画素における画素値である。またd(x+1,y)、d(x,y+1)は、水平方向及び垂直方向の隣接画素の画素値である。

アクティビティ計算部３０は、注目画素毎に、注目画素を中心にして水平方向及び垂直方向にｍ画素及びｎ画素の領域を設定し、次式の演算処理によりこの差分絶対値act(x,y)を処理し、これによりアクティビティact _{blk raw} 、このアクティビティact _{blk raw} を領域内の最大値act _max 及び最小値act _min の差分値act _max −act _min で正規化した正規化アクティビティact _{blk norm}を計算する。なおΣの範囲は、このｍ画素及びｎ画素の領域である。

タイリング部３１は、タイリング部７と同一に、アクティビティ計算部３０で求めたアクティビティact _{blk raw} を処理し、タイリング部７から出力される細テクスチャ成分Ｓ５に対応するアクティビティact _{tile raw}を計算する。なおこの場合に、タイリング部２７について上述したと同様に、画像勾配部、アクティビティ計算部を別途設け、タイリング部７から出力される細テクスチャ成分Ｓ５又は段差低減部８から出力される細テクスチャ成分Ｓ６を処理して、アクティビティact _{tile raw} を計算してもよい。

アクティビティ解析部３２は、アクティビティ計算部３０で求めた正規化アクティビティact _{blk norm} を入力し、図１６に示すように、値１から値０の範囲で、正規化アクティビティact _{blk norm} の値の増大に従って値の増大するパラメータα_{act norm}を生成する。これによりアクティビティ解析部３２は、アクティビティが増大するに従って値の増大するパラメータα_{act norm}を生成する。

またアクティビティ解析部３２は、アクティビティact _{tile raw} をアクティビティact _{blk raw} で割り算し、図１７に示すように、値１から値０の範囲で、割り算値の増大により値が減少するパラメータα_{act ratio} を生成する。ここでアクティビティを検出する領域に、エッジ、孤立点等が存在する場合、この割り算値は、値が増大することになる。これに対してこのようなエッジ、孤立点等が存在せず、領域内における画素値の変動が一様である場合、この画素値の変動に係る周波数成分に応じて、この割り算値は、値１より小さな値になる。これによりアクティビティ解析部３２は、周囲にエッジ、孤立点等が存在する確率が増大するに従って値の小さくなるパラメータα_{act ratio} を生成する。

アクティビティ解析部３２は、このようにして計算した２つのパラメータα_{act norm}、α_{act ratio} を乗算し、これにより画素値の変動が一定である部位で映像信号Ｓ９において細テクスチャ成分Ｓ３の割合が増大するように、アクティビティによる重み付け係数α_activityを出力する。

アクティビティ比計算部３３は、次式の演算処理により、注目画素のアクティビティact _{tile raw} を、基本ブロック内における各画素のアクティビティact _{tile raw} の平均値で割り算し、アクティビティの比率ratio _{pix vs blk}を計算する。

アクティビティ比解析部３４は、このアクティビティの比率ratio _{pix vs blk}を入力し、図１８に示すように、値１から値０の範囲で、この比率ratio _{pix vs blk}の増大により値が減少する重み付け係数α_{pix vs blk}を生成する。ここでこの比率ratio _{pix vs blk}は、基本ブロック内に、異質のテクスチャ成分が存在する場合に、値が大きくなる。具体的には、草花の細部構造に係る部位と岩等の細部構造に係る部位とが混在する場合等である。これによりアクティビティ比解析部３４は、異質のテクスチャ成分が存在する確率が増大するに従って値の小さくなる重み付け係数α_{pix vs blk}を生成し、画素値の変動が一定である部位で映像信号Ｓ９において細テクスチャ成分の割合が増大するように、重み付け係数α_{pix vs blk}を生成する。

乗算回路３５は、次式の演算処理により、エッジ解析部２９、アクティビティ解析部３２、アクティビティ比解析部３４で求めた重み付け係数α_type-E、α_activity、α_{pix vs blk}を乗算し、ブレンド比αを求める。

（２）実施例の動作
以上の構成において、入力映像信号Ｓ１は（図１）、テクスチャ抽出部３において高域成分が抽出されて、草花、木々の葉、岩肌等の細部構造成分であるテクスチャ成分が抽出される。ここでこのようにして抽出される高域成分は、例えば背景、前景等の色、輝度がほぼ一様な部位であっても、自然画においては、微妙に変動しており、この微妙な変動により自然画では草花、木々の葉、岩肌等の細部の質感が表現される。

従ってこのテクスチャ成分が劣化している場合には、草花、木々の葉、岩肌等の細部の質感が乏しいものとなる。この質感の向上にあっては、高域成分の強調によりある程度は改善できるものの、これら草花、木々の葉、岩肌等の細部構造に係る周波数成分自体が欠落している場合には、単にノイズ量のみ増大して何ら質感を向上できないことになる。

特に、スケーリングにより、ＳＤＴＶ方式のビデオ信号をＨＤＴＶ方式のビデオ信号にフォーマット変換した場合等には、解像度の増大により相対的にこれら質感に係る高域成分が欠落することになり、質感が著しく損なわれることになる。

そこでこの実施例では、細テクスチャ生成部６において（図２及び図３）、このテクスチャ成分Ｓ４が、ブロックＢＬＡ毎に縮小されて基本ブロックＢＢＬが生成される。またこの基本ブロックＢＢＬが元のブロックＢＬに繰り返し貼り付けられて、元のテクスチャ成分Ｓ４に対して空間周波数を増大した細テクスチャ成分Ｓ５が生成される。またこの細テクスチャ成分Ｓ５が段差低減部８、テクスチャ合成部１５等により処理されて細テクスチャ成分Ｓ３が生成され、この細テクスチャ成分Ｓ３が元の入力映像信号Ｓ１と画像合成される。これによりこの映像信号処理装置１では、草花、木々の葉、岩肌等の細部構造に係る周波数成分自体が欠落している場合であっても、この欠落した成分を補うように、高域成分の空間周波数を増大させることができ、これにより細部の質感を向上することができる。

しかしながらこのように基本ブロックＢＢＬの繰り返しにより細部の質感を向上する場合、草花、木々の葉等の細部構造以外のエッジ成分等についても、同様に処理することになり、これにより種々の不都合が発生する。

そこでこの映像信号処理装置１では、入力映像信号Ｓ１と細テクスチャ成分Ｓ３との画像合成比率をテクスチャ付加量制御部１６により制御し、これによりエッジ等における不都合な処理を回避して質感を向上する。

より具体的に、この映像信号処理装置１では、タイリング部７において細テクスチャ成分を生成する際に（図３）、ブロックＢＬの中央部分ＢＬＡを選択的に縮小して基本ブロックＢＢＬを作成する。すなわち単にブロックＢＬを縮小して基本ブロックＢＢＬを作成したのでは、基本ブロックＢＢＬの繰り返しにより違和感が発生するのに対し、このようにブロックＢＬの中央部分ＢＬＡを選択的に縮小して基本ブロックＢＢＬを作成すれば、より自然画に感じを近づけることができることが判った。これによりこの映像信号処理装置１では、自然な感じにより質感を向上することができる。

またこの中央部分ＢＬＡは、平坦度等に応じて大きさが変化するように設定される。ここでこの大きさの変化は、結局、基本ブロックＢＢＬを作成する際の縮小率の変化であることから、細テクスチャ成分で増大させる空間周波数を変化させることになる。これにより平坦度に応じてこの中央部分ＢＬＡの大きさを変化させることにより、過不足なく空間周波数を増大させて高域を強調することができ、これによっても自然な感じにより質感を向上することができる。

また段差低減部８において、このタイリング部７で生成された細テクスチャ成分Ｓ５がフィルタリング処理され、細テクスチャ成分Ｓ５における基本ブロックＢＢＬ間の段差が抑圧される。これによりこの映像信号処理装置１では、基本ブロックＢＢＬの繰り返しに係る周期成分が見て取られないようにすることができ、この周期成分による違和感を有効に回避することができる。この処理において段差低減部８では、基本ブロックＢＢＬの境界に隣接画素についてのみフィルタリング処理して段差を抑圧し、これにより高域成分の低減を極力防止して段差が抑圧される（図３）。

また続く差分拡散部９において、元のテクスチャ成分Ｓ４との間の差分ｅｒｒが、注目画素の周辺画素に拡散される。これにより基本ブロックＢＢＬの繰り返しにより空間周波数を増大させて、元のテクスチャ成分Ｓ４に対して著しく画素値が相違しないように、画素値を補正して細テクスチャ成分Ｓ７が生成される。これによりこの差分を拡散した細テクスチャ成分Ｓ７にあっては、このように基本ブロックＢＢＬの繰り返しにより作成した場合であっても、元のテクスチャ成分Ｓ４における画素値の変化傾向を有し、これによっても違和感を防止して自然な感じで質感を向上することができる。

この映像信号処理装置１では、この差分を拡散した細テクスチャ成分Ｓ７と元の細テクスチャ成分Ｓ６とがテクスチャ合成部１５で合成される。この合成の処理において、テクスチャ度texness 、texness _tiling に応じて合成比率を可変することにより、例えば草花、木々の葉等の細部構造の部分については、元の細テクスチャ成分Ｓ６が増大するように、エッジ等の部分にあっては、差分を拡散した細テクスチャ成分Ｓ７が増大するように、これら細テクスチャ成分Ｓ６及びＳ７を合成して違和感無く質感を向上することができる。

また変動ゲインｇ_fluct により利得を可変し、連続する基本ブロックにおける画素値の変化が自然画における画素値の変化に近づくようにすることができ、これによっても違和感無く質感を向上することができる。

これに対してテクスチャ付加量制御部１６において（図７）、入力映像信号Ｓ１は、勾配解析部２５において、画素値の勾配が最も大きなエッジ勾配方向ｖ１、このエッジ勾配方向ｖ１と直交するエッジ方向ｖ２が検出され、この勾配方向ｖ１及びｖ２について、それぞれ画素値の勾配の分散を示す固有値λ１、λ２が検出される（図１０及び図１１）。またこの固有値λ１、λ２がタイリング部２８で処理され、タイリング部７から出力される細テクスチャ成分Ｓ５に対応する固有値λ１ｔ、λ２ｔが求められる。これにより入力映像信号Ｓ１は、画素毎にエッジらしさを示すパラメータλ１、λ２、λ１ｔ、λ２ｔが検出される。

入力映像信号Ｓ１は、これらのパラメータλ１、λ２、λ１ｔ、λ２ｔのうちのパラメータλ１、λ２がテクスチャ度計算部２６、タイリング部２７で順次処理され（図１２、図１３）、テクスチャ度texness 、texness _tiling が求められる。

またパラメータλ１、λ２、λ１ｔ、λ２ｔがエッジ解析部２９において処理され（図１４、図１５）、エッジの部位で細テクスチャ成分Ｓ３の割合が低下するように重み付け係数α_type-Eが生成され、この重み付け係数α_type-Eによりブレンド部１３における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの映像信号処理装置１では、エッジの部分では、入力映像信号Ｓ１の割合を増大させて、エッジ等の部分では基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

また入力映像信号Ｓ１は、アクティビティ計算部３０において、アクティビティが求められ、このアクティビティがタイリング部３１で処理されて、タイリング部７から出力される細テクスチャ成分Ｓ５に対応するアクティビティが求められる。入力映像信号は、これらのアクティビティがアクティビティ解析部３２で処理され（図１６、図１７）、画素値の変動が一定である部位で細テクスチャ成分Ｓ３の割合が増大するように、アクティビティによる重み付け係数α_activityが生成され、この重み付け係数α_activityによりブレンド部１７における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの実施例では、エッジ、孤立点等では、基本ブロックの繰り返しにより高域成分を強調しないようにしすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

また入力映像信号Ｓ１は、アクティビティ比計算部３３において、入力映像信号Ｓ１のアクティビティと細テクスチャ成分Ｓ５に対応するアクティビティとの比率が求められ、続くアクティビティ比解析部３４において、この比率に基づいて、画素値の変動が一定である部位で細テクスチャ成分の割合が増大するように、重み付け係数α_{pix vs blk}が生成され（図１８）、この重み付け係数α_{pix vs blk}によりブレンド部１７における細テクスチャ成分Ｓ３と入力映像信号Ｓ１との合成比率が設定される。これによりこの実施例では、基本ブロック内に、異質のテクスチャ成分が存在する場合には、基本ブロックの繰り返しにより高域成分を強調しないようにしすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

入力映像信号Ｓ１は、これらの重み付け係数α_type-E、α_activity、α_{pix vs blk}によりブレンド部１７において細テクスチャ成分Ｓ３と画像合成されて映像信号Ｓ９が生成される。ここでこのように各種のパラメータの検出により合成比率を可変し、さらには細テクスチャ成分Ｓ３の作成手法を工夫しても、このブレンド部１７から出力される映像信号Ｓ９には、著しく輝度レベルの増大した画素が点状に分布し、これにより画質の劣化が知覚される。

そこで映像信号処理装置１では、続くピーク検波部１８において、近傍画素より輝度値が立ち上がっている画素が検出される。またこの検出結果に基づいて、続くピーク抑圧部１９において、輝度値の立ち上がりが抑圧される。これによりこの映像信号処理装置１では、著しく輝度レベルの増大した画素の点状の分布を防止し、画質の劣化が防止される。

（３）実施例の効果
以上の構成によれば、入力画像から高域成分を抽出、縮小して細テクスチャ成分を生成し、この細テクスチャ成分と入力画像とを画像合成することにより、従来に比して細部の質感を向上することができる。

また高域成分を抽出、縮小する際に、ブロックの中央部分を選択的に縮小して基本ブロックを作成することにより、より自然画に近づくように細テクスチャ成分を生成することができ、これにより自然な感じにより質感を向上することができる。

またフィルタリング処理により、細テクスチャ成分における基本ブロック間の段差を抑圧することにより、基本ブロックの周期成分による違和感を有効に回避することができる。

また高域成分に対する細テクスチャ成分の差分値を周辺画素に拡散させることにより、元のテクスチャ成分における画素値の変化を細テクスチャ成分に反映させることができ、これによっても違和感を防止して自然な感じにより質感を向上することができる。

またこの差分を拡散した細テクスチャ成分と元の細テクスチャ成分とを合成して処理することにより、合成比率の制御によって、例えば草花、木々の葉等の細部構造の部分については、元の細テクスチャ成分が増大するように、エッジ等の部分にあっては、差分を拡散した細テクスチャ成分が増大するように、これら細テクスチャ成分を合成して違和感無く質感を向上することができる。

具体的に、テクスチャである確からしさ示すテクスチャ度に応じて、合成比率を可変することにより、違和感無く質感を向上することができる。

また利得を変動させて、この利得により細テクスチャ成分を補正することにより、画素値の変化が自然画における画素値の変化に近づくようにすることができ、これによっても違和感無く質感を向上することができる。

また入力画像から注目画素のエッジらしさを示すパラメータを検出し、エッジの部位で細テクスチャ成分の割合が低下するように、画像合成比率を設定することにより、エッジ等の部分では基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

また入力画像のアクティビティを検出し、画素値の変動が一定である部位で細テクスチャ成分の割合が増大するように画像合成比率を設定することにより、エッジ、孤立点等では、基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

また入力画像のアクティビティと、細テクスチャ成分のアクティビティとの比率を計算し、この比率により、画素値の変動が一定である部位で細テクスチャ成分の割合が増大するように画像合成比率を設定することにより、異質のテクスチャ成分が存在する場合には、基本ブロックの繰り返しにより高域成分を強調しないようにすることができ、これにより画質の劣化を有効に回避して質感を向上することができる。

また出力画像における輝度値のピークを抑圧することにより、著しく輝度レベルの増大した画素の点状の分布を防止し、これにより画質の劣化を防止することができる。

なお上述の実施例においては、単に入力映像信号から高域成分を抽出してテクスチャ成分を抽出する場合について述べたが、本発明はこれに限らず、高域成分を抽出するフィルタの特性を動的に可変してテクスチャ成分を抽出する場合等、テクスチャ成分の抽出手法は種々の手法を広く適用することができる。

すなわち草花、木々の葉、岩肌等の、背景、前景等の一様な部位における細部構造成分にあっては、例えばズームアウトした映像では、著しく周波数の高い高域成分となるのに対し、ズームインした映像では、低い周波数帯域にまで分布するようになる。これにより例えば、画素値の変動の小さな比較的平坦な部位では、低い周波数成分までも抽出するようにしてテクスチャ成分を抽出することができる。またこれとは逆に画素値の変動の大きな部位では、高い周波数帯域の成分を抽出してテクスチャ成分を抽出することができる。

これにより例えば入力映像信号を各部で周波数解析し、周波数スペクトラムの分布に応じてフィルタのカットオフ周波数を各部で切り換えてテクスチャ成分を抽出する場合、色相、輝度値、平坦度等により各部の属性を判定し、この属性によりフィルタのカットオフ周波数を各部で切り換えてテクスチャ成分を抽出する場合等、フィルタの特性を動的に可変してテクスチャ成分を抽出するようにして一段と質感を向上することができる。

また上述の実施例においては、入力映像信号を処理することにより、動画像による入力画像を処理する場合について述べたが、本発明はこれに限らず、静止画像を処理する場合にも広く適用することができる。

また上述の実施例においては、本発明をディスプレイ装置に適用する場合について述べたが、本発明はこれに限らず、各種映像信号の記録再生装置、処理装置、編集装置、処理プログラム等に広く適用することができる。

本発明は、例えばディスプレイ装置等の映像機器に適用することができる。

本発明の実施例の映像信号処理装置を示すブロック図である。 図１の細テクスチャ生成部を示すブロック図である。 図２のタイリング部の動作の説明に供する略線図である。 図２の差分拡散部のエラーフィルタを示す略線図である。 図２の差分拡散部の動作の説明に供する略線図である。 図１のピーク抑圧部の説明に供する略線図である。 図１のテクスチャ付加量制御部を示すブロック図である。 図７の変動ゲイン部を示すブロック図である。 図８の変動ゲイン部の動作の説明に供する特性曲線図である。 図７の勾配解析部の動作の説明に供する略線図である。 図１０の続きの説明に供する略線図である。 図７のテクスチャ度計算部の動作の説明に供する略線図である。 図１２の続きの説明に供する略線図である。 図７のエッジ解析部の動作の説明に供する略線図である。 図１４の続きの説明に供する略線図である。 図７のアクティビティ解析部の動作の説明に供する略線図である。 図１６の続きの説明に供する略線図である。 図７のアクティビティ比解析部の動作の説明に供する略線図である。

符号の説明

１……映像信号処理装置、２……テクスチャ生成部、３……テクスチャ抽出部、６……細テクスチャ生成部、７、２７、２８、３１……タイリング部、８……段差低減部、９……差分拡散部、１５……テクスチャ合成部、１６……テクスチャ付加量制御部、１７……ブレンド部、１８……ピーク検波部、１０……ピーク抑圧部、２０……変動ゲイン部、２５……勾配解析部、２６……テクスチャ度計算部、２９……エッジ解析部、３０……アクティビティ計算部、３２……アクティビティ解析部、３３……アクティビティ比計算部、３４……アクティビティ比解析部

Claims (14)

1. 入力画像からテクスチャ成分を抽出するテクスチャ抽出部と、
   前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成部と、
   前記細テクスチャ成分と前記入力画像とを画像合成するブレンド部と、
   前記ブレンド部における画像合成比率を設定するテクスチャ付加量制御部とを備える
   ことを特徴とする画像処理装置。
2. 入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
   前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
   前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
   前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
   ことを特徴とする画像処理方法。
3. 前記細テクスチャ生成ステップは、
   前記ブロックの中央部分を選択的に縮小して前記基本ブロックを作成する
   ことを特徴とする請求項１に記載の画像処理方法。
4. 前記細テクスチャ生成ステップは、
   前記細テクスチャ成分のフィルタリング処理により、前記細テクスチャ成分における前記基本ブロック間の段差を抑圧する段差抑圧ステップを有する
   ことを特徴とする請求項２に記載の画像処理方法。
5. 前記細テクスチャ生成ステップは、
   前記テクスチャ成分に対する前記細テクスチャ成分の差分値を周辺画素に拡散させる差分拡散ステップを有する
   ことを特徴とする請求項２に記載の画像処理方法。
6. 前記細テクスチャ生成ステップは、
   前記テクスチャ成分に対する前記細テクスチャ成分の差分値を周辺画素に拡散させる差分拡散ステップと、
   前記細テクスチャ成分に、前記差分拡散ステップにより差分拡散した前記細テクスチャ成分を合成する合成ステップを有し、
   前記ブレントステップで処理する前記細テクスチャ成分が、前記合成ステップで合成した前記細テクスチャ成分である
   ことを特徴とする請求項２に記載の画像処理方法。
7. 前記合成ステップは、
   テクスチャである確からしさを示すテクスチャ度に応じて、合成比率を可変する
   ことを特徴とする請求項６に記載の画像処理方法。
8. 前記細テクスチャ生成ステップは、
   変動する利得を前記細テクスチャ成分に乗算して出力する
   ことを特徴とする請求項２に記載の画像処理方法。
9. 前記テクスチャ付加量制御ステップは、
   前記入力画像から注目画素のエッジらしさを示すパラメータを検出するエッジ検出ステップと、
   前記エッジ検出ステップで検出したパラメータを解析して、エッジの部位で前記細テクスチャ成分の割合が低下するように、前記画像合成比率を設定するエッジ解析ステップとを有する
   ことを特徴とする請求項２に記載の画像処理方法。
10. 前記テクスチャ付加量制御ステップは、
    前記入力画像のアクティビティを検出するアクティビティ検出ステップと、
    前記アクティビティを解析して、画素値の変動が一定である部位で前記細テクスチャ成分の割合が増大するように、前記画像合成比率を設定するアクティビティ解析ステップとを有する
    ことを特徴とする請求項２に記載の画像処理方法。
11. 前記テクスチャ付加量制御ステップは、
    前記入力画像のアクティビティを検出するアクティビティ検出ステップと、
    前記細テクスチャ成分のアクティビティを検出する細テクスチャ成分のアクティビティ検出ステップと、
    前記入力画像のアクティビティと、前記細テクスチャ成分のアクティビティとの比率を計算するアクティビティ比計算ステップと、
    前記比率により、前記画素値の変動が一定である部位で前記細テクスチャ成分の割合が増大するように、前記画像合成比率を設定するアクティビティ比解析ステップとを有する
    ことを特徴とする請求項２に記載の画像処理方法。
12. 前記出力画像における画素値のピークを抑圧するピーク抑圧ステップを有する
    ことを特徴とする請求項２に記載の画像処理方法。
13. 入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
    前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
    前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
    前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
    ことを特徴とする画像処理方法のプログラム。
14. 画像処理方法のプログラムを記録した記録媒体において、
    前記プログラムは、
    入力画像からテクスチャ成分を抽出するテクスチャ抽出ステップと、
    前記入力画像を分割して形成されるブロック毎に、前記テクスチャ成分によるブロックを縮小して基本ブロックを作成し、前記基本ブロックを前記ブロックに繰り返し配置することにより、前記テクスチャ成分の空間周波数を増大させた細テクスチャ成分を生成する細テクスチャ生成ステップと、
    前記細テクスチャ成分と前記入力画像とを画像合成して出力画像を生成するブレンドステップと、
    前記ブレンドステップにおける画像合成比率を設定するテクスチャ付加量制御ステップとを備える
    ことを特徴とする画像処理方法のプログラムを記録した記録媒体。
    

Images