JP4379851B2 - カラー中間調処理方法及び装置、記録媒体 - Google Patents
カラー中間調処理方法及び装置、記録媒体 Download PDFInfo
- Publication number
- JP4379851B2 JP4379851B2 JP2001180974A JP2001180974A JP4379851B2 JP 4379851 B2 JP4379851 B2 JP 4379851B2 JP 2001180974 A JP2001180974 A JP 2001180974A JP 2001180974 A JP2001180974 A JP 2001180974A JP 4379851 B2 JP4379851 B2 JP 4379851B2
- Authority
- JP
- Japan
- Prior art keywords
- color
- block
- output
- average
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/46—Colour picture communication systems
- H04N1/52—Circuits or arrangements for halftone screening
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/40—Picture signal circuits
- H04N1/405—Halftoning, i.e. converting the picture signal of a continuous-tone original into a corresponding signal showing only two levels
- H04N1/4051—Halftoning, i.e. converting the picture signal of a continuous-tone original into a corresponding signal showing only two levels producing a dispersed dots halftone pattern, the dots having substantially the same size
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Image Processing (AREA)
- Color Image Communication Systems (AREA)
- Color, Gradation (AREA)
Description
【発明の属する技術分野】
本発明は、カラー中間調処理(halftoning)の分野に係り、特に、カラー中間調処理へのブロック量子化技術の応用に関する。
【0002】
【従来の技術】
カラー中間調処理は、多ビット(例えば24ビット)の画像を、少数の色だけを用いた、場合によって空間解像度を上げた画像として表現しようとするものである。これは多くのカラープリンタで直面する課題である。一般にカラープリンタは、例えば、シアン、マゼンタ、イエロー、黒、白と、それらの組み合わせであるシアン+マゼンタ、シアン+イエロー、マゼンタ+イエローのような、5色又は8色だけしか使用できない。
【0003】
カラー中間調処理アルゴリズムの評価は、視覚の主観性のせいで困難な場合がある。中間調処理アルゴリズムにおける特有の目標として、色が一致すること、計算が単純であること、粒状性が低いこと、アーティファクト(artifact)をできるだけ少なくすること、後処理による影響を低減することがある。これら各目標の相対的な重要性は、観察者、予定観察距離、対象画像により左右される。
【0004】
色の一致には少なくとも2つの目標、すなわち、個々の入力色と出力色が近いこと、及び、誤差のばらつきがないことがある。計算の課題には、実行速度、並列処理の容易性、メモリ容量、複雑さがある。粒状性は、別々の出力色を(それらの色が完全に混じり合わずに)知覚できる能力として説明することができる。知覚される粒状性はdpiといくぶん相関がある。
【0005】
空間解像度が悪いか色解像度が悪いと(又はその両方が悪いと)、ディテール情報が失われるであろう。アーティファクトは、スペックル(speckle)、縞模様(steak)、ゴースト、グリッディング(gridding)、テクスチャ、それと非常に重要な擬似輪郭(バンディングとしても知られている)など、アルゴリズムの結果で好ましくない現象を表す一般用語である。
【0006】
中間調処理画像は、中間調処理された時点で”完成した”とは限らないので、後処理の影響は重要な問題である。その画像に対し、圧縮のためのダウンサンプリングからエッジ強調まで様々な画像処理操作がさらに行われることがある。中間調処理アルゴリズムは、これら操作の成否、容易さを左右することがある。
【0007】
中間調処理のための技術は、ディザ法、誤差拡散法、反復法など様々なものが考案されている。殆どのカラー中間調処理技術は、白黒中間調処理技術を単純に3つの色プレーンの各々に対し別個に拡張して適用する。このようなコンポーネント別に拡張する方法は、計算の面では効率的ではあるが、インク色の数学的線形性を前提としている。しかし、印刷における減法混色は非線形であるため、プレーン別の中間調処理方法は最善の方法ではない。
【0008】
ディザは、擬似乱数の2次元周期信号を画像の各色成分に加算してから、各画素を最も近い出力色に量子化する構成である。ディザの信号は、見た目には混じり合って見える、交互に色が変化するパターンを生成するように作られる。異なるタイプのディザとして、ドット集中型ディザ、ドット分散型ディザ、ドット順序型ディザがある。白色ノイズを用いるディザは、組織的ディザほどには視覚的に良好な結果を得られない。ディザは、周期的パターンが目立つという欠点を有することが知られている。ディザを改良するために様々な取り組みがなされている。カラーへのディザの応用は当該技術分野で知られている。これ以上の情報を知るには「A.Karun,et al.,“New Methods for Dithering of Color lmages,”Proc.of the IEEE Workshop on Nonlinear Signal/lmage Processing,1995」を参照されたい。
【0009】
ディザは局所的処理(すなわち、各画素の出力は、その入力画素と、おそらくはディザ信号のような外的要因にのみに依存する)であるのに対し、誤差拡散は、各画素位置での量子化誤差を、誤差の一部を各前進方向へ送る方向性空間フィルタに基づいて、近傍画素へ拡散させる。結果として、誤差拡散による中間調処理は高周波ノイズを加える。目で色が混じり合って実際の色モザイクに気付かないようにすることが目標であるので、この誤差拡散のハイパスフィルタ効果は目が高周波ノイズを知覚しにくいことを利用する。すなわち、誤差拡散は青色空間スペクトルを生じる。青色ノイズのほうが視覚的に好ましいという考えは十分確立したものである。
【0010】
誤差拡散は有効に作用するが、いくつか欠点がある。誤差拡散は、局所的に最適化する、つまり、各画素の位置で最善を尽くすという点で欲張りなアルゴリズムである。誤差は前方へ拡散されるので、誤差拡散は方向性があり、局所領域全体にわたって真の同時最適化はできない。目が色を平均化している局所の外へ誤差が拡散されることがある。誤差拡散のアーティファクトとして、ある程度のスペックル、縞模様、過渡的なエッジ効果及びグリッディング効果がある。誤差拡散のために必要なフィードバックループが、アルゴリズムの並列実行の障害になることがある。
【0011】
誤差拡散の改良が長年にわたって行われてきた。構造的アーティファクトの低減、フィードバック・フィルタの適応化、ニューラルネットワークの利用というような方向で努力がなされてきた。
【0012】
また、知覚モデルとプリンタ・モデルを用いる優れた白黒中間調処理技法があるが、これらはカラー中間調処理のためには複雑な拡張が必要である。
【0013】
平均マッチングの考え方を考慮した別の白黒アルゴリズムもある。例えば、ある多重解像度中間調処理アルゴリズムは、元の画像の解像度よりスタートし、出力画像の平均グレーレベルを入力画像の平均グレーレベルと等しくする。次に、1つ上のレベルの解像度では、平均グレーレベルを4象限間で各象限の平均グレーレベルに基づいて比例的に分配する。この過程は、各画素が黒又は白に量子化される解像度レベルまで繰り返される。例えば、「Breaux,et al..“Wavelet Methods for Compression,Rendering,and Descreening in Digital Halftoning,” SPIE vol.3078,1997」、「P.W.Wong,“Halftoning by Multiscale Dot Distribution,“Proc.IEEE Int.Conference on lmage Processing,Vol.III,1995」、「P.W.Wong,“Mean matching Halftoning on a Rotated Quad-tree Structure,” Human Vision and Electronic lmaging,”Proc.SPIE 2657,1996」を参照されたい。
【0014】
もう1つの従来技術の方法では、入力画像と出力画像の平均グレーレベルがいくつかの解像度で生成される。さらに別の従来技術では、ウェーブレット平均を計算し、次に、ディザを利用して、これらの平均グレーレベルを近似する。より具体的には、まず画像をウェーブレットを用いて圧縮し、次いで、各レベルごとに、ウェーブレット係数を平均グレーレベルとして用いることにより白ドットを4象限内でどのように分配すべきか決定する。この手法は、画素レベルまでは達しないため、選択した数の白ドットを、ドット集中型ディザ又はドット分散型ディザを利用して配列する。それらの結果には、水平方向及び垂直方向のアーティファクトと擬似輪郭が生じる欠点がある。
【0015】
【発明が解決しようとする課題】
本発明は、以上に述べた従来技術の問題点に鑑み、ブロック量子化を応用する新規なカラー中間調処理方法及び装置を提供することを目的とする。
【0016】
【課題を解決するための手段】
請求項1の発明は、入力画像及び出力画像を、出力画像の各ブロックが入力画像の各ブロックに対応するように、複数のブロックに分割するステップ、入力画像の各ブロックの色平均を計算するステップ、出力画像の各ブロックのための出力色セットを入力画像の対応ブロックの色平均に一致するように計算するステップ、出力画像の各ブロック内に出力色セットの色を配置するステップ、入力画像のブロック及び出力画像の対応するブロックを更に複数のサブブロックに分割するステップを有し、前記サブブロックに分割するステップは、入力画像のブロックの色平均を該ブロックの分割すべき複数のサブブロックの各色平均とそれぞれ比較し、いずれかのサブブロックで、その色平均がブロックの色平均を越える場合、当該ブロックをサブブロックに分割することを特徴とする。
【0017】
請求項2の発明は、請求項1記載のカラー中間調処理方法において、前記サブブロックに分割するステップは、いずれのサブブロックでも、その色平均がブロックの色平均を超えなくてなるまで、サブブロック分割を繰り返すことを特徴とする。
【0018】
請求項3の発明は、請求項1又は2記載のカラー中間調処理方法において、前記出力色セットを計算するステップは、出力画像の色空間上で表現可能な値を調べ、入力画像の対応ブロックの色平均にもっとも近い表現可能値を見つけることを特徴とする。
【0019】
請求項4の発明は、請求項1乃至3のいずれか1項に記載のカラー中間調処理方法において、前記出力画像の各ブロック内に出力色セットの色を配置するステップは、ターゲット色に一致するように、かつ空間的アーティファクトを減らすように各ブロック内に色を配置することを特徴とする。
【0020】
請求項5の発明は、コンピュータが読み取り可能な記録媒体であって、請求項1乃至4のいずれか1項記載のカラー中間調処理方法の各ステップをコンピュータに実行させるためのプログラムが記録されたことを特徴とする。
【0021】
請求項6の発明は、入力画像及び出力画像を、出力画像の各ブロックが入力画像の各ブロックに対応するように、複数のブロックに分割する手段、入力画像の各ブロックの色平均を計算する手段、出力画像の各ブロックのための出力色セットを入力画像の対応ブロックの色平均に一致するように計算する手段、出力画像の各ブロック内に出力色セットの色を配置する手段、入力画像のブロック及び出力画像の対応するブロックを更に複数のサブブロックに分割する手段を有し、前記サブブロックに分割する手段は、入力画像のブロックの色平均を該ブロックの分割すべき複数のサブブロックの各色平均とそれぞれ比較し、いずれかのサブブロックで、その色平均がブロックの色平均を越える場合、当該ブロックをサブブロックに分割することを特徴とする。
【0022】
請求項7の発明は、請求項6記載のカラー中間調処理装置は、前記サブブロックに分割する手段は、いずれのサブブロックでも、その色平均がブロックの色平均を超えなくてなるまで、サブブロック分割を繰り返すことを特徴とする。
【0023】
請求項8の発明は、請求項6又は7記載のカラー中間調処理装置において、前記出力色セットを計算する手段は、出力画像の色空間上で表現可能な値を調べ、入力画像の対応ブロックの色平均にもっとも近い表現可能値を見つけることを特徴とする。
【0024】
請求項9の発明は、請求項6又は7記載のカラー中間調処理装置において、前記出力色セットを計算する手段は、該出力セット中の出力色を決定するために平均色に関するルックアップテーブルを利用することを特徴とする。
【0025】
請求項10の発明は、請求項6乃至9のいずれか1項に記載のカラー中間調処理装置において、前記出力画像の各ブロック内に出力色セットの色を配置する手段は、ターゲット色に一致するように、かつ空間的アーティファクトを減らすように各ブロック内に色を配置することを特徴とする。
【0026】
【発明の実施の形態】
ブロック量子化方法及び装置について説明する。
以下の説明において、多くの詳細事項が提示される。ただし、これら特定の詳細事項によらずに本発明を実施し得ることは当業者には明らかであろう。他方、本発明を難解にしないため、周知の構造及び素子はブロック図により示し詳細は示さない。
【0027】
以下の詳細な説明中に、コンピュータのメモリ内のデータビットに対する操作のアルゴリズム及び記号表現によって表された部分がある。このようなアルゴリズム記述及び表現は、データ処理技術の当業者が研究内容を他の当業者に最も効率的に伝えるために用いる手段である。あるアルゴリズムがあり、それが概して期待した結果に至る筋の通ったステップの系列だと理解されるとする。それらのステップは、物理量の物理的処理を要するステップである。必ずという訳ではないが、これらの物理量は記憶、転送、結合、比較、その他処理が可能な電気的または磁気的信号の形をとるのが普通である。これらの信号をビット、値、要素、記号、文字、術語、番号などで表わすのが、主に慣用上の理由から便利な場合があることが分かっている。
【0028】
ただし、このような術語や同様の用語はすべて適切な物理量と関連付けられるべきであり、また、それら物理量に付けた便宜上のラベルに過ぎないということに留意すべきである。以下の説明より明らかなように、特に断わらない限り、”処理”、”演算”、”計算”、”判定”、”表示”などの用語によって論じられることは、コンピュータシステムのレジスタ及びメモリの内部の物理的(電子的)な量として表現されたデータを処理して、コンピュータシステムのメモリやレジスタ、その他同様の情報記憶装置、情報伝送装置又は情報表示装置の内部の同様に物理量として表現された他のデータへ変換する、コンピュータシステムや同様の電子的演算装置の作用及びプロセスを意味する。
【0029】
本発明は、本明細書に述べる処理を実行するための装置にも関係するものである。このような装置は、所要目的のために専用に作られてもよいし、汎用コンピュータを内蔵のコンピュータ・プログラムによって選択駆動もしくは再構成したものでもよい。そのようなコンピュータ・プログラムは、コンピュータが読み取り可能な記憶媒体、限定するわけではないが例えば、フロッピーディスク、光ディスク、CD−ROM、光磁気ディスクなどの任意種類のディスク、リードオンリーメモリ(ROM)やランダムアクセスメモリ(RAM)、EPROM、EEPROM、磁気カード又は光カードなど、コンピュータのシステムバスに接続された電子的命令の記憶に適した任意種類の媒体に格納することができる。
【0030】
本明細書に提示されるアルゴリズム及び表示は、本質的に、いかなる特定のコンピュータ、その他の装置とも関わりがない。様々な汎用マシンを、本明細書に述べた内容に従ったプログラムで利用し得るが、所要の手順のステップの実行のために、より特化した装置を作るほうが好都合であるかもしれない。そのような多様なシステムに必要な構造は以下の説明から明らかになろう。また、いかなる特定のプログラミング言語とも関連付けることなく本発明を説明する。本明細書に述べる本発明の内容を実現するために様々なプログラミング言語を使用し得ることは明らであろう。
【0031】
機械読み取り可能媒体は、機械(例えばコンピュータ)が読み取ることができる形式で情報を記録するための任意の機構を包含する。例えば、機械読み取り可能媒体には、リードオンリーメモリ(ROM);ランダムアクセスメモリ(RAM);磁気ディスク記憶媒体;光記憶媒体;フラッシュメモリ素子などが含まれる。
【0032】
《ブロックカラー量子化を利用したカラー中間調処理の概要》
本発明は、入力ブロックのサイズが適応的に調整されるブロック量子化を利用してカラー中間調処理を行う。図1は、カラー中間調処理のためのブロック量子化システムの一実施例のブロック図である。本ブロック量子化システムは、その入力ドメインと出力ドメインの間で色合わせを行って、入力ドメインの色数が出力ドメインの使用可能色数より多い場合のカラー中間調処理を実現する。本ブロック量子化システムは、入力ドメイン及び出力ドメインの画像を複数ブロックに分割し、入力ドメインの画像の各ブロックの色平均を出力ドメインの画像の1つのブロックの色平均に一致させることによって色合わせを行う。ブロックは任意の形状でよく、2つ以上の形状を組み合わせた複雑な形状でもよい。例えば、ブロックは正方形(d×d)でもよいが、長方形(d×b)(ただし、d≠b)でもよい。
【0033】
一実施例では、入力ドメインはモニタを有するコンピュータシステムからなり、出力ドメインはプリンタからなる。ここで説明するブロック量子化技術は、入力画像の各小ブロックごとに、その色平均を最適に(一実施例では適切な距離基準による)表現する対応出力ブロックの印刷色セットを計算する。このようにして、ここに説明する中間調処理技術によれば、局所的入力領域毎に、その平均色を対応した局所的出力領域の平均色と確実に一致させるが、それら領域は目で確実に平均化されるような十分小さな領域である。本ブロック量子化技術は、印刷プロセスの高い空間解像度を利用して色解像度を向上させ、制限条件付きの局所的色最適化を達成する。誤差拡散法につきもののスペックル、テクスチャ、その他のアーティファクトの発生はほぼ防止される。
【0034】
本技術は、各入力色を色空間上の3次元(3D)ベクトルとして扱い、そして一実施例では、減法混色印刷プロセスで得られる実際の出力色を使用して中間調を生成する。
【0035】
図1において、入力画像101はブロック生成・色平均ユニット102に受け取られ、同ユニットは入力画像101をブロックに分割し、各ブロックの平均色値を生成する。一実施例では、ブロックは固定サイズである。
【0036】
ブロック生成・色平均ユニット102は、各ブロックを、それにエッジが含まれるときにサブブロックに再分割するブロックサイズ適応調整ユニット103を有する。一実施例では、そのサブブロック数は4であるが、任意の数のサブブロックを用いてもよい。ブロックサイズ適応調整ユニット103は、すべてのブロックについて、どのブロックにもエッジが含まれなくなるまで、あるいは何らかの他の特定の条件が満たされるまで、個々のブロック(固定サイズでよい)のサブブロックへの再分割を繰り返して行うであろう。別の実施例では、1つ、2つ以上、あるいは全てのブロックにエッジが含まれていたとしてもサブブロックへは分割されないであろう。一実施例では、エッジを含むブロックは、例えば、それを分割すると色解像度の低下を招く場合にはサブブロックに分割されないであろう。なお、このような実施例はフィードバックが必要となるが、このフィードバックは本発明を難解にしないため図1には示されていない。
【0037】
一実施例では、各ブロックにエッジが含まれているか判定するため、ブロックの平均ベクトル色値が計算され、そのブロックの複数の(例えば4個の)サブブロックの平均と比較される。ブロックとサブブロックの平均との差がある閾値を越えるときに、そのブロックはエッジを含むと判定されてサブブロックに再分割される。これはブロックが所定サイズになるまで繰り返されるであろう。例えば、最初に4×4画素ブロックを用いる場合には、ブロックサイズ適応調整はブロックが1×1画素ブロックになるまで繰り返されるであろう。
【0038】
目標値としての入力ブロックの色平均が与えられると、色合わせ・配置ユニット104は、平均するとその目標値に可能な限り近い値となる出力色セットを計算する。一実施例では、色合わせ・配置ユニット104は、出力画像の色空間上で実現可能な値を調べ、目標に可能な限り近い値を割り出すことによって、出力色セットを計算する。
【0039】
出力色セットが求まると、色合わせ・配置ユニット104は、所望の色を得るとともにアーティファクト及び粒状性を減少させ、できれば最小にするように色を配置する。
【0040】
図2は、ここに説明するブロック量子化技術の処理手順の一例を示す流れ図である。このプロセスを実行する処理ロジックは、ハードウェア、ソフトウェア、両者の組み合わせのいずれで構成してもよい。
【0041】
図2を参照すると、プロセスの最初に、処理ロジックは、入力ドメインにおいて目で全体を平均化できるようなブロック・サイズを選択する(処理ブロック201)。一実施例では、ブロックのサイズは正方形(d×d)である。別の実施例では、ブロックのサイズは正方形ではない(例えば、長方形、菱形など)。
【0042】
次に、処理ロジックは入力画像及び出力画像を対応したブロックに分割する(処理ブロック202)。各入力ブロックに対し、対応する1つのn画素の出力ブロックがある(ここで、nは出力空間解像度と入力ブロックのサイズによって決まる)。
【0043】
次に、処理ロジックは各ブロックの内部にエッジが存在するか判定する(処理ブロック203)。ブロック内のエッジの存在を判定する方法はいろいろある。前述のように、一実施例では、ブロックの色平均とそのサブブロックの色平均の差がある閾値を越える場合にエッジが存在している。エッジがある場合には、処理ロジックは、そのブロックをエッジを含まないサブブロックに分割する(処理ブロック204)。これを、ここでは4分木分割(quadtreeing)と言う。
【0044】
一実施例では、閾値処理の一環として、入力画像中に空間エッジが存在するか否かを判定するため、まず4×4画素ブロックを考え、4×4ブロック全体の入力平均を2×2サブブロックの平均と比較する。エッジが存在すると思われる場合には、各2×2ブロックごとに別々に一致する色を見つける。この閾値処理で認識可能なエッジがないと判定された場合には、その4×4ブロックは一括してカラー量子化される。一実施例では、このプロセスは1×1のブロックサイズが検討されるまで繰り返される。
【0045】
一実施例では、この閾値処理は、4×4ブロックの平均と各2×2ブロックの平均との間のユークリッド距離を用いて行われる。そのユークリッド距離が、4サブブロックのいずれかで閾値を越えるときに、その4×4ブロックは分割される。一般に、閾値処理はなんらかの色空間(例えば、RGBやその他の色空間)上の色値の関数を用いて行われる。閾値処理で、サブブロックの値を相互に比較してもブロック全体の値と比較してもよい。
【0046】
ブロックをそれ以上サブブロックに分割する必要がなくなり、かつ、そのような操作が以前行われなかったならば、処理ロジックは各入力ブロックの色平均Aiを計算する(処理ブロック205)。一実施例では、各ブロックの色を示す値を生成するために、ブロック全体の算術平均(2Dハール(Haar)ウェーブレットと等価である)が用いられる。入力ドメインにおけるブロックの色平均を定義するために、他のウェーブレットや目のフィルタモデルを用いてもよく、また、別種の平均、例えば、幾何平均やL2平均を用いてもよい。さらに、直交座標上又は極座標などの他の空間座標上で平均を求めてもよい。
【0047】
次に、処理ロジックは、入力画像中のブロックの色平均と数学的に最もよく一致する出力ドメインの色セットを割り出す(処理ブロック206)。一実施例では、処理ロジックは、以下の距離尺度の式により表される出力色基本セットBに関する整数係数βiを計算する。
【0048】
【数1】
【0049】
この演算は、n個の出力画素中の各画素に1つの色が割り当てられるよう制約条件がつけられる。すなわち、
【0050】
【数2】
【0051】
ここで、”n”は出力ブロック中の画素数であり、”b”は出力色数である。入力画像中のブロックの平均を求めるために使用された同じ色平均方法を同様に用いることができる。このプロセスにより、入力ドメインの使用可能色と出力ドメインの使用可能色との間の距離が減少し、さらには最小化されるであろう。なお、様々な距離尺度、例えばユークリッド距離、マンハッタン距離、L1ノルム、L2ノルム、L∞ノルムなどを用いてもよい。
【0052】
最後に、所定の出力ブロックに対する出力色セットβi・Bが与えられると、処理ロジックは、その選択された色セットをブロック内に”モザイク状配置”することにより出力ドメインの画像を生成する(処理ブロック207)。一実施例では、処理ロジックは入力画像中の対応ブロックの色に最もよく一致し、かつ、空間的アーティファクトが減少し、できれは最少になるように試みる。所定の出力ブロックに対する出力色セットβi・Bが与えられた場合、そのブロック内の色配置が空間的アーティファクト及び知覚される色に大きく影響を及ぼす。一実施例では、視覚的に良好な結果を得るため、ランダムサンプリング、規則的グリッディング(gridding)、及び、青色ノイズ・ディザマトリクスによる色配置が、単独で使用されるか、適応的に切り替えて使用される。なお、処理ロジックによって、出力デバイス(例えばプリントエンジン)に対し選択された色セットを用紙上にどのように配置すべきか命令するために送られる指示が生成されるであろう。
【0053】
本プロセスは、例えばRGBやCIELABなどの様々な色空間に適用可能である。
【0054】
本ブロック量子化技術は拘束条件付きの局所的色最適化を達成し、誤差拡散型のアーティファクトを生じない。色の一致、空間解像度及び色解像度については誤差拡散に劣らない。最小化問題の解を得ることが、本アルゴリズムの計算量の多い部分であるが、整数計画法、動的計画法、あるいはルックアップテーブルを利用することでスピードアップできる。例えば、単純ではあるがメモリ使用量の多いルックアップテーブルは、ブロックの色値を入力として受け取って、そのブロックのために使用すべき各出力色の画素数を返すであろう。例えば、モニタから4色プリンタまでの量子化の場合、入力ブロックが平均RGB値(122,33,250)を有するものとする。この平均RGB値が16出力画素サイズのブロックのためのルックアップテーブルに入力される。ルックアップテーブルは、13シアン、3マゼンタ、0イエロー、0ブラック及び0ホワイトを出力するであろう。また、近似解を見つけることによって本アルゴリズムをスピードアップすることができる。そのために、例えば、問題を逆行列で表して最大エントロピー法もしくは線形計画法で解いたり、近似ルックアップテーブルを利用することができる。あるいは、動的計画法で近似解を得ることができる。
【0055】
《空間フィルタ》
ここに説明するブロック量子化技術のある実施例の目的は、局所的入力領域(例えばブロック)の平均色を対応した局所的出力領域の平均色に一致させることである。局所的領域の平均は、その局所的領域に対し空間フィルタを適用し、値に重み付けすることによって求めることができる。重み付けの一例を図6に示す。例えば、直交フィルタを用いることができる。この場合、領域内の画素は領域内の他の全ての画素と均等にカウントされる。
【0056】
入力ドメインの平均の計算及び/又は出力色セットの計算のために、非直交フィルタを用いることもできる。
【0057】
平均を求めるためにウェーブレットフィルタを用いることもできる。一実施例では、ハイパス・ウェーブレット成分がエッジの有無判定に利用されるであろう。このように、ハイパス・ウェーブレットフィルタが4分木閾値処理に利用される。
【0058】
算出される平均は使用色空間に依存する。様々な色空間を使用できる。色空間としては、RGB、CIELAB、CIELUV、Ohta、Opponent、log Opponent、HSV、HUV、YCbCrがあるが、これに限らない。
【0059】
入力領域及び出力領域の形状は、円形領域が好ましいであろう。略円形の形状から離れた形状は、一般に結果が好ましくない。
【0060】
領域のサイズは、目による平均化を前提とすることが妥当でなくなるほど大きくならないように選ばれる。領域が小さすぎると色解像度が制限される。領域が大きすぎると、空間的ディテールの解像能力の低下を招く。すなわち、目の平均化サイズの範囲内で色解像度と空間解像度の間にトレードオフの関係があり、どちらを無視してもディテール情報が損なわれる可能性がある。
【0061】
《出力色セットの選択》
n個の出力色の最適なセットをB個の可能色から見出す方法について以下に説明する。まず、B=3個の可能色J,K,Lによって範囲が定められる2D色空間よりn=3個の出力色を選ぶという簡単な問題について検討する。図3を参照すれば、x記号は、n個の選択出力色からなるセットとして可能な色JJJ,JJK,JKK...を示す。”アンカー”J,K,L間の距離の1/nの長さの2つのベクトルJK,JLを定義することができる。これらベクトルJk,JLは2D色空間を張るベクトル基底をなす。
【0062】
ベクトル基底のグラム-シュミット(Gram-Schmidt)直交化法を用いて、直交ベクトル基底を求めることができる。任意の入力ターゲット色点を、原点Jより同ターゲット色点へ向かうベクトルと考えることができる。このJターゲットベクトルを直交基底上へ分解し、元のJX,JLベクトルの係数として再構成することができる。これら2つの係数は、何個の出力色をKとし、何個の出力色をLとするか指定する(故に出力色セット中の残余の色はJとする)。グラム-シュミット手順の結果、n色はターゲットに到達するJ,K,Lに正確に分解される。ただし、整数解のみ用いればよい。よって、一実施例では、最も近い整数解が出力色セットとして選ばれる。
【0063】
3D色空間の場合、Bを4色以上とし、同じベクトル手法によりn個の出力色を求めることができる。しかし、3Dで5色以上又は2Dで4色以上の場合、ベクトル基底は冗長である(例えば、ターゲットを元のベクトル上へ正確に分解するという問題は劣決定であるので多くの解があるが、正確な整数解があるとは限らない)。
【0064】
5色以上の場合、1つの解法は、とり得る各々の整数個の第5色0〜nを考え、(ターゲット平均−第5色寄与分)を残りの4色へ分解することである。したがって、5色の場合には、その4色の解が見つかる。ターゲット色が出力インクにより形成される凸包から外れていない限り、近い整数解が一般に見つかる。
【0065】
入力ターゲット色と一致する適切な出力色セットを見つけるために線形計画法を利用できる。線形計画法はターゲット色と出力色平均との差を減少させ、さらには最小化させる解を探索するが、その減少(最小化)後の差がユークリッド距離(L2ノルムの2乗に等しい)となることはない。むしろ、線形計画法はL1もしくは上限ノルムを減らすのである。ユークリッド距離を減少させ、さらには最小化させるために二次計画法を利用できる。
【0066】
出力色セットの選択プロセスのスピードアップのためにテーブル検索を利用できる。テーブル検索は、例えばプリンタの場合のように、出力色が予め分かっている場合の選択に特に有利である。一実施例では、そのLUTは可能性のあるすべての入力色に対応したメモリセルを有する。別の実施例では、そのLUTは、異なる複数の出力色セットを持つようにプログラムされ、かつ/又は、1つの入力色によって、その最も近い出力色が求まる。このようにすると、メモリは少なくて済むが必要処理量は増加し、また、不正確な答を出すことがある。
【0067】
一実施例では、色空間は予め定量化可能なセルに分割される。所定のセルに含まれる全ての入力平均は、そのセルの中心点に定量化される。
【0068】
前述のように、一実施例では、入力ベクトル色平均が与えられると、その入力平均と選択される出力色セットとのユークリッド距離を減少もしくは最少化するように出力色セットが選択される。別の実施例では、マンハッタン距離もしくは成分毎の最大値を減少させ、さらには最小化するであろう。
【0069】
前述のように、入力色セット及び選択された出力色セットの平均が求められ、そのユークリッド距離が減少させられる(また最少化されるかもしれない)。各ブロックごとに平均を算出するのではなく、ある距離尺度(例えばEMD(Earth Mover's Distance))を使用して入力ブロック、予定出力色間の距離を測定してもよい。一実施例では、EMDを使用して、いくつかの可能性のあるものの中から、やや高速の出力セット・ジェネレータで迅速に生成できるものが選択される。EMDに関するこれ以上の情報を知るには、「Rubnex,Tomasi,Goibas,ICCV 1998」を参照されたい。
【0070】
《出力色のモザイク状配置》
出力色セットが選択されたとしても、それら出力色を出力空間にどのように配置するか決定する課題が残っている。例えば、R3画素とG3画素を
RRR
GGG
のように配置するのと
RGR
GRG
のように配置するのとでは、知覚される色、粒状性、及び、擬似輪郭に違いが生じるであろう。モザイク状配置の方法は、例えば、規則的グリッディング(gridding)、(置換有りと置換無しの)ランダムサンプリング、青色ディザマトリクスの値を用いて選択出力画素を並べるなど、多くの異なる方法を使用できる。
規則的グリッディングは、2つのやり方で行うことができる。1つのやり方は、ある特定の出力色の画素全部を一斉にブロック内に配置し、次いで2つ目の出力色の画素全部を一斉にブロック内に配置し、以下同様に行う方法である。例えば、Rの8画素とGの8画素は
RRRR
RRRR
GGGG
GGGG
のようになろう。この方法は孤立色が発生しない。もう1つの実施例では、できるだけ互い違いにする規則的グリッディングが用いられる。この方法は、よく混合した画像を得られる。この場合、Rの8画素とGの8画素は
RGRG
GRGR
RGRG
GRGR
となる。
【0071】
ブロックのモザイク状配置のもう1つの方法はランダムサンプリングである。R8画素、G8画素をブロックに配置するとして、出力ブロックの各画素ごとに分布がランダムにサンプリングされるが、置き換えは行われるか又は行われない。しかし、この方法はざらついた感じの画像になりやすい。
【0072】
モザイク状配置のための視覚的に好ましい方法は、選択された出力色を青色空間周波パターンに配置する方法である。そのための1つの方法は、当該目的用に作成したディザマトリクスを選択することである。出力色は、何らかの順に、例えば輝度順に配列される。例えば、出力色をWYCMKとする。Kは黒である。この場合、選択された出力色をディザの順に配置する。図5に一例を示す。4×4ディザマトリクスが図5(a)のようだとすると、選択された出力色セットは図5(b)のマトリクスのようになる。
【0073】
所定のブロックより大きなディザマトリクスを用いてもよく、その場合には、ブロックはそれがカバーする値の順序たけを利用する。
【0074】
(閾値処理に関連して前述したようにブロックが分割されていない時に)ブロックのサブブロックの平均により良く一致させようと試みる決定論的方法又は確率的方法によって、全ての解像度で一層良く平均を表現すことができる。4×4ブロックの場合、16の出力色が選ばれた後に、各2×2サブブロックの平均に基づいて、それら出力色を4つの4色グループに分ければよい。
【0075】
《応用例》
一実施例では、複写機やプリンタなどのシステム内の組み込みプロセッサによって本ブロックカラー量子化が実行される。そのアルゴリズムは特定用途向け集積回路(ASIC)に実装されるであろう。図4は、前述したブロック量子化技術のための処理を組み込むことができるシステムの一例を示すブロック図である。
【0076】
図4を参照すれば、システム400は情報処理のための組み込みプロセッサ412を有する。システム400は、さらに、情報と組み込みプロセッサ412により実行される命令を格納するための、組み込みプロセッサ412に接続されたランダムアクセスメモリ(RAM)又は他の動的記憶装置404を有する。
【0077】
コンピュータシステム400は、システムのユーザに情報を表示するための陰極線菅(CRT)や液晶ディスプレイ(LCD)などの、組み込みディスプレイ412に接続されたディスプレイ装置421も有するであろう。組み込みプロセッサ412に情報及びコマンド選択を伝えるために、英数字キー及び他のキーを有する英数字入力装置も装備されるであろう。
【0078】
これ以外のユーザ入力装置は、マウス、トラックボール、トラックパッド、スタイラス、カーソル方向キーなどのカーソル制御装置であり、方向情報及びコマンド選択をプロセッサ412に伝えたりディスプレイ421上のカーソルの動きを制御するためにシステムに組み込まれるであろう。
【0079】
プリントエンジン424が組み込みプロセッサ412に接続されている。一実施例では、このプリントエンジン424は複写機の一部である。システム400の前記要素の任意の要素又は全要素と関連ハードウェアを本発明に利用し得ることに注意されたい。ただし、システムの他の構成でも以上の装置の一部又は全部を含んでもよいことは明らかであろう。
【0080】
以上の説明を読めば本発明の多くの変更及び修正が当業者には明白となろうから、以上に図示及び記述したどの実施例も説明を目的としたものであって、限定を意図したものと解すべきでない。
【0081】
【発明の効果】
以上、詳細に説明したように、本発明によれば、拘束条件付きの局所的色最適化を行って、誤差拡散と同様の色の一致、空間解像度及び色解像度を達成するとともに誤差拡散につきもののアーティファクトの発生を防止することができ、また、整数計画法、動的計画法又はルックアップテーブルを利用することで処理のスピードアップを達成できる、等々の効果を得られるものである。
【図面の簡単な説明】
【図1】 中間調処理のためのブロック量子化システムの一実施例のブロック図である。
【図2】 ブロック量子化を中間調処理と同時に実施するプロセスの一実施例の流れ図である。
【図3】 可能な色セットの説明図である。
【図4】 ブロック量子化処理機能を有するシステムの一実施例のブロック図である。
【図5】 ディザマトリクスによる出力色セットの配置例の説明図である。
【図6】 重み付けの一例を示す図である。
【符号の説明】
102 ブロック生成・色平均ユニット
103 ブロックサイズ適応調整ユニット
104 色合わせ・配置ユニット
Claims (10)
- 入力画像及び出力画像を、出力画像の各ブロックが入力画像の各ブロックに対応するように、複数のブロックに分割するステップ、
入力画像の各ブロックの色平均を計算するステップ、
出力画像の各ブロックのための出力色セットを入力画像の対応ブロックの色平均に一致するように計算するステップ、
出力画像の各ブロック内に出力色セットの色を配置するステップ、
入力画像のブロック及び出力画像の対応するブロックを更に複数のサブブロックに分割するステップを有し、
前記サブブロックに分割するステップは、入力画像のブロックの色平均を該ブロックの分割すべき複数のサブブロックの各色平均とそれぞれ比較し、いずれかのサブブロックで、その色平均がブロックの色平均を越える場合、当該ブロックをサブブロックに分割することを特徴とするカラー中間調処理方法。 - 前記サブブロックに分割するステップは、いずれのサブブロックでも、その色平均がブロックの色平均を超えなくてなるまで、サブブロック分割を繰り返すことを特徴とする請求項1記載のカラー中間調処理方法。
- 前記出力色セットを計算するステップは、出力画像の色空間上で表現可能な値を調べ、入力画像の対応ブロックの色平均にもっとも近い表現可能値を見つけることを特徴とする請求項1又は2記載のカラー中間調処理方法。
- 前記出力画像の各ブロック内に出力色セットの色を配置するステップは、ターゲット色に一致するように、かつ空間的アーティファクトを減らすように各ブロック内に色を配置することを特徴とする請求項1乃至3のいずれか1項に記載のカラー中間調処理方法。
- コンピュータが読み取り可能な記録媒体であって、請求項1乃至4のいずれか1項記載のカラー中間調処理方法の各ステップをコンピュータに実行させるためのプログラムが記録されたことを特徴とする記録媒体。
- 入力画像及び出力画像を、出力画像の各ブロックが入力画像の各ブロックに対応するように、複数のブロックに分割する手段、
入力画像の各ブロックの色平均を計算する手段、
出力画像の各ブロックのための出力色セットを入力画像の対応ブロックの色平均に一致するように計算する手段、
出力画像の各ブロック内に出力色セットの色を配置する手段、
入力画像のブロック及び出力画像の対応するブロックを更に複数のサブブロックに分割する手段を有し、
前記サブブロックに分割する手段は、入力画像のブロックの色平均を該ブロックの分割すべき複数のサブブロックの各色平均とそれぞれ比較し、いずれかのサブブロックで、その色平均がブロックの色平均を越える場合、当該ブロックをサブブロックに分割することを特徴とするカラー中間調処理装置。 - 前記サブブロックに分割する手段は、いずれのサブブロックでも、その色平均がブロックの色平均を超えなくてなるまで、サブブロック分割を繰り返すことを特徴とする請求項6記載のカラー中間調処理装置。
- 前記出力色セットを計算する手段は、出力画像の色空間上で表現可能な値を調べ、入力画像の対応ブロックの色平均にもっとも近い表現可能値を見つけることを特徴とする請求項6又は7記載のカラー中間調処理装置。
- 前記出力色セットを計算する手段は、該出力セット中の出力色を決定するために平均色に関するルックアップテーブルを利用することを特徴とする請求項6又は7記載のカラー中間調処理装置。
- 前記出力画像の各ブロック内に出力色セットの色を配置する手段は、ターゲット色に一致するように、かつ空間的アーティファクトを減らすように各ブロック内に色を配置することを特徴とする請求項6乃至9のいずれか1項に記載のカラー中間調処理装置。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/597861 | 2000-06-20 | ||
US09/597,861 US7292728B1 (en) | 2000-06-20 | 2000-06-20 | Block quantization method for color halftoning |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2002057909A JP2002057909A (ja) | 2002-02-22 |
JP2002057909A5 JP2002057909A5 (ja) | 2007-05-17 |
JP4379851B2 true JP4379851B2 (ja) | 2009-12-09 |
Family
ID=24393218
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2001180974A Expired - Fee Related JP4379851B2 (ja) | 2000-06-20 | 2001-06-15 | カラー中間調処理方法及び装置、記録媒体 |
Country Status (2)
Country | Link |
---|---|
US (1) | US7292728B1 (ja) |
JP (1) | JP4379851B2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4618676B2 (ja) | 2005-04-28 | 2011-01-26 | 株式会社リコー | 構造化文書符号の転送方法、画像処理システム、サーバ装置、プログラム及び情報記録媒体 |
US7602976B2 (en) * | 2006-02-17 | 2009-10-13 | Sony Corporation | Compressible earth mover's distance |
US7577684B2 (en) * | 2006-04-04 | 2009-08-18 | Sony Corporation | Fast generalized 2-Dimensional heap for Hausdorff and earth mover's distance |
CN104091357B (zh) * | 2014-07-14 | 2017-01-25 | 厦门大学 | 一种利用主题相关图片的在线马赛克图片生成方法 |
EP3213501B1 (en) | 2014-10-30 | 2019-12-25 | Hewlett-Packard Development Company, L.P. | Configuring an imaging system |
CN111709867B (zh) * | 2020-06-10 | 2022-11-25 | 四川大学 | 基于新型全卷积网络的等模矢量分解图像加密分析方法 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP0387051B1 (en) * | 1989-03-10 | 1997-08-06 | Canon Kabushiki Kaisha | Method and apparatus for coding image information |
US5377018A (en) * | 1992-06-22 | 1994-12-27 | Media Vision | Video compression and decompression using block selection and subdivision |
KR20020060069A (ko) * | 1999-11-24 | 2002-07-16 | 야마우치 히로시 | 휴대용 lcd 장치에 고 칼러 분해능을 표시하는 방법 및장치 |
-
2000
- 2000-06-20 US US09/597,861 patent/US7292728B1/en not_active Expired - Fee Related
-
2001
- 2001-06-15 JP JP2001180974A patent/JP4379851B2/ja not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
US7292728B1 (en) | 2007-11-06 |
JP2002057909A (ja) | 2002-02-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4503105B2 (ja) | マルチチャンネルディジタルカラー画像をハーフトーン化する方法 | |
US5602943A (en) | Digital halftoning space filling curves | |
US7580074B2 (en) | Digital halftoning technique based on 1-D multi-scale dot assignment | |
US8681383B2 (en) | 2nd generation dot-off-dot stochastic halftone | |
JP2000333010A (ja) | 階調依存型誤差拡散ハーフトーン化方法 | |
US7064869B2 (en) | Method for halftoning a multi-channel digital color image having at least one group of similar color channels | |
JPH11168635A (ja) | カラー画像用ハーフトーン処理装置 | |
Lee et al. | Inkjet printer model-based halftoning | |
Guo et al. | Halftone-image security improving using overall minimal-error searching | |
JP4064023B2 (ja) | デジタル画像中間調処理方法及び装置、並びに、デジタル画像中間調処理プログラムを記録した記録媒体 | |
EP0982932A2 (en) | Apparatus and method of performing dithering in a simplex in color space | |
JP4379851B2 (ja) | カラー中間調処理方法及び装置、記録媒体 | |
US7164499B1 (en) | Block quantization method for color halftoning | |
KR20190005114A (ko) | 화상 처리 장치, 화상 처리 방법 및 저장 매체 | |
Xu et al. | Improving reversible color-to-grayscale conversion with halftoning | |
US6498868B1 (en) | Image scaling using pattern matching to select among scaling algorithms | |
CN102348042B (zh) | 图像处理设备和图像处理方法 | |
Evans et al. | Variations on error diffusion: Retrospectives and future trends | |
JP3814921B2 (ja) | グレースケール画像のハーフトーニング方法、およびグレースケール画像のハーフトーニング手段を有する装置 | |
Yu et al. | Improved digital multitoning with overmodulation scheme | |
US8922802B2 (en) | Method and system for halftoning using energy minimization | |
TWI830484B (zh) | 一種用於驅動在陣列中具有複數個顯示像素的彩色電泳顯示器之方法及執行此方法之電泳顯示器 | |
Liu et al. | Near-aperiodic dot-diffused block truncation coding | |
JP2003116014A (ja) | 画像処理装置及び方法及びコンピュータプログラム及びコンピュータ可読記憶媒体 | |
Jumabayeva | Model-based Analysis and Design of Color Screen Sets for Clustered-Dot Periodic Halftoning and Design of Monochrome Screens Based on Direct Binary Search for Aperiodic Dispersed-Dot Halftoning |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070323 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20070323 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090227 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090623 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090819 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20090909 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20090911 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121002 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121002 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131002 Year of fee payment: 4 |
|
LAPS | Cancellation because of no payment of annual fees |