JP3673675B2 - Image processing method, image processing apparatus, and recording medium - Google Patents

Image processing method, image processing apparatus, and recording medium Download PDF

Info

Publication number
JP3673675B2
JP3673675B2 JP18963799A JP18963799A JP3673675B2 JP 3673675 B2 JP3673675 B2 JP 3673675B2 JP 18963799 A JP18963799 A JP 18963799A JP 18963799 A JP18963799 A JP 18963799A JP 3673675 B2 JP3673675 B2 JP 3673675B2
Authority
JP
Japan
Prior art keywords
image data
processing
filter
image
size
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP18963799A
Other languages
Japanese (ja)
Other versions
JP2001024872A (en
Inventor
学 山添
孝幸 鈴木
幸司 永田
勝彦 安西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP18963799A priority Critical patent/JP3673675B2/en
Priority to SG1999006099A priority patent/SG75190A1/en
Priority to EP99309950A priority patent/EP1014688B8/en
Priority to DE69940719T priority patent/DE69940719D1/en
Priority to AT99309950T priority patent/ATE428995T1/en
Priority to US09/459,479 priority patent/US7038810B1/en
Priority to CN99126712A priority patent/CN1114888C/en
Priority to KR10-1999-0057713A priority patent/KR100374019B1/en
Publication of JP2001024872A publication Critical patent/JP2001024872A/en
Application granted granted Critical
Publication of JP3673675B2 publication Critical patent/JP3673675B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)
  • Editing Of Facsimile Originals (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、原画像に対して加工を施す画像処理方法及び画像処理装置並びに記録媒体に関する。
【従来の技術】
近年、デジタルカメラやフォトスキャナ等の普及に伴って、写真画像のデジタル化が手軽に行なえるようになってきた。また、インクジェットプリンタを代表とする出力機器側も高画質化、低価格化が進み、一般のユーザが例えば自宅で手軽に、写真を記録用紙上に出力することも可能となっている。
【0002】
また、撮影した画像をその場で簡単にシール化する装置が爆発的に普及している。また、パーソナルコンピュータやプリンタの高性能化及び低価格化に伴い、例えばユーザ自身の写真を挿入した名刺を作成する等の作業が、ユーザレベルで簡単に行えるようになった。このように、写真画像に対する多様なニーズが高まりつつある。
【0003】
ここで、例えば名刺に写真を挿入する場合について考えると、特にフォーマルな名刺を作成する際には、無表情な写真を挿入することが一般的である。しかしながら、そのような名刺は時に堅苦しさを演出してしまうため、場合によってはよりインフォーマルな名刺を作成する必要がある。その場合、ユーザの所望する表情の写真のみならず、写真自体に何らかの加工を施すことにより、より個性ある写真を作成し、挿入するというニーズが生じる。このようなニーズを満たす加工処理としては、例えばセピア調に代表されるモノトーン加工や、イラスト調への加工処理等が知られている。
【0004】
従って、パーソナルコンピュータ等の画像処理を可能とする装置において、例えばデジタルカメラで撮影した画像に対してユーザが所定のアプリケーションによって所望の加工を施し、該加工結果をインクジェットプリンタによって出力することが一般的に行われるようになった。
【0005】
また、ポスタリゼーションと呼ばれる処理は特開平1−314389号、或いはイラスト調加工処理としては特開平3−91088号及び特開平3−91087号として提案されている。
【0006】
【発明が解決しようとする課題】
しかしながら上記従来の画像処理装置において、例えば写真画像をイラスト調に加工するためには、加工処理を行なうアプリケーションに対して、例えば該写真画像のエッジ部を抽出し、更に各部の色を原画と同じ色として塗りつぶしていた。更に、かかるエッジ抽出、塗りつぶす色等の各種パラメータを、ユーザが詳細に設定する必要があった。
【0007】
従って、イラスト調の画像を得るには、画質の点で未だ改善する余地があった。また、その設定作業が繁雑であるばかりでなく、適切な設定を行なうためにはユーザの熟練を要し、一般のユーザには困難な作業であった。
【0008】
この問題を解決するために、出願人は特願平10−355236号において、フィルタリングによるイラスト加工処理を提案している。しかしながら、該処理をプリンタドライバによって実現しようとした場合、以下の問題が生じてしまう。
即ち、インクジェットプリンタ等に代表されるシリアルプリンタにおいては、使用メモリの節約のためにラスタ処理を行うことが一般的であるが、その場合、画像は分割して処理されるため、一回の処理単位が必ずしも複数行のデータからなるとは限らす、極端な場合には1行のみのデータを処理する場合も発生しうる。従って、画像に対してフィルタリングによるイラスト加工を施す際に、注目画素以外のフィルタリング対象画素が極端に少なくなってしまう場合がある。これは即ち、加工結果として得られる画質が劣化してしまうことを意味する。
【0009】
本発明は上記問題を個々にあるいは全て解決するためになされたものであり、ラスタライズされた画像データに対しても効果的なイラスト加工処理を施すことを容易にする画像処理方法及び画像処理装置並びに記録媒体を提供することを目的とする。
【0010】
また、写真画像に対してより自由度の高い加工を施すことにより、よりオリジナリティを有する画像を作成可能な画像処理方法及び画像処理装置並びに記録媒体を提供することを目的とする。
【0011】
【課題を解決するための手段】
上記目的を達成するための一手法として、本発明の画像処理方法は以下の工程を備える。
【0012】
即ち、ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力工程と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定工程と、
前記フィルタを前記画像データに対して適用して該画像データの輪郭部を抽出するとともに階調数を低減する画像処理工程とを有し、
前記設定工程は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする。
【0013】
例えば、前記設定工程は、前記画像データの処理単位の行数又は列数に応じて前記フィルタを設定することを特徴とする。
【0014】
例えば、前記設定工程は、前記画像データの処理単位が所定行数以上の場合には5×5のサイズのフィルタを設定し、前記画像データの処理単位が前記所定行数未満の場合には該画像データの処理単位の行数に応じたサイズのフィルタを設定することを特徴とする。
【0017】
【発明の実施の形態】
以下、添付の図面を参照して本発明に係る一実施形態について詳細に説明する。
【0018】
<第1実施形態>
●システム構成
本実施形態におけるシステムの一例を図1に示す。ホストコンピュータ100には、例えばインクジェットプリンタなどのプリンタ105とモニタ106が接続されている。
【0019】
ホストコンピュータ100は、ワードプロセッサ、表計算、インターネットブラウザ等のアプリケーションソフトウエア101と、OS(OperatingSystem)102、アプリケーション101によってOS102に発行される出力画像を示す各種描画命令群(イメージ描画命令、テキスト描画命令、グラフィックス描画命令)を処理して印刷データを作成するプリンタドライバ103、およびアプリケーション101が発行する各種描画命令群を処理してモニタ106に表示を行なうモニタドライバ104をソフトウエアとして持つ。
また、112は指示入力デバイス、113はそのデバイスドライバであり、例えばモニタ106上に表示されている各種情報を指示することにより、OS102に対して各種指示を行なうマウスが接続される。尚、マウスに替えてトラックボールやペン、又はタッチパネル等の他のポインティングデバイス、又はキーボードを備えていても良い。
【0020】
ホストコンピュータ100は、これらソフトウエアが動作可能な各種ハードウエアとして中央演算処理装置CPU108、ハードディスクHD107、ランダムアクセスメモリRAM109、リードオンリメモリROM110等を備える。図1で示される画像処理システムの例として、例えば一般的に普及しているIBM社製のPC−AT互換のパーソナルコンピュータにMicrosoft社のWindows98をOSとして使用し、印刷を行える所望のアプリケーションをインストールし、モニタとプリンタとを接続した形態が考えられる。
【0021】
ホストコンピュータ100では、モニタに表示された表示画像にもとづき、アプリケーション101で、文字などのテキストに分類されるテキストデータ、図形などのグラフィックスに分類されるグラフィックスデータ、自然画などに分類されるイメージ画像データなどを用いて出力画像データを作成する。そして、出力画像データを印刷出力するときには、アプリケーション101からOS102に印刷出力要求を行ない、グラフィックスデータ部分はグラフィックス描画命令、イメージ画像データ部分はイメージ描画命令で構成される出力画像を示す描画命令群をOS102に発行する。OS102はアプリケーションの出力要求を受け、出力プリンタに対応するプリンタドライバ103に描画命令群を発行する。プリンタドライバ103はOS102から入力した印刷要求と描画命令群を処理しプリンタ105で印刷可能な印刷データを作成してプリンタ105に転送する。プリンタ105がラスタープリンタである場合は、プリンタドライバ103では、OSからの描画命令に対して順次画像補正処理を行い、そして順次RGB24ビットページメモリにラスタライズし、全ての描画命令をラスタライズした後にRGB24ビットページメモリの内容をプリンタ105が印刷可能なデータ形式、例えばCMYKデータに変換を行ないプリンタ105に転送する。
【0022】
尚、ホストコンピュータ100においては、被写体を撮影してRGB形式による画像データを生成するデジタルカメラ111を接続し、その撮影画像データをHD107に読み込んで格納することが可能である。尚、デジタルカメラ111による撮影画像データは、JPEG形式により符号化されている。そして、該撮影画像データを上述したイメージ画像データとして、プリンタドライバ103において復号した後、プリンタ105へ転送することももちろん可能である。
【0023】
●プリンタドライバ処理
プリンタドライバ103で行われる処理を図2を用いて説明する。
【0024】
プリンタドライバ103は、OS102から入力した描画命令群に含まれるイメージ描画命令の色情報に対して、画像補正処理部120で後述する画像補正処理及び加工処理を行う。プリンタ用補正処理部121は、まず、処理された色情報によって描画命令をラスタライズし、RGB24ビットページメモリ上にドット画像データを生成する。そして、各画素に対してプリンタの色再現性に応じたマスキング処理、ガンマ補正処理および量子化処理などを行い、プリンタ特性に依存したCMYKデータを生成してプリンタ105に転送する。
【0025】
次に、イメージ描画命令で示される原画像に対して画像補正処理部120で行われる画像処理について、図3のフローチャートを参照して説明する。グラフィクス描画命令あるいはテキスト描画命令で示される原画像に対しては以下の処理は行われない。尚、原画像は例えばRAM109内の所定領域に格納されているとする。
【0026】
本実施形態の画像補正処理部120は図3に示すように、まず原画像がJPEG等により符号化されたデータであれば、復号する(S20,S21)。その後、ヒストグラム作成処理(S22)と該ヒストグラムに応じた画像補正処理(S23)を行なった後、イラスト加工処理(S24)を行なう。
【0027】
このようにしてイラスト加工処理が施された画像は、プリンタ用補正処理部121を介して印刷可能なデータとしてプリンタ105へ出力され、記録媒体上に印刷出力される。
【0028】
●画像補正処理
次に、図3のステップS23において、原画像に対してステップS22で得られた輝度ヒストグラムに基づいた画像補正処理を施す。例えば、輝度ヒストグラムに基づいて原画像の白位置及び黒位置を検出し、それに基づいて、例えば、原画像の色かぶりを補正する色かぶり補正、原画像の露出を最適化すべく輝度のコントラストを補正する露出補正、および出力画像の色のみえを良くするための彩度補正等の画像補正処理を行う。尚、これらの画像補正処理としては周知の方法を用いることができるため、ここでは詳細な説明は省略する。
【0029】
●イラスト加工処理
次に、図3のステップS24において、ステップS23で補正された原画像に対してステップS22で得られた輝度ヒストグラムに基づいたイラスト加工処理を施す。本実施形態においては、例えばデジタルカメラ111で撮影された原画像に対して、手書きのイラスト調の風合いを有する画像に加工するイラスト加工処理を行なうことを特徴とする。
【0030】
以下、本実施形態におけるイラスト加工処理について詳細に説明する。
【0031】
まず、本実施形態におけるイラスト加工処理の原理について説明する。本実施形態においては、原画像に対して所定条件を満たす5画素×5画素(以下、単に5×5と表記する)のフィルタによるフィルタリングを施すことにより、画像のエッジを抽出(強調)し、かつ色味を保存した画像に加工することができる。このフィルタの例を図4に示す。例えば、図5Aに示す原画像に対して図4に示すフィルタ40によるフィルタ処理を施すことにより、図5Bに示す画像が得られる。図5Bによれば即ち、写真画像である原画像の輪郭部が抽出されて階調数が減少し、更に明るさが増加していることにより、あたかも手書きのイラストであるかのような印象を与える画像に加工されていることが分かる。尚、図5Aはキャノン社のデジタルカメラであるPowerShotA5(登録商標)によって撮影されたものであり、画素数は81万画素である。
【0032】
ここで、本実施形態のイラスト加工処理を実現するフィルタについて説明する。
【0033】
画像に対してエッジ抽出を行なうためのフィルタとしては、例えばラプラシアンフィルタが知られている。一般にラプラシアンフィルタにおいては、その中央に位置する注目画素の係数(重み)を周囲よりも大きく設定することにより、画像における濃度の変化点、即ちエッジの抽出を可能としている。通常、エッジ抽出のためのラプラシアンフィルタにおける各係数の総和は「0」である。
【0034】
本実施形態におけるイラスト加工のためのフィルタ(以下、単に「フィルタ」と称する)は、例えば上述したように図4に示すフィルタ40が適当であり、図示される係数からなる5×5フィルタである。フィルタ40においては、注目画素の係数を「26」とし、その周囲の係数を全て「−1」に設定することにより、その総和は「2」となっている。
【0035】
また、本実施形態のフィルタは、もちろん図4に示すフィルタ40に限定されるものではなく、その係数の総和が0以上であれば良い。その他のフィルタ例を図6に示す。図6の(a)は、フィルタ40における注目画素の係数を1減じて「25」としたフィルタ61、図6の(b)は、同じくフィルタ40における注目画素の係数を1加算して「27」としたフィルタ62を示す。フィルタ61によるフィルタ処理後の画像は、フィルタ40の場合と比べて暗くなり、フィルタ62によるフィルタ処理後の画像は、フィルタ40の場合と比べて明るくなる。従って、それぞれの加工結果の特性から、フィルタ40を通常フィルタとすれば、フィルタ61,62はそれぞれ暗いめフィルタ、明るいめフィルタとなる。これは、画像の均一濃度領域に対してフィルタリングを行う場合について考えると、フィルタ係数の総和が「2」であれば信号値、即ちその明るさは2倍になるし、フィルタ係数の総和が「3」であればその明るさは3倍になることからも、容易に理解されよう。
【0036】
また、図6の(c)は、フィルタ40における注目画素の周囲係数を間引いたフィルタ63を示し、係数の総和を「2」に保つために、注目画素の係数も「18」に設定されている。フィルタ63によるフィルタ処理によれば、係数の数が減少することによりフィルタ処理時の演算量を減らし、処理速度の向上を可能とする。但し、フィルタ63における係数の間引きは、縦、横、斜め方向のエッジ検出を考慮して行われている。
【0037】
本実施形態によれば、上述したようなフィルタを使用して、原画像のRGB各プレーンに対してそれぞれフィルタ処理を施すことにより、簡単にイラスト調に加工することができる。本実施形態においては、さらに演算量を低減するために、RGBデータを輝度・色差信号に分解し、輝度信号のみに対してフィルタ処理を施し、色差信号に対しては所望する明るさに応じて定数倍することを特徴とする。
【0038】
本実施形態における輝度(Y)・色度(C1,C2)変換は以下の式により行う。尚、輝度、色度変換は以下の式に限らず様々な式を用いることが可能である。
【0039】
Y=0.3R+0.59G+0.11B
C1=R−Y
C2=B−Y
本実施形態では、上記輝度信号Yに対して、例えば図4に示したフィルタ40によるイラスト加工処理を施す。ここで注目画素の係数(重み)は、原画像の露出が十分(標準の明るさ)であれば「26」、即ちフィルタを構成する係数の総和が「2」であるという規則に則れば良い。また、ユーザの好みに応じて、暗めにしたければ「25」に、逆に明るくしたければ「27」,「28」・・・に設定すれば良い。尚、露出が不適切である場合には、画像補正処理部120において補正を施しても良い。
【0040】
ここでは、例えば図11Bに示すユーザインタフェースによって、ユーザが好みの明るさを設定し、それに応じて注目画素の係数を設定する。例えばユーザが標準の明るさを設定したい場合、輝度信号Yに対してフィルタ40を用いたフィルタリングを行うことによりY’を算出し、色差信号を
C1’=K×C1
C2’=K×C2
とする。ここでKは、ユーザが指定した明るさに応じた定数である。殺陣おば、標準の明るさが設定された場合にはK=2であり、さらに明るいモードが設定された場合にはK=3,4・・・等にすれば良い。もちろん、Kは整数に限定されない。
【0041】
そして、得られたY’,C1’,C2’をR,G,Bの値に戻すことにより、本実施形態のイラスト加工処理が完了する。
【0042】
●ラスタライズへの対応
ところが、ここで以下の問題が発生する。即ち、インクジェットプリンタに代表されるシリアルプリンタにおいては、アプリケーションソフト等のように1枚の画像を一括処理できる場合とは異なり、所謂ラスタライズが行われるために画像は分割処理され、従って5×5のフィルタ処理が不可能となってしまうという問題である。
【0043】
そもそも、画像を一括で処理できる場合にも、画像の上下左右の端領域では5×5のフィルタ処理を施すことはできない。ここで、図7を参照して5×5のフィルタ処理が不可能となる例について説明する。図7の700は処理対象となる画像であり、1矩形が1画素を示す。画像700の左上領域に位置する注目画素701を処理する場合について考えると、5×5のフィルタ処理は施せないことが分かる。従って、5×5のフィルタ処理を可能とする他の領域とは画質が異なってしまう。これは、いかなるフィルタ処理においても発生しうる不具合であるが、通常は画像の端部においてのみ発生するため視覚的に目立たず、さほど問題とはならない。
【0044】
尚、図7に示す注目画素701を処理する場合、注目画素701近傍の領域702内にあるフィルタリング可能な画素(以降、有効画素と称する)の数に応じて、注目画素701に対する係数を調節する方法が有効である。即ち、フィルタの係数の総和が正であるという規則に則って、例えば標準の明るさによる出力を所望するのであれば、係数の総和が「2」であるような特殊フィルタ703を用いて領域702に対するフィルタリングを行えば良い。
【0045】
いずれにせよ、このように画像を一括処理する場合には、3行もしくは3列以上の画素に基づいてフィルタ処理を行うことができ、かつ、いずれも画像端部であるために、視覚的にほとんど違和感なく、フィルタ処理、即ちイラスト加工処理を完了することができる。尚、3行3列以上の有効画素に対してフィルタ処理を行えば、ほとんど視覚的違和感が生じないことが経験的に分かっている。
【0046】
一方、プリンタドライバのように画像データのラスタライズが行われる場合には、その分割処理単位として複数行分(3行以上)の画像データが確保されるとは限らない。また、1枚の画像が複数領域毎に処理されるため、処理単位毎に使用されるフィルタが異なることにより、領域の境界線を境に画質の差が目立ってしまうという不具合が生じてしまう。
【0047】
極端な場合、例えば図8の(a)に示す様に画像を斜めに配置した場合には、図8の(b)に示す様な領域分割がなされてしまうことがある。この場合、矩形領域の確保できる領域801については複数行に対する通常のフィルタ処理が可能であるが、矩形でない領域802については、最悪の場合1行単位の処理を施す必要がある。領域802について通常のフィルタ処理を施すと、領域毎の処理結果の違いが顕著となってしまう。このような問題は、例えば画像に対してハート型等の特殊形状への編集を施した場合にも同様に発生する。
【0048】
ここで本実施形態の原理は、注目画素とその近傍画素との違いを強調することにあるため、画素間において急激な変化がある部分、即ちエッジ部分が強調される。つまり、注目画素に対して周囲との差をより強調して際だたせることが本実施形態の本質あるから、構成可能なフィルタサイズに応じて係数を調整することで、上記不具合を低減することができる。
【0049】
図9は、本実施形態におけるラスタライズされた画像データに対するイラスト加工処理を示すフローチャートである。まず、ラスタライズによって処理単位に分割された1行もしくは複数行分の画像データが入力される(S31)。
【0050】
すると、ステップS32において、該処理単位である画像データの行数に応じて、フィルタを設定する。具体的には、処理対象のデータが1行(あるいは1列)である場合には図10(a)に示すような特殊フィルタを適用し、データが2行(あるいは2列)である場合には図10(b)に示すような特殊フィルタを適用する。図10(a)及び図10(b)に示すフィルタにおける注目画素の係数Pは、ユーザの所望する明るさに応じて設定すれば良い。即ち、標準の明るさの場合、係数の総和が「2」となるように設定する。尚、処理対象の画像データの行と列が入れ代わっても同様に、このようなフィルタを適用すれば良い。
【0051】
尚、ステップS32においては、処理対象の画像データが通常のフィルタ処理を十分に可能とする行数からなるのであれば、通常フィルタ(本実施形態では5×5フィルタ)を設定する。
【0052】
そしてステップS33において、ステップS32で設定されたフィルタに基づき、対象データに対してフィルタリングを行うことにより、本実施形態におけるイラスト加工が施される。そしてステップS34において、画像データの全ての行についてのイラスト加工処理が終了したと判断されるまで、上記ステップS31〜S33の処理を繰り返す。
【0053】
図10(a)及び(b)からも分かるように、特殊フィルタは、そのサイズが小さくなるに従って、注目画素以外の周辺画素の係数を大きくする。そして、注目画素に対する係数は、該周辺画素の係数に基づいて決定される。
【0054】
尚、特殊フィルタにおける周辺画素に対する係数は、図10に示すように2の累乗に設定することが好ましい。そうすることによりシフト演算が可能となり、演算負荷の軽減及び処理時間の短縮が望める。
【0055】
尚、通常のフィルタ処理が可能な行数分の画像データに対しても、「有効画素」が不足してしまう場合があるが、そのような場合にも同様に上記原理を適用することで、分割領域の境界線上における不具合の発生を回避することができる。
【0056】
また、係数を大きくすればそれだけ特徴(エッジ)が際だつが、最適な強調の度合は通常処理に適用されるフィルタとのバランスに依存するため、最終的には出力結果を参考にして重みを調整すれば良い。例えば、有効画素の数及び注目画素との距離に応じて、係数を変更することが好ましい。
【0057】
以上、本実施形態における通常フィルタの例として5×5のフィルタについて説明したが、例えば通常フィルタサイズとしては、n×n(n=2×m+1(mは1以上の整数))であれば良いし、また、縦横でサイズが異なっていても良い。また、特殊フィルタも図10の例に限らず、p×q(p,qは1以上の整数)のどのようなサイズであっても良いことは言うまでもない。
【0058】
尚、本実施形態におけるイラスト加工処理では、フィルタのサイズによって、加工後の画像において抽出された輪郭部の太さが変化する。従って、イラスト加工の際の最適なフィルタサイズは、本実施形態で説明した5×5に限定されず、原画像の画像サイズや解像度、または画像内のオブジェクトの細かさ等に依存する。例えば、大きな画像や高解像度の画像、又は粗いオブジェクトの画像には大きなフィルタを、小さな画像や低解像度の画像、又は細かいオブジェクトの画像には小さなフィルタを適用することにより、抽出された輪郭部が前者の場合には太く、後者の場合には細くなる。また、オブジェクトの明るさ等によって、フィルタサイズ及びその係数を設定しても良い。また、要求される処理速度に応じてフィルタサイズ及びその係数を設定しても良いことはもちろんである。
【0059】
また本実施形態のイラスト加工処理においては、画像データの階調数を低減するが、必ずしも明るさを増大させる必要はない。
【0060】
かかるフィルタ処理の選択は、画像のサイズ、解像度、オブジェクトの細かさに応じて自動的に行なっても良いし、或いは、ユーザのマニュアル指示によって行なっても良い。従って、マニュアル選択のためのユーザインタフェースを提供することも、本発明に含まれる。
【0061】
以上説明したように本実施形態によれば、ラスタ処理がなされる画像データに対しても、一度に処理可能となる行数に応じてフィルタの係数を調整することにより、処理領域の境界において違和感のない、連続した画像処理結果を得ることができる。従って、例えば画像を斜め配置したり、任意形状に編集した場合においても、適切なイラスト加工を施すことが可能となる。
【0062】
また、本実施形態では画像のRGB情報を輝度・色差情報に変換し、輝度情報のみに対してフィルタリングを施し、色差成分は所望する明るさに基づいて定数倍する方法について説明したが、もちろん、RGB情報そのものや、または他の形式の画像データに対してフィルタリングを施しても良い。例えば、他の形式の原画像データに対しては、一旦RGB形式に変換した後に、それぞれの色成分に本実施形態に示したイラスト加工処理を実行するか、または、原画像のデータ形式に応じたフィルタを適用すれば良い。例えば、原画像がYMC形式であった場合には、本実施形態で示したフィルタの係数の正負を全て反転させれば良い。また、原画像がYHS等のデータに対しても適用が可能である。例えば、原画像がL*a*b*形式等、輝度成分のみを抽出可能な形式であれば、該輝度成分のみに対してフィルタ処理を施すことにより、RGB形式の各成分毎にフィルタ処理を施す場合と比べて演算量を減少させることができる。特に、フィルタサイズを大きくするほど、この効果が大きくなることは明らかである。
【0063】
また、本実施形態におけるイラスト加工対象となる画像は、デジタルカメラ111で撮影された画像に限定されず、例えばフォトスキャナ等によって読取られた写真画像を入力しても良いし、CD−ROM等の外部装置に格納されている写真画像であっても良い。
【0064】
また、本実施形態においてはステップS23で説明した補正処理を省略しても良い。また、原画像の露出状態等に応じて、ユーザが所望する明るさをマニュアル指定する場合には、ステップS22で示したヒストグラム作成処理を省略しても良い。
【0065】
<第2実施形態>
以下、本発明に係る第2実施形態について説明する。第2実施形態におけるシステム構成は上述した第1実施形態と同様であるため、説明を省略する。
【0066】
写真のリアリティを追求した、より高詳細なカラー画像処理へのニーズとは対照的に、セピア調を代表とするモノトーン加工のニーズも依然として高い。モノトーン加工処理自体はすでに普及しているため周知であるが、上述した第1実施形態で示したフィルタ処理によってイラスト加工が施された画像に対して、さらにモノトーン加工を施すことにより、例えば単色のクレヨン等によるデッサンのような、独特の風合いを有する画像を提供することができる。
【0067】
そこで第2実施形態においては、ユーザがモノトーン加工を指示する際に任意の色相の設定を可能とし、さらにイラスト加工処理も指示された場合にはモノトーン加工に先立って該処理を施すことを特徴とする。
【0068】
例えば、図11A〜図11Cに示すようなユーザインタフェース(以下、UI)により、ユーザは所望の画像処理を設定し、その処理結果をプレビューによって確認することができる。
【0069】
図11Aは、画像処理設定のUIにおける、「特殊効果」設定のための初期画面である。該UIにおいて、図11Bに示すようにユーザが「イラストタッチ」のチェックボックスをチェックすることにより、明るさを設定するための「明るさ調整レバー」の調節が可能となる。このレバー調節に応じて、イラスト加工が施されたプレビュー画像が表示される。
【0070】
また、図11Cは、図11Bに示したイラストタッチ設定の後に、さらに「単色効果」即ちモノトーン加工を設定したUI例を示す。本実施形態においてはモノトーン加工を設定した際に、セピア等のよく使用される色相を選択可能であり、かつ、それ以外の任意の色相をカラーバーによって全色相範囲から指定することができる。もちろん、「単色効果」のみを選択することにより、無彩色によるモノトーン加工を行うことも可能である。図11Cによれば、ユーザ指定色として黄味がかった緑色が設定されており、該指定色によるモノトーン加工後のプレビュー画像が表示されている。
【0071】
ユーザは、UIにおいてプレビュー画像が満足できるものであれば、「OK」ボタンを選択することにより画像処理の詳細設定を終了し、該設定は例えばプリンタドライバ内の不図示のRAM等に保持される。これにより、画像処理の実行がなされた場合に、該設定に基づいて、ユーザの所望する通りの加工が施された画像が得られる。
【0072】
また、第1実施形態で説明したように、イラスト加工処理を輝度・色差信号毎に施す場合には、色差信号を任意の色相とすることにより、簡単かつ高速にモノトーン加工を施すことができる。例えば、図5Aに示した原画像に対して、イラスト加工処理及びセピアによるモノトーン加工処理を施すことにより、図5Cに示す独特の風合いを有する画像が得られる。
【0073】
以上説明したように第2実施形態によれば、写真画像データに対してイラスト加工処理に加えてさらに任意の色相によるモノトーン加工を施すことを可能としたことにより、画像処理に関する知識の乏しいユーザであっても、多くのパターンかつ独特の画像処理効果等、所望の加工を施した画像を簡単に得ることができる。
【0074】
従って特に写真画像に対して、より自由度の高い加工を施すことができ、よりオリジナリティの高い画像を容易に作成することができる。
【0075】
尚、第2実施形態においては画像処理の設定として、1枚の画像にイラスト加工及びモノトーン加工を施す例について説明したが、もちろん他の画像処理を同時に施すことも可能である。例えば、UIによって加工後の画像の粗さを設定することにより、任意の解像度変換を施すことができる。
【0076】
<他の実施形態>
なお、本発明は、複数の機器(例えばホストコンピュータ、インタフェイス機器、リーダ、プリンタなど)から構成されるシステムに適用しても、一つの機器からなる装置(例えば、複写機、ファクシミリ装置など)に適用してもよい。
【0077】
また、本発明の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ(またはCPUやMPU)が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。
【0078】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【0079】
プログラムコードを供給するための記憶媒体としては、例えば、フロッピーディスク、ハードディスク、光ディスク、光磁気ディスク、CD−ROM、CD−R、磁気テープ、不揮発性のメモリカード、ROMなどを用いることができる。
【0080】
また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているOS(オペレーティングシステム)などが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【0081】
また、本発明の画像処理方法により得られた生成物、例えばプリント物も本発明に含まれる。
【0082】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行ない、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した図3に示すフローチャートに対応するプログラムコードを格納することになる。
【0083】
【発明の効果】
以上説明したように本発明によれば、ラスタライズされた画像データに対しても効果的なイラスト加工処理を施すことが容易に可能となる。
【0084】
また、写真画像に対してより自由度の高い加工を施すことにより、よりオリジナリティを有する画像を作成することが可能となる。
【図面の簡単な説明】
【図1】本発明に係る一実施例における画像処理システムの構成を示すブロック図、
【図2】プリンタドライバのブロック図、
【図3】プリンタドライバにおける画像処理を示すフローチャート、
【図4】本実施形態における通常フィルタ例を示す図、
【図5A】原画像の一例を示す図、
【図5B】図5Aの原画像に対するイラスト加工例を示す図、
【図5C】図5Aの原画像に対するイラスト加工及びモノトーン加工例を示す図、
【図6】他のフィルタ例を示す図、
【図7】画像を一括処理する際の画像端部に対するフィルタ処理例を示す図、
【図8】画像を斜めに配置した際の領域分割例を示す図、
【図9】本実施形態におけるイラスト加工処理を示すフローチャート、
【図10】本実施形態における特殊フィルタ例を示す図、
【図11A】第2実施形態における画像処理設定のユーザインタフェースを示す図、
【図11B】第2実施形態における画像処理設定のユーザインタフェースを示す図、
【図11C】第2実施形態における画像処理設定のユーザインタフェースを示す図、である。
【符号の説明】
100 ホストコンピュータ
101 アプリケーション
102 OS
103 プリンタドライバ
104 モニタドライバ
105 プリンタ
106 モニタ
107 HD
108 CPU
109 RAM
110 ROM
111 デジタルカメラ
112 入力デバイス
113 デバイスドライバ
[0001]
BACKGROUND OF THE INVENTION
  The present invention relates to an image processing method for processing an original image andImage processingapparatusAndThe present invention relates to a recording medium.
[Prior art]
  In recent years, with the widespread use of digital cameras, photo scanners, etc., it has become possible to easily digitize photographic images. In addition, output devices such as inkjet printers have also been improved in image quality and price, so that ordinary users can easily output photographs on recording paper, for example, at home.
[0002]
In addition, an apparatus that easily seals a photographed image on the spot has been widely used. In addition, along with the improvement in performance and price of personal computers and printers, for example, it has become possible to easily perform work such as creating a business card with a user's own photograph inserted at the user level. Thus, various needs for photographic images are increasing.
[0003]
Here, for example, when considering a case where a photograph is inserted into a business card, it is common to insert an expressionless photograph, particularly when creating a formal business card. However, since such business cards sometimes produce a hard time, it may be necessary to create a more informal business card. In that case, there is a need to create and insert a photograph with more personality by performing some processing on the photograph itself as well as the photograph of the facial expression desired by the user. As processing for satisfying such needs, for example, monotone processing typified by sepia, processing to illustration, and the like are known.
[0004]
Accordingly, in an apparatus capable of image processing, such as a personal computer, it is common for a user to perform desired processing on an image captured by a digital camera, for example, using a predetermined application, and output the processing result using an inkjet printer. It came to be done.
[0005]
A process called posterization has been proposed in Japanese Patent Application Laid-Open No. 1-314389, and illustration processing has been proposed in Japanese Patent Application Laid-Open Nos. 3-91088 and 3-91087.
[0006]
[Problems to be solved by the invention]
However, in the above-described conventional image processing apparatus, for example, in order to process a photographic image into an illustration, for example, an edge portion of the photographic image is extracted for an application for processing, and the color of each part is the same as the original image. It was painted as a color. Furthermore, the user has to set various parameters such as edge extraction and fill color in detail.
[0007]
Therefore, in order to obtain an illustration-like image, there is still room for improvement in terms of image quality. Moreover, the setting work is not only complicated, but also requires a user's skill to make an appropriate setting, which is difficult for a general user.
[0008]
In order to solve this problem, the applicant has proposed an illustration processing process by filtering in Japanese Patent Application No. 10-355236. However, when the processing is to be realized by the printer driver, the following problem occurs.
That is, in a serial printer typified by an ink jet printer or the like, raster processing is generally performed in order to save memory used. In that case, an image is divided and processed. The unit is not necessarily composed of a plurality of lines of data. In an extreme case, data of only one line may be processed. Accordingly, when the image is subjected to illustration processing by filtering, there are cases where the number of pixels to be filtered other than the target pixel becomes extremely small. This means that the image quality obtained as a result of processing deteriorates.
[0009]
  The present invention has been made in order to solve the above problems individually or all, and an image processing method for easily performing effective illustration processing on rasterized image data.Image processingapparatusAndAn object is to provide a recording medium.
[0010]
  In addition, an image processing method capable of creating an image having more originality by processing a photographic image with a higher degree of freedom, andImage processingapparatusAndAn object is to provide a recording medium.
[0011]
[Means for Solving the Problems]
As a technique for achieving the above object, the image processing method of the present invention includes the following steps.
[0012]
  That is,An input step of inputting image data divided into processing units by rasterization for each processing unit;
  A setting step for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
  An image processing step of applying the filter to the image data to extract a contour portion of the image data and reducing the number of gradations;
  The setting step sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than the predetermined size. Set a filter with a size corresponding to the size of the data processing unitIt is characterized by that.
[0013]
  For example,In the setting step, the filter is set according to the number of rows or columns of the processing unit of the image data.It is characterized by that.
[0014]
  For example,The setting step sets a 5 × 5 size filter when the processing unit of the image data is greater than or equal to a predetermined number of rows, and sets the image data when the processing unit of the image data is less than the predetermined number of rows. Set a filter with a size corresponding to the number of rows per processing unitIt is characterized by that.
[0017]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an embodiment according to the present invention will be described in detail with reference to the accompanying drawings.
[0018]
<First Embodiment>
● System configuration
An example of the system in this embodiment is shown in FIG. For example, a printer 105 such as an ink jet printer and a monitor 106 are connected to the host computer 100.
[0019]
The host computer 100 includes application software 101 such as a word processor, spreadsheet, and Internet browser, an OS (Operating System) 102, and various drawing command groups (image drawing commands and text drawing commands) indicating output images issued to the OS 102 by the application 101. , A graphics driver) and a monitor driver 104 that processes various drawing commands issued by the application 101 and displays them on the monitor 106 as software.
Reference numeral 112 denotes an instruction input device, and 113 denotes a device driver thereof. For example, by instructing various information displayed on the monitor 106, a mouse that performs various instructions to the OS 102 is connected. Instead of the mouse, another pointing device such as a trackball, a pen, or a touch panel, or a keyboard may be provided.
[0020]
The host computer 100 includes a central processing unit CPU 108, a hard disk HD 107, a random access memory RAM 109, a read only memory ROM 110, and the like as various hardware capable of operating these software. As an example of the image processing system shown in FIG. 1, a desired application capable of printing is installed on a commonly used PC-AT compatible personal computer manufactured by IBM using Microsoft Windows 98 as an OS. Then, a form in which a monitor and a printer are connected can be considered.
[0021]
In the host computer 100, based on the display image displayed on the monitor, the application 101 classifies the data into text data classified into text such as characters, graphics data classified into graphics such as graphics, and natural images. Output image data is created using image image data or the like. When the output image data is printed out, the application 101 issues a print output request to the OS 102, the graphics data portion is a graphics rendering command, and the image image data portion is a rendering command indicating an output image composed of an image rendering command. The group is issued to the OS 102. The OS 102 receives an application output request and issues a drawing command group to the printer driver 103 corresponding to the output printer. The printer driver 103 processes the print request and drawing command group input from the OS 102, creates print data that can be printed by the printer 105, and transfers the print data to the printer 105. When the printer 105 is a raster printer, the printer driver 103 sequentially performs image correction processing on drawing commands from the OS, sequentially rasterizes them into an RGB 24-bit page memory, and rasterizes all the drawing commands and then RGB 24-bits. The contents of the page memory are converted into a data format printable by the printer 105, for example, CMYK data, and transferred to the printer 105.
[0022]
In the host computer 100, it is possible to connect a digital camera 111 that captures a subject and generates image data in RGB format, and the captured image data can be read and stored in the HD 107. Note that image data taken by the digital camera 111 is encoded in JPEG format. The photographed image data can be transferred to the printer 105 after being decoded by the printer driver 103 as the above-described image image data.
[0023]
● Printer driver processing
Processing performed by the printer driver 103 will be described with reference to FIG.
[0024]
The printer driver 103 performs image correction processing and processing described later in the image correction processing unit 120 on the color information of the image drawing command included in the drawing command group input from the OS 102. First, the printer correction processing unit 121 rasterizes a rendering command based on the processed color information, and generates dot image data on the RGB 24-bit page memory. Then, masking processing, gamma correction processing, quantization processing, and the like corresponding to the color reproducibility of the printer are performed on each pixel, and CMYK data depending on the printer characteristics is generated and transferred to the printer 105.
[0025]
Next, image processing performed by the image correction processing unit 120 on the original image indicated by the image drawing command will be described with reference to the flowchart of FIG. The following processing is not performed on the original image indicated by the graphics drawing command or the text drawing command. It is assumed that the original image is stored in a predetermined area in the RAM 109, for example.
[0026]
As shown in FIG. 3, the image correction processing unit 120 of the present embodiment first decodes an original image if it is data encoded by JPEG or the like (S20, S21). Then, after performing a histogram creation process (S22) and an image correction process (S23) according to the histogram, an illustration processing process (S24) is performed.
[0027]
The image that has been subjected to the illustration processing in this way is output as printable data to the printer 105 via the printer correction processing unit 121, and is printed out on a recording medium.
[0028]
● Image correction processing
Next, in step S23 in FIG. 3, the original image is subjected to image correction processing based on the luminance histogram obtained in step S22. For example, the white position and black position of the original image are detected based on the luminance histogram, and based on this, for example, color fog correction for correcting the color cast of the original image, and luminance contrast correction to optimize the exposure of the original image Image correction processing such as exposure correction and saturation correction for improving the color of the output image. Note that a well-known method can be used as these image correction processes, and thus detailed description thereof is omitted here.
[0029]
● Illustration processing
Next, in step S24 of FIG. 3, illustration processing based on the luminance histogram obtained in step S22 is performed on the original image corrected in step S23. In the present embodiment, for example, an illustration processing process for processing an original image photographed by the digital camera 111 into an image having a handwritten illustration-like texture is performed.
[0030]
Hereinafter, the illustration processing in the present embodiment will be described in detail.
[0031]
First, the principle of illustration processing in the present embodiment will be described. In the present embodiment, the edge of the image is extracted (emphasized) by performing filtering with a filter of 5 pixels × 5 pixels (hereinafter simply referred to as 5 × 5) satisfying a predetermined condition with respect to the original image, Moreover, it can be processed into an image in which the color is preserved. An example of this filter is shown in FIG. For example, the image shown in FIG. 5B is obtained by performing the filtering process by the filter 40 shown in FIG. 4 on the original image shown in FIG. 5A. According to FIG. 5B, that is, the contour portion of the original image, which is a photographic image, is extracted, the number of gradations is reduced, and the brightness is increased, so that the impression is as if it is a handwritten illustration. It can be seen that the image has been processed. Note that FIG. 5A was taken with PowerShot A5 (registered trademark), which is a Canon digital camera, and has 810,000 pixels.
[0032]
Here, a filter for realizing the illustration processing of the present embodiment will be described.
[0033]
For example, a Laplacian filter is known as a filter for performing edge extraction on an image. In general, in the Laplacian filter, the coefficient of change (weight) of the pixel of interest located at the center thereof is set to be larger than that of the surrounding area, thereby making it possible to extract the density change point, that is, the edge in the image. Normally, the sum of the coefficients in the Laplacian filter for edge extraction is “0”.
[0034]
The filter for illustration processing (hereinafter simply referred to as “filter”) in this embodiment is, for example, the filter 40 shown in FIG. 4 as described above, and is a 5 × 5 filter having the coefficients shown in the figure. . In the filter 40, the coefficient of the pixel of interest is set to “26” and all the surrounding coefficients are set to “−1”, so that the total sum is “2”.
[0035]
Of course, the filter of the present embodiment is not limited to the filter 40 shown in FIG. 4, and the sum of the coefficients may be 0 or more. Another filter example is shown in FIG. 6A shows a filter 61 in which the coefficient of the pixel of interest in the filter 40 is decremented by 1 to “25”, and FIG. 6B shows that the coefficient of the pixel of interest in the filter 40 is incremented by 1 and “27” is obtained. Is shown. The image after the filter processing by the filter 61 becomes darker than that of the filter 40, and the image after the filter processing by the filter 62 becomes brighter than that of the filter 40. Therefore, if the filter 40 is a normal filter, the filters 61 and 62 are a dark filter and a light filter, respectively, from the characteristics of the respective processing results. Considering the case where filtering is performed on a uniform density region of an image, if the sum of filter coefficients is “2”, the signal value, that is, the brightness is doubled, and the sum of filter coefficients is “ If it is “3”, the brightness will be tripled.
[0036]
FIG. 6C shows a filter 63 obtained by thinning out the peripheral coefficients of the target pixel in the filter 40, and the coefficient of the target pixel is also set to “18” in order to keep the sum of the coefficients at “2”. Yes. According to the filter processing by the filter 63, the amount of calculation during the filter processing is reduced by reducing the number of coefficients, and the processing speed can be improved. However, the coefficient thinning in the filter 63 is performed in consideration of edge detection in the vertical, horizontal, and diagonal directions.
[0037]
According to the present embodiment, by using the filters as described above and performing filter processing on each of the RGB planes of the original image, it can be easily processed into an illustration. In the present embodiment, in order to further reduce the amount of calculation, RGB data is decomposed into luminance / color difference signals, filter processing is applied only to the luminance signals, and the color difference signals are subjected to the desired brightness. It is characterized by a constant multiplication.
[0038]
The luminance (Y) / chromaticity (C1, C2) conversion in this embodiment is performed by the following formula. The luminance and chromaticity conversion is not limited to the following formulas, and various formulas can be used.
[0039]
Y = 0.3R + 0.59G + 0.11B
C1 = R−Y
C2 = BY
In the present embodiment, illustration processing by the filter 40 shown in FIG. 4 is performed on the luminance signal Y, for example. Here, the coefficient (weight) of the pixel of interest is “26” if the exposure of the original image is sufficient (standard brightness), that is, according to the rule that the sum of the coefficients constituting the filter is “2”. good. Further, according to the user's preference, “25” may be set to darken, and “27”, “28”... When the exposure is inappropriate, the image correction processing unit 120 may perform correction.
[0040]
Here, for example, the user sets a desired brightness by the user interface shown in FIG. 11B, and the coefficient of the pixel of interest is set accordingly. For example, when the user wants to set standard brightness, Y ′ is calculated by performing filtering using the filter 40 on the luminance signal Y, and the color difference signal is calculated.
C1 ′ = K × C1
C2 '= K × C2
And Here, K is a constant corresponding to the brightness specified by the user. If the standard brightness is set, K = 2, and if a brighter mode is set, K = 3, 4,... Of course, K is not limited to an integer.
[0041]
Then, the obtained Y ′, C1 ′, and C2 ′ are returned to the values of R, G, and B, thereby completing the illustration processing of the present embodiment.
[0042]
● Rasterization support
However, the following problems occur here. That is, in a serial printer typified by an ink jet printer, unlike a case where a single image can be collectively processed as in application software or the like, the image is divided because of so-called rasterization, and therefore 5 × 5. The problem is that the filtering process becomes impossible.
[0043]
In the first place, even when images can be processed in a lump, 5 × 5 filter processing cannot be applied to the upper, lower, left, and right edge regions of the image. Here, an example in which 5 × 5 filter processing is impossible will be described with reference to FIG. 700 in FIG. 7 is an image to be processed, and one rectangle represents one pixel. Considering the case of processing the pixel of interest 701 located in the upper left region of the image 700, it can be seen that 5 × 5 filter processing cannot be performed. Accordingly, the image quality is different from that of other areas that allow 5 × 5 filter processing. This is a problem that can occur in any filtering process, but it usually occurs only at the edge of the image, so it is not visually noticeable and does not cause much problem.
[0044]
When the target pixel 701 shown in FIG. 7 is processed, the coefficient for the target pixel 701 is adjusted according to the number of filterable pixels (hereinafter referred to as effective pixels) in the region 702 near the target pixel 701. The method is effective. That is, in accordance with the rule that the sum of the coefficients of the filter is positive, for example, if an output with standard brightness is desired, a special filter 703 whose sum of coefficients is “2” is used for the region 702. Filtering can be performed.
[0045]
In any case, when processing an image in this way, filter processing can be performed based on pixels of 3 rows or 3 columns or more, and since both are image edges, Filter processing, that is, illustration processing can be completed with almost no sense of incongruity. It has been empirically found that almost no visual discomfort occurs when filtering is performed on effective pixels of 3 rows and 3 columns or more.
[0046]
On the other hand, when image data is rasterized as in a printer driver, image data for a plurality of lines (three or more lines) is not necessarily secured as a unit for the division processing. Further, since one image is processed for each of a plurality of areas, a filter used for each processing unit is different, which causes a problem that a difference in image quality becomes conspicuous with respect to a boundary line of the area.
[0047]
In an extreme case, for example, when an image is arranged obliquely as shown in FIG. 8A, area division as shown in FIG. 8B may be performed. In this case, the normal filtering process for a plurality of lines can be performed for the area 801 in which the rectangular area can be secured, but the process for each line needs to be performed for the non-rectangular area 802 in the worst case. When normal filter processing is performed on the region 802, the difference in processing results for each region becomes significant. Such a problem also occurs when an image is edited into a special shape such as a heart shape.
[0048]
Here, since the principle of the present embodiment is to emphasize the difference between the target pixel and its neighboring pixels, a portion where there is a sudden change between pixels, that is, an edge portion is emphasized. In other words, since the essence of the present embodiment is to emphasize the difference from the surroundings with respect to the pixel of interest, the problem can be reduced by adjusting the coefficient according to the configurable filter size. it can.
[0049]
FIG. 9 is a flowchart showing the illustration processing for the rasterized image data according to this embodiment. First, image data for one line or a plurality of lines divided into processing units by rasterization is input (S31).
[0050]
Then, in step S32, a filter is set according to the number of lines of image data that is the processing unit. Specifically, when the data to be processed is one row (or one column), a special filter as shown in FIG. 10A is applied, and when the data is two rows (or two columns). Applies a special filter as shown in FIG. The coefficient P of the target pixel in the filters shown in FIGS. 10A and 10B may be set according to the brightness desired by the user. That is, in the case of standard brightness, the sum of the coefficients is set to “2”. It should be noted that such a filter may be applied in the same manner even if the rows and columns of the image data to be processed are interchanged.
[0051]
In step S32, a normal filter (5 × 5 filter in this embodiment) is set if the image data to be processed has a number of rows that allows a normal filter process to be sufficiently performed.
[0052]
In step S33, illustration processing in the present embodiment is performed by filtering the target data based on the filter set in step S32. In step S34, the processes in steps S31 to S33 are repeated until it is determined that the illustration processing has been completed for all the rows of the image data.
[0053]
As can be seen from FIGS. 10A and 10B, the special filter increases the coefficients of peripheral pixels other than the target pixel as the size of the special filter decreases. Then, the coefficient for the target pixel is determined based on the coefficients of the surrounding pixels.
[0054]
The coefficient for the peripheral pixels in the special filter is preferably set to a power of 2 as shown in FIG. By doing so, it is possible to perform shift calculation, and it can be expected to reduce the calculation load and the processing time.
[0055]
Note that “effective pixels” may be insufficient even for image data for the number of rows that can be subjected to normal filtering, but in such cases as well, by applying the above principle, It is possible to avoid the occurrence of problems on the boundary lines of the divided areas.
[0056]
In addition, if the coefficient is increased, the feature (edge) becomes more prominent, but the optimum degree of emphasis depends on the balance with the filter applied to normal processing, so finally the weight is adjusted with reference to the output result Just do it. For example, it is preferable to change the coefficient according to the number of effective pixels and the distance from the target pixel.
[0057]
The 5 × 5 filter has been described above as an example of the normal filter in the present embodiment. For example, the normal filter size may be n × n (n = 2 × m + 1 (m is an integer of 1 or more)). In addition, the size may be different vertically and horizontally. Needless to say, the special filter is not limited to the example of FIG. 10 and may have any size of p × q (p and q are integers of 1 or more).
[0058]
In the illustration processing in this embodiment, the thickness of the contour portion extracted in the processed image changes depending on the size of the filter. Therefore, the optimum filter size at the time of illustration processing is not limited to 5 × 5 described in the present embodiment, but depends on the image size and resolution of the original image, the fineness of the object in the image, or the like. For example, a large filter is applied to a large image, a high-resolution image, or an image of a rough object, and a small filter is applied to a small image, a low-resolution image, or a fine object image. The former is thicker and the latter is thinner. Also, the filter size and its coefficient may be set according to the brightness of the object. Of course, the filter size and its coefficient may be set according to the required processing speed.
[0059]
In the illustration processing of the present embodiment, the number of gradations of the image data is reduced, but it is not always necessary to increase the brightness.
[0060]
The selection of the filter processing may be performed automatically according to the image size, resolution, and object fineness, or may be performed according to a manual instruction from the user. Accordingly, providing a user interface for manual selection is also included in the present invention.
[0061]
As described above, according to the present embodiment, even for image data that is subjected to raster processing, the filter coefficient is adjusted according to the number of rows that can be processed at one time, thereby making it uncomfortable at the boundary of the processing region. Continuous image processing results can be obtained. Therefore, for example, even when an image is arranged obliquely or edited into an arbitrary shape, appropriate illustration processing can be performed.
[0062]
In this embodiment, the RGB information of the image is converted into luminance / color difference information, the luminance information only is filtered, and the color difference component is multiplied by a constant based on the desired brightness. Filtering may be applied to the RGB information itself or other types of image data. For example, for original image data in other formats, after converting them to RGB format, the illustration processing shown in this embodiment is executed for each color component, or depending on the data format of the original image Apply the appropriate filter. For example, if the original image is in YMC format, all the positive and negative coefficients of the filter shown in this embodiment may be reversed. The present invention can also be applied to data such as an original image having YHS. For example, if the original image is in a format that can extract only the luminance component, such as the L * a * b * format, the filtering process is performed for each component in the RGB format by performing the filtering process only on the luminance component. The amount of calculation can be reduced compared with the case where it applies. In particular, it is clear that this effect increases as the filter size increases.
[0063]
In addition, the image that is the object of illustration processing in the present embodiment is not limited to the image photographed by the digital camera 111. For example, a photographic image read by a photo scanner or the like may be input, or a CD-ROM or the like may be input. It may be a photographic image stored in an external device.
[0064]
In the present embodiment, the correction process described in step S23 may be omitted. Further, when manually specifying the brightness desired by the user in accordance with the exposure state of the original image, the histogram creation process shown in step S22 may be omitted.
[0065]
Second Embodiment
Hereinafter, a second embodiment according to the present invention will be described. Since the system configuration in the second embodiment is the same as that of the first embodiment described above, description thereof is omitted.
[0066]
In contrast to the need for more detailed color image processing that pursues the reality of photography, there is still a high need for monotone processing represented by sepia. The monotone processing itself is well known because it is already widespread. However, by applying monotone processing to the image that has been subjected to the illustration processing by the filter processing shown in the first embodiment, for example, a monochromatic processing is performed. An image having a unique texture such as a drawing by crayons can be provided.
[0067]
Therefore, in the second embodiment, when a user instructs monotone processing, an arbitrary hue can be set, and when illustration processing is also instructed, the processing is performed prior to monotone processing. To do.
[0068]
For example, the user can set desired image processing and confirm the processing result by a preview through a user interface (hereinafter referred to as UI) as shown in FIGS. 11A to 11C.
[0069]
FIG. 11A is an initial screen for “special effect” setting in the UI for image processing setting. In the UI, as shown in FIG. 11B, the user can check the “illustration touch” check box to adjust the “brightness adjustment lever” for setting the brightness. In accordance with this lever adjustment, a preview image on which illustration processing has been performed is displayed.
[0070]
FIG. 11C shows a UI example in which “monochromatic effect”, that is, monotone processing is further set after the illustration touch setting shown in FIG. 11B. In this embodiment, when monotone processing is set, a frequently used hue such as sepia can be selected, and any other hue can be designated from the entire hue range by the color bar. Of course, by selecting only the “monochromatic effect”, it is also possible to perform monotone processing with an achromatic color. According to FIG. 11C, a yellowish green color is set as a user-specified color, and a preview image after monotone processing using the specified color is displayed.
[0071]
If the user is satisfied with the preview image on the UI, the user selects the “OK” button to end the detailed image processing settings, and the settings are held in, for example, a RAM (not shown) in the printer driver. . Thus, when image processing is executed, an image that has been processed as desired by the user is obtained based on the setting.
[0072]
Further, as described in the first embodiment, when the illustration processing is performed for each luminance / color difference signal, the monotone processing can be performed easily and at high speed by setting the color difference signal to an arbitrary hue. For example, an image having a unique texture shown in FIG. 5C is obtained by performing illustration processing and monotone processing by sepia on the original image shown in FIG. 5A.
[0073]
As described above, according to the second embodiment, since it is possible to perform monotone processing with an arbitrary hue in addition to illustration processing on photographic image data, a user with little knowledge about image processing can perform. Even in such a case, it is possible to easily obtain an image subjected to desired processing such as many patterns and unique image processing effects.
[0074]
Therefore, processing with a higher degree of freedom can be performed especially on photographic images, and images with higher originality can be easily created.
[0075]
In the second embodiment, an example in which illustration processing and monotone processing are performed on one image as an image processing setting has been described. Of course, other image processing can be performed simultaneously. For example, arbitrary resolution conversion can be performed by setting the roughness of the processed image by the UI.
[0076]
<Other embodiments>
Note that the present invention can be applied to a system including a plurality of devices (for example, a host computer, an interface device, a reader, and a printer), and a device (for example, a copying machine and a facsimile device) including a single device. You may apply to.
[0077]
Another object of the present invention is to supply a storage medium storing software program codes for implementing the functions of the above-described embodiments to a system or apparatus, and the computer (or CPU or MPU) of the system or apparatus stores the storage medium. Needless to say, this can also be achieved by reading and executing the program code stored in.
[0078]
In this case, the program code itself read from the storage medium realizes the functions of the above-described embodiments, and the storage medium storing the program code constitutes the present invention.
[0079]
As a storage medium for supplying the program code, for example, a floppy disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a CD-R, a magnetic tape, a nonvolatile memory card, a ROM, or the like can be used.
[0080]
Further, by executing the program code read by the computer, not only the functions of the above-described embodiments are realized, but also an OS (operating system) operating on the computer based on the instruction of the program code. It goes without saying that a case where the function of the above-described embodiment is realized by performing part or all of the actual processing and the processing is included.
[0081]
Further, a product obtained by the image processing method of the present invention, for example, a printed material is also included in the present invention.
[0082]
Further, after the program code read from the storage medium is written to a memory provided in a function expansion board inserted into the computer or a function expansion unit connected to the computer, the function expansion is performed based on the instruction of the program code. It goes without saying that the CPU or the like provided in the board or the function expansion unit performs part or all of the actual processing and the functions of the above-described embodiments are realized by the processing. When the present invention is applied to the storage medium, the storage medium stores program codes corresponding to the flowchart shown in FIG.
[0083]
【The invention's effect】
As described above, according to the present invention, it is possible to easily perform effective illustration processing on rasterized image data.
[0084]
In addition, it is possible to create an image having more originality by performing processing with a higher degree of freedom on a photographic image.
[Brief description of the drawings]
FIG. 1 is a block diagram showing a configuration of an image processing system in an embodiment according to the present invention;
FIG. 2 is a block diagram of a printer driver.
FIG. 3 is a flowchart showing image processing in the printer driver;
FIG. 4 is a diagram illustrating an example of a normal filter in the present embodiment;
FIG. 5A is a diagram showing an example of an original image;
FIG. 5B is a diagram showing an example of illustration processing for the original image in FIG. 5A;
FIG. 5C is a diagram showing an example of illustration processing and monotone processing for the original image in FIG. 5A;
FIG. 6 is a diagram showing another filter example;
FIG. 7 is a diagram showing an example of filter processing for image edges when batch processing images;
FIG. 8 is a diagram showing an example of area division when an image is arranged obliquely;
FIG. 9 is a flowchart showing illustration processing in the present embodiment;
FIG. 10 is a diagram showing an example of a special filter in the present embodiment;
FIG. 11A is a diagram showing a user interface for image processing setting in the second embodiment;
FIG. 11B is a diagram showing a user interface for image processing setting in the second embodiment;
FIG. 11C is a diagram showing a user interface for image processing setting in the second embodiment.
[Explanation of symbols]
100 Host computer
101 application
102 OS
103 Printer driver
104 Monitor driver
105 Printer
106 Monitor
107 HD
108 CPU
109 RAM
110 ROM
111 digital camera
112 Input devices
113 Device driver

Claims (8)

ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力工程と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定工程と、
前記フィルタを前記画像データに対して適用して該画像データの輪郭部を抽出するとともに階調数を低減する画像処理工程とを有し、
前記設定工程は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする画像処理方法。
An input step of inputting image data divided into processing units by rasterization for each processing unit;
A setting step for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
An image processing step of applying the filter to the image data to extract a contour portion of the image data and reducing the number of gradations;
The setting step sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than the predetermined size. An image processing method comprising: setting a filter having a size corresponding to a size of a data processing unit .
前記設定工程は、前記画像データの処理単位の行数又は列数に応じて前記フィルタを設定することを特徴とする請求項1記載の画像処理方法。The image processing method according to claim 1 , wherein the setting step sets the filter according to the number of rows or columns of a processing unit of the image data . 前記設定工程は、前記画像データの処理単位が所定行数以上の場合には5×5のサイズのフィルタを設定し、前記画像データの処理単位が前記所定行数未満の場合には該画像データの処理単位の行数に応じたサイズのフィルタを設定することを特徴とする請求項2記載の画像処理方法。 The setting step sets a 5 × 5 size filter when the processing unit of the image data is greater than or equal to a predetermined number of rows, and sets the image data when the processing unit of the image data is less than the predetermined number of rows. The image processing method according to claim 2 , wherein a filter having a size corresponding to the number of rows per processing unit is set . ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力手段と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定手段と、
前記フィルタを前記画像データに対して適用して該画像データの輪郭部を抽出するとともに階調数を低減する画像処理手段とを備え、
前記設定手段は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさ場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする画像処理装置
Input means for inputting image data divided into processing units by rasterization for each processing unit;
Setting means for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
Image processing means for applying the filter to the image data to extract a contour portion of the image data and reducing the number of gradations;
The setting means sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image data when the size of the processing unit of the image data is smaller than a predetermined size. An image processing apparatus, wherein a filter having a size corresponding to the size of each processing unit is set .
ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力手順と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定手順と、
前記フィルタを前記画像データに対して適用して該画像データの輪郭部を抽出するとともに階調数を低減する画像処理手順とをコンピュータに実行させるためのプログラムを格納した記録媒体であって、
前記設定手順は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする記録媒体
An input procedure for inputting image data divided into processing units by rasterization for each processing unit;
A setting procedure for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
A recording medium storing a program for causing a computer to execute an image processing procedure for extracting the contour portion of the image data by applying the filter to the image data and reducing the number of gradations,
The setting procedure sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than a predetermined size. A recording medium, wherein a filter having a size corresponding to the size of a data processing unit is set .
ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力工程と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定工程と、
前記画像データに対して前記フィルタを適用してイラスト加工及びモノトーン加工を施す画像処理工程とを有し、
前記設定工程は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする画像処理方法。
An input step of inputting image data divided into processing units by rasterization for each processing unit;
A setting step for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
An image processing step of applying illustration processing and monotone processing by applying the filter to the image data,
The setting step sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than the predetermined size. An image processing method comprising: setting a filter having a size corresponding to a size of a data processing unit .
ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力手段と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定手段と、
前記画像データに対して前記フィルタを適用してイラスト加工及びモノトーン加工を施す画像処理手段とを備え、
前記設定手段は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする画像処理装置
Input means for inputting image data divided into processing units by rasterization for each processing unit;
Setting means for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
Image processing means for applying illustration processing and monotone processing by applying the filter to the image data,
The setting means sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than a predetermined size. An image processing apparatus, wherein a filter having a size corresponding to a size of a data processing unit is set .
ラスタライズによって処理単位に分割された画像データを該処理単位ごとに入力する入力手順と、
入力された前記画像データのそれぞれの処理単位のサイズに応じて該画像データをフィルタ処理するためのフィルタを設定する設定手順と、
前記画像データに対して前記フィルタを適用してイラスト加工及びモノトーン加工を施す画像処理手順とをコンピュータに実行させるためのプログラムを格納した記録媒体であって、
前記設定手順は、前記画像データの処理単位のサイズが所定以上の大きさの場合には所定のフィルタを設定し、前記画像データの処理単位のサイズが所定以下の大きさの場合には該画像データの処理単位の大きさに応じたサイズのフィルタを設定することを特徴とする記録媒体
An input procedure for inputting image data divided into processing units by rasterization for each processing unit;
A setting procedure for setting a filter for filtering the image data according to the size of each processing unit of the input image data;
A recording medium storing a program for causing a computer to execute an image processing procedure for applying illustration processing and monotone processing by applying the filter to the image data,
The setting procedure sets a predetermined filter when the size of the processing unit of the image data is larger than a predetermined size, and sets the image when the size of the processing unit of the image data is smaller than a predetermined size. A recording medium, wherein a filter having a size corresponding to the size of a data processing unit is set .
JP18963799A 1998-12-14 1999-07-02 Image processing method, image processing apparatus, and recording medium Expired - Fee Related JP3673675B2 (en)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP18963799A JP3673675B2 (en) 1999-07-02 1999-07-02 Image processing method, image processing apparatus, and recording medium
SG1999006099A SG75190A1 (en) 1998-12-14 1999-12-06 Image processing method and apparatus image processing system and storage medium
DE69940719T DE69940719D1 (en) 1998-12-14 1999-12-10 Image processing method and apparatus, image processing system and storage medium
AT99309950T ATE428995T1 (en) 1998-12-14 1999-12-10 IMAGE PROCESSING METHOD AND APPARATUS, IMAGE PROCESSING SYSTEM AND STORAGE MEDIUM
EP99309950A EP1014688B8 (en) 1998-12-14 1999-12-10 Image processing method and apparatus, image processing system, and storage medium
US09/459,479 US7038810B1 (en) 1998-12-14 1999-12-13 Image processing method and apparatus, image processing system, and storage medium
CN99126712A CN1114888C (en) 1998-12-14 1999-12-14 Image processing method and device, image processing system,and memory medium
KR10-1999-0057713A KR100374019B1 (en) 1998-12-14 1999-12-14 Image processing method and apparatus, image processing system, and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP18963799A JP3673675B2 (en) 1999-07-02 1999-07-02 Image processing method, image processing apparatus, and recording medium

Publications (2)

Publication Number Publication Date
JP2001024872A JP2001024872A (en) 2001-01-26
JP3673675B2 true JP3673675B2 (en) 2005-07-20

Family

ID=16244646

Family Applications (1)

Application Number Title Priority Date Filing Date
JP18963799A Expired - Fee Related JP3673675B2 (en) 1998-12-14 1999-07-02 Image processing method, image processing apparatus, and recording medium

Country Status (1)

Country Link
JP (1) JP3673675B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007288439A (en) * 2006-04-14 2007-11-01 Fujifilm Corp Image processing apparatus and method therefor

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002310920A (en) * 2001-04-19 2002-10-23 Keisoku Kensa Kk Method for detecting crack in concrete wall and device thereof
JP4765667B2 (en) 2006-02-27 2011-09-07 ブラザー工業株式会社 Image processing program and image processing apparatus
JP4715622B2 (en) * 2006-05-08 2011-07-06 富士ゼロックス株式会社 Image processing apparatus and toner saving method
JP6796277B2 (en) 2016-05-23 2020-12-09 大日本印刷株式会社 Image processing equipment, image processing methods, and programs

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007288439A (en) * 2006-04-14 2007-11-01 Fujifilm Corp Image processing apparatus and method therefor

Also Published As

Publication number Publication date
JP2001024872A (en) 2001-01-26

Similar Documents

Publication Publication Date Title
KR100374019B1 (en) Image processing method and apparatus, image processing system, and storage medium
CN100397420C (en) Image processing device and image processing method and its program
JP4890974B2 (en) Image processing apparatus and image processing method
JP4890973B2 (en) Image processing apparatus, image processing method, image processing program, and storage medium
JP2008011267A (en) Image processor, image processing method, image processing program, and memory medium
JP6417851B2 (en) Image processing apparatus and computer program
US10592766B2 (en) Image processing apparatus and medium storing program executable by image processing apparatus
JP4262151B2 (en) Image processing method, image processing apparatus, computer program, and storage medium
JP2006343863A (en) Image processor and image processing method
JP3689574B2 (en) Image processing method and apparatus, image processing system, and recording medium
JP2001175843A (en) Image processing method, image processor and storage medium
JP2010068361A (en) Photographic image processing method, photographic image processing program, and photographic image processor
JP3673675B2 (en) Image processing method, image processing apparatus, and recording medium
US7809199B2 (en) Image processing apparatus
JP3667182B2 (en) Image processing method and image processing apparatus
JP4186558B2 (en) Image processing method and apparatus
JP2001169098A (en) Medium recording output picture data correction program, output picture data correction method, output picture data correction device, medium recording picture data reduction program, picture data reduction method, picture data reduction device, medium recording picture data correction program and method and device for correcting picture data
JP2006113658A (en) Image processing apparatus and method, and storage medium with program recorded thereon
JP4164215B2 (en) Image processing method, apparatus, and recording medium
JP2002281306A (en) Method and apparatus for forming image, and recording medium
JP6736299B2 (en) Printing device, printing method, and program
JP2007104250A (en) Image display method, system, and program
JP3952188B2 (en) Image interpolation apparatus, image interpolation method, and image interpolation program
JP4050382B2 (en) Multi-value image smoothing apparatus and image forming apparatus
JP2003101779A (en) Method and equipment for controlling spot function to realize digital half tone

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040312

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040511

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20050415

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20050425

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090428

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090428

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100428

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110428

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120428

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130428

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130428

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140428

Year of fee payment: 9

LAPS Cancellation because of no payment of annual fees