JP2020107982A - 画像処理装置、色変換方法および色変換プログラム - Google Patents

Abstract

【課題】色見本と原稿画像とは一致しない場合に、色合わせを行う対象を抽出して色合わせを行うことを可能にする。【解決手段】色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う画像処理装置であって、色見本画像と、原稿画像を記憶する記憶部と、前記色見本画像と原稿画像との対比により色調整を行う制御部と、を有し、前記制御部は、色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出し、前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定する。【選択図】図２

Description

この発明は、色見本画像を色見本として、原稿画像の出力色を合わせる画像処理装置、色変換方法および色変換プログラムに関する。

画像形成装置などでは、印刷物を見本（＝刷り見本）として原稿データのオンデマンド機等での出力色を合わせるために色調整したものが用いられる場合がある。
例えば、特許文献１に示されるように、見本現物のスキャン画像から目標の色彩値を求め、原稿データの同位置にある画素が所望の色になるよう自動調整する方法が開示されている。

特開２０１６−１３９８６７号公報 特表２００７−５３５８２９号公報

ところで、色見本が原稿データと同内容のこともある（増刷の場合等）が、内容が異なることもある（図５に示すように、シリーズ物で、（１）ロゴマーク等で位置が違う、（２）違う文字が乗っている背景、（３）「９月号／１０月号」のように異なる文字列、を見本の色に合わせる、等）。
しかし、特許文献１では、色見本と原稿とが同内容であることが前提であり、色見本と原稿とが一致しない場合には色調整を行うことができない。
また、特許文献２では、内容が異なる画像同士の色合わせ方法が開示されている。色合わせの対象抽出は、画像中の色の出現頻度（画素）とそのパターンマッチングにより判別しており、上記「見本と原稿が異なる」場合、特に共通部分が少ない場合は誤抽出が起きてしまうという課題がある。

本発明は、上記事情を背景としてなされたものであり、見本と原稿が異なる場合にも、色合わせを行う対象を誤検知なく抽出して色調整を行うことを可能にする画像処理装置、色変換方法および色変換プログラムを提供することを目的とする。

すなわち、本発明の画像処理装置のうち、第１の形態は、色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う画像処理装置であって、
色見本画像と、原稿画像を記憶する記憶部と、
前記色見本画像と原稿画像との対比により色調整を行う制御部と、を有し、
前記制御部は、色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出し、前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、前記所定の項目として、原稿画像および色見本画像にそれぞれ含まれる色について、均一度が所定以上の連続した領域を抽出することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、色の均一度を、原稿画像および色見本画像に含まれる画素値で判断することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、抽出された領域において、付帯情報の比較として、
・原稿画像および色見本画像間の推定色の近似度が所定以上、
・原稿画像および色見本画像間の配置の近似度が所定以上、
・原稿画像および色見本画像間の形状の近似度が所定以上、
・原稿画像および色見本画像間の面積の近似度が所定以上、
・原稿画像におけるオブジェクトの属性が文字または図形である、
のうちの１つ以上を用いて前記色見本画像の領域の選定を行うことを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、前記推定色を付帯情報として用いる場合、デバイス非依存色で判断し、
前記配置を付帯情報として用いる場合、原稿画像および色見本画像について、領域における特定箇所からの距離、または、距離比で判断し、
前記形状を付帯情報として用いる場合、領域の高さ、または、幅、または、線状の構造部分の太さで判断し、
前記面積を付帯情報として用いる場合、領域の面積、または、原稿画像および色見本画像全面に対する面積比で判断し、
前記原稿画像における領域の属性を付帯情報として用いる場合は、オブジェクトタイプで判断することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、付帯情報の比較結果として、原稿画像および色見本画像間の推定色の近似度が所定以上であるかの判定を必須とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うことを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、前記付帯情報の複数の項目を用いて判定をする場合、各判定項目の結果に重み付けして総合判定することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、前記総合判定の閾値を複数段階設け、ユーザーが選択可能とすることを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、選定された色見本画像の領域を表示し、ユーザーに色調整の可否の確認を求めることを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記制御部は、ユーザーの色調整可否入力結果と、自動判定結果を学習し、自動判定結果がユーザーの可否入力に近付くように調整することを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記色見本画像は、領域の形状・属性情報を含まないことを特徴とする。

他の形態の画像処理装置の発明は、前記形態の発明において、前記原稿画像と色見本画像は、異なる色空間の値または異なるデバイス値であることを特徴とする。

本発明の色調整方法のうち、第１の形態は、色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う色調整方法であって、
色見本画像と、原稿画像とを取得し、
色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出し、前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定することを特徴とする。

他の形態の色調整方法の発明は、前記形態の発明において、選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うことを特徴とする。

本発明の色調整プログラムのうち、第１の形態は、色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う画像処理装置で実行されるプログラムであって、
前記プログラムは、前記画像処理装置に対し、
色見本画像と、原稿画像を記憶するステップと、
色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出するステップと、
前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定するステップと、を実行させることを特徴とする。

他の形態の色調整プログラムの発明は、前記形態の発明において、さらに、選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うステップを有することを特徴とする。

すなわち、本発明によれば、印刷物を色見本として原稿データの出力色を合わせる際、色見本と原稿が異なる内容であっても、例えば、色の均一度が所定以上の連続した領域を抽出し、推定色の近似度、配置の近似度、形状の近似度、原稿データのオブジェクトタイプなど、を加味して抽出判定を行い、自動で色を合わせるべき対象を誤検知無く抽出することが可能になる。

本発明の一実施形態の画像処理装置を含む制御ブロックを示す図である。 同じく、色調整に至る手順を説明するフローチャートである。 同じく、各項目における重み付けの例を示す表である。 同じく、色見本画像、原稿画像のプレビュー表示、色見本採用入力などを行うユーザーインターフェースを示す図である。 色見本と原稿が一部で異なる場合の例を説明する図である。

以下に、本発明の一実施形態を添付図面に基づいて説明する。
図１は、画像処理のシステム構成の制御ブロックを示す図であり、ネットワーク接続可能なプリントコントローラー１０と、プリントコントローラー１０に接続されたプリンター２０及びスキャナー３０を備えている。必要な機能があれば構成は上記に限定されず、たとえば、プリントコントローラー１０はプリンター２０の中に内包されていてもよく、スキャナー３０はネットワーク５０を通じてプリントコントローラー１０に接続されてもよい。

プリントコントローラー１０は、ネットワーク５０に接続するネットワークＩＦ部１１、出力物を所望の色に合わせるための色変換（例えばＩＣＣプロファイルを用いる）を行い、入力データの記述言語を解釈し、プリンター２０に送信する画像データを作成する演算部１６を内包するＲＩＰ処理部１５、スキャナーと接続するスキャナーＩＦ部１２、プリンター２０に画像データの送信と出力方法を指示するためのプリンターＩＦ部１３、画像データや各種の情報を記憶する記憶部１４、などにより構成される。演算部１６はＲＩＰ処理部１５に内包されなくてもよい。演算部１６は、さらに、見本画像と原稿データに対し各種処理を行い本実施形態の色合わせ対象自動抽出を行う。
この実施形態では、プリントコントローラー１０は本発明の画像処理装置に相当し、演算部１６は、本発明の制御部に相当する。

プリントコントローラー１０は、抽出された色合わせ対象を表示する表示部１８、ユーザーによる色合わせの可否の入力を受け付ける入力部１７、を有する。入力部１７と表示部１８はＲＩＰ処理その他と共用でよく、プリントコントローラー１０内になくてもよく、例えばネットワーク接続可能な別のＰＣ内にあってプリントコントローラー１０と連携して動作してもよい。

プリンター２０は、プリントコントローラー１０の指示に基づき印刷を行なう画像形成装置である。プリンター２０は、プリントコントローラー１０と通信を行なうためのコントローラーＩ／Ｆ部２１、印刷指示に従い画像形成を行うプリント処理部２２、などにより構成される。プリント処理部２２は、画像形成を安定化させるために別途任意の補正を行ってもよい。

スキャナー３０は、プリントコントローラー１０の指示に基づき原稿をスキャンしデジタルデータを生成する装置である。プリントコントローラー１０と通信を行なうためのコントローラーＩ／Ｆ部３１、指示に従い画像形成を行うスキャン処理部３２、などにより構成される。別途任意の補正を行ってもよい。

次に、「原稿データ」と、色見本から取得された「見本画像」との内容の少なくとも一部が一致しない「見本画像」とを用いた色調整の手順について図２のフローチャートを用いて説明する。以下の手順はプリントコントローラーにより行うことができ、演算部で制御を実行することができる。

１．原稿データ及び見本画像を取得（ステップｓ１）
ユーザーが指定した「原稿データ」「見本画像」を受け付ける。
原稿データは例えば各種ＤＴＰアプリで作成されたＰｏｓｔＳｃｒｉｐｔ（登録商標）、ＰＤＦ（登録商標）。見本画像は印刷された紙（例えば雑誌の先月号の表紙現物、または先月号の印刷時に印刷発注者と色再現に合意した色校正出力物）をスキャナーでスキャンしてデジタルデータ化する。例えばＲＧＢ値等のデバイス値からなるビットマップデータとする。

２．前処理（原稿データのＲＩＰ処理・推定色算出、見本画像の推定色算出）（ステップｓ２）
原稿データをＲＩＰ処理する。このとき、設定に応じて色変換を行う。必要な設定内容（例えばレンダリングインテント）や必要なデータ（例えばＩＣＣプロファイル）は別途任意の方法で取得する。処理後は例えばＣＭＹＫ値等のデバイス値からなるビットマップデータとし、任意の公知の方法で見本画像のデジタルデータと相互比較可能な解像度に変換する。

また、原稿データ各画素の推定色を算出する。任意の方法・精度向上手法を使ってよい。例えば色変換後の各画素値（例えばＣＭＹＫ値）とプリンタプロファイルを使用する。推定色はデバイス非依存色、例えばＣＩＥ Ｌ＊ａ＊ｂ＊である。
更に、
・記述言語を解釈し、記述（例えばポストスクリプト）の各単位から生成された図形が占める画素を特定する
・記述言語を解釈し、各画素の属性（例えばｔｅｘｔ／ｇｒａｐｈｉｃ／ｉｍａｇｅ）を特定する
を行ってもよい。
また、見本画像のデジタルデータの各画素の推定色を算出する。任意の方法・精度向上手法を使ってよい。例えば取得されたデバイス値（例えばＲＧＢ値）とスキャナプロファイルを使用する。推定色はデバイス非依存、色例えばＣＩＥ Ｌ＊ａ＊ｂ＊である。

３．「均一度が所定以上の連続した領域」＝オブジェクトをピックアップ、各オブジェクトの付帯情報（推定色、配置、形状、面積、属性）を取得（ステップｓ３）
２．で得た原稿データをＲＩＰ処理したデータ、及び、見本画像のデジタルデータをそれぞれ任意の公知の方法で解析し、均一度が所定以上（例えばＲＧＢ値／ＣＭＹＫ値において、Ｒ，Ｇ，Ｂの差の最大／Ｃ，Ｍ，Ｙ，Ｋの差の最大が閾値以下）の連続した領域が検出できたら「オブジェクト」であると判定する。

次いで、各オブジェクトの
・推定色（例えば該当画素の推定色の平均値、最頻値）
・配置（例えばオブジェクトの特定箇所（上／下／左／右の端／中央）の、画像全面（原稿と見本が塗り足しや裁ちトンボの有無等で異なる画像サイズの場合、任意の公知の方法で位置合わせを行ってよい）の特定位置（上／下／左／右の端／中央）からの距離、または、距離比）
・形状（オブジェクトの高さ／幅、または、線状の構造部分の太さ）
・面積
・「原稿データ」のオブジェクトについては属性（ＰｏｓｔＳｃｒｉｐｔ（登録商標）またはＰＤＦ（登録商標））で記載されるオブジェクトタイプ
を取得し、オブジェクトと関連付けて記憶する

４．未判定の原稿データのオブジェクト（領域）あり？（ステップｓ４）
未判定の原稿データの領域がなければ手順を終了し、未判定の原稿データの領域があれば次ステップに手順を進める。

５．原稿データのオブジェクト（領域）を１つ選択（ステップｓ５）
原稿データのオブジェクト毎に、見本画像の各オブジェクトが“見本色”にあたるかの抽出判定を行う。（結果的に全てのオブジェクト同士を照合できればよく、処理の組み方はこれに限らない）

６．項目ごと判定（属性判定、見本画像の各オブジェクトとの各種近似度算出）（ステップｓ６）
選択した１つ原稿データのオブジェクトに対し、
・「原稿データ」におけるオブジェクトの属性と、
見本画像の各オブジェクトに対する
・「原稿データ」−「見本画像」間の推定色の近似度
・「原稿データ」−「見本画像」間の配置の近似度
・「原稿データ」−「見本画像」間の形状の近似度
・「原稿データ」−「見本画像」間の面積の近似度
を算出する。

７．項目ごとの判定結果を重み付け合算（ステップｓ７）
項目ごとの判定結果を重み付け合算する。図３は重み付けの例で、各項目に照らし合わせ、該当する得点を合算する。

８．見本色オブジェクトに該当するか判定（ステップｓ８）
重み付け合算された値が閾値（例えば１３）以上であれば、そのオブジェクトは“見本色”にあたるとして抽出する。閾値を複数使用して「抽出レベル狭／中／広」（「広」側が閾値低）としてユーザーに予め選択させてもよい。

９．見本色オブジェクトとしての抽出対象あり？（ステップｓ９）
見本色オブジェクトとしての抽出対象があった場合、次ステップに移行し、見本色オブジェクトとしての抽出対象がない場合、ステップｓ４に戻り、対象オブジェクトが無くなるまで手順を繰り返す。

１０．原稿のオブジェクトに関連付けて、抽出した見本色オブジェクトと付帯情報、特に推定色を記録する。その後、ステップｓ４に戻り、対象オブジェクトが無くなるまで手順を繰り返す。

図３は、上記したように、各項目に重み付けをした表を示している。
１段目は、特定色のΔＥ００も応じて、３以下で５得点、４超５以下で３得点が与えられている。
２段目では、配置が、上端または下端位置の差が５ｍｍ以下の場合に２得点、左端または右端位置の差が５ｍｍ以下で１得点が与えられている。
３段目は、形状において、高さの差が３ｍｍ以下に１得点、幅の差が３ｍｍ以下に１得点を与えている。
４段目は、面積の比が０．９超１．１以下に１得点を与えている。
５段目では、原稿のオブジェクトの属性が文字の場合に５得点、図形の場合に３得点を与えている。

なお、ユーザーに、原稿オブジェクトに対応する見本色オブジェクトを提示してもよい。表示部に原稿と見本の画像を並べて表示し、マーキングする等、任意の方法を採ることができる。更に、マーキングされた対応関係を色調整の見本色として認めるか否かをユーザーに入力させてもよい。
図４はユーザーインターフェース２００を示すものであり、表示部兼入力部としての機能を有している。
左側の画面では、見本画像欄２０２と原稿画像欄２０１を並べてプレビュー表示しており、一部で画像が異なっている。すなわち、相違している部分にマーキングをしており、具体的には、原稿オブジェクトでＩＤ＝０７である「１」と、見本オブジェクトであるＩＤ＝０５である「９」の色を変えている。

右側の画像では、原稿オブジェクトのＩＤ番号を表示するＩＤ番号欄２１０が表示されており、この例では「０７」が表示されている。
その下側に、見本オブジェクトＩＤ欄と、強調表示のチェック欄と、色見本採用のチェック欄が一覧２１１で表示されており、スライドバーによって表示域を変更することができる。色見本採用のチェックでは、色調整の見本色として認めるか否かをチェックによってユーザーが入力することができる。チェックがなされていなければ、色調整の見本色として採用されない。
その他に、画像をクリックしてオブジェクトＩＤを選択するなど、表示、選択に関する拡大、縮小などの任意の操作を行えるようにしてもよい。

色変換更新では、抽出した対応関係（または、その中からユーザーに認められた対応関係）に従って、抽出された見本色オブジェクトの推定色（デバイス非依存色）を、対応する原稿オブジェクトの画素値（デバイス依存色）に対する目標色になるよう色変換プロファイルを書き換える。同等の色合わせが可能な他の方法でもよい。

本実施形態によれば、色見本と原稿データの内容が異なり、かつ、内容の共通部分が少ない場合であっても、推定色に加えて、配置／形状／面積／原稿オブジェクトの属性、の情報を用いることで、原稿データの色合わせすべき領域に対応する見本色を誤りなく抽出できる。

１０ プリントコントローラー
１４ 記憶部
１５ ＲＩＰ処理部
１６ 演算部
１７ 入力部
１８ 表示部
２０ プリンター
３０ スキャナー
５０ ネットワーク
２００ ユーザーインターフェース

Claims (17)

1. 色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う画像処理装置であって、
   色見本画像と、原稿画像を記憶する記憶部と、
   前記色見本画像と原稿画像との対比により色調整を行う制御部と、を有し、
   前記制御部は、色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出し、前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定することを特徴とする画像処理装置。
2. 前記制御部は、前記所定の項目として、原稿画像および色見本画像にそれぞれ含まれる色について、均一度が所定以上の連続した領域を抽出することを特徴とする請求項１記載の画像処理装置。
3. 前記制御部は、色の均一度を、原稿画像および色見本画像に含まれる画素値で判断することを特徴とする請求項２記載の画像処理装置。
4. 前記制御部は、抽出された領域において、付帯情報の比較として、
   ・原稿画像および色見本画像間の推定色の近似度が所定以上、
   ・原稿画像および色見本画像間の配置の近似度が所定以上、
   ・原稿画像および色見本画像間の形状の近似度が所定以上、
   ・原稿画像および色見本画像間の面積の近似度が所定以上、
   ・原稿画像におけるオブジェクトの属性が文字または図形である、
   のうちの１つ以上を用いて前記色見本画像の領域の選定を行うことを特徴とする請求項１〜３のいずれか１項に記載の画像処理装置。
5. 前記制御部は、前記推定色を付帯情報として用いる場合、デバイス非依存色で判断し、
   前記配置を付帯情報として用いる場合、原稿画像および色見本画像について、領域における特定箇所からの距離、または、距離比で判断し、
   前記形状を付帯情報として用いる場合、領域の高さ、または、幅、または、線状の構造部分の太さで判断し、
   前記面積を付帯情報として用いる場合、領域の面積、または、原稿画像および色見本画像全面に対する面積比で判断し、
   前記原稿画像における領域の属性を付帯情報として用いる場合は、オブジェクトタイプで判断することを特徴とする請求項４または５に記載の画像処理装置。
6. 前記制御部は、付帯情報の比較結果として、原稿画像および色見本画像間の推定色の近似度が所定以上であるかの判定を必須とする請求項５記載の画像処理装置。
7. 前記制御部は、選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うことを特徴とする請求項６記載の画像処理装置。
8. 前記制御部は、前記付帯情報の複数の項目を用いて判定をする場合、各判定項目の結果に重み付けして総合判定することを特徴とする請求項１〜７のいずれか１項に記載の画像処理装置。
9. 前記制御部は、前記総合判定の閾値を複数段階設け、ユーザーが選択可能とすることを特徴とする請求項８記載の画像処理装置。
10. 前記制御部は、選定された色見本画像の領域を表示し、ユーザーに色調整の可否の確認を求めることを特徴とする請求項１〜９のいずれか１項に記載の画像処理装置。
11. 前記制御部は、ユーザーの色調整可否入力結果と、自動判定結果を学習し、自動判定結果がユーザーの可否入力に近付くように調整することを特徴とする請求項１０に記載の画像処理装置。
12. 前記色見本画像は、領域の形状・属性情報を含まないことを特徴とする請求項１〜１１のいずれか１項に記載の画像処理装置。
13. 前記原稿画像と色見本画像は、異なる色空間の値または異なるデバイス値であることを特徴とする請求項１〜１２のいずれか１項に記載の画像処理装置。
14. 色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う色調整方法であって、
    色見本画像と、原稿画像とを取得し、
    色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出し、前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定することを特徴とする色調整方法。
15. 選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うことを特徴とする請求項１４記載の色調整方法。
16. 色見本画像と、原稿画像とを対比して、原稿画像が出力された際の色調整を行う画像処理装置で実行されるプログラムであって、
    前記プログラムは、前記画像処理装置に対し、
    色見本画像と、原稿画像を記憶するステップと、
    色見本画像と原稿画像とにおいて、所定の項目に関し、均一度が所定以上の連続する領域を抽出するステップと、
    前記領域における各画像の付帯情報を比較し、比較結果に基づいて、前記原稿画像の領域に対応する、前記色見本画像の領域を選定するステップと、を実行させることを特徴とする色処理プログラム。
17. さらに、選定された色見本画像の領域における推定色を、対応する原稿画像の領域における画素値の目標色となるように色調整を行うステップを有することを特徴とする請求項１６記載の色調整プログラム。