JP2022189089A

JP2022189089A - 情報処理装置、方法およびプログラム、並びにシステム

Info

Publication number: JP2022189089A
Application number: JP2021097465A
Authority: JP
Inventors: 智博鈴木; Tomohiro Suzuki
Original assignee: Canon Inc
Current assignee: Canon Inc
Priority date: 2021-06-10
Filing date: 2021-06-10
Publication date: 2022-12-22
Also published as: US20240028854A1; US11809928B2; US20220405539A1

Abstract

【課題】印刷処理による多重化された付加情報の欠落を防ぐ情報処理装置を提供する。
【解決手段】情報処理装置は、入力画像データに基づく印刷の設定として、モノクロモードであることと、印刷対象の画像に対して付加情報を多重化することとが設定されていることを条件として、モノクロモードに代えてカラーモードを設定する。そして、入力画像データに基づいて、印刷対象の画像をモノクロ化した色を色信号の値によって示されるカラーモードの印刷に対応したカラー画像データを生成し、印刷対象の画像に付加情報を多重化するための処理をカラー画像データに対して行う。そして、カラーモードで、付加情報が多重化された多重化画像を印刷装置に印刷させる。
【選択図】図１６

Description

本発明は、付加情報を画像データに多重化する情報処理装置、方法およびプログラム、並びにシステムに関する。

従来より、電子透かし技術と称し、印刷物に対して付加情報を視覚的に判別しづらいように多重化する技術が知られている（特許文献１）。ステガノグラフィ、ウォーターマークなど、データに対して別の意味合いを持つデータを重畳させること、もしくはその技術分野を総称して「多重化」という。多重化には、紙幣、印紙、有価証券などの不正な偽造を防止する識別情報の多重化や、写真に対する音声情報の多重化がある。多重化された情報を例えばスマートフォンなどで読み取ることで、ユーザに対して様々な付加価値を提供することができる。

特開２００３－１７４５５６号公報

色成分を変化させることで付加情報の多重化が行われている画像データをモノクロ印刷するように印刷設定がされている場合、プリンタにおけるモノクロ印刷の処理によって付加情報が欠落してしまう。

本発明は、印刷処理による多重化された付加情報の欠落を防ぐ情報処理装置、方法およびプログラム、並びにシステムを提供することを目的とする。

上記課題を解決するため、本発明に係る情報処理装置は、印刷対象の画像を示す入力画像データを取得する取得手段と、前記入力画像データに基づく印刷の設定として、モノクロモードであることと、前記印刷対象の画像に対して付加情報を多重化することとが設定されていることを条件として、モノクロモードに代えてカラーモードを設定する設定手段と、前記入力画像データに基づいて、前記印刷対象の画像をモノクロ化した色を色信号の値によって示されるカラーモードの印刷に対応したカラー画像データを生成する生成手段と、前記印刷対象の画像に付加情報を多重化するための処理を前記生成手段により生成された前記カラー画像データに対して行う多重化手段と、前記設定手段によって設定されたカラーモードで、前記多重化手段により処理が行われたカラー画像データに基づいて前記付加情報が多重化された多重化画像を印刷装置に印刷させる制御手段とを備えることを特徴とする。

本発明によれば、印刷処理による多重化された付加情報の欠落を防ぐことができる。

情報処理装置を含むシステム構成を示す図である。情報処理装置のハードウェア構成を示す図である。画像処理装置のハードウェア構成の一例を示す図である。マスクを示す図である。マスクによって画像に与えられるパターンを視覚的に示す図である。グレースケール画像を示す図である。多重化を実行した結果を示す図である。多重化を実行した結果を示す図である。ＦＦＴを適応した結果を示す図である。ＦＦＴを適応した結果を示す図である。ＦＦＴを適応した結果を示す図である。ＦＦＴを適応した結果を示す図である。開始位置判定用のパターンを示す図である。情報処理装置において実行される処理を示すフローチャートである。ユーザインタフェース画面を示す図である。印刷処理が開始されるまでの処理を示すフローチャートである。網点画像を示す図である。色変換処理を示すフローチャートである。

以下、添付図面を参照して実施形態を詳しく説明する。なお、以下の実施形態は特許請求の範囲に係る発明を限定するものではない。実施形態には複数の特徴が記載されているが、これらの複数の特徴の全てが発明に必須のものとは限らず、また、複数の特徴は任意に組み合わせられてもよい。さらに、添付図面においては、同一若しくは同様の構成に同一の参照番号を付し、重複した説明は省略する。

図１は、本実施形態における情報処理装置１０１及び１０３を含むシステム構成の一例を示す図である。情報処理装置１０１及び１０３はスマートフォンやＰＣ等の携帯端末であり、情報処理装置１０１及び１０３は共通の構成を有するものとして説明する。しかしながら、情報処理装置１０１と情報処理装置１０３の各構成は異なっていても良い。

システムにおいて、ユーザは撮像デバイスにより撮影した画像データを内部に保存しておくことができる。システムにおいて、ルータ１０４と画像処理装置１０２の間と、ルータ１０４と情報処理装置１０３の間は、ＬＡＮケーブル等の有線通信により相互に通信可能に接続される。また、情報処理装置１０１とルータ１０４の間は、Ｗｉｆｉ等の無線通信により相互に通信可能に接続される。なお、ルータ１０４と画像処理装置１０２もしくは情報処理装置１０３の間は、無線通信により接続されるようにしても良い。また、無線通信は、Ｗｉｆｉの他、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等であっても良い。

本実施形態では、図１に示すようなシステムにおいて、ユーザは、情報処理装置１０１上のアプリケーションにより、印刷対象の画像データを選択し、ウォーターマーク等の任意の付加情報を画像データに多重化することが可能である。即ち、情報処理装置１０１は、画像データに付加情報を多重化する付加情報多重化装置として動作することが可能である。また、ユーザは、そのような付加情報が多重化された画像データを画像処理装置１０２で印刷することが可能である。本実施形態では、付加情報の一例としてテキスト情報を説明するが、他の種類の情報であっても良く、例えば、音声情報でも良い。そして、他のユーザが情報処理装置１０１でその印刷物を撮像することで、多重化された付加情報が抽出される。即ち、情報処理装置１０１は、付加情報抽出装置として動作することが可能である。例えば印刷物を撮像することで音声が再生されるといった動作が実現される。

図２は、情報処理装置１０１のハードウェア構成の一例を示す図である。ＣＰＵ２０１は、中央演算装置であり、例えば、付加情報を多重化する処理をプログラムに従って実行する。ＲＯＭ２０２は、ＣＰＵ２０１により実行されるプログラムを記憶する。ＲＡＭ２０３は、ＣＰＵ２０１によるプログラムの実行時に、各種情報を一時的に記憶するためのメモリを提供する。２次記憶装置２０４は、画像ファイルや、多重化する付加情報などを保存するための記憶媒体である。表示部２０５は、ユーザインタフェース画面や処理内容等を表示する。表示部２０５は、タッチパネル機能を有しても良く、タッチパネルのユーザ操作で処理の指示や設定、文字入力等を受け付ける。スピーカ２０６は、音声を出力する。例えば、スピーカ２０６は、復号化して抽出した付加情報が音声データの場合に音声を出力する。

ネットワークインタフェース（ＩＦ）２０７は、例えばＬＡＮ（ＬｏｃａｌＡｒｅａＮｅｔｗｏｒｋ）等のネットワーク２２０に接続されている。ネットワーク２２０は、インターネットを含んでも良い。例えば、ＣＰＵ２０１は、ネットワークインタフェース２０７により、インターネットに接続されたサーバ２１２が提供するサイトにアクセスして表示部２０５にサイトの画面を表示させる。内部撮像デバイス２０９は、撮影機能を有するデバイスであり、例えば内蔵カメラである。また、外部撮像デバイス２１０は、デバイスインタフェース（ＩＦ）２０８を介して情報処理装置１０１に接続された撮影機能を有する外部のデバイスであり、例えば、デジタルカメラやビデオカメラである。

本実施形態では、付加情報多重化装置としての情報処理装置１０１を説明する。しかしながら、情報処理装置１０１が付加情報多重化装置として動作しても良い。

図３は、画像処理装置１０２のハードウェア構成の一例を示す図である。本実施形態では、画像処理装置１０２はＭＦＰ（ＭｕｌｔｉＦｕｎｃｔｉｏｎａｌＰｅｒｉｐｈｅｒａｌ）として説明するが、印刷機能を有する印刷装置（プリンタ）であれば、ＭＦＰの構成でなくても良い。制御部３０１は、画像入力デバイスであるスキャナ部３１１や画像出力デバイスであるプリンタ部３１２と接続されており、各デバイスとの間での画像情報の入出力を制御する。また、制御部３０１は、ネットワークＩ／Ｆ３０６を介して情報処理装置１０１、ルータ１０４、情報処理装置１０３との通信が可能である。例えば、制御部３０１は、情報処理装置１０１や情報処理装置１０３から印刷ジョブや画像データを受信することが可能である。

ＣＰＵ３０２は、画像処理装置１０２の動作を統括的に制御し、例えば、ＲＡＭ３０３に記憶されたプログラムに基づいて動作する。ＲＯＭ３０４は、例えば、ブートＲＯＭであり、システムのブートプログラムが格納されている。記憶部３０５には、システムソフトウェア、画像データ、画像処理装置１０２の動作を制御するためのプログラム等が記憶されている。ＣＰＵ３０２は、記憶部３０５に記憶されたプログラムをＲＡＭ３０３にロードし、そのプログラムに基づいて画像処理装置１０２の各部を制御する。

ネットワークＩ／Ｆ３０６は、制御部３０１をネットワーク２２０に接続し、ネットワーク２２０上の装置と通信を行い、各種情報の入出力を行う。デバイスＩ／Ｆ３０７は、画像入出力デバイスであるスキャナ部３１１及びプリンタ部３１２と制御部３０１とを接続し、画像データの同期系／非同期系の変換を行う。操作部Ｉ／Ｆ３０８は、操作部３１３と制御部３０１とを接続するインタフェースであり、操作部３１３に表示するためのデータを操作部３１３に出力する。操作部３１３は、パネルとハードウェアキーを含み、ユーザからの指示や設定の操作を受付可能である。また、操作部Ｉ／Ｆ３０８は、操作部３１３からユーザが入力した情報をＣＰＵ３０２に伝達する。

画像処理部３０９は、ネットワーク経由で受信した印刷対象の画像データに対して、例えば、設定や入出力デバイスの特性に応じた補正、補間、変換等の画像処理を行う。また、画像処理部３０９は、デバイスＩ／Ｆ３０７へ入力もしくはデバイスＩ／Ｆ３０７から出力される画像データに対して画像処理を行う。画像メモリ３１０は、画像処理部３０９によって処理される画像データを一時的に展開するためのメモリである。

以下、情報処理装置１０１において行われる多重化埋め込み処理（多重化エンコード処理）について説明する。ここでは、一例として、入力された画像に対して「ｈｅｌｌｏ」という情報を多重化する方法について説明する。

ＰＣのような情報処理装置で情報を扱うというのはバイナリデータを扱うことである。バイナリデータとは「０」もしくは「１」の情報であり、この「０」もしくは「１」の情報が連続でつながることにより、特定の意味を持つようになる。それぞれの文字には、対応するバイナリデータが決められている。どのバイナリデータに対してどの文字が対応しているかは、「文字コード」と呼ばれるもので定義されている。例えば、文字コードの中の一つである「シフトＪＩＳ」では、「ｈ」は、バイナリデータの「０１１０１０００」に対応している。同様に「ｅ」は「０１１００１０１」、「ｌ」は「０１１０１１００」、「ｏ」は「０１１０１１１１」というバイナリデータに対応している。

つまり、「ｈｅｌｌｏ」という文字は、バイナリデータで「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」と表現することができる。逆に、「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」というバイナリデータを取得できれば、「ｈｅｌｌｏ」という文字を取得することができる。つまり、多重化は、「０」もしくは「１」を判定可能なようにデータを埋め込むことで実現可能である。多重化する際、入力されるデータは「ｈｅｌｌｏ」であるが、実際に埋め込むデータは「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」である。本実施形態では、これら二つを区別するため、「ｈｅｌｌｏ」を付加情報（多重化情報）と呼び、埋め込み用に変換された「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」を埋め込みデータと呼ぶ。

次に、画像に対して「０」、「１」の情報を多重化する方法を説明する。本実施形態では、「０」「１」を示すデータの埋め込みを説明するが、多重化方法を「０」「１」の埋め込みに限定しているわけではなく、エンコード側とデコード側でデータを一意に対応づけることが可能であれば、「０」「１」の埋め込みに限られない。

多重化される画像のサイズは、縦幅６４０ピクセル（ｐｘ）、横幅４８０ピクセル（ｐｘ）として説明する。ここで、「０」、「１」を生成するために、図４（ａ）、図４（ｂ）の二つのマスクを用意する。

図４（ａ）、図４（ｂ）は、８ｐｘ×８ｐｘで構成されたマスクであり、画像に対してマスクの値を加算することで、画像内の８ｐｘ×８ｐｘの領域に対して周期性を持ったパターンを与えることができる。図５（ａ）及び図５（ｂ）は、マスクによって画像にどのようなパターンが与えられのかを視覚的に示している。図５は、図４（ａ）及び図４（ｂ）のマスクにおける「１０」の位置を黒、「０」の位置を灰色、「－１０」の位置を白で表現しており、画像には、図５（ａ）及び図５（ｂ）に示すような斜め線が現れることとなる。

図４（ａ）及び図４（ｂ）のマスクを画像全体に対して交互に適応する疑似コードを以下に示す。

０１：ｉｎｔｉ，ｊ，ｋ，ｌ；
０２：ｉｎｔｗｉｄｔｈ＝６４０，ｈｅｉｇｈｔ＝４８０；
０３：ｕｎｓｉｇｎｅｄｃｈａｒ＊ｄａｔａ＝画像データ；
０４：ｉｎｔ＊＊ｍａｓｋＡ＝マスクデータ；
０５：ｂｏｏｌｉｓＭａｓｋＡ＝ｔｒｕｅ；
０６：ｆｏｒ（ｊ＝０；ｊ＜ｈｅｉｇｈｔ；ｊ＋＝８）｛
０７：ｆｏｒ（ｉ＝０；ｉ＜ｗｉｄｔｈ；ｉ＋＝８）｛
０８：ｆｏｒ（ｋ＝０；ｋ＜８；ｋ＋＋）｛
０９：ｆｏｒ（ｌ＝０；ｌ＜８；ｌ＋＋）｛
１０：ｉｆ（ｉｓＭａｓｋＡ＝＝ｔｒｕｅ）｛
１１：ｄａｔａ［（ｉ＋ｋ）＋（ｊ＋ｌ）＊ｗｉｄｔｈ］＋＝ｍａｓｋＡ［ｋ］［ｌ］；
１２：｝
１３：｝
１４：｝
１５：｝
１６：｝

３行目の画像データは、グレースケール画像を想定している。ここでは、図６に示すようなグレースケール画像を想定している。図６のグレースケール画像に対して、８ｐｘ×８ｐｘの図４（ａ）及び図４（ｂ）のマスクによる多重化を実行した例を図７に示す。図７に示すように、画像には、斜め線（「０」と「１」に対応）が交互に入る。

単純な「０」「１」の繰り返しではなく、「ｈｅｌｌｏ」のデータである「０１１０１００００１１００１０１０１１０１１０００１１０１１０００１１０１１１１」を適応した例が図８である。「ｈｅｌｌｏ」自体は、８ｐｘ×８ｐｘのブロックが４０個あれば良いため、３２０ｐｘ×８ｐｘの領域があれば良いが、図８では「ｈｅｌｌｏ」を繰り返し多重化している。このように、繰り返して同じデータを多重化することで、写真の傷や汚れなどによってパターンが消えてしまうことへの耐性を増すことができる。また、同じデータが複数あることで、復号時に探索しやすくなる。

本例では、画像サイズが６４０ｐｘ×４８０ｐｘであるので、総画素数は３０７，２００画素である。また、「ｈｅｌｌｏ」を多重化するのに必要な画素数は、上記のように３２０ｐｘ×８ｐｘ＝２，５６０画素である。つまり、「ｈｅｌｌｏ」は、３０７，２００÷２５６０＝１２０回繰り返されることになる。

付加情報の多重化においては、上記のようにデータの埋め込みが行われる。一般的には、人間の目が反応しづらい領域に付加情報が多重化される。例えば、画像をＬａｂ成分に分解した後のａｂ成分やＹＵＶ成分に分解した後のＵＶ成分、ＹＣｂＣｒのＣｂＣｒ成分を変動させることによって付加情報が多重化される。また、例えばＹＵＶ成分では、Ｕ成分単独で変動させても良いし、ＵＶ成分両方を変動させても良い。

単独で変動させる場合には、複数の成分を変動させる場合よりアルゴリズムが簡単になる。結果として、プログラムサイズが小さくなるのでアプリケーションのダウンロードの高速化や、回路面積が小さくなることからの製造コストの低減などが実現される。

また、複数の成分を変動させる場合、データが埋め込めないことによる影響を低減することができる。例えばデジタル画像が１色８ｂｉｔで表現される場合、０から２５５までのいずれかの値が割り当てられる。この範囲外の値は画像データとしては用いることができないため、画素値の計算結果が０未満の場合や、２５６以上の値になった場合、一般的には０もしくは２５５を割り振ることで有効範囲内に収めている。図４（ａ）、図４（ｂ）のマスクでは画素値に±１０の変化を与えているが、例えばマスク領域におけるＹＵＶ成分のＵ成分が全て２５５の値である場合には、その領域の値は２４５～２６５の範囲ではなく２４５～２５５の範囲となる。その場合、結果として、所定よりも小さな変動しか与えられず、ノイズに弱く復号しづらい多重化となってしまう。しかしながら、ＹＵＶ成分のＵ成分が２５５であっても、Ｖ成分が１２８である場合など、±１０の値の変化でも有効範囲に収まる場合には、Ｖ成分を用いることでノイズ耐性を維持することができる。このように、ＵＶ成分両方を用いることで多重化のロバスト性（デコードの堅牢性）を高めることが可能となる。画像をＲＧＢフォーマットに変換して利用する場合、ＹＵＶ成分をＲＧＢ成分に変換した後のＲＧＢ成分も０～２５５の範囲に収まるかを確認しながら、ＵＶ成分を変化させる場合がある。

上記のように、周期的な変動を与えることでバイナリ情報を重畳させることで、データの埋め込み（多重化エンコード）を実現する。

本実施形態では、情報処理装置１０１が付加情報抽出装置として動作する場合もある。その場合における埋め込んだデータを復号化する処理（デコード）について説明する。

図４（ａ）に示すマスクは周期的なパターンをもっており、この特徴を抽出するために、図８のグレースケール画像に対してＦＦＴ（ＦａｓｔＦｏｕｒｉｅｒＴｒａｎｓｆｏｒｍ）を適応する。図９は、周期的なパターンを持つデータが埋め込まれた画像に対してＦＦＴを適応した結果の一例を示している。一方、図１０は、データの埋込みが行われていない図６のグレースケール画像に対してＦＦＴを適応した結果の一例を示している。図１０に比べると、図９では、特定の位置にスペクトル（白い点）が出現していることが分かる。図１１は、図６のグレースケール画像に対して「０」のみを多重化してＦＦＴを適応した結果の一例を示す図である。また、図１２は、図６のグレースケール画像に対して「１」のみを多重化してＦＦＴを適応した結果の一例を示す図である。ＦＦＴは画像の周波数解析するために用いられる手法であり、マスクの周期的なパターンの変動は、画像の周波数を変化させるものである。そのため、ＦＦＴを適応することで特定の位置にスペクトルが出現するようになる。従って、その状態を読み取ることで埋め込まれたデータを認識して復号化することが可能となる。

図９に示すように「０」と「１」の両方の性質が入っていても、認識を可能とする必要がある。そのため、「０」もしくは「１」のいずれかを判定するために、ＦＦＴ解析のサイズを多重化のブロックと同じ８ｐｘ×８ｐｘのサイズで行い、埋め込み時と解析時のサイズを一致させる。この範囲に限定してＦＦＴを実行することで、スペクトルは片方しか出現しないことになり、「０」もしくは「１」のいずれかを判定可能となる。

デコード側では、データを復号する際に、どの位置からデータが始まるのかを特定するようにしても良い。その場合、例えば、「０」「１」のパターンとは異なる「開始位置判定用のパターン」を用意することで、データの開始判定を可能にする。図１３は、開始位置判定用のパターンの一例を示す図である。図１３に示すように、開始位置判定用のパターンは、図５（ａ）及び図５（ｂ）と異なるマスクパターンである。図１３のマスクパターンでは、画像の上下をｙ軸、左右をｘ軸とした場合、画像の中心からｘ軸の方向にスペクトルのピークが出現する。開始位置判定用のパターンが２ヶ所検出されれば、その間の「０」「１」のデコードにより、付加情報を抽出することができる。

さらに、デコード側では、ＦＦＴ解析を可能とするための処理が行われる場合がある。付加情報が多重化された印刷物に対して、撮像センサ（例えばカメラ）を通して画像を取得した場合、常に正しい向きで取得されるとは限らない。例えば、撮像センサと印刷物の距離が近い場合や遠い場合などが考えられ、必ずしも取得した画像を８ｐｘ×８ｐｘのブロック単位でＦＦＴ解析してもデータが複号化できるとは限らない。上述の、多重化では特定の周波数に対して強くスペクトルが出るように画像を変化させており、どこにスペクトルが発現すべきかが既知である。そのことに基づいてデコード側では、ＦＦＴ解析の前に、撮像センサから取得した画像から得られるスペクトルと既知のスペクトルが近づくように画像変換が行われる場合がある。

以下、本実施形態における情報処理装置１０１の動作について説明する。

ユーザは、情報処理装置１０１において、画像処理装置１０２での印刷について各種印刷設定を行うことが可能であり、例えば、「モノクロ印刷」や「カラー印刷」を設定することが可能である。

付加情報の多重化を行う場合には、上述のように、画像の色成分に対して変動を与えることが行われる。一方、ユーザにより印刷設定として「モノクロ印刷」が設定されている場合には、画像処理装置１０２内でモノクロ２階調での処理（モノクロ変換）が行われる。つまり、付加情報の多重化が行われても、画像処理装置１０２内のモノクロ２階調での処理により、多重化が行われている色成分が欠落してしまう。その結果、多重化画像に多重化されている付加情報の復号化ができなくなってしまう。そこで、本実施形態では、付加情報の多重化を行う際、ユーザにより「モノクロ印刷」が設定されている場合には、印刷対象の画像データがカラー画像データであればグレースケール変換し、さらに、「モノクロ印刷」から「カラー印刷」への設定変更を行う。そのような構成により、ユーザが所望するモノクロ印刷の色味に近い画質を維持するとともに、画像処理装置１０２内でモノクロ２階調の処理が行われることによる色成分の欠落を防ぐことができる。

図１４は、情報処理装置１０１において実行される、印刷対象の画像データの印刷を実行するまでの処理を示すフローチャートである。図１４の処理は、例えば、ＣＰＵ２０１がＲＯＭ２０２に記憶されたプログラムをＲＡＭ２０３に読み出して実行することにより実現される。図１４の処理を実行するプログラムは、例えば、印刷アプリケーションとして情報処理装置１０１にインストールされている。図１４の処理は、例えば、ユーザが情報処理装置１０１上で印刷アプリケーションを起動したときに開始される。

Ｓ１４０１において、ＣＰＵ２０１は、ユーザから選択された画像データ（入力画像データ）を取得する。図１５（ａ）は、印刷アプリケーション上で表示されるメイン画面１５０１の一例を示す図である。図１５（ａ）に示すように、メイン画面１５０１上にはボタン１５０２が表示されている。ユーザによりボタン１５０２が押下されると、不図示の画像選択画面が表示され、ユーザは、任意の画像データを選択することが可能である。画像の取得方法としては、情報処理装置１０１内の画像データを取得しても良いし、ネットワークを介してサーバ（不図示）から画像データを取得しても良い。また、印刷アプリケーション内に予め用意された画像データから取得しても良い。本実施形態では、画像データを説明するが、画像データに限られず、ＰＤＦなどのドキュメント系データでも良く、二次元のＲＧＢデータに変換可能なデータであれば良い。ユーザが印刷対象として選択した画像データが付加情報の多重化対象の画像データとなる。ＣＰＵ２０１は、選択された画像データを多重化対象データとして取得し、印刷アプリケーション内で再利用可能なようにＲＡＭ２０３に一時的に保存する。

また、メイン画面１５０１内の表示領域１５０４には、ユーザにより選択された画像データの画像が表示される。なお、情報処理装置１０１内のＲＡＭ２０３の記憶領域が不足している場合には、２次記録装置２０４にファイルとして保存し、印刷アプリケーションの画面上に、指定した画像を縮小した縮小画像（サムネイル画像）を表示するようにしても良い。

Ｓ１４０２において、ＣＰＵ２０１は、Ｓ１４０１でユーザにより選択された画像データに多重化する付加情報を取得する。図１５（ａ）に示すように、メイン画面１５０１内には、チェックボックス１５０３及び入力領域１５０５が設けられている。ユーザは、チェックボックス１５０３をチェックすることにより、選択した画像データへの多重化を行うことを指示することができる。また、ユーザは、入力領域１５０５において任意のテキスト情報を入力することができる。ＣＰＵ２０１は、入力領域１５０５で入力されたテキスト情報を、画像データに多重化する付加情報として取得する。

本実施形態では、多重化情報としてテキスト情報を説明するが、音声、写真、動画など、バイナリデータとして扱える情報であれば、他の種類の情報であっても良い。ＣＰＵ２０１は、ユーザによって入力されたテキスト情報を、印刷アプリケーション内で再利用可能なようにＲＡＭ２０３に、もしくはファイルとして２次記録装置２０４に保存する。

Ｓ１４０３において、ＣＰＵ２０１は、画像処理装置１０２の検索を実行する。図１５（ａ）に示すように、メイン画面１５０１内には、ボタン１５０６が表示されている。ユーザによりボタン１５０６が押下されると、ＣＰＵ２０１は、ネットワーク２２０に対して、プリンタ検索のブロードキャストを送信する。ブロードキャストにより、同じネットワークを共有する全ホストに対して情報が発信される。画像処理装置１０２がブロードキャストの発信元である情報処理装置１０１に対して返信を行うことで、情報処理装置１０１は、画像処理装置１０２のＩＰアドレスを把握することができ、以降１対１の通信が可能となる。本実施形態では、応答があったプリンタの識別情報は自動的に印刷アプリケーションに登録され、本例では、ネットワーク２２０内のプリンタは説明上、画像処理装置１０２の一台とする。印刷アプリケーションに登録される情報は、例えば、プリンタ名、プリンタのＩＰアドレスであり、プリンタ名は、メイン画面１５０１上にプリンタ名１５０７として表示される。

Ｓ１４０４において、ＣＰＵ２０１は、Ｓ１４０３で検索された画像処理装置１０２から印刷設定に関する情報を取得し、ユーザからの印刷設定を受け付ける。通常、プリンタは、プリンタ自身が対応しているメディア（記録媒体）やサイズ、印刷設定などを取得可能である。

本実施形態では、情報処理装置１０１の印刷アプリケーションと画像処理装置１０２との間の通信をＸＭＬ（ＥｘｔｅｎｓｉｂｌｅＭａｒｋｕｐＬａｎｇｕａｇｅ）で行う。ＸＭＬは、情報を表現する方法の一つであるが、データの送受信はこれに限定されず、他のプロトコルや通信方法が用いられても良い。以下、画像処理装置１０２に対して印刷設定に関する情報の取得を依頼するＸＭＬの一例を示す。

００１：＜？ｘｍｌｖｅｒｓｉｏｎ＝”１．０” ｅｎｃｏｄｉｎｇ＝”ＵＴＦ－８”？＞
００２：＜ｃｍｄ＞
００３：＜ｏｐｅｒａｔｉｏｎ＞ｇｅｔＩｎｆｏｒｍａｔｉｏｎ＜／ｏｐｅｒａｔｉｏｎ＞
００４：＜／ｃｍｄ＞

１行目は、ＸＭＬがバージョン１．０であり、文字符号化方式はＵＴＦ－８ということを表している。２行目の＜ｃｍｄ＞は、プリンタが受け取るコマンドの開始を意味しており、４行目の＜／ｃｍｄ＞でコマンドの終了を示している。ｃｍｄタグの中にタグを追加して、印刷アプリケーションにより画像処理装置１０２に送信されることで、画像処理装置１０２がタグの内容に応じた動作を実行する。例えば、３行目のｏｐｅｒａｔｉｏｎにはプリンタの動作タイプが記述されており、ｇｅｔＩｎｆｏｒｍａｔｉｏｎは、取得した情報を依頼元のアプリへ返却するという動作を示している。以下、画像処理装置１０２が印刷アプリケーションに返却するＸＭＬの一例を示す。

００１：＜？ｘｍｌｖｅｒｓｉｏｎ＝”１．０” ｅｎｃｏｄｉｎｇ＝”ＵＴＦ－８”？＞
００２：＜ｒｅｓ＞
００３：＜ｎａｍｅ＞ｐｒｉｎｔｅｒ００１＜／ｎａｍｅ＞
００４：＜ｍｅｄｉａｌｉｓｔ＞
００５：＜ｍｅｄｉａ＞
００６：＜ｎａｍｅ＞Ａ４＜／ｎａｍｅ＞
００７：＜ｗｉｄｔｈ＞２０００＜／ｗｉｄｔｈ＞
００８：＜ｈｅｉｇｈｔ＞３０００＜／ｈｅｉｇｈｔ＞
００９：＜／ｍｅｄｉａ＞
０１０：＜ｍｅｄｉａ＞
０１１：＜ｎａｍｅ＞Ｌ＜／ｎａｍｅ＞
０１２：＜ｗｉｄｔｈ＞１０００＜／ｗｉｄｔｈ＞
０１３：＜ｈｅｉｇｈｔ＞１５００＜／ｈｅｉｇｈｔ＞
０１４：＜／ｍｅｄｉａ＞
０１５：＜ｍｅｄｉａ＞
０１６：＜ｎａｍｅ＞Ｈａｇａｋｉ＜／ｎａｍｅ＞
０１７：＜ｗｉｄｔｈ＞１５００＜／ｗｉｄｔｈ＞
０１８：＜ｈｅｉｇｈｔ＞２２５０＜／ｈｅｉｇｈｔ＞
０１９：＜／ｍｅｄｉａ＞
０２０：＜／ｍｅｄｉａｌｉｓｔ＞
０２１：＜ｃｏｌｏｒｍｏｄｅ＞
０２２：＜ｍｏｄｅ＞ｃｏｌｏｒ＜／ｍｏｄｅ＞
０２３：＜ｍｏｄｅ＞ｍｏｎｏ＜／ｍｏｄｅ＞
０２４：＜／ｃｏｌｏｒｍｏｄｅ＞
０２５：＜／ｒｅｓ＞

２行目のｒｅｓは、プリンタからの応答ということを意味する。本実施形態では、印刷アプリケーションからプリンタへの情報は＜ｃｍｄ＞から始まり、プリンタから印刷アプリケーションへの情報は＜ｒｅｓ＞から始まるコマンドを用いているが、それに限定されない。３行目のｎａｍｅは、プリンタ名を示す。４行目から２０行目は、対応する用紙サイズのリストであり、＜ｍｅｄｉａｌｉｓｔ＞タグ中にプリンタが対応可能なメディアが列挙されている。ここで、＜ｍｅｄｉａ＞タグにはｎａｍｅ、ｗｉｄｔｈ、ｈｅｉｇｈｔのタグが存在しており、それぞれが用紙の名前、画像の縦幅（ピクセル）、画像の横幅（ピクセル）となっている。それらの情報から、例えばＡ４サイズ（縦２１０ｍｍ、横２９７ｍｍ）であれば横幅２，０００ｐｘ、縦幅３，０００ｐｘの画像サイズが必要であることが分かる。一般的に、そのような画像サイズは、プリンタのｄｐｉ（ｄｏｔｓｐｅｒｉｎｃｈ）に依存する。ｄｐｉとは、どれだけ細かくインクを配置できるかの単位であり、高ｄｐｉであるほど精細な表現、いわゆる高解像度の印刷が可能である。即ち、同じＡ４サイズであっても高ｄｐｉであるほど印刷に必要となる画像データの画素数も増える。一方、印刷アプリケーションが指定する画像データが必ずしもプリンタに必要な画素数であるとは限らない。その場合には、プリンタ内部もしくはプリンタドライバで拡大や縮小、またはトリミングなどを行うことで、入力された画像をプリンタに必要なサイズへ修正し、その後、印刷が行われる。例えば、画像処理装置１０２で縦幅４，０００ｐｘ、横幅６，０００ｐｘの画像をＡ４サイズで印刷しようとすると、Ａ４サイズに必要な画素数以上のデータであるので、そのままでは印刷処理が実行できない。そこで、プリンタ内部もしくはプリンタドライバにより画像データが例えば縦幅２，０００ｐｘ、横幅３，０００ｐｘに変換され、その後、印刷が行われる。

２１行目から２４行目には、選択可能な印刷色設定モードが列挙されている。本実施形態では、カラーモードである「ｃｏｌｏｒ」とモノクロモードである「ｍｏｎｏ」の２種類が選択可能である。カラーモードとは、プリンタのインクを複数色用いて印刷する印刷モードである。プリンタは、通常、減法混色によって色を表現している。通常、減法混色ではＣ（シアン）、Ｍ（マゼンタ）、Ｙ（イエロー）の３色があれば全ての色を表現でき、画像処理装置１０２は、Ｃ、Ｍ、Ｙの３色のインクを備えている。なお、インクの種類はこれに限られず、特色インクであるグレーインクやＲＧＢインクなどＣＭＹ以外のインク色を備えていても良い。

一方、モノクロモードとは、入力画像のカラー情報をグレー情報に置き換えて印刷する印刷モードである。モノクロモードは、例えば使用インク量の削減や印刷速度の向上を目的として行われる場合がある。モノクロモードでは、ブラックインク（Ｋ）１色や複数の無彩色インクが用いられる。また、ＣＭＹＫでプロセスブラックを形成する場合もある。なお、本実施形態では、セピアモードやグレースケールモード等、モノトーンの色調を実現するモードであれば、モノクロモードに含まれるとする。

本実施形態では、ブラックインクをのみを使用するモノクロモードがユーザにより設定された場合において付加情報を多重化する場合には、「モノクロモード」から「カラーモード」に印刷設定が変更される。その結果、画像処理装置１０２内ではカラーインクが用いられてカラー印刷が行われる。「カラーモード」に印刷設定が変更されても、モノクロモードに期待される画質の観点で、出力物の色味はグレイに近い色味で出力される。即ち、黒で印刷されるドットの粗密で階調が表現される画像として出力される。

図１５（ｂ）は、印刷アプリケーション上で表示される印刷設定画面１５１０の一例を示す図である。印刷設定画面１５１０は、メイン画面１５０１の印刷設定ボタン１５０８が押下されると表示される。印刷設定画面１５１０は、画像処理装置１０２から取得した印刷設定に関する情報に基づいて表示される。図１５（ｂ）に示すように、印刷設定画面１５１０上には、用紙サイズ１５１１と印刷色モード１５１３の項目の選択を受付可能なように表示されている。

ここでは、ユーザは、多重化処理を実行するためのチェックボックス１５０３をオン、選択ボタン１５１２で示される用紙サイズ「Ａ４」、選択ボタン１５１３で示される印刷色モード「モノクロ」を設定したとする。ユーザからの決定ボタン１５１４の押下を受け付けると、ＣＰＵ２０１は、ユーザが印刷設定画面１５１０で設定した項目をＲＡＭ２０３等の記憶領域に一時的に保存し、後から参照可能な状態にしておく。決定ボタン１５１４が押下されると、メイン画面１５０１の表示に戻る。ユーザから、メイン画面１５０１上の印刷ボタン１５０９の押下を受け付けた後、画像処理装置１０２での印刷処理が開始される。

図１６は、画像処理装置１０２での印刷処理が開始されるまでの処理を示すフローチャートである。図１６の処理は、例えば、ＣＰＵ２０１がＲＯＭ２０２に記憶されたプログラムをＲＡＭ２０３に読み出して実行することにより実現される。また、図１６の処理は、上記のようなチェックボックス１５０３および選択ボタン１５１３の設定を条件とし、メイン画面１５０１上の印刷ボタン１５０９が押下されると開始される。

Ｓ１６０１において、ＣＰＵ２０１は、メイン画面１５０１上でユーザが選択した印刷対象の画像データをＲＡＭ２０３から取得する。Ｓ１６０２において、ＣＰＵ２０１は、メイン画面１５０１上でユーザが入力した付加情報、例えばテキストデータを取得する。Ｓ１６０３において、ＣＰＵ２０１は、ユーザが設定した印刷設定を取得する。

Ｓ１６０４において、ＣＰＵ２０１は、Ｓ１６０３で取得した印刷設定に基づいて、モノクロモードが設定されているか否かを判定する。モノクロモードが設定されていると判定された場合、Ｓ１６０５において、ＣＰＵ２０１は、印刷設定を「モノクロモード」から「カラーモード」に変更する。上述したように、印刷設定としてモノクロモードが設定される場合には、プリンタ内部もしくはプリンタドライバにおいてモノクロ変換が実行される。例えば、プリンタ内部でモノクロ変換が実行される場合、多重化を実行した画像データを画像処理装置１０２へ送信した後に、プリンタ内部でモノクロ変換が実行されることになる。ここで、モノクロ変換とは画像内で基準となる１色を設定し、その色の濃淡変化だけで画像を表現するための変換であり、画像データとしてはある領域におけるデータの粗密として表現される。つまり、Ｌａｂのａ，ｂや、ＹＵＶのＵ，Ｖといった、いわゆる輝度成分以外の変化がなくなり、輝度以外の成分に変動を与えて多重化を実行する手法の場合、付加情報が欠落して復号化ができなくなってしまう。そのため、本実施形態では、ユーザによりモノクロモードが設定されている場合は、プリンタ内部もしくはプリンタドライバでモノクロ変換が実行されないように、印刷設定をカラーモードに変更する。その際、カラーモードでも、ユーザ所望のモノクロモードに相当する色味を出力可能なように、所定の色変換処理を実行する。そのような構成により、ユーザからは、設定した印刷モードの通りに動作しているように見え、かつ、付加情報の多重化処理も可能となる。本実施形態では、ブラックインクを用いたモノクロ変換に代替えする色変換処理として、グレースケール変換を上記の所定の色変換処理として実行する。

Ｓ１６０４以降の処理の分岐においては、例えば、以下のような構成を用いても良い。例えば、ブラックリストを二次記録装置２０４、もしくはプログラム内に予め保有しておき、そのブラックリストと画像処理装置１０２から取得した印刷設定に関する情報とを比較するようにしても良い。ブラックリストとは、利用してはいけないサービスやソフトウェアの名前を記述したリストのことであり、例えばブラックリストには「ｍｏｎｏ」という文字列がテキストファイルとして記述されている。印刷設定がブラックリストの記述に該当すれば、Ｓ１６０６に進む。なお、ブラックリストに複数の情報を保持したい場合や、ブラックリストに該当した場合に実行する色変換処理を記述する場合には、ＣＳＶ（ｃｏｍｍａ－ｓｅｐａｒａｔｅｄｖａｌｕｅｓ）や、一般的なデータベースなどが用いられても良い。

また、印刷アプリケーションがネットワーク上のサーバから情報を取得するようにしても良い。印刷アプリケーションは、画像処理装置１０２と通信することで、プリンタ名を取得することが可能である。このプリンタ名を用いてサーバに問い合わせを行い、Ｓ１６０４以降の処理の分岐が行われても良い。この場合、サーバにはプリンタ名と印刷設定、および、それらの組み合わせについてモノクロ変換が行われるか否かの情報を保持されている。即ち、ネットワーク側にブラックリストを持つ構成である。

また、画像処理装置１０２から取得した情報を用いても良い。先述のプリンタ情報を含むＸＭＬのｃｏｌｏｒｍｏｄｅに、多重化が可能か否かの情報を付与しておくようにしても良い。例えば、以下のようなＸＭＬとなる。

００１：＜？ｘｍｌｖｅｒｓｉｏｎ＝”１．０” ｅｎｃｏｄｉｎｇ＝”ＵＴＦ－８”？＞
００２：＜ｒｅｓ＞
００３：～一部省略～
００４：＜ｃｏｌｏｒｍｏｄｅ＞
００５：＜ｍｏｄｅ＞
００６：＜ｍｏｄｅｎａｍｅ＞ｃｏｌｏｒ＜／ｍｏｄｅｎａｍｅ＞
００７：＜ｓｔｅｇａｎｏｇｒａｐｈｙ＞ｔｒｕｅ＜／ｓｔｅｇａｎｏｇｒａｐｈｙ＞
００８：＜／ｍｏｄｅ＞
００９：＜ｍｏｄｅ＞
０１０：＜ｍｏｄｅｎａｍｅ＞ｍｏｎｏ＜／ｍｏｄｅｎａｍｅ＞
０１１：＜ｓｔｅｇａｎｏｇｒａｐｈｙ＞ｆａｌｓｅ＜／ｓｔｅｇａｎｏｇｒａｐｈｙ＞
０１２：＜ａｌｔｅｒｎａｔｅ＞ｇｒａｙｓｃａｌｅｔｒａｎｓｆｏｒｍ＜／ａｌｔｅｒｎａｔｅ＞
０１３：＜ｃｏｌｏｒｍｏｄｅ＞ｃｏｌｏｒ＜／ｃｏｌｏｒｍｏｄｅ＞
０１４：＜／ｍｏｄｅ＞
０１５：＜／ｃｏｌｏｒｍｏｄｅ＞
０１６：＜／ｒｅｓ＞

上記のＸＭＬでは、先述のＸＭＬと比べて、＜ｃｏｌｏｒｍｏｄｅ＞の＜ｍｏｄｅ＞に新たな情報が加わっている。まず、１１行目の＜ｓｔｅｇａｎｏｇｒａｐｈｙ＞は、カラーモード設定により、多重化する付加情報が欠落するかしないかの情報が含まれている。このタグがｆａｌｓｅの場合は多重化する付加情報が欠落するということを意味する。１２行目の＜ａｌｔｅｒｎａｔｅ＞タグには、付加情報の欠落を防ぐための代理の方法が記述されており、１３行目の＜ｃｏｌｏｒｍｏｄｅ＞には代理の方法を用いた後の印刷設定が記述されている。上記の表記は、「モノクロモードでは直接多重化はできないが、代わりにグレースケール変換を画像に対して適応し、印刷色モードをカラーにすれば良い」という情報を表している。例えば、画像処理装置１０２から取得した情報が上記の情報を表していれば、Ｓ１６０５以降の処理が行われる。＜ａｌｔｅｒｎａｔｅ＞タグの中身のｇｒａｙｓｃａｌｅｔｒａｎｓｆｏｒｍでは印刷アプリケーション側で対応する処理を把握しておく。一方、その処理内容そのものを記述しておいても良い。例えば、以下のように画像変換のためのプログラムを直接ＸＭＬに書き込んでおき、印刷アプリケーション側でそれを解釈して実行するようにしても良い。

～省略～
００１：＜ａｌｔｅｒｎａｔｅ＞
００２：ｆｕｎｃｔｉｏｎｔｒａｎｓｆｏｒｍ（ｒ，ｇ，ｂ）｛
００３：ｖａｒｇｒａｙ＝０．２９９＊ｒ＋０．５８７＊ｇ＋０．１１４＊ｂ；
００４：ｒｅｔｕｒｎ｛ｒ：ｇｒａｙ，ｇ：ｇｒａｙ，ｂ：ｇｒａｙ｝；
００５：｝
００６：＜／ａｌｔｅｒｎａｔｅ＞
～省略～

２行目から５行目はＪａｖａＳｃｒｉｐｔ表記に倣った関数である。Ｒ（Ｒｅｄ）、Ｇ（Ｇｒｅｅｎ）、Ｂ（Ｂｌｕｅ）の画素データを引数として与えることで、変更後のＲ，Ｇ，Ｂが返却される関数であり、３行目がＲ，Ｇ，Ｂをグレースケール変換する処理に対応する。この関数をアプリケーションで取得し、ＣＰＵ２０１上で動作するインタプリタで解釈した結果をアプリケーションから実行させることで動的なプログラム実行が可能となる。例えば、ＪａｖａＳｃｉｒｐｔで提供されるｅｖａｌ関数を用いることで上記の関数はプログラムとして解釈され、アプリケーションから実行可能な状態にすることが可能である。また、他のスクリプト言語を用いても良いし、処理内容を解釈して実行するインタプリタを独自で用意しても良い。上記のような表記にしておくことで、多重化した付加情報が欠落してしまうモノクロ変換以外の印刷設定が画像処理装置１０２に追加されても、随時対応することが可能となる。

本実施形態では、一例として、印刷アプリケーション内部にブラックリストを保持し、かつ、モノクロ印刷設定のみに対応する場合を説明する。ブラックリストは、印刷アプリケーション内に組み込んでおく（２次記憶装置２０４に保存しておく）でも良いし、プログラムとして直接記述されても良い。

Ｓ１６０５で印刷設定が「モノクロモード」から「カラーモード」に変更されると、Ｓ１６０６において、ＣＰＵ２０１は、多重化対象の画像データに対して、グレースケール変換を実行する。モノクロ変換では、通常１色のインクを用いた印刷で、その階調を濃淡で表現するが、本実施形態では、ブラックインクのモノクロ変換をグレースケール変換で代替する。即ち、後段のＳ１６０９で実行される多重化処理は、グレースケール変換された画像データに基づいて行われる。例えば、後段のＳ１６０９で実行される多重化処理は、グレースケール変換された０～２５５のグレー階調を持つ画像データに対して行われても良いし、画像の画素値が２５５（白）、０（黒）の２値の粗密だけで表現されたハーフトーン画像に対して行われても良い。但し、本実施形態では、グレースケール変換された画像データ、２値の粗密だけで表現された画像データは、ＲＧＢ等の複数チャネルの画像データに変換されており、その結果、色成分の変動による多重化が可能となっている。

図１７は、２値の粗密で画像を表現した画像１７０１の一例を示す図である。画像１７０３は、画像１７０１の一部１７０２を拡大したものであり、領域によって黒と白の粗密が違うことが分かる。ここでは、例えば、４ｐｘ×４ｐｘのマスク１７０４が用いられる。マスク１７０４を図６の画像領域に重複がないように配置してゆき、マスク１７０４の値と図６の画像の画素値とを比較し、画素値がマスク１７０４の値よりも小さい場合には画素値０（黒）、大きい場合には画素値２５５（白）の値に変換する。なお、画像データ上では画素値２５５は白色として表現されるが、画像処理装置１０２では、記録媒体が白色であれば、画素値２５５の領域にはインクは吐出されない。

図１８は、Ｓ１６０６の処理の一例を示すフローチャートである。Ｓ１８０１において、ＣＰＵ２０１は、Ｓ１６０６の処理に入力された画像データが複数チャネルの形式、例えばＲＧＢやＹＣｂＣｒなどの複数チャネルで構成される画像データであるか否かを判定する。ここで、複数チャネルで構成される画像データであると判定された場合は、Ｓ１８０２において、ＣＰＵ２０１は、単一チャネルで構成される画像データに変換する（グレースケール変換）。Ｓ１８０２では、例えば、ＲＧＢ画像データから、モノクロ化やＹＣｂＣｒのＹで表されるグレースケールの画像データへの変換が行われる。そして、Ｓ１８０３において、ＣＰＵ２０１は、ディザ法や誤差拡散法等によりハーフトーン処理を実行する。一方、Ｓ１８０１で画像データが単一チャネルで構成される画像データであると判定された場合には、その後、Ｓ１８０３のハーフトーン処理が実行される。

Ｓ１８０３の後、ＣＰＵ２０１は、Ｓ１８０３で生成された画像データを色信号の値で示される複数チャネルのデータとする。例えば、Ｓ１８０３で生成された画像データを、黒（画素値「０」）と白（画素値「２５５」）に対応するＲＧＢ画像データとする。このように、複数チャネルの画像データとすることにより、後段で実行される、色成分を変動させることによる付加情報の多重化が可能となる。Ｓ１８０４の後、図１８の処理を終了する。

図１８の処理を行うことで、入力された画像データを２値（黒と白）の粗密だけで表現された画像データとすることができる。画像処理装置１０２で印刷されるインクドットのサイズは人間の目の分解能に比べて十分に小さい。そのため、実際の印刷物は画像１７０３のような点の粗密ではなく、黒色と白色の濃淡として人間の目に認識される。

Ｓ１６０６の後、Ｓ１６０７に進む。また、Ｓ１６０４で「カラーモード」と判定された場合にも、Ｓ１６０７の処理が実行される。Ｓ１６０７において、ＣＰＵ２０１は、画像データの画像サイズが、印刷に必要なサイズ（例えばＡ４）と一致しているか否かを判定する。画像サイズが印刷に必要なサイズと一致していないと判定された場合、Ｓ１６０８において、ＣＰＵ２０１は、リサイズ処理を実行し、印刷に必要なサイズへとリサイズを行う。これは、プリンタドライバやプリンタ内部で画像のリサイズが行われると、多重化埋め込みで意図しているスペクトルの周期が変化してしまい、復号化に影響を与えてしまうためである。特にリサイズで縮小が実行された場合、画素が間引かれるため多重化する付加情報の欠落が発生する可能性がある。本実施形態では、多重化処理の前に画像のリサイズを行うことにより、画像のリサイズによって多重化した付加情報が欠落してしまうことを防ぐことができる。リサイズとしては、ニアレストネイバー、バイリニア、バイキュービックなどの線形補間が用いられても良い。また、本実施形態では、グレースケール変換を実行してからリサイズを行っているが、それらの処理は、逆の順序で行われても良い。Ｓ１６０８の後、もしくはＳ１６０７で画像サイズが印刷に必要なサイズと一致していると判定された場合には、Ｓ１６０９に進む。

Ｓ１６０９において、ＣＰＵ２０１は、Ｓ１６０３で取得された付加情報、例えばテキストデータをＳ１６０７もしくはＳ１６０８まで処理された画像データに対して多重化する。多重化処理は、先述したように色成分、例えば、ＲＧＢからＹＣｂＣｒに変換後のＣｂＣｒ成分に対して実行される。図１６の処理により多重化処理を実行することで、ユーザが意図した印刷設定を担保しつつ、画像処理装置１０２で復号化可能な状態で印刷することが可能となる。

Ｓ１６１０において、ＣＰＵ２０１は、画像処理装置１０２に対して印刷実行の指示を送信する。印刷実行を指示するＸＭＬの一例を以下に示す。

００１：＜？ｘｍｌｖｅｒｓｉｏｎ＝”１．０” ｅｎｃｏｄｉｎｇ＝”ＵＴＦ－８”？＞
００２：＜ｃｍｄ＞
００３：＜ｏｐｅｒａｔｉｏｎ＞ｐｒｉｎｔ＜／ｏｐｅｒａｔｉｏｎ＞
００４：＜ｄａｔａ＞ｊｐｅｇのｂａｓｅ６４データ＜／ｄａｔａ＞
００５：＜／ｃｍｄ＞

３行目の＜ｏｐｅｒａｔｉｏｎ＞タグのｐｒｉｎｔは、印刷実行を示している。４行目の＜ｄａｔａ＞タグには画像データが記述されている。ここでは、一例として、ｂａｓｅ６４形式のｊｐｅｇ画像を送ると記述されている。

Ｓ１６１０の後、図１６の処理を終了する。図１６の処理の終了後、送信された情報を受信した画像処理装置１０２は印刷を開始する。

以上のように、本実施形態では、多重化する付加情報が欠落する可能性のある印刷設定の場合、印刷設定で行われる処理の代替えとなる処理を行い、その後、付加情報の多重化を実行する。これにより、多重化する付加情報の欠落を防ぎ、ユーザが所望する画質を保ちつつ、復号化可能な状態での印刷が可能となる。

また、本実施形態では、図１４及び図１６の処理を情報処理装置１０１において実行するものとして説明したが、画像処理装置１０２において実行するようにしても良い。その場合、例えば、スマートフォン等の情報処理装置１０１で撮像された画像データを、印刷対象及び多重化対象の画像データとして取得する。

本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

発明は上記実施形態に制限されるものではなく、発明の精神及び範囲から離脱することなく、様々な変更及び変形が可能である。従って、発明の範囲を公にするために請求項を添付する。

１０１情報処理装置：１０２画像処理装置：２０１ＣＰＵ：２０２ＲＯＭ：２０３ＲＡＭ

Claims

印刷対象の画像を示す入力画像データを取得する取得手段と、
前記入力画像データに基づく印刷の設定として、モノクロモードであることと、前記印刷対象の画像に対して付加情報を多重化することとが設定されていることを条件として、モノクロモードに代えてカラーモードを設定する設定手段と、
前記入力画像データに基づいて、前記印刷対象の画像をモノクロ化した色を色信号の値によって示されるカラーモードの印刷に対応したカラー画像データを生成する生成手段と、
前記印刷対象の画像に付加情報を多重化するための処理を前記生成手段により生成された前記カラー画像データに対して行う多重化手段と、
前記設定手段によって設定されたカラーモードで、前記多重化手段により処理が行われたカラー画像データに基づいて前記付加情報が多重化された多重化画像を印刷装置に印刷させる制御手段と、
を備えることを特徴とする情報処理装置。
前記入力画像データが複数チャネルの画像データである場合、前記入力画像データを単一チャネルの画像データに変換する第１変換手段、をさらに備え、
前記生成手段は、前記第１変換手段により変換された前記単一チャネルの画像データに基づいて、前記カラー画像データを生成する、
ことを特徴とする請求項１に記載の情報処理装置。
前記単一チャネルの画像データを複数チャネルのカラー画像データに変換する第２変換手段、をさらに備え、
前記多重化手段の対象となる前記カラー画像データは、前記複数チャネルのカラー画像データである、
ことを特徴とする請求項２に記載の情報処理装置。
前記多重化手段は、色成分を変動させることにより前記付加情報を多重化することを特徴とする請求項３に記載の情報処理装置。
前記設定手段によるカラーモードの設定を実行するか否かを判定する第１判定手段、をさらに備え、
前記第１判定手段により前記設定手段によるカラーモードの設定を実行すると判定された場合、前記設定手段は、モノクロモードに代えてカラーモードを設定する、
ことを特徴とする請求項１乃至４のいずれか１項に記載の情報処理装置。
前記第１判定手段は、前記印刷装置においてモノクロモードに対応する処理が実行されることに基づいて、前記設定手段によるカラーモードの設定を実行すると判定することを特徴とする請求項５に記載の情報処理装置。
前記第１判定手段は、ユーザによる設定がモノクロモードを含む場合、前記設定手段によるカラーモードの設定を実行すると判定することを特徴とする請求項６に記載の情報処理装置。
前記第１判定手段は、前記印刷装置から取得した情報に基づいて前記印刷装置において前記モノクロモードに対応する処理が実行されると判定した場合、前記設定手段による前記カラーモードの設定を実行すると判定することを特徴とする請求項６に記載の情報処理装置。
前記第１判定手段は、前記印刷装置から取得した情報とブラックリストに基づいて、前記印刷装置において前記モノクロモードに対応する処理が実行されるか否かを判定することを特徴とする請求項８に記載の情報処理装置。
前記入力画像データに基づく印刷が実行される記録媒体のサイズに応じて前記カラー画像データのリサイズを実行するか否かを判定する第２判定手段、をさらに備え、
前記第２判定手段により前記カラー画像データのリサイズを実行すると判定された場合、前記多重化手段による前記付加情報の多重化の前に、前記カラー画像データのリサイズが実行されることを特徴とする請求項１乃至９のいずれか１項に記載の情報処理装置。
前記入力画像データに基づく印刷の設定としてカラーモードが設定されている場合、前記設定手段によるカラーモードの設定が行われることなく、前記入力画像データに対して付加情報が多重化されることを特徴とする請求項１乃至１０のいずれか１項に記載の情報処理装置。
ユーザインタフェース画面を表示する表示手段、をさらに備え、
前記取得手段により取得された前記入力画像データは、前記ユーザインタフェース画面においてユーザにより選択された画像データである、
ことを特徴とする請求項１乃至１１のいずれか１項に記載の情報処理装置。
前記付加情報は、前記ユーザインタフェース画面においてユーザにより入力された情報であることを特徴とする請求項１２に記載の情報処理装置。
前記印刷装置をさらに備えることを特徴とする請求項１乃至１３のいずれか１項に記載の情報処理装置。
情報処理装置において実行される方法であって、
印刷対象の画像を示す入力画像データを取得する取得工程と、
前記入力画像データに基づく印刷の設定として、モノクロモードであることと、前記印刷対象の画像に対して付加情報を多重化することとが設定されていることを条件として、モノクロモードに代えてカラーモードを設定する設定工程と、
前記入力画像データに基づいて、前記印刷対象の画像をモノクロ化した色を色信号の値によって示されるカラーモードの印刷に対応したカラー画像データを生成する生成工程と、
前記印刷対象の画像に付加情報を多重化するための処理を前記生成工程において生成された前記カラー画像データに対して行う多重化工程と、
前記設定工程において設定されたカラーモードで、前記多重化工程において処理が行われたカラー画像データに基づいて前記付加情報が多重化された多重化画像を印刷装置に印刷させる制御工程と、
を有することを特徴とする方法。
請求項１乃至１４のいずれか１項に記載の情報処理装置の各手段としてコンピュータを機能させるためのプログラム。
情報処理装置と印刷装置とを含むシステムであって、
前記情報処理装置は、
印刷対象の画像を示す入力画像データを取得する取得手段と、
前記入力画像データに基づく印刷の設定として、モノクロモードであることと、前記印刷対象の画像に対して付加情報を多重化することとが設定されていることを条件として、モノクロモードに代えてカラーモードを設定する設定手段と、
前記入力画像データに基づいて、前記印刷対象の画像をモノクロ化した色を色信号の値によって示されるカラーモードの印刷に対応したカラー画像データを生成する生成手段と、
前記印刷対象の画像に付加情報を多重化するための処理を前記生成手段により生成された前記カラー画像データに対して行う多重化手段と、
前記設定手段によって設定されたカラーモードで、前記多重化手段により処理が行われたカラー画像データに基づいて前記付加情報が多重化された画像データを前記印刷装置に送信する送信手段と、
を備え、
前記印刷装置は、
前記送信手段により送信された画像データに基づいて前記付加情報が多重化された多重化画像をカラーモードで印刷する、
ことを特徴とするシステム。