JP7358979B2

JP7358979B2 - 情報処理システム、評価方法

Info

Publication number: JP7358979B2
Application number: JP2019235066A
Authority: JP
Inventors: 達郎吉岡
Original assignee: Ricoh Co Ltd
Current assignee: Ricoh Co Ltd
Priority date: 2019-12-25
Filing date: 2019-12-25
Publication date: 2023-10-11
Anticipated expiration: 2039-12-25
Also published as: JP2021103476A

Description

本発明は、情報処理システム、及び評価方法に関する。

２つの画像が同一か否かを判定したい場合がある。例えば、高品質な印刷物が要求される商用印刷などの分野では、バージョンアップなどによりプリンタドライバを変更しても同じ画質の印刷物が得られるかなどをユーザが評価する場合がある。また、プリンタなどの画像形成装置側ではレンダリングを行うＰＤＬモジュール（Printer Description Language）が動作しているが、このＰＤＬモジュールも適宜修正されバージョンアップする場合がある。この場合も同じ画質の印刷物が得られるかなどをユーザが評価する場合がある。

このような評価に関する作業は、従来、目視により行われていたが自動化する技術が考案されている（例えば、特許文献１参照。）。特許文献１には、ホストコンピュータから印刷ジョブと設定値を評価対象の画像形成装置に送り、画像形成装置側で当該印刷ジョブと設定値に基づいてイメージデータを作成してホストコンピュータに送信し、ホストコンピュータにおいて、格納されている先のバージョンのプリンタで作成したイメージデータと評価対象の画像形成装置で作成したイメージデータとを比較して評価対象の画像形成装置を評価することが記載されている。

しかしながら、従来の技術では、画像形成装置側で評価用の画像を作成するため画像形成装置が必要になるという問題があった。

本発明は、上記課題に鑑み、画像形成装置がなくても画像の評価を行うことができる情報処理システム等を提供することを目的とする。

上記課題に鑑み、本発明は、端末装置と情報処理装置とが通信可能な情報処理システムであって、前記情報処理装置は、前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、前記評価結果を受信する第二通信部と、前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、同じＯＳと異なる２つのプリンタドライバでそれぞれ印刷データを生成し、同じプリンタシミュレータを使って２つの印刷データから２つの画像を生成し、
前記評価部は前記２つの画像を比較し、前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする。

画像形成装置がなくても画像の評価を行うことができる情報処理システム等を提供することができる。

情報処理システムの処理の概略を説明する図である。同一性判定を行う情報処理システムの一例の構成図である。端末装置又は情報処理装置のハードウェア構成図の一例である。情報処理装置と端末装置の機能をブロック状に分けて説明する機能ブロック図の一例である。情報処理装置に構築される仮想マシンの構成例を示す図である。情報処理装置が行う処理の流れを説明する図である。情報処理システムが行う全体的な処理又は動作を説明するシーケンス図の一例である。端末装置が表示する設定画面の一例を示す図である。設定画面３００に表示される初期値が登録された初期値情報の一例を示す図である。設定画面の別の例を説明する図である。評価ＩＤ欄に表示されるプルダウンメニューの一例を示す図である。情報処理装置が同一性判定を行う処理を説明するフローチャート図の一例である。評価部による差分情報の生成方法を説明する図の一例である。人間の目で認識可能な大きさ以上連続している差異の検出方法を説明する図である。一定領域内に人間の目で認識可能な割合以上存在する差異の検出方法を説明する図である。差分情報の生成方法を説明する図である。２つの画像の差分情報の一例を示す図である。差分の配置から配置パターンを検出する方法を説明する図である。差分の配置が検出されない２つの画像と、２つの画像の差分情報の一例を示す図である。差分の配置が検出された２つの画像と、２つの画像の差分情報の一例を示す図である。端末装置が表示する評価結果画面の一例を示す図である。詳細評価結果画面の一例を示す図である。評価結果のページ別の判定結果の一例を示す図である。差分の詳細を有するＸＭＬファイルの記載例を示す図である。

以下、本発明を実施するための形態の一例として、情報処理装置と情報処理装置が行う評価方法について図面を参照しながら説明する。

＜動作の概略＞
本実施形態では、ネットワークを介して通信可能な端末装置からの要求を受信した情報処理装置がプリンタシミュレータを実行して、従来、画像形成装置が作成していた印刷処理用の画像を作成する。これにより、実際の画像形成装置がなくても情報処理装置が２つの印刷処理用の画像を比較することができる。

図１は、情報処理システム１００の処理の概略を説明する図である。
(1) 端末装置３０が表示する設定画面においてユーザは画像の同一性判定に関する設定を入力し、スタートボタンを押下する。これにより同一性判定に関する設定が情報処理装置５０に送信される。画像の同一性判定が行われることにより、プリンタドライバ、プリンタシミュレータ、又はＯＳ等が例えば修正されたことの影響を情報処理装置５０が評価できる。
(2) ユーザが評価すると設定したプリンタドライバを情報処理装置５０がインストールして、印刷用アプリケーションが評価ファイル（画像生成の元となるファイル）に対しプリンタドライバを呼び出すと、プリンタドライバがＰＤＬ（Printer Description Language）で記述された印刷用ファイルを作成する。なお、ＯＳやプリンタシミュレータ等もユーザが設定することで評価することができる。また、印刷条件や評価ファイルが画質に影響する場合もある。
(3) 通常、この印刷用ファイルは画像形成装置に送信され、画像形成装置で動作するＰＤＬモジュールがレンダリングして用紙に印刷するが、本実施形態では画像形成装置に送信することなく、情報処理装置５０内で起動するプリンタシミュレータ（ＰＤＬモジュール）がレンダリング処理を行う。したがって、情報処理装置５０内で印刷処理用の画像を作成する。
(4) 作成された印刷処理用の画像を情報処理装置５０が記憶部に保存する。記憶された印刷処理用の画像は、同じように作成された比較元の印刷処理用の画像と比較され、評価結果が生成される。

このように、本実施形態の情報処理装置５０は、プリンタドライバ、ＰＤＬモジュール、又はＯＳの違いが画像に与える影響の評価に画像形成装置を使用しないので、情報処理システム１００の構成を簡素化し、評価コストを削減することができる。

＜用語について＞
プリンタシミュレータは、情報処理装置上で画像形成装置が行う画像処理を再現するソフトウェアである。本実施形態ではプリンタシミュレータは、少なくともＰＤＬモジュールを有し、レンダリングする機能を有している。

画像の評価とは、画像が所定の品質を満たしているかどうかを検査することをいう。例えば、比較元の画像と比較すること、また、比較により差異があればその程度を見積もることなどが含まれる。したがって、評価の一例として、２つの画像の同一性判定がある。なお、評価には必ずしも２つの画像は必要なく、プリンタシミュレータで生成した画像をスキャナで読み取り、画素の配置を評価する方法もある。この場合は、画素密度が異なる決まったパターンでプリンタシミュレータが画像を印刷し、一定面積内の画素の数や散らばり方などを閾値と比較する方法がある。

評価結果は、画像の品質に関する情報を含み、例えば、差異の程度が含まれてよい。

同一の判定方法には、所定以上の差異があれば機械的に同一でないと判定する完全同一の判定方法と、人間の目で認識不可能な差があるかどうかを判定する曖昧同一の判定方法がある。同一を類似、非同一を非類似と称してもよい。

差分の配置とは、ある程度まとまった差分の偏りをいう。まとまっている差分でもよい。

＜構成例＞
図２は、同一性判定を行う情報処理システム１００の一例の構成図である。本実施形態では、クライアント・サーバ型のサーバに相当する情報処理装置５０が２つの画像の同一性判定を行うシステム構成を説明する。ただし、端末装置３０が単体で同一性判定を行ってもよい。

情報処理システム１００では、端末装置３０と情報処理装置５０とがネットワークＮを介して通信することができる。情報処理装置５０はサーバ又はサーバ装置ともよばれ、主にネットワーク上で情報処理を行う装置であり、ネットワークを介して受信した要求に対し情報や処理結果を応答する装置である。

情報処理装置５０はインターネット上にあってもオンプレミスに存在してもよい。いずれの形態においても情報処理システム１００はクラウドシステムと呼ばれる場合がある。クラウドシステムとは、特定ハードウェア資源が意識されずにネットワーク上のリソースが利用されるシステムをいう。

情報処理装置５０はいわゆるＷｅｂサーバとして、処理を受け付けるポータル画面の画面情報（ＨＴＭＬ、ＸＭＬ、スクリプト言語、及びＣＳＳ（cascading style sheet）等で記述されており、主にブラウザソフトが解析して表示する情報）を生成して端末装置３０に提供する。端末装置３０ではＷｅｂブラウザが動作しており、画面情報を受信してＷｅｂページを表示する。このＷｅｂページの１つには２つの画像の同一性判定の設定を受け付けるインターフェースがあり、ユーザはＯＳ、プリンタドライバ、及び、ＰＤＬモジュール等から１つ以上を指定して同一性判定の処理を情報処理装置５０に要求する。

なお、ＷｅｂページはＷｅｂアプリにより提供されてもよい。Ｗｅｂアプリとは、ブラウザ上で動作するプログラミング言語（たとえばJavaScript（登録商標））によるプログラムとＷｅｂサーバ側のプログラムが協調することによって動作し、ブラウザ上で実行されるソフトウェア又はその仕組みを言う。ＷｅｂアプリによりＷｅｂページを動的に変更できる。

一方、端末装置３０は、情報処理装置５０から画面情報を受信してＷｅｂブラウザで表示させ、２つの画像の同一性判定に関する設定を含むユーザからの操作を受け付ける。端末装置３０で動作するＷｅｂブラウザは同一性判定に関する設定を情報処理装置５０に送信して、同一性判定の処理を要求する。

端末装置３０は、例えば、ＰＣ（Personal Computer）、タブレット端末、ＰＤＡ、又は、スマートフォン、などＷｅｂブラウザなどのソフトウェアが動作するものであればよい。電子黒板、テレビ会議端末などでも端末装置３０となりうる。なお、Ｗｅｂブラウザでなく情報処理システム１００に専用のアプリケーションソフトが端末装置３０で動作してもよい。同一性判定により得られる評価結果は、端末装置３０が表示できる他、情報処理装置５０がメールで送信してもよいし、ネットワーク上に保存してもよい。

＜ハードウェア構成例＞
図３は、端末装置３０又は情報処理装置５０のハードウェア構成図である。ここでは、情報処理装置５０のハードウェア構成であるとして説明する。

図３に示されているように、情報処理装置５０は、コンピュータによって構築されており、図３に示されているように、ＣＰＵ５０１、ＲＯＭ５０２、ＲＡＭ５０３、ＨＤ５０４、ＨＤＤ(Hard Disk Drive)コントローラ５０５、ディスプレイ５０６、外部機器接続Ｉ／Ｆ(Interface)５０８、ネットワークＩ／Ｆ５０９、バスライン５１０、キーボード５１１、ポインティングデバイス５１２、ＤＶＤ－ＲＷ(Digital Versatile Disk Rewritable)ドライブ５１４、メディアＩ／Ｆ５１６を備えている。

これらのうち、ＣＰＵ５０１は、情報処理装置５０全体の動作を制御する。ＲＯＭ５０２は、ＩＰＬ等のＣＰＵ５０１の駆動に用いられるプログラムを記憶する。ＲＡＭ５０３は、ＣＰＵ５０１のワークエリアとして使用される。ＨＤ５０４は、プログラム等の各種データを記憶する。ＨＤＤコントローラ５０５は、ＣＰＵ５０１の制御にしたがってＨＤ５０４に対する各種データの読み出し又は書き込みを制御する。ディスプレイ５０６は、カーソル、メニュー、ウィンドウ、文字、又は画像などの各種情報を表示する。外部機器接続Ｉ／Ｆ５０８は、各種の外部機器を接続するためのインターフェースである。この場合の外部機器は、例えば、ＵＳＢ(Universal Serial Bus)メモリやプリンタ等である。ネットワークＩ／Ｆ５０９は、通信ネットワークを利用してデータ通信をするためのインターフェースである。バスライン５１０は、図３に示されているＣＰＵ５０１等の各構成要素を電気的に接続するためのアドレスバスやデータバス等である。

また、キーボード５１１は、文字、数値、各種指示などの入力のための複数のキーを備えた入力手段の一種である。ポインティングデバイス５１２は、各種指示の選択や実行、処理対象の選択、カーソルの移動などを行う入力手段の一種である。ＤＶＤ－ＲＷドライブ５１４は、着脱可能な記録媒体の一例としてのＤＶＤ－ＲＷ５１３に対する各種データの読み出し又は書き込みを制御する。なお、ＤＶＤ－ＲＷに限らず、ＤＶＤ－Ｒ等であってもよい。メディアＩ／Ｆ５１６は、フラッシュメモリ等の記録メディア５１５に対するデータの読み出し又は書き込み（記憶）を制御する。

＜機能について＞
図４は、情報処理装置５０と端末装置３０の機能をブロック状に分けて説明する機能ブロック図の一例である。

＜＜情報処理装置＞＞
情報処理装置５０は、制御部５１、印刷用アプリケーション５２、プリンタドライバ５３、プリンタシミュレータ５４、評価部５５、画面情報生成部５６、管理部５７、及び、第一通信部５８を有している。情報処理装置５０が有するこれら各機能部は、図３に示された各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３に展開されたプログラムに従ったＣＰＵ５０１からの命令により動作することで実現される機能又は手段である。

第一通信部５８は、端末装置３０と通信し、各種の情報を送受信する。例えば、端末装置３０から同一性判定に関する設定を受信し、評価結果を送信する。

管理部５７は、同一性判定に関する処理の全体を制御する。例えば、ユーザから受信した同一性判定に関する設定に基づいて処理の流れを管理しており、印刷用アプリケーション５２以下の必要な機能を呼び出す。制御部５１としてはJenkinsなどの制御ツールが知られている。また、ＲＰＡ（Robotic Process Automation）を使用してもよい。ＲＰＡはデスクワーク（主に定型作業）を、パソコンの中にあるソフトウェア型のロボットが代行・自動化する概念である。

印刷用アプリケーション５２は、情報処理装置５０にインストールされたＯＳで動作するアプリケーションソフトウエアである。つまり、評価ファイルを少なくとも開くことができ、プリンタドライバ５３を呼び出して印刷を開始するアプリケーションである。印刷用アプリケーション５２は、プリンタドライバ５３を呼び出すソフトウェアであればよいが、例えば、ワープロソフトウェア、Ｗｅｂブラウザソフトウェア、イラストソフトウェア、又は、ペイントソフトウェアなどがある。また、印刷用アプリケーション５２は２つ以上でもよい。複数の場合、情報処理装置５０は異なる評価ファイルで同一性判定を行う。

プリンタドライバ５３は、情報処理装置５０にインストールされたＯＳで動作するソフトウェアある。プリンタドライバ５３とは、本来、コンピュータと画像形成装置の間を取り持って画像形成装置をユーザが簡単に使えるようにするソフトウェアである。プリンタドライバ５３は印刷設定（印刷条件ともいう）を受け付けるユーザインタフェース画面を表示する機能と、ＰＤＬで記述された印刷データを生成する機能を有する。ＰＤＬには、例えばPostScript（登録商標）、ＰＣＬ（Printer Control Language）などがある。この他、画像形成装置のメーカにより種々の形式がある。画像形成装置では各ＰＤＬに対応したＰＤＬモジュールが動作している。

プリンタシミュレータ５４は、情報処理装置５０にインストールされたＯＳで動作するソフトウェアである。プリンタシミュレータ５４は、画像形成装置で実行されていたレンダリングを行う。レンダリングをＲＩＰ（Raster Image Processer）又は描画処理等という場合がある。また、レンダリングを行うソフトウェアをＰＤＬモジュール又は描画処理部という場合がある。プリンタシミュレータ５４はこの１つ以上のＰＤＬモジュールを有している。なお、プリンタシミュレータ５４は情報処理装置５０が有する以外に、情報処理装置５０がアクセスできるネットワーク上に存在すればよい。

ＰＤＬモジュールは、カラーマッチング処理及びスクリーニング処理を行って、画像形成装置が印刷に使用するＣ、Ｍ、Ｙ、Ｋの各色ごとに印刷処理用の画像を生成する。カラーマッチング処理は入力されたカラー（又はモノクロでもよい）の印刷データを画像形成装置のＣ、Ｍ、Ｙ、Ｋの４色のトナーで印刷するために最適な変換比率で変換する処理である。印刷用アプリケーション５２から入力される印刷データはＲＧＢ色空間で表現されている場合と、ＣＭＹＫ色空間で表現されている場合があるが、一般的な印刷用アプリケーション５２を使用した場合はＲＧＢ色空間が採用されている。プリンタシミュレータ５４はＲＧＢ色空間の印刷データをカラーマッチング処理によりデバイス独立色空間へ変換した後、画像形成装置の特性にあったデバイス色空間へ変換することで、ＣＭＹＫ色空間に変換する。ＲＧＢからＣ、Ｍ、Ｙ、Ｋへの変換式には公知のものを使用してもよいし、又は、画像形成装置に最適化された変換式を使用してもよい。

スクリーニング処理はディザ法などの擬似階調表現手法で、網点の大きさや密度を変えることにより、目の錯覚を利用して濃淡の違いを表現する処理であり、ビットマップデータを画像形成装置が印刷可能な印刷処理用の画像に変換する処理である。印刷処理用の画像には、レーザ又はインクで点として描画される画素に対応するドットごとに１（ＯＮ：描画する）又は０（ＯＦＦ：描画しない）が設定されている。

評価部５５は、情報処理装置５０上で動作するアプリケーションモジュールである。評価部５５は、着目している２つの印刷処理用の画像を比較して同一と見なせるかどうかを評価する。また、２つの画像の差分情報を生成する。例えば、画像の解像度で定まる画素位置ごとに同じ画素（ＣＭＹＫ）があるか否かを比較して、差分情報を生成する。

画面情報生成部５６は、Ｗｅｂサーバとして端末装置３０が表示する画面の画面情報を生成する。本実施形態では、主に、同一性判定に関する設定を受け付ける設定画面の画面情報を生成する。

管理部５７は、同一性判定が行われると評価ＩＤを採番し、２つの印刷処理用の画像の評価結果と対応付けてを管理する。また、ユーザのメールアドレスに評価結果を送信したり、チャットシステムを使ってユーザへ送信したりする。

また、情報処理装置５０は、図３に示したＨＤ５０４又はＲＡＭ５０３の少なくとも一方により構築される記憶部５９を有している。記憶部５９には、印刷処理用の画像、差分情報、及び、評価結果等が記憶される。

＜＜端末装置＞＞
端末装置３０は、第二通信部３１、表示制御部３２、及び、操作受付部３３を有する。端末装置３０が有するこれら各機能部は、図３に示されている各構成要素のいずれかが、ＨＤ５０４からＲＡＭ５０３上に展開された端末装置３０用のプログラムに従ったＣＰＵ５０１からの命令によって動作することで実現される機能である。このプログラムは、例えばＷｅｂブラウザが想定されている。

端末装置３０が有する第二通信部３１は情報処理装置５０と各種の情報を送受信する。例えば、ＨＴＴＰ通信で各種のＷｅｂページを要求し、Ｗｅｂページに対する各種の操作内容を情報処理装置５０に送信する。

表示制御部３２は、情報処理装置５０から受信した各種の画面情報を解析してディスプレイ５０６に表示する。表示制御部３２は評価結果として２つの画像の差分情報を表示する。操作受付部３３は、端末装置３０が表示するＷｅｂページ（画面）に対する各種の操作を受け付ける。

＜仮想マシンについて＞
本実施形態では、情報処理装置５０が仮想マシン上で印刷処理用の画像を生成することで、効率的に印刷処理用の画像の評価を行う。印刷処理用の画像には、ＯＳ、プリンタドライバ５３、ＰＤＬモジュール、印刷条件、又は評価ファイルなど様々な要因が影響するが、少なくともＯＳに関してはユーザがＯＳを入れ替える作業に時間がかかる。これに対し、仮想マシンを利用すれば、情報処理装置５０で動作するホストＯＳはそのままで、情報処理装置５０が任意のゲストＯＳをインストール可能である。また、ホストＯＳ上に複数の仮想マシンを構築することも可能なため、同じＯＳにおける評価に関しては、ゲストＯＳのインストールに関する作業の手間を低減できる。

図５は、情報処理装置５０に構築される仮想マシン６１Ａ，６１Ｂの構成例を示す図である。仮想マシン６１Ａ，６１Ｂは、仮想化の技術を用いて１つの情報処理装置５０の中で構築された、独立に動作する情報処理装置である。図５の物理マシン６５は図３に示した情報処理装置５０の本来のハードウェア構成に対応する。ホストＯＳ６４は情報処理装置５０で直接、動作するＯＳである。ホストＯＳ６４上では仮想化ソフト６３が動作する。仮想化ソフト６３には仮想化の技術が用いられており、仮想マシン６１Ａ，６１Ｂに対しハードウェアをエミュレートするソフトウェアである。例えば、VMware（登録商標）、Microsoft Virtual PC（登録商標）等がある。

ゲストＯＳ６２は一般的なＯＳであり、本実施形態では印刷処理用の画像に影響を与える要因の１つとなる。ゲストＯＳ６２からみると仮想化ソフト６３は単に情報処理装置として見えるため、仮想マシン６１Ａ，６１ＢはホストＯＳ６４や他の仮想マシンとは独立に動作する。したがって、印刷用アプリケーション５２及びプリンタドライバ５３も通常と同じものを使用できる。

なお、図示する仮想マシンはホスト型と呼ばれるものであるが、ハイパーバイザ型の仮想マシンを使用してもよい。

＜全体的な処理の流れ＞
次に、図６を用いて情報処理装置５０が行う全体的な処理の流れを説明する。図６は情報処理装置５０が行う処理の流れを説明する図である。図６に示すように、情報処理装置５０は比較元の印刷処理用の画像と、比較対象の印刷処理用の画像をそれぞれ生成する。なお、１回の同一性判定で必ずしも図６の全ての処理が行われるわけではない点に注意されたい。例えば、比較用又は比較対象の印刷処理用の画像が生成されている場合は画像の生成が不要になり、プリンタドライバ５３がすでにインストール済みであればインストールは不要になる。

S1：ユーザは端末装置３０に表示された後述の設定画面で、同一性判定に関する設定を行い、情報処理装置５０に対して端末装置３０に送信させる。情報処理装置５０は同一性判定の開始を受け付ける。

S2：ユーザが設定画面で評価元として指定したＯＳ、プリンタドライバ５３、ＰＤＬモジュール（プリンタシミュレータ）、印刷条件、及び、評価ファイルと、一致する印刷処理用の画像が記憶部５９に既に存在する場合はS2からS6の処理はスキップされる。

S3：制御部５１は、まず、評価元として指定されたＯＳ（ゲストＯＳ）を仮想マシン上で起動する。起動済みの場合は起動しなくてよい。

S4：制御部５１は評価元として指定されたプリンタドライバ５３をゲストＯＳにインストールする。インストール済みの場合、インストールは不要である。

S5：制御部５１は評価ファイルに対応した印刷用アプリケーション５２を起動して、印刷用アプリケーション５２が指定された印刷条件で指定された評価ファイルの印刷データを生成する。印刷データ（*.prn、*.ps）が記憶部５９に保存される。なお、評価ファイルがprnファイル.psファイル又はＰＤＦファイルなど、印刷用アプリケーション５２が印刷しなくてもよい形式の場合、印刷データの生成が行われずに、そのまま記憶部５９にコピーされる。また、評価ファイルがpngやjpegといったイメージファイルの場合もそのまま印刷データ用の記憶部５９に保存される。

S6：制御部５１がプリンタシミュレータ５４を起動し、プリンタシミュレータ５４が指定されたＰＤＬモジュールを用いて、ステップS5で作成された印刷データに描画処理を行って、印刷処理用の画像を生成する。生成された印刷処理用の画像は比較元の印刷処理用の画像として記憶部５９に保存される。印刷処理用の画像は、例えばpngフォーマットで作成されるが、ユーザが後述する初期設定ファイルを修正する事でJpeg、Tiff等、他のフォーマットで作成できる。

以下のステップS7～S10で情報処理装置５０は比較対象の印刷処理用の画像を生成する。

S7～S10：ステップS7～S10の処理では、比較元の処理に対し、比較対象のＯＳ、プリンタドライバ５３、ＰＤＬモジュール、印刷条件、及び、評価ファイルの１つ以上が変更されるが、各ステップの処理の内容は比較元の場合と同じでよい。

S11：評価部５５は、評価元と評価対象の印刷処理用の画像を比較して評価結果を作成する。

S12：管理部５７は、評価結果を指定された記憶部５９に保存する。保存された評価結果、及び、印刷処理用の画像（比較元又は比較対象のいずれでもよい）は次回、評価時に評価元又は比較対象の印刷処理用の画像として情報処理装置５０が参照することが可能である。

S13：管理部５７は、同一性判定が完了したこと、及び、評価結果を例えばメールアドレスに通知する。メールアドレスには評価結果が記憶されているＵＲＬが記載されており、ユーザは端末装置３０を操作して評価結果を表示させることができる。なお、管理部５７は評価結果を直接、端末装置３０に送信してよい。各処理で失敗した場合もその旨を記載してメール等で送信するとよい。

図６では、比較元の印刷処理用の画像の生成と比較対象の印刷処理用の画像の生成とが順番に実行されているが、両者を並行に実行してもよい。こうすることで時間を短縮できる。

＜全体的な処理又は動作について＞
図７は、情報処理システム１００が行う全体的な処理又は動作を説明するシーケンス図の一例である。

S21：ユーザが端末装置３０を操作して情報処理装置５０に接続させ、同一性判定のための設定画面を表示するための操作を入力すると、端末装置３０が設定画面の画面情報を情報処理装置５０に要求する。情報処理装置５０の第一通信部５８がこの要求を受信し、画面情報生成部５６が設定画面の画面情報を生成し、情報処理装置５０の第一通信部５８が設定画面の画面情報を端末装置３０に送信する。

S22：端末装置３０の第二通信部３１は設定画面の画面情報を受信して、表示制御部３２が設定画面をディスプレイ５０６に表示する。設定画面の一例を図８に示す。ユーザが設定画面で同一性判定に関する設定を入力すると、操作受付部３３が操作を受け付ける。

S23：ユーザが設定画面のスタートボタンを押下すると操作受付部３３が受け付けて、第二通信部３１が同一性判定に関する設定を指定して同一性判定要求を情報処理装置５０に送信する。

S24：情報処理装置５０の第一通信部５８は同一性判定要求を受信し、制御部５１が図６にて説明した流れで同一性判定を開始する。情報処理装置５０の処理の詳細については図１２にて説明する。

S25：同一性判定の間、情報処理装置５０の第一通信部５８は端末装置３０からの要求に応じて、又は、プッシュ通信でステータスを端末装置３０に送信する。ステータスは例えば、図６の処理のどのステップまで処理が終了したかを示す進捗情報である。これにより、ユーザは処理がどのくらい進んでいるかを把握できる。

S26：情報処理装置５０の評価部５５が評価を終了すると、第一通信部５８が評価結果を端末装置３０に送信する。

S27：端末装置３０の第二通信部３１は評価結果を受信し、表示制御部３２が評価結果をディスプレイ５０６に表示する。評価結果の一例を図２１等に示す。

＜設定画面＞
図８は、端末装置３０が表示する設定画面３００の一例を示す図である。なお、ユーザの操作前に設定画面３００で表示される初期値は制御部５１により保持されている。図９は、設定画面３００に表示される初期値が登録された初期値情報の一例を示す。例えば、「c:/setting.ini」というファイルに図９の初期値情報が保存されている。
「#Image Comparison Tool Default Setting」：本ファイルのタイトルである。
「Image Format」:印刷処理用の画像のフォーマット（ファイル形式）である。
「Output Folder」: 印刷処理用の画像の送信先のアドレスである。
「Work Folder」 : 印刷データ又は評価ファイルを一時的に保存しておくフォルダである。
「Comparison」:比較方法を完全一致とするか曖昧一致とするかが設定される。
「E－mail」:評価結果の送信先のメールアドレスである。

制御部５１が図９の初期値情報を画面情報生成部５６に送信することで、画面情報生成部５６は初期値が設定された設定画面３００を生成できる。

図８に戻って説明する。設定画面３００は比較元欄３０１、比較対象欄３０５、及び、その他設定欄３１６を有している。比較元欄３０１と比較対象欄３０５の項目は同じである。
・ＯＳ３０２，３０６…ゲストＯＳが設定される。
・PrinterDriver３０３，３０７…プリンタドライバ５３の種類やバージョンが設定される。
・ＰＤＬ３０４，３０８…ＰＤＬモジュール（描画処理部）の種類やバージョンが設定される。なお、ＰＤＬモジュールが設定されるとプリンタシミュレータも設定される。

図８の比較元欄３０１には、ＯＳ３０２に「64bit版Windwos10（登録商標）」を使用し、PrinterDriver３０３に「C:/Driver/x64/postscript_1.00」のパッケージを使用し、更にプリンタシミュレータ５４で動作するＰＤＬ３０４（ＰＤＬモジュール）は「C:/PDL/Postscript_1.00 」を使用する、ことが設定されている。比較対象欄３０５には、ＯＳ３０６に「32bit版Windwos10（登録商標）」を使用し、PrinterDriver３０７に「C:/Driver/x64/postscript_1.00」のパッケージを使用、更に印刷に使用するプリンタシミュレータ５４で動作するＰＤＬ３０８は「C:/PDL/Postscript_1.00」を使用する、ことが設定されている。

続いて、その他設定欄３１６の項目について説明する。
・評価欄ファイル欄３０９…画像の評価に使用する評価ファイルのファイル名が設定される欄である。ユーザは複数の評価ファイルを設定することも可能である。また、prnファイルやＰＤＦファイルなど、印刷用アプリケーション５２が必要でなく、直接、画像形成装置に送信できるファイルも設定できる。また、png、jpeg、tiff、bmpといったイメージデータを直接、指定することもできる。
・比較方法欄３１０…比較方法が設定される欄である。評価部５５は評価元と評価対象の印刷処理用の画像で全てのピクセルが完全に一致するか否かを判定する「完全一致判定」、又は、ある程度の差を許容する「曖昧判定」のいずれかで比較する。二段階とするのでなく、数値で比較の厳しさを設定してもよい。なお、比較方法欄３１０の初期値は初期値情報の「Comparison」に設定されている。
・結果保存先欄３１１…評価結果の保存先が設定される欄である。評価結果は例えばcsvファイル、textファイル、XMLファイルなどの形式でよい。なお、評価結果だけでなく、比較元と比較対象の印刷処理用の画像、及び、２つの画像の差分情報も保存される。
・印刷条件欄３１２…プリンタドライバ５３に対する印刷条件を指定した設定ファイルが設定される欄である。例えば、画質に影響する印刷条件としては集約印刷の指定、カラーマネージメントの指定、などがある。
・通知先欄３１３…例えば、評価結果の通知先のメールアドレスが設定される。障害が発生した場合にも使用可能である。メールアドレスは複数、設定してよい。また、ユーザのチャットシステムのアカウントを設定してもよい。これにより、情報処理装置５０はチャットシステムで評価結果を送信できる。

図８の比較元欄３０１と比較対象欄３０５を見ると、ＯＳが64bitか32bitかの違いしかないため、ＯＳ間で違いがあるかないかを情報処理装置５０が比較することができる。比較元欄３０１と比較対象欄３０５でＯＳとプリンタドライバ５３とを同じにし、ＰＤＬモジュールを変えれば、ＰＤＬモジュールを評価することもできる。また、比較元欄３０１と比較対象欄３０５でＯＳとＰＤＬモジュールとを同じにし、プリンタドライバ５３を変えれば、プリンタドライバ５３を評価することもできる。

以上のようにユーザは同一性判定に関する設定を入力することが可能だが、記載の条件以外にも、処理の開始時刻等を設定できてよい。また、図８では、印刷処理用の画像に影響する要因として、ＯＳ、プリンタドライバ５３、及び、ＰＤＬモジュールを挙げているが、他にも使用する印刷用アプリケーション５２を変更する等の拡張も考えられる。また、図８には記載がないが、設定画面３００で優先度（高、中、下）が設定可能でもよい。優先度は、情報処理装置５０に多くの同一性判定要求が滞留した場合に、どの同一性判定要求を優先して処理するかを情報処理装置５０が決定する情報となる。

ユーザがスタートボタン３１４を押下することで同一性判定要求が情報処理装置５０に送信される。キャンセルボタン３１５を押下すると、同一性判定に関する設定はキャンセルされ、設定画面３００は例えばポータル画面等に戻る。

＜＜設定画面の別の例＞＞
図１０は設定画面の別の例を説明する図である。なお、図１０の説明では主に図８との相違を説明する。なお、図１０の設定画面３２０では、比較元欄３２１が図８と異なっている。本実施形態では、ユーザが一致したと判定した、ＯＳ、プリンタドライバ５３及びＰＤＬモジュールの組み合わせで生成された印刷処理用の画像であれば、次回以降の比較元の画像になりうる。したがって、比較元欄３２１には、過去に比較対象として設定画面３００、３２０で設定されたＯＳ、プリンタドライバ５３及びＰＤＬモジュールが設定される場合が多い。このため、図１０の設定画面３２０の比較元欄３２１では、同一性判定で過去に設定されたＯＳ、プリンタドライバ５３及びＰＤＬモジュールをユーザが容易に選択できるようになっている。

図１０の設定画面３２０は、評価ＩＤ欄３２２と設定内容欄３２３を有している。評価ＩＤ欄３２２はプルダウンメニューを表示でき、プルダウンメニューが評価ＩＤのリストを表示する。評価ＩＤとは、同一性判定の一連の処理を識別する識別情報であり、情報処理装置５０が付与する。情報処理装置５０は評価ＩＤにより設定画面３００，３２０で設定された情報を特定できる。

ユーザは過去の同一性判定で付与された評価ＩＤを選択することで、比較元のＯＳ、プリンタドライバ５３及びＰＤＬモジュールを設定できる。設定内容欄３２３には、ユーザが選択した比較元のＯＳ、プリンタドライバ５３及びＰＤＬモジュールが表示される。設定内容欄３２３には過去に同一と判定された比較元の画像が生成されたＯＳ、プリンタドライバ及びプリンタシミュレータが表示される。したがって、ＯＳ、プリンタドライバ及びプリンタシミュレータが同じ組み合わせの画像がすでに生成されている場合、制御部５１は該画像を生成しないで、すでに生成されている画像を比較に使用する。

図１１は、評価ＩＤ欄３２２に表示されるプルダウンメニュー３３０の一例である。プルダウンメニュー３３０には、過去の評価結果のリストが表示される。プルダウンメニュー３３０は、選択ボタン３３１、評価ＩＤ３３２、日付３３３、ＯＳ３３４、ＣＰＵ３３５、Driver３３６、Ver３３７、ＰＤＬ３３８、及び、Ver３３９の各項目を有している。選択ボタン３３１は評価ＩＤをユーザが選択するためのボタンである。評価ＩＤ３３２は上記のとおりであり、日付３３３は評価日、ＯＳ３３４とＣＰＵ３３５はＯＳを指定し、Driver３３６とVer３３７はプリンタドライバ５３を示し、ＰＤＬ３３８とVer３３９はＰＤＬモジュールを示す。

情報処理装置５０の画面情報生成部５６は、ユーザが比較元と同一であると確認した画像の生成に使用された、ＯＳ、プリンタドライバ５３及びＰＤＬモジュールに付された評価ＩＤを、プルダウンメニューの表示対象に含めて設定画面の画面情報を生成する。これにより、ユーザはＯＳ、プリンタドライバ５３及びＰＤＬモジュールに関する過去の設定を選択するという操作で比較元欄３２１を設定できる。なお、ユーザが比較元と同一であると確認したか否かは、後述する評価結果画面（図２１）の結果修正ボタン６１２の設定に基づいて判断される。

＜同一性判定の処理の詳細＞
次に、図１２を用いて情報処理装置５０が行う同一性判定の処理の詳細を説明する。図１２は、情報処理装置５０が同一性判定を行う処理を説明するフローチャート図の一例である。図１２の処理は情報処理装置５０が同一性判定要求を受信するとスタートする。

情報処理装置５０の第一通信部５８が同一性判定に関する設定を受信する（Ｓ１０１）。制御部５１は評価ＩＤを採番する。

次に、制御部５１は比較元の印刷処理用の画像があるか否かを判定する（Ｓ１０２）。印刷処理用の画像にはメタデータとして比較元欄３０１、３２１で設定された情報が添付されている。つまり、比較元のＯＳ、プリンタドライバ５３、及び、ＰＤＬモジュールが記録されている。したがって、制御部５１は同一性判定要求に含まれる比較元の設定と記憶部５９に記憶されている印刷処理用の画像のメタデータを比較することで、比較元の印刷処理用の画像があるか否かを判定できる。なお、メタデータとは、データの意味について記述したデータである。言い換えると、メタデータとはあるデータに関する情報を持ったデータのことである。データそのものではなく、データについてのデータであるため、メタ（上位の）のデータと呼ばれる。

ステップＳ１０２の判定がＮｏの場合、制御部５１が比較元の設定で指定されているＯＳを起動する（Ｓ１０３）。ＯＳの起動により、仮想マシン６１Ａ又は６１Ｂが立ち上がる。

次に、制御部５１が起動したＯＳにプリンタドライバ５３をインストールする（Ｓ１０４）。ＯＳにプリンタドライバ５３がインストール済みであればインストールは不要である。インストール時には印刷先として記憶部５９が指定される。つまり、情報処理装置５０が印刷データを「ファイルとして保存する」が初期設定となる。これにより、印刷データがＣＯＭ１等のポートを通過して画像形成装置に送信されない。

次に、制御部５１が印刷用アプリケーション５２を起動する（Ｓ１０５）。起動される印刷用アプリケーション５２は評価ファイルを開くことができるアプリケーションである。例えば、評価ファイルの拡張子で判断される。

次に、印刷用アプリケーション５２が評価ファイルの印刷処理を行うことでプリンタドライバ５３が呼び出され、プリンタドライバ５３が同一性判定要求に含まれる印刷条件で評価ファイルの印刷データを生成する（Ｓ１０６）。印刷データは評価ＩＤに対応付けて、ステップＳ１０４で設定された記憶部５９に記憶される。

次に、制御部５１が同一性判定要求で指定されるプリンタシミュレータ５４を起動する（Ｓ１０７）。同一性判定要求に含まれるのはＰＤＬモジュールであるが、ＰＤＬモジュールが指定されるとプリンタシミュレータ５４を特定できる。

次に、ＰＤＬモジュールが評価ＩＤに基づいて記憶部５９に記憶されている印刷データを使用してレンダリング（描画処理）を行い、その結果を印刷処理用の画像として評価ＩＤに対応付けて記憶部５９に保存する（Ｓ１０８）。

以上で、評価元の印刷処理用の画像が作成されたので、制御部５１は比較対象の印刷処理用の画像があるか否かを判断する（Ｓ１０９）。判断方法は比較元の場合と同じでよい。

比較対象の印刷処理用の画像がない場合、処理はステップＳ１０３に戻り、情報処理装置５０は比較対象の印刷処理用の画像を生成する。

比較対象の印刷処理用の画像がある場合、評価部５５は比較元の印刷処理用の画像と比較対象の印刷処理用の画像とを比較する（Ｓ１１０）。比較の詳細は図１３～図２０にて説明する。

次に、管理部５７は評価結果を評価ＩＤに対応付けて記憶部５９に保存する（Ｓ１１１）。また、管理部５７は同一性判定要求で指定されているメールアドレスなどに評価結果を通知する（Ｓ１１２）。

＜画像の比較＞
本実施形態では、完全同一と曖昧同一の２つの基準の少なくともいずれかの同一性判定を行う。完全同一とは画素ごとに相違の有無を判定する方法であり、曖昧同一とは人間の目で見た場合に差異があるかどうかを判定する方法である。

まず、図１３を用いて、完全同一の比較方法の一例を説明する。図１３は、評価部５５による差分情報の生成方法を説明する図である。図１３には比較される２つの画像の一部が拡大して表示されている。評価部５５は画像の解像度に応じて決まる画素位置（例えば、１９８０×１２８０の解像度の画像の場合、縦を１９８０に等分し、横を１２８０に等分した位置）ごとに、２つの画像に差異があるか否かを判定する。図１３ではメッシュの交点が画素位置である。

２つの画像の同じ画素位置に同じ色の画素があれば、差異がなく、同じ色の画素がなければ差異があると判定する。評価部５５は差異がある画素位置にフラグを立てる。差分情報を画像で表すとフラグがある画素位置には点が表示される。例えば、画素位置の数分のテーブルを用意して、「フラグの有無」を記録する。

あるいは、差異の大きさに応じた値を差分情報としてもよい。例えば、一方の画像データと他方の画像データのある画素位置に次のような差異があるとする。
Ａ．ＣありＫあり
Ｂ．ＣありＹあり
Ｃ．Ｃあり何もなし
Ｄ．ＣありＭあり
この場合、Ａ＜Ｂ＜Ｃ＜Ｄの順に差異が大きいと考えられる。したがって、評価部５５は、Ａ＜Ｂ＜Ｃ＜Ｄの順に大きな値を上記テーブルに設定する。

また、評価部５５は、個々の画像の各画素を他の画素と併合して特徴量を計算してから比較してもよい。例えば、ガウシアンフィルタなどで画素位置の周囲の画素を重み付けして、重み付けした値の差をテーブルに記録するか、又は、閾値より大きい差があれば差分がある旨（フラグ）をテーブルに記録する。

＜同一性判定の概略＞
完全同一の判定方法のように、画素ごとの判定では大きな差異があるように見えても、そのような微小な差異は人間の目では気づきにくい。そこで、曖昧同一という基準で同一性判定を行う。これにより、人間の判定に近い判定結果が得られる。

曖昧同一では、２つの画像の差分情報のうち人間の目で認識可能と判定された各画素が人間の目で認識可能な配置になった場合に、可視可能な差分（同一でない）と見なす。人間の目で認識可能な差分の配置とは、例えば以下が挙げられる。
(i) 差分と判定される画素が人間の目で認識可能な大きさ以上連続している。
(ii) 差分と判定される画素が一定領域内に人間の目で認識可能な割合以上存在する。
(iii) 差分と判定される画素が指定された配置パターンで存在する。

以下では、差分の配置の認識の各方法について説明する。

(i) 差分と判定される画素が人間の目で認識可能な大きさ以上連続している、
について説明する。

評価部５５は、画素位置を順番に走査して、連続する差異を検出する。

図１４は、人間の目で認識可能な大きさ以上連続している差異の検出方法を説明する図である。図１４（ａ）では画素位置を横方向に走査している。これにより、横方向に連続して人間の目で認識可能な大きさの差異１３０があれば検出できる。

図１４（ｂ）では画素位置を縦方向に走査している。これにより、縦方向に連続して人間の目で認識可能な大きさの差異１３１があれば検出できる。

図１４では、縦横それぞれの走査で矩形の差分の配置が検出される。評価部５５は、縦又は横にそれぞれ連続している差異の長さを検出する。なお、斜め方向にも走査するとよい。

そして、評価部５５は連続している差異の長さを所定の長さ（閾値）と比較して、所定の長さより長く連続している差異の画素位置にその旨を記録しておく。例えば、画素位置の数分のテーブルを用意して、所定の長さより長く連続している差異の画素位置すべてに「差異あり」を記録する。評価部５５は閾値以下の場合は同一であると判定する。

これにより、端末装置３０の表示制御部３２はこれらの画素を強調して表示でき、ユーザは一目で差分の配置を認識できる。

なお、本実施形態では、この所定長さ（閾値）を画像に関係なく一定とすることができる。

続いて、
(ii) 差分と判定される画素が一定領域内に人間の目で認識可能な割合以上存在する、
について説明する。この場合、評価部５５は、差分情報において画素位置を囲むウィンドウを順番に移動させ、このウィンドウ内に人間の目で認識可能な割合より大きい差異が存在するか否かを判定する。このウィンドウの大きさが一定領域に相当する。

図１５は、一定領域内に人間の目で認識可能な割合以上存在する差異の検出方法を説明する図である。図１５では４×４画素のウィンドウ１４０が示されているが、ウィンドウ１４０の大きさは一例である。ウィンドウ１４０はウィンドウ１４０の中心にある画素位置を左上コーナーから右方向に１画素ずつ移動して、右端まで到達すると、１画素分下がって左端に戻る。このような移動を中心にある画素位置が右下コーナーに到達するまで繰り返す。

４×４画素のウィンドウ１４０内には５×５＝２５の画素位置が含まれる。評価部５５は、ウィンドウ内のいくつの画素位置で差異があると判定されているかを数える。図１５では説明の便宜上、１０個の画素位置で差異があると判定されている。

評価部５５は「１０/２５＞所定の割合」を満たすか否かを判定して、満たす場合には、画素位置の数分のテーブルにおいて、ウィンドウ内の全ての画素位置にその旨を記録しておく。これにより、情報処理装置５０の表示制御部３２はこの画素を強調して表示でき、ユーザは一目で差分の配置を認識できる。評価部５５は閾値以下の場合は同一であると判定する。

なお、本実施形態では、この所定の割合（閾値）を画像に関係なく一定とすることができる。

続いて、
(iii) 差分と判定される画素が指定された配置パターンで存在する、
について説明する。この場合、評価部５５は、指定された配置パターンを保持している。評価部５５は、差分情報に対し配置パターンでパターンマッチングを行い、配置パターンと適合する差分の配置があるか否かを判定する。

図１６は、差分情報の生成方法を説明する図である。図１６（ａ）は比較元の画像の一例を示し、図１６（ｂ）は比較対象の画像の一例を示す。図１６では説明のために明らかに違う比較元と比較対象を示すが、実際には、比較元の画像をユーザが見ただけでは差異が分かりにくい場合がある。

図１７（ａ）は、図１６の２つの画像の差分情報を示し、図１７（ｂ）は差分情報の拡大図である。また、図１７（ｃ）は配置パターン１５０である。配置パターン１５０は人間の目が感じ取りやすい差異のパターンとして予め生成されている。図１７（ｃ）の配置パターン１５０は一例であって、帯状であったり、円形であったり、幾何学模様得などであったりしてよい。

図１７（ｂ）の拡大図のような差分が、配置パターン１５０と一致した場合、差異があると評価部５５が判定すれば、差異があると人間が感じる２つの画像を検出できる。

図１８は、差分の配置１６０から配置パターンを検出する方法を説明する図である。図１８では、説明のため、配置パターン１５０と同じパターンの差分の配置１６０を示した。評価部５５は、配置パターン１５０を差分情報１５１の左上コーナーから右方向に１画素ずつ移動して、右端まで到達すると、１画素分下がって左端に戻る。このような移動を右下コーナーに到達するまで繰り返す。

評価部５５は配置パターン１５０の画素と同じ位置に、差分情報において差異ありが記録されているか否かを判定し、全ての画素の位置で差異ありが記録されている場合に、配置パターン１５０が差分情報１５１から検出されたと判定する。あるいは、一定数以上（一定割合以上）の画素の位置で差異ありが記録されている場合に、配置パターン１５０が差分情報１５１から検出されたと判定する。

図１８では、差分情報１５１の右下に配置パターン１５０と一致する差分の配置１６０があり、評価部５５はこの差分の配置１６０を検出することができる。

評価部５５は、画素位置の数分のテーブルにおいて、配置パターン１５０と一致した画素位置にその旨を記録しておく。これにより、情報処理装置５０の表示制御部３２はこの画素を強調して表示でき、ユーザは一目で差分の配置を認識できる。

＜差分の配置の表示例＞
図１９、図２０を用いて、差分の配置が検出される場合とされない場合を比較して説明する。

まず、図１９は差分の配置が検出されない２つの画像と、２つの画像の差分情報を示す。図１９（ａ）は比較元の画像であり、図１９（ｂ）は比較対象の画像であり、図１９（ｃ）は差分情報である。なお、図１９はＣＭＹＫの画像であるとするが、ＲＧＢでも同様に適用できる。

人間が見た場合、図１９（ａ）と図１９（ｂ）の画像には差異が認められない。しかし、図１９（ｃ）の差分情報に示すように、全体的にノイズのような差異があること分かる。完全同一が採用された場合はこのノイズを２つの画像の差異として検出し、情報処理装置５０が２つの画像を同一でないと判定する。

曖昧同一が採用された場合、差分情報において情報処理装置５０が差分の配置を認識していないため、図１９（ａ）（ｂ）の画像が同一であると判定される。

図２０は差分の配置が検出された２つの画像と、２つの画像の差分情報を示す。図２０（ａ）は比較元の画像であり、図２０（ｂ）は比較元の画像に白い矩形１７０が追加された比較対象の画像であり、図２０（ｃ）は差分情報である。なお、図２０はＣＭＹＫの画像であるとするが、ＲＧＢでも同様に適用できる。

人間が見た場合、図２０（ａ）と図２０（ｂ）の画像には明らかに差異が認められる。図２０（ｃ）の差分情報には、比較対象の画像の白い矩形１７０と同じ画素位置に矩形の、差分の配置１７１が検出されている。図２０では作図の関係上、差分の配置１７１が白黒だが、ディスプレイ５０６上では例えば赤色などで強調されているため、図１９（ｃ）のようなノイズとは異なる態様で表示される。したがって、ユーザは一目で差分の配置があるか否かを判定できる。

本実施形態では、差分情報において情報処理装置５０が差分の配置を認識しているため、図２０（ａ）（ｂ）の画像が同一でないと判定される。

＜評価結果の表示例＞
図２１は、端末装置３０が表示する評価結果画面６００の一例である。評価結果画面６００は、評価ファイル選択欄６０１、評価ファイル表示欄６０２、及びページ指定欄６０３を有している。評価ファイル選択欄６０１は、同一性判定に使用された評価ファイルの内、何番目を開くかをユーザが選択する欄である。図２１では２つの評価ファイルのうち１つ目が選択されていることを示している。

評価ファイル表示欄６０２は現在、選択されている評価ファイルのファイル名を示す欄である。ページ指定欄６０３は、現在選択されている評価ファイルの何ページ目の画像を表示するかをユーザが選択する欄である。

また、評価結果画面６００は、比較元画像欄６０４、比較対象画像欄６０５、及び差分情報欄６０６を有している。比較元画像欄６０４には評価ファイル選択欄６０１で選択されている評価ファイルの内、ページ指定欄６０３で指定されたページの、比較元の印刷処理用の画像が表示される。

比較対象画像欄６０５には評価ファイル選択欄６０１で選択されている評価ファイルの内、ページ指定欄６０３で指定されたページの、比較対象の印刷処理用の画像が表示される。

差分情報欄６０６には比較元の印刷処理用の画像と、比較対象の印刷処理用の画像の差分情報が表示される。差分情報欄６０６には比較元と比較対象で差のある部分が赤などの強調色で表示されている。完全同一でない微少な差異は黒で表示し、曖昧同一でない差異は赤で表示するなど、色を変更してもよい。

比較元画像欄６０４、比較対象画像欄６０５、及び、差分情報欄６０６には、ＣＭＹＫ別に画像を表示してもよい。

なお、図２１の差分情報欄６０６は、完全同一と曖昧同一で色を変えるだけでなく、評価ファイル内に記載されているオブジェクトの種類に応じて色等を変更してもよい。例えば、文字、図形（イラスト）、又は、写真等のオブジェクトに応じて画面情報生成部５６が色を変える。なお、文字とはひらがな、アルファベット、数字などであり、図形とは主に直線や曲線で区切られた領域が色分けされたオブジェクトであり、写真とは点のあつまりで表現されたオブジェクトである。画面情報生成部５６は比較元又は比較対象の印刷処理用の画像にＦＦＴ（Fast Fourier transform）を行い、得られた周波数に応じて印刷処理用の画像の画素ごとにオブジェクトを分類する。例えば、文字は高周波領域、イラストは低周波領域、写真はその中間、などのように分類する。こうすることで、オブジェクトごとに差分情報を強調できるので、プリンタドライバ、プリンタシミュレータ又はＯＳ等がどのオブジェクトに大きく影響するかをユーザが把握しやすくなる。

また、評価結果画面６００は、３つの拡大ボタン６０７，６０８，６０９、詳細ボタン６１１、３つの結果修正ボタン６１２、及び、終了ボタン６１６を有している。３つの拡大ボタン６０７，６０８，６０９は、それぞれ比較元の印刷処理用の画像、比較対象の印刷処理用の画像、又は、差分情報の拡大表示用のボタンで、ユーザがこれを押下するとそれぞれの画像が別ウィンドウで拡大されて表示される。

詳細ボタン６１１は詳細評価結果を端末装置３０が表示するためのボタンである。図２２に詳細評価結果画面の一例を示す。

３つの結果修正ボタン６１２はそれぞれ、一致ボタン６１３、不一致ボタン６１４、又は、保留ボタン６１５である。３つの結果修正ボタン６１２は、ユーザが同一又は非同一の判定結果を修正するためのボタンである。図２１の例では、判定結果は不一致であるが、ユーザが一致ボタン６１３を押下することによって、判定結果を一致に変更できる。また、保留ボタン６１５では判定不能として保留にできる。不一致ボタン６１４は、判定結果は一致であるが、ユーザが不一致ボタン６１４を押下することによって、判定結果を不一致に変更するためのボタンである。現在の判定結果が不一致あるため、不一致ボタン６１４はグレーダウンで表示され、ユーザは選択することができない。

ユーザが判定結果を修正すると、修正後の判定結果は情報処理装置５０に送信され、評価部５５が判定の精度を調整する。例えば、比較元の画像と比較対象の画像の差分の大きさ（例えば、図２２の差分の詳細）を同一又は非同一の判定の閾値に反映させる。終了ボタン６１６は、評価結果画面６００を閉じるためのボタンである。

図２２は、詳細評価結果画面６２０の一例を示す図である。詳細評価結果画面６２０は、評価結果の詳細を表示する。内容６２１は、評価日、評価開始時刻、評価実行者、評価ファイル、比較元データ（生成された比較元の印刷処理用の画像のファイル名）、比較対象データ（生成された比較対象の印刷処理用の画像のファイル名）、差分データ（差分情報のファイル名）、結果ファイル、判定結果、及び、差分の詳細、である。

比較元データ（比較元の印刷処理用の画像のファイル名）は、評価対象のファイル名（J9.doc）、比較元であること（org）、及び、ページ番号（1）を含んでいる。比較対象データ及び差分データも同様である。

また、結果ファイルには全ての評価ファイルのページ別の判定結果が記述されている。図２２の結果ファイルである"Resut_201909112200.csv"の内容を図２３に示す。

差分の詳細は、図８～図１８で説明した方法で取得された差分情報を数値的に示す。図示するように、差分箇所数、面積、画面占有率、座標（x座標、y座標）、及び、曖昧判定度を有している。差分箇所数は差異があると判定された画素が連続している場合は１つと数えた場合の領域数、面積はピクセル数、画面占有率は面積/全ピクセル数、座標は差分箇所の左上の座標である。曖昧判定度は人間が入力してもよいし、差分の詳細と曖昧判定度が対応付けられたテーブル（ユーザの入力を学習したＡＩでもよい）に基づいて設定されてもよい。なお、差分の詳細は、完全一致と曖昧一致で内容が異なってよい。

コピーボタン６２２は、詳細評価結果の内容を端末装置３０がクリップボードにコピーするためのボタンである。終了ボタン６２３は、詳細評価結果画面６２０を閉じるためのボタンである。

図２２に示した内容は一例に過ぎず、他にも必要に応じて評価部５５が作成した評価結果の詳細を表示することができる。

＜＜ページ別の判定結果＞＞
図２３は、結果ファイルの内容の一例を示す。上記のように結果ファイルは各評価ファイルのページ別の判定結果を示す。図２３の１行が評価ファイルの1ページの判定結果である。J9.docが5ページ、J11.pptが8ページなので合計で１３行の判定結果がある。１行はカンマで区切られており、左から「日付,時刻,実行者,評価ファイル,ページ,評価元の印刷処理用の画像,評価対象の印刷処理用の画像,差分情報,完全一致の判定結果,曖昧一致の判定結果」を示している。

図２３によれば、J9.docは2019年9月11日の22:00に評価が開始され、1ページ目は完全一致せず曖昧には一致、2ページ目は完全一致、3ページ目は完全一致せず曖昧には一致、4ページ目は完全一致、5ページ目は不一致と判定されている。J11.pptは22:15から評価が開始され、3ページ目と6ページ目が曖昧一致、7ページ目が不一致、他のページは完全一致と判定されている。また、図２３には明記されていないが、同一性判定で作成された印刷処理用の画像は結果ファイルとして記載されている。

なお、図２２に示した差分の詳細も評価ファイルごとに保存される。保存先は、設定画面３００，３２０で指定されたフォルダであり、固有の名称を付けたファイル名で保存される。例えば、「C:/Sample/J9.doc」の評価結果は「C:/Output/J9.doc.log.xml」と言う名称で保存される。

図２４は、差分の詳細を有するＸＭＬファイルの記載例を示す。<ページ>～</ページ>が1ページ当たりの差分の詳細を示している。各ページ当たり、＜評価日＞、＜開始時刻＞、＜比較元データ＞、＜比較対象データ＞、＜差分データ＞、＜結果ファイル＞、＜判定結果＞、及び、＜差分の詳細＞のタグを有する。また、＜差分の詳細＞タグは、＜差分箇所数＞、＜面積＞、＜画面占有率＞、＜ｘ座標＞、＜y座標＞、及び、＜曖昧判定度＞を有している。

なお、この例ではＸＭＬのフォーマットで記載されているが、ファイル名とページ毎に分かれ、項目が拡張可能であれば任意のフォーマットでよい。図２１の評価結果画面で結果修正ボタンが編集された場合、図２４の差分の詳細の<判定結果>タグを管理部５７が修正する。

＜ユーザによる結果修正の評価結果へ反映＞
評価結果画面６００でユーザが判定結果を修正できると説明したが、情報処理装置５０が修正を同一性判定の判定基準に反映できるとよい。評価部５５は、差分箇所数、面積、画面占有率、及び、座標（x座標、及びy座標）を閾値と比較して一致か不一致かを判定している。したがって、例えば、ユーザが「不一致」→「一致」と判定結果を修正した場合、差分の詳細を閾値に反映させる。この閾値は、差分がより大きい項目が１つでもある場合に不一致と判定するためのものであるとする。

例えば、差分箇所数：１、面積：１２５、画面占有率：６、x座標：３８２０、y座標：９５１でユーザが「不一致」→「一致」と修正した場合、評価部５５は閾値を大きくする。例えば、差分箇所数、面積、及び、画面占有率の３つで閾値を超えていた場合、評価部５５は差分箇所数の閾値を２、面積の閾値を１３０、画面占有率の閾値を７、とする。閾値は最小限、大きくすればよい。逆に、ユーザが「一致」→「不一致」と判定結果を修正した場合、該当する項目の閾値を小さくする。

こうすることで、ユーザによる判定と評価部５５による判定とを徐々に近づけることができる。

また、差分の詳細と、一致又は不一致の人間による判定結果の組み合わせが、機械学習に十分な数だけ用意されている場合は、ニューラルネットワーク（ディープラーニング）等で学習モデルを構築するとよい。この場合、差分箇所数、面積、画面占有率、x座標、及びy座標を入力、一致又は不一致を教師信号としてニューラルネットワークのノード間の重みを学習する。学習が終了すると、学習モデルに入力された差分の詳細に対し、学習モデルは人間の判定結果に近い一致又は不一致を出力できる。

機械学習とは、コンピュータに人のような学習能力を獲得させるための技術であり、コンピュータがデータ識別等に必要なアルゴリズムを事前に取り込まれる学習データから自律的に生成し新たなデータについてこれを適用して予測を行う技術のことをいう。機械学習のための学習方法は、教師あり学習、教師なし学習、半教師学習、強化学習、深層学習のいずれかの方法でもよく、更に、これらの学習方法を組み合わせた学習方法でもよく、機械学習のための学習方法は問わない。

また、機械学習の手法には、パーセプトロン、ディープラーニング、サポートベクターマシン、ロジスティック回帰、ナイーブベイズ、決定木、ランダムフォレストなどがあり、本実施形態で説明する手法には限られない。

＜主な効果＞
以上説明したように、本実施形態の情報処理システムは、プリンタドライバ、ＰＤＬモジュール、又はＯＳの違いが画像に与える影響の評価に画像形成装置を使用しないので、情報処理システム１００の構成を簡素化し、評価コストを削減することができる。

＜その他の適用例＞
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。

例えば、図４などの構成例は、情報処理装置５０による処理の理解を容易にするために、主な機能に応じて分割したものである。処理単位の分割の仕方や名称によって本願発明が制限されることはない。情報処理装置５０の処理は、処理内容に応じて更に多くの処理単位に分割することもできる。また、１つの処理単位が更に多くの処理を含むように分割することもできる。

また、プリンタシミュレータは情報処理装置５０が有する他、情報処理装置５０と通信するサーバ装置が有していてもよい。

本実施形態に記載された装置群は、本明細書に開示された実施形態を実施するための複数のコンピューティング環境のうちの１つを示すものにすぎない。ある実施形態では、情報処理装置５０は、サーバクラスタといった複数のコンピューティングデバイスを含む。複数のコンピューティングデバイスは、ネットワークや共有メモリなどを含む任意のタイプの通信リンクを介して互いに通信するように構成されており、本明細書に開示された処理を実施する。同様に、端末装置３０は、互いに通信するように構成された複数のコンピューティングデバイスを含むことができる。

上記で説明した実施形態の各機能は、一又は複数の処理回路によって実現することが可能である。ここで、本明細書における「処理回路」とは、電子回路により実装されるプロセッサのようにソフトウェアによって各機能を実行するようプログラミングされたプロセッサや、上記で説明した各機能を実行するよう設計されたASIC(Application Specific Integrated Circuit)、DSP（Digital Signal Processor）、FPGA（Field Programmable Gate Array）や従来の回路モジュール等のデバイスを含むものとする。

３０端末装置
５０情報処理装置
１００情報処理システム

特開２００８－３３４７２号公報

Claims

端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、同じＯＳと異なる２つのプリンタドライバでそれぞれ印刷データを生成し、同じプリンタシミュレータを使って２つの印刷データから２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、異なるＯＳと同じプリンタドライバでそれぞれ印刷データを生成し、同じプリンタシミュレータを使って２つの印刷データから２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、前記プリンタシミュレータで２つの画像を生成するものであり、
ＯＳ、プリンタドライバ及び前記プリンタシミュレータが同じ組み合わせの画像がすでに生成されている場合、該画像を生成しないで、
前記評価部が前記２つの画像を比較する際、すでに生成されている前記画像を、前記２つの画像の比較に使用し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする情報処理システム。
前記ＯＳ、プリンタドライバ及びプリンタシミュレータが同じ組み合わせの前記画像は、前記２つの画像の比較により、同一と判定された前記画像が生成されたＯＳ、プリンタドライバ及びプリンタシミュレータで生成されていることを特徴とする請求項３に記載の情報処理システム。
前記情報処理装置は、仮想マシンにおいて前記ＯＳを実行し、仮想マシンのＯＳ上でプリンタドライバとプリンタシミュレータを実行することを特徴とする請求項１～４のいずれか１項に記載の情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、前記プリンタシミュレータで２つの画像を生成し、
前記評価部は、前記２つの画像を比較し、所定の基準に基づいて、前記２つの画像が同一か非同一かを判定し、
前記第一通信部は前記評価結果として前記２つの画像が同一か非同一かを前記端末装置に送信し、
前記端末装置の第二通信部は２つの画像が同一か非同一かを受信し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報、及び、２つの画像が同一か非同一かを表示し、
前記端末装置は、ユーザによる同一から非同一への修正、又は、非同一から同一への修正を受け付ける操作受付部を有することを特徴とする情報処理システム。
前記端末装置の前記第二通信部は、同一から非同一への修正又は非同一から同一への修正という修正の内容を前記情報処理装置に送信し、
前記情報処理装置の前記第一通信部は、前記修正の内容を受信し、
前記評価部は、前記修正の内容に応じて前記所定の基準を変更することを特徴とする請求項６に記載の情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、前記プリンタシミュレータで２つの画像を生成し、
前記評価部は、前記２つの画像を比較し、前記２つの画像が同一か非同一かと共に、差分の詳細として、差分箇所数、面積、画面占有率、差分のx座標、及び、差分のy座標を検出し、
前記第一通信部は前記差分の詳細を前記端末装置に送信し、
前記端末装置の表示制御部は、前記評価結果として前記２つの画像の差分情報、及び、前記差分の詳細を表示することを特徴とする情報処理システム。
前記第一通信部はプリンタシミュレータが生成した前記２つの画像を前記端末装置に送信し、
前記端末装置の表示制御部は、前記２つの画像を表示することを特徴とする請求項１～８のいずれか１項に記載の情報処理システム。
前記端末装置の表示制御部は、前記情報処理装置から受信した画面情報に基づいて設定画面を表示し、
前記設定画面は、
比較元のＯＳ，プリンタドライバ、及び、プリンタシミュレータの設定を受け付ける項目、並びに、比較対象のＯＳ，プリンタドライバ、及び、プリンタシミュレータの設定を受け付ける項目を有することを特徴とする請求項１～９のいずれか１項に記載の情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、同じＯＳとプリンタドライバを使って、異なるプリンタシミュレータで２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示し、
前記表示制御部は、前記情報処理装置から受信した画面情報に基づいて設定画面を表示し、
前記設定画面は、
比較元のＯＳ，プリンタドライバ、及び、プリンタシミュレータの設定を受け付ける項目、並びに、比較対象のＯＳ，プリンタドライバ、及び、プリンタシミュレータの設定を受け付ける項目を有することを特徴とする情報処理システム。
前記設定画面は、画像の生成に使用される１つ以上の評価ファイルの設定を受け付ける項目を有することを特徴とする請求項１０又は１１に記載の情報処理システム。
前記設定画面は、比較元のＯＳ，プリンタドライバ、及び、プリンタシミュレータの設定を、比較元と比較対象が同一であると過去に判定された同一性判定の一連の処理の識別情報により受け付けることを特徴とする請求項１０～１２のいずれか１項に記載の情報処理システム。
前記設定画面は、前記２つの画像の比較方法として完全一致又は曖昧一致の項目を有し、
前記端末装置の前記第二通信部は前記完全一致又は前記曖昧一致のうち指定された前記比較方法を前記情報処理装置に送信し、
前記曖昧一致が指定された場合、前記情報処理装置の前記評価部は、
２つの画像の差分情報から認識された予め定められた差分の配置が閾値よりも大きい場合に、２つの画像が非同一であると判定し、閾値以下の場合に同一であると判定することを特徴とする請求項１０～１３のいずれか１項に記載の情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムであって、
前記情報処理装置は、
前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価する評価部と、
前記評価部による評価結果の内容を前記端末装置に送信する第一通信部と、を有し、
前記端末装置は、
前記評価結果を受信する第二通信部と、
前記第二通信部が受信した前記評価結果を表示する表示制御部と、を有し、
前記情報処理装置は、同じＯＳとプリンタドライバを使って、異なるプリンタシミュレータで２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示し、
前記情報処理装置は、仮想マシンにおいて前記ＯＳを実行し、仮想マシンのＯＳ上でプリンタドライバとプリンタシミュレータを実行することを特徴とする情報処理システム。
前記第一通信部はプリンタシミュレータが生成した前記２つの画像を前記端末装置に送信し、
前記端末装置の表示制御部は、前記２つの画像を表示することを特徴とする請求項１１又は１５に記載の情報処理システム。
端末装置と情報処理装置とが通信可能な情報処理システムが行う評価方法であって、
前記情報処理装置は、
評価部が、前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価するステップと、
第一通信部が、前記評価部による評価結果の内容を前記端末装置に送信するステップと、を有し、
前記端末装置は、
第二通信部が、前記評価結果を受信するステップと、
表示制御部が、前記第二通信部が受信した前記評価結果を表示するステップと、を有し、
前記情報処理装置は、同じＯＳと異なる２つのプリンタドライバでそれぞれ印刷データを生成し、同じプリンタシミュレータを使って２つの印刷データから２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする評価方法。
端末装置と情報処理装置とが通信可能な情報処理システムが行う評価方法であって、
前記情報処理装置は、
評価部が、前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価するステップと、
第一通信部が、前記評価部による評価結果の内容を前記端末装置に送信するステップと、を有し、
前記端末装置は、
第二通信部が、前記評価結果を受信するステップと、
表示制御部が、前記第二通信部が受信した前記評価結果を表示するステップと、を有し、
前記情報処理装置は、異なるＯＳと同じプリンタドライバでそれぞれ印刷データを生成し、同じプリンタシミュレータを使って２つの印刷データから２つの画像を生成し、
前記評価部は前記２つの画像を比較し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする評価方法。
端末装置と情報処理装置とが通信可能な情報処理システムが行う評価方法であって、
前記情報処理装置は、
評価部が、前記端末装置からの要求に応じて、プリンタシミュレータによって生成された画像を評価するステップと、
第一通信部が、前記評価部による評価結果の内容を前記端末装置に送信するステップと、を有し、
前記端末装置は、
第二通信部が、前記評価結果を受信するステップと、
表示制御部が、前記第二通信部が受信した前記評価結果を表示するステップと、を有し、
前記情報処理装置は、前記プリンタシミュレータで２つの画像を生成するものであり、
ＯＳ、プリンタドライバ及び前記プリンタシミュレータが同じ組み合わせの画像がすでに生成されている場合、該画像を生成しないで、
前記評価部が前記２つの画像を比較する際、すでに生成されている画像を、前記２つの画像の比較に使用し、
前記端末装置の前記表示制御部は、前記評価結果として前記２つの画像の差分情報を表示することを特徴とする評価方法。