JP2015056148A - 情報処理装置、制御プログラム及び画像処理システム - Google Patents

Abstract

【課題】複数の入力方式それぞれに対応する複数の種類のＵＩを提供する情報処理装置において、ユーザが使用する入力方式に応じて、ユーザが選択することなく対応するＵＩに切り替えること。
【解決手段】複数の入力形式それぞれに対応する情報であって入力方式による入力を受け付ける入力受付画面を構成するための情報である複数のＵＩ情報を記憶する記憶手段を有する情報処理装置２において、入力受付画面を表示させるために入力された命令の情報である命令情報を取得し、取得された命令情報に基づいてＵＩ情報を取得し、取得されたＵＩ情報に基づいて、ＬＣＤ６０に表示させる入力受付画面を生成することを特徴とする。
【選択図】図４

Description

本発明は、情報処理装置、制御プログラム及び画像処理システムに関し、特に、入力方式に応じたＵＩの表示に関する。

近年、情報の電子化が推進される傾向にあり、電子化された情報の出力に用いられるプリンタやファクシミリ及び書類の電子化に用いるスキャナ等の画像処理装置は欠かせない機器となっている。このような画像処理装置は、撮像機能、画像形成機能及び通信機能等を備えることにより、プリンタ、ファクシミリ、スキャナ、複写機として利用可能なＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ：複合機）として構成されることが多い。

そして、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）やＰＣに準じた情報処理機能を有するスマートフォンやタブレット端末のような携帯型情報処理端末から、このような画像処理装置へ画像データを送信して、画像形成出力に際したプレビュー画像の生成や画像形成出力を実行する態様が知られている。また、近年、このようなＰＣ等の情報処理装置に搭載されているＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）上では、マウスや指（スタイラスペン）等の操作命令を入力する複数の入力方式それぞれに応じて操作しやすい構成を有する複数の種類のＵＩが提供されている。

例えば、Ｗｉｎｄоｗｓ８（登録商標）では、デスクトップＵＩ及びモダンＵＩが提供されている。デスクトップＵＩは、マウスによる入力方式に適しており、例えば複数の項目からある項目を選択するために表示される選択対象の領域が、最小限のマウスのカーソル移動で選択できる広さである等、マウス操作がしやすい構成を有する。一方、モダンＵＩは、指やスタイラスペン等を用いたタッチ操作による入力方式に適しており、選択対象の領域が指の面積と同等以上の広さ（つまり、デスクトップＵＩにおける領域よりも広い）等、タッチ操作しやすい構成を有する。

このように、複数の入力方式それぞれに対応する複数の種類のＵＩを提供する情報処理装置において、ユーザは、使用する入力方式に応じて操作しやすいＵＩを選択することができる。また、情報処理装置に対して操作を行うためのＵＩに表示されている設定項目を、ポインタ指示に応じて拡大、縮小して設定項目を操作しやすくする方法が提案されている（例えば、特許文献１を参照）。

しかしながら、上述のような情報処理装置において、ユーザは、一旦いずれかのＵＩを選択すると、選択したＵＩに対応する入力方式とは異なる入力方式で操作を行いたい場合、その入力方式で操作を行いやすくするためには、対応するＵＩを選択し直して表示を切り替える必要があり、手間がかかる。また、特許文献１に開示された技術は、ＵＩの操作性に関するものではあるが、複数の入力方式に対応する複数の種類のＵＩを対象としたものではないので、本件発明とはその趣旨が異なる。

本発明は、このような課題を解決するためになされたものであり、複数の入力方式それぞれに対応する複数の種類のＵＩを提供する情報処理装置において、ユーザが使用する入力方式に応じて、ユーザが選択することなく対応するＵＩに切り替えることを目的とする。

上記課題を解決するために、本発明の一態様は、複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段と、前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得する命令情報取得手段と、前記命令情報取得手段によって取得された前記命令情報に基づいて前記画面構成情報を取得する画面構成情報取得手段と、取得された前記画面構成情報に基づいて、前記表示部に表示させる前記入力受付画面を生成する画面生成手段とを含むことを特徴とする。

また、本発明の他の態様は、複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段を有する情報処理装置を制御する制御プログラムであって、前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得するステップと、取得された前記命令情報に基づいて前記画面構成情報を取得するステップと、取得された前記画面構成情報に基づいて、前記情報処理装置の表示部に表示させる前記入力受付画面を生成するステップとを前記情報処理装置に実行させることを特徴とする。

また、本発明の更に他の態様は、複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段と、前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得する命令情報取得手段と、前記命令情報取得手段によって取得された前記命令情報に基づいて前記画面構成情報を取得する画面構成情報取得手段と、取得された前記画面構成情報に基づいて、前記情報処理装置の表示部に表示させる前記入力受付画面を生成する画面生成手段とを含むことを特徴とする。

本発明によれば、複数の入力方式それぞれに対応する複数の種類のＵＩを提供する情報処理装置において、ユーザが使用する入力方式に応じて、ユーザが選択することなく対応するＵＩに切り替えることができる。

本発明の実施形態に係る画像処理システムの運用形態を示す図である。 本発明の実施形態に係る情報処理装置のハードウェア構成を模式的に示すブロック図である。 本発明の実施形態に係る情報処理装置の機能構成を示すブロック図である。 本発明の実施形態に係るＵＩ部の機能構成を示すブロック図である。 本発明の実施形態に係る印刷制御画面を示す図である。 本発明の実施形態に係るＵＩ情報テーブルを示す図である。 本発明の実施形態に係る入力形式に対応するＵＩを示す図である。 本発明の実施形態に係るＵＩ情報取得処理を示すフローチャートである。 本発明の実施形態に係る情報処理装置の動作を示すシーケンス図である。 本発明の実施形態に係る印刷制御画面及び印刷設定画面のＵＩを示す図である。 本発明の実施形態に係る印刷制御画面及び印刷設定画面のＵＩを示す図である。 本発明の実施形態に係る情報処理装置の機能構成を示すブロック図である。 本発明の実施形態に係る中間データの構成を示す図である。 本発明の実施形態に係るプレビューアプリケーション２８０の機能構成を示すブロック図である。 本発明の実施形態に係る情報処理装置の動作を示すシーケンス図である。 本発明の実施形態に係る情報処理装置の機能構成を示すブロック図である。

以下、図面を参照して、本発明の実施形態を詳細に説明する。本実施形態においては、複数の入力形式それぞれに応じて操作しやすい構成を有する複数の種類のＵＩを提供可能な情報処理装置の表示画面上において、ある入力方式により入力された画像処理装置に対する操作命令に応じて画像形成出力を実行させる画像処理システムを例として説明する。

図１は、本実施の形態に係る画像処理システムの運用形態の例を示す図である。図１に示すように、本実施形態に係る画像処理システムは、画像処理装置１及び情報処理装置２が、インターネットやＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）等のネットワークを介して接続されて構成される。

画像処理装置１は、撮像機能、画像形成機能及び通信機能等を備えることにより、プリンタ、ファクシミリ、スキャナ、複写機として利用可能なＭＦＰ（Ｍｕｌｔｉ Ｆｕｎｃｔｉｏｎ Ｐｅｒｉｐｈｅｒａｌ：複合機）である。情報処理装置２は、一般的なＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、スマートフォン、タブレット端末、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）等の情報処理端末であり、画像処理装置１を介した印刷出力は、情報処理装置２にインストールされたプリンタドライバを介して実行される。

次に、本実施形態に係る画像処理装置１及び情報処理装置２等のハードウェア構成について説明する。図２は、本実施形態に係る情報処理装置２のハードウェア構成を示すブロック図であるが、画像処理装置１も略同様の構成を有する。図２に示すように、本実施形態に係る情報処理装置は、一般的なサーバやＰＣ等と同様の構成を含む。

すなわち、本実施形態に係る情報処理装置２は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）３０、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）４０及びＩ／Ｆ５０がバス８０を介して接続されている。また、Ｉ／Ｆ５０にはＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）６０及び操作部７０が接続されている。この他、画像処理装置１の場合、画像形成出力やスキャンを実行するエンジンが含まれる。

ＣＰＵ１０は演算手段であり、情報処理装置２全体の動作を制御する。ＲＡＭ２０は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１０が情報を処理する際の作業領域として用いられる。ＲＯＭ３０は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。ＨＤＤ４０は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や各種の制御プログラム、アプリケーション・プログラム等が格納される。

Ｉ／Ｆ５０は、バス８０と各種のハードウェアやネットワーク等を接続し制御する。ＬＣＤ６０は、ユーザが情報処理装置２の状態を確認するための視覚的ユーザインタフェースである。操作部７０は、キーボード、マウス等、ユーザが情報処理装置２に情報を入力するためのユーザインタフェースである。

このようなハードウェア構成において、ＲＯＭ３０やＨＤＤ４０若しくは図示しない光学ディスク等の記憶媒体に格納されたプログラムがＲＡＭ２０に読み出され、ＣＰＵ１０がそれらのプログラムに従って演算を行うことによりソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係る画像処理装置１や情報処理装置２を構成する各機器の機能を実現する機能ブロックが構成される。

画像処理装置１は、情報処理装置２から印刷ジョブを受信することによりプリンタとして動作する。画像処理装置１に送信される印刷ジョブは、画像処理装置１に対応して構築されたソフトウェア・プログラムであるプリンタドライバによって、画像処理装置１が読取可能な形式で生成される。

次に、本実施形態に係る情報処理装置２の機能構成について説明する。図３は、本実施形態に係る情報処理装置２の機能構成を示すブロック図である。図３に示すように、本実施形態に係る情報処理装置２は、図２において説明したＬＣＤ６０、操作部７０に加えて、コントローラ２００及びネットワークＩ／Ｆ２１０を含む。また、コントローラ２００は、ネットワーク制御部２０１、表示制御部２０２、操作制御部２０３、アプリケーション２０４及びプリンタドライバ２２０を含む。また、プリンタドライバ２２０は、グラフィック部２２１及びＵＩ部２３０を含む。

ネットワークＩ／Ｆ２１０は、情報処理装置２がネットワークを介して他の機器と通信するためのインタフェースであり、Ｅｔｈｅｒｎｅｔ（登録商標）等のインタフェースが用いられる。ネットワークＩ／Ｆ２１０は、図２に示すＩ／Ｆ５０によって実現される。コントローラ２００は、ソフトウェアとハードウェアとの組み合わせによって構成される。コントローラ２００は、情報処理装置２全体を制御する制御部である。

ネットワーク制御部２０１は、ネットワークＩ／Ｆ２１０を介して入力される情報を取得すると共に、ネットワークＩ／Ｆ２１０を介して他の機器に情報を送信する。操作制御部２０３は、操作部７０に対するユーザによる操作内容を示す操作信号を取得し、アプリケーション２０４やプリンタドライバ２２０等の情報処理装置２において動作するモジュールに入力する。表示制御部２０２は、アプリケーション２０４のＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）やプリンタドライバ２２０のＧＵＩ等、情報処理装置２の状態をＬＣＤ６０に表示させる。

アプリケーション２０４は、対応するソフトウェア・プログラムが情報処理装置２にインストールされて構成されるソフトウェアモジュールであり、ワープロソフト、表計算ソフト、画像編集ソフト等の一般的なアプリケーション・ソフトウェアである。アプリケーション２０４は、ユーザの操作に応じてプリンタドライバ２２０を呼び出す。また、呼び出されたプリンタドライバ２２０のＵＩ部２３０がアプリケーション２０４もしくは操作制御部２０３から入力される起動命令により起動されると、アプリケーション２０４は、起動されたＵＩ部２３０を介して設定される印刷出力の設定情報を取得する。

そして、アプリケーション２０４もしくは起動されたＵＩ部２３０に対してユーザの操作により印刷実行命令が入力されると、アプリケーション２０４は、一般的に基本ソフトであるＯＳに組み込まれた描画エンジンを起動し、ＵＩ部２３０を介して設定された印刷出力の設定情報及び出力するべき画像の情報を受け渡す。描画エンジンは、ＤＤＩ（Ｄｅｖｉｃｅ Ｄｒｉｖｅｒ Ｉｎｔｅｒｆａｃｅ）を介してプリンタドライバ２２０のグラフィック部２２１を起動し、処理を受け渡す。

プリンタドライバ２２０のグラフィック部２２１は、描画エンジンによってＯＳの内部命令として出力された画像データを、印刷出力を実行させる対象の画像処理装置１が処理可能な形式（例えば、ＰＤＬ（Ｐａｇｅ Ｄｅｓｃｒｉｐｔｉｏｎ Ｌａｎｇｕａｇｅ）形式）の情報に変換するとともに、画像処理装置１に印刷出力を実行させる際の設定データを、ＵＩ部２３０を介して設定された設定情報に基づいて生成し、印刷ジョブを生成する。

このようなシステムの構成において、アプリケーション２０４により呼び出されたプリンタドライバ２２０のＵＩ部２３０が起動されると、ユーザが使用する入力形式に応じたＵＩで表示される画面（例えば、印刷出力の設定情報を設定するための設定画面）を生成して、情報処理装置２の表示部であるＬＣＤ６０に表示させることが、本実施形態に係る要旨である。以下、本実施形態に係る構成として、本実施形態に係るプリンタドライバ２２０のＵＩ部を中心とした機能構成を説明する。

図４は、本実施形態に係るプリンタドライバ２２０のＵＩ部２３０を中心とした機能構成を例示するブロック図である。図４に示すように、プリンタドライバ２２０は、操作監視部２３１を含み、ＵＩ部２３０は、ＵＩ情報ＤＢ２３２、ＵＩ情報取得部２３３及び画面生成部２３４を含む。

操作監視部２３１は、操作部７０を介した操作によりプリンタドライバ２２０が呼び出されると、操作部７０に対して行われる操作を監視して、命令情報を取得する。具体的には、操作部７０を介して図５に示すような印刷に関する画面（以降、「印刷制御画面」とする）を表示させる操作により、プリンタ名の一覧を作成するためにプリンタドライバ２２０が呼び出されると、操作監視部２３１は、その後の操作を監視して、操作部７０に対してユーザが行ったプリンタドライバ２２０のＵＩ起動の命令操作等（例えば、図５に示した印刷制御画面に含まれる「印刷設定」ボタンの押下操作）を検知する。

そして、操作監視部２３１は、検知した命令操作等を示す操作内容及びその操作が行われた入力インタフェース（入力装置）の種類を含む情報を、命令情報として取得する。なお、操作制御部２０３は操作部７０ごと、すなわちマウスやキーボード等の入力インタフェースごとに設けられているので、操作監視部２３１は、図５に示した画面においてユーザが操作を行うことにより操作制御部２０３が取得した操作信号及びその操作制御部２０３に対応する入力インタフェースの種類情報に基づいて命令情報を生成して取得する。すなわち、操作制御部２０３は、命令情報を取得する命令情報取得手段として機能する。

すなわち、操作監視部２３１が取得した命令情報に含まれる入力インタフェースの種類により、ユーザがどの入力方式（マウス、タッチ操作等）によりＵＩ部２３０の起動命令を行ったのかを判別することができる。例えば、ユーザが、画像処理装置１に印刷出力を実行させるために、図５に示した画面を起動させて、図５に示した画面に表示されている「印刷設定」ボタンをマウスによりクリックする（つまり、印刷設定画面のＵＩ起動命令を行う）と、操作監視部２３１は、マウスの操作部７０に対応する操作制御部２０３からの印刷設定画面の起動命令を示す操作信号を検知する。

そして、操作監視部２３１は、操作制御部２０３から検知した操作信号及びその操作制御部２０３に対応する操作部７０がマウスであることを示す情報に基づいて命令情報を生成して取得する。したがって、この命令情報から、ユーザがマウスによる入力方式を用いて操作を行ったことを特定することができる。

なお、本実施形態においては、操作監視部２３１は、操作制御部２０３から検知した操作信号及び操作信号を入力した操作制御部２０３に対応する入力インタフェースの種類情報に基づいて命令情報を生成する場合を例としている。すなわち、この場合、操作制御部２０３が生成する操作信号は入力インタフェースの種類が特定されず操作の内容のみを示すので、操作監視部２３１は、操作制御部２０３に対応する操作部７０を特定して、入力インタフェースの種類情報を取得する必要がある。しかしながら、操作制御部２０３が生成する操作信号そのものに入力インタフェースの種類情報が含まれている場合は、操作監視部２３１は、操作制御部２０３から検知した操作信号を命令情報として取得してもよい。

ＵＩ情報ＤＢ２３２は、ＵＩ情報テーブルが記憶される記憶媒体（記憶手段）である。図６は、ＵＩ情報ＤＢ２３２が記憶するＵＩ情報テーブルを例示する図である。ＵＩ情報テーブルには、命令情報により判別される入力方式と、各入力方式に対応するＵＩを表示するための情報（以下、「ＵＩ情報」とする）とが対応付けて格納されている。入力方式に対応するＵＩ情報とは、例えば、その入力方式により操作しやすい構成とするために、どのようなリソースを、どのような位置や大きさで配置してＵＩを構築するかを定めた情報、すなわちその入力方式による入力情報を受け付ける入力受付画面を構成するための画面構成情報である。なお、本実施形態においては、ＵＩ情報ＤＢ２３２がＵＩ部２３０に含まれる場合を例としているが、ＵＩ情報ＤＢ２３２は、外部のサーバ等に設けられていてもよく、ＵＩ情報取得部２３３は、ネットワークを介してサーバへアクセスしてＵＩ情報ＤＢ２３２に記憶されているＵＩ情報テーブルを取得してもよい。

図７（ａ）は、マウスによる入力方式に対応するＵＩ（以降、「デスクトップＵＩ」とする）を例示する図である。図７（ａ）に示すＵＩは、設定値Ａ〜設定値Ｄのうちのいずれかを選択するための画面であり、選択したい設定値が表示されている領域を、ユーザがマウスでポイントしてクリックすることにより、いずれかの設定値が選択される。マウスのポインタは１ドット単位で動作するので、それぞれの設定値が表示されている各領域は、図７（ａ）に示すように最小限のマウスのカーソル移動で選択できる広さであればよく、広すぎるとマウスのカーソル移動が多くなりマウス操作には適さない。

図７（ｂ）は、タッチ操作による入力方式に対応するＵＩ（以降、「タッチＵＩ」とする）を例示する図である。図７（ｂ）に示すＵＩは、図７（ａ）に示したＵＩと同様に、設定値Ａ〜設定値Ｄのうちのいずれかを選択するための画面であり、選択したい設定値が表示されている領域を、ユーザが指等でタッチすることにより、いずれかの設定値が選択される。

ところで、指等で領域をタッチすることによる選択操作は、マウスポインタによる選択操作よりも広い範囲を指す可能性が高い。そのため、図７（ａ）に示したようなマウス操作に適した領域の広さのままであると、例えば、設定値Ａを選択するために設定値Ａの領域をタッチしたつもりが、設定値Ｂの領域にも指が触れてしまい、設定値Ｂが選択されてしまう場合があり、タッチ操作には適さない。そこで、図７（ｂ）に示すように、タッチＵＩでは、選択対象の領域をデスクトップＵＩの場合よりも広くし、他の領域を一緒にタッチすることがないような広さにする。

ＵＩ情報取得部２３３は、操作監視部２３１から入力された命令情報に基づいて、ＵＩ情報ＤＢ２３２に格納されているＵＩ情報を取得する。すなわち、ＵＩ情報取得部２３３は、ＵＩ情報である画面構成情報を取得する画面構成情報取得手段として機能する。以下、ＵＩ情報取得部２３３による具体的なＵＩ情報取得処理を、図８を参照して説明する。図８は、ＵＩ情報取得部２３３によるＵＩ情報取得処理を例示するフローチャートである。なお、ここでは、情報処理装置２がデスクトップＵＩ及びタッチＵＩを提供している場合を例として説明する。

図８に示すように、ＵＩ情報取得部２３３は、操作監視部２３１から入力された命令情報により、ユーザが操作を行った際に用いられた入力方式を特定する（Ｓ９００）。入力方式を特定したＵＩ情報取得部２３３は、特定した入力方式がマウスによる入力方式である場合（Ｓ８０１／ＹＥＳ）、ＵＩ情報ＤＢ２３２に記憶されている図６に示したＵＩ情報テーブルを参照して、マウスによる入力方式に対応付けられているデスクトップＵＩ情報を取得する（Ｓ８０２）。一方、特定した入力方式がマウスによる入力方式ではない、すなわちタッチ操作による入力方式である場合（Ｓ８０１／ＮＯ）、ＵＩ情報取得部２３３は、図６に示したＵＩ情報テーブルを参照して、タッチ操作による入力方式に対応付けられているタッチＵＩ情報を取得する（Ｓ８０３）。

画面生成部（画面生成手段）２３４は、ＵＩ情報取得部２３３により取得されたＵＩ情報に基づいて、ユーザが操作を行った際に用いられた入力方式に対応するＵＩの画面を生成して、アプリケーション２０４又は表示制御部２０２に対して送信する。これにより、情報処理装置２のＬＣＤ６０に、ユーザが操作を行った際に用いた入力方式に対応するＵＩの画面が表示されることになる。

以下、ユーザが使用する入力方式に対応するＵＩを表示する際の本実施形態の情報処理装置２の動作を、図９に示すシーケンス図を用いて説明する。ここでは、ユーザが使用する入力方式に対応するＵＩの印刷出力の設定画面（以降、「印刷設定画面」とする）を表示する場合を例として説明する。例えば、アプリケーション２０４のＧＵＩに含まれる「印刷」ボタンが押下されると、図９に示すように、表示制御部２０２は、例えば、図５に示した印刷制御画面を、情報処理装置２のＬＣＤ６０に表示する（Ｓ９００）。これにより、プリンタドライバ２２０が呼び出されることになる。

印刷制御画面が表示されたことにより呼び出されたプリンタドライバ２２０は、その後の操作の監視を開始する（Ｓ９０１）。プリンタドライバ２２０による操作の監視中に、操作制御部２０３は、表示制御部２０２により表示された印刷制御画面に対して行われたユーザの操作により生成された操作信号を取得する（Ｓ９０２）。例えば、図１０（ａ）に示すように、ユーザが、印刷制御画面に表示されている「印刷設定」ボタンをマウスによりポイントしてクリックしている場合、操作制御部２０３は、ＵＩの起動命令を示す操作信号を生成する。

操作を監視しているプリンタドライバ２２０は、操作制御部２０３が操作信号を取得したことを検知すると、検知した操作信号等に基づいて命令情報を生成して取得する（Ｓ９０３）。命令情報を取得したプリンタドライバ２２０は、取得した命令情報からユーザが使用する入力方式を特定する（Ｓ９０４）。例えば、図１０（ａ）に示すように、ユーザがマウスにより「印刷設定」ボタンをポイントしてクリックすることにより起動操作を行った場合、プリンタドライバ２２０は、ユーザが使用する入力方式はマウスによる入力方式であると特定する。

入力方式を特定したプリンタドライバ２２０は、入力方式に対応するＵＩ情報を取得し、入力方式に対応するＵＩの印刷設定画面を生成して表示制御部２０２に対して送信する（Ｓ９０５）。例えば、特定された入力方式がマウスによる入力方式である場合、プリンタドライバ２２０は、図１０（ｂ）に示すような印刷設定画面を生成する。図１０（ｂ）に示す印刷設定画面は、図７（ａ）に示すような設定値の選択領域を有するデスクトップＵＩで構成される。印刷設定画面が送信された表示制御部２０２は、送信された印刷設定画面を情報処理装置２のＬＣＤ６０に表示させる（Ｓ９０６）。

また、図１１（ａ）に示すように、ユーザが、印刷制御画面に表示されている「印刷設定」ボタンを指でタッチしている場合、図９に示した動作処理により、図１１（ｂ）に示すような印刷設定画面が、情報処理装置２のＬＣＤ６０に表示される。図１１（ｂ）に示す印刷設定画面は、図７（ｂ）に示すような設定値の選択領域を有するタッチＵＩで構成される。例えば、図１１（ｂ）に示した印刷設定画面の左側の「カラーモード」ボタンが指でタッチされて選択されると、右側には、カラーモードの設定値の選択領域が表示される。そして、カラーモードの選択領域の「白黒」が指でタッチされると、「白黒」が選択された状態になる。

このように、ユーザがプリンタドライバ２２０のＵＩを起動させる操作（例えば、印刷制御画面に表示されている「印刷設定」ボタンを押下する操作）を行うと、その操作の際に用いられた入力方式に対応するプリンタドライバ２２０のＵＩ（例えば、印刷設定画面）が表示される。

以上説明したように、本実施形態においては、プリンタドライバのＵＩを起動させる操作により生成された命令情報から操作に用いられた入力方式を特定し、特定された入力方式に対応するＵＩ情報を取得して、取得したＵＩ情報に基づいてプリンタドライバのＵＩを表示させる。これにより、ユーザは、最初に選択されたＵＩに対応する入力方式とは異なる入力方式でＵＩの操作を行いたい場合、操作を行うＵＩを起動させる際に、使用したい入力方式で起動操作を行うことにより、使用した入力方式に対応するＵＩに切り替えられるので、ユーザが使用したい入力方式に対応するＵＩを選択し直すことなく、対応するＵＩに切り替えることが可能になる。

次に、仮想プリンタドライバにより生成された中間データに対する操作を行う際に適したＵＩを表示させる実施形態を説明する。図１２は、このような実施形態を実現する情報処理装置２の機能構成を例示するブロック図である。図１２に示すように、情報処理装置２は、図３に示した構成に加えて、仮想プリンタドライバ２４０、中間データ記憶部２７０及びプレビューアプリケーション２８０を含む。また、仮想プリンタドライバ２４０は、グラフィック部２５０及びＵＩ部２６０を含む。また、グラフィック部２５０は、命令情報付与部２５１を含む。

仮想プリンタドライバ２４０は、プリンタドライバ２２０に準じた機能を有し、ＥＭＦ（Ｅｎｈａｎｃｅｄ ＭｅｔａＦｉｌｅ）のような印刷ジョブに準じた形式の情報を中間データとして生成する。中間データは、実際に印刷出力が行われる前に、印刷出力を実行するべき対象の画像である出力対象情報（画像データ）から生成され、印刷出力前のプレビュー処理及び文書の簡易な編集やページの入れ替え等の編集処理といった前処理の際に用いられる画像である前処理画像を示す。その後、その中間データに基づいてプリンタドライバ２２０により印刷ジョブが生成される。

より詳細には、仮想プリンタドライバ２４０のグラフィック部２５０が、プリンタドライバ２２０のグラフィック部２２１と同様にアプリケーション２０４からデータを受け取る。そして、グラフィック部２５０は、受け取ったデータを、印刷ジョブに準じた形式であって、プレビューや編集処理が可能な形式の情報に変換するとともに、プリンタドライバ２２０のＵＩ部２３０と同様な処理を行うＵＩ部２６０を介して設定された印刷設定情報を保持して中間データ記憶部２７０に記憶させる。

グラフィック部２５０の命令情報付与部（命令情報付与手段）２５１は、以下に説明する本実施形態に係る要旨を実現する構成の１つであり、詳細は後述する。プレビューアプリケーション２８０は、中間データ記憶部２７０に記憶されている中間データに基づいて、プレビュー処理を行うとともに、中間データに対する編集処理を行い、処理後の中間データをプリンタドライバ２２０に受け渡す。すなわち、プレビューアプリケーション２８０は、中間データに対して印刷出力を実行させるための前処理を行う前処理手段として機能する。

このようなシステムの構成において、中間データに対する操作を行う際に、操作するユーザに適したＵＩで表示される画面（例えば、プレビュー表示画面及び編集画面）を生成して、情報処理装置２のＬＣＤ６０に表示させることが、本実施形態に係る要旨である。以下、本実施形態に係る構成として、本実施形態に係るグラフィック部２５０の命令情報付与部２５１及びプレビューアプリケーション２８０の機能構成を説明する。

グラフィック部２５０の命令情報付与部２５１は、上述の実施形態におけるＵＩ部２３０と同様にＵＩ部２６０により生成された命令情報を取得して、生成した中間データに付与して中間データ記憶部２７０に記憶させる。図１３は、仮想プリンタドライバ２４０により生成される中間データの構成を例示する図である。図１３に示すように、中間データは、生成されたＥＭＦ形式のデータと、ＥＭＦ形式のデータの先頭に付与された命令情報とから構成される。

なお、図１３に示した中間データでは命令情報がデータの先頭に付与されている場合を例としているが、データの最後に付与されてもよいし、中間データに対応付けた別のファイルに記憶されてもよいし、ＥＭＦ形式のデータのフォーマット情報として付与されてもよい。また、印刷ジョブに準じた形式は、上述したＥＭＦ形式の他、ＸＰＳ（ＸＭＬ Ｐａｐｅｒ Ｓｐｅｃｉｆｉｃａｔｉｏｎ）、ＰＤＦ（Ｐｏｒｔａｂｌｅ Ｄｏｃｕｍｅｎｔ Ｆｏｒｍａｔ）等の既知の形式であってもよいし、オリジナルの形式でもよい。

次に、プレビューアプリケーション２８０の機能構成を、図１４を参照して説明する。図１４は、プレビューアプリケーション２８０の機能構成を例示するブロック図である。図１４に示すように、プレビューアプリケーション２８０は、中間データ取得部２８１、プレビュー生成部２８２、ＵＩ部２８３及びプレビュー編集部２８４を含む。

中間データ取得部２８１は、ユーザからのプレビュー要求に応じて中間データ記憶部２７０に記憶されている中間データを取得し、プレビュー生成部２８２、ＵＩ部２８３及びプレビュー編集部２８４に対して出力する。プレビュー生成部２８２は、中間データ取得部２８１から入力された中間データに基づいて、プレビュー画像（印刷出力の出力結果を確認するための出力結果確認画像）を生成し、ＵＩ部２８３に対して出力する。

ＵＩ部２８３は、図４に示したプリンタドライバ２２０のＵＩ部２３０の機能構成から操作監視部２３１を除いた構成である。すなわち、ＵＩ部２８３は、ＵＩ情報ＤＢ２３２、ＵＩ情報取得部２３３、画面生成部２３４を含む。ＵＩ情報取得部２３３は、中間データ取得部２８１から入力された中間データに付与されている命令情報を取得し、プリンタドライバ２２０のＵＩ部２３０の機能構成において説明したように、取得した命令情報から特定された入力方式に応じたＵＩ情報を取得する。

画面生成部２３４は、ＵＩ情報取得部２３３から入力されたＵＩ情報及びプレビュー生成部２８２から入力されたプレビュー画像に基づいて、ユーザが中間データ生成のために行った操作の際に用いられた入力方式に対応するＵＩのプレビュー表示編集画面を生成して、表示制御部２０２に対して送信する。これにより、情報処理装置２のＬＣＤ６０に、ユーザが中間データ生成のために行った操作の際に用いられた入力方式に対応するＵＩのプレビュー表示編集画面が表示されることになる。

なお、プレビュー表示編集画面は、プレビュー生成部２８２において生成されたプレビュー画像を表示させるとともに、必要に応じて、表示されているプレビュー画像をもとに文書の編集やページの入れ替え等の編集処理を行うことが可能な画面である。プレビュー表示画面及び編集画面は同じ画面上に表示される必要はなく、例えば、プレビュー表示画面上で「編集」ボタンを押下することにより、編集画面が表示されるようにしてもよい。プレビュー編集部２８４は、プレビュー表示編集画面上で行われた編集処理を受け付けて、受け付けた編集処理を実行する。

また、上記実施形態におけるＵＩ部２３０及びＵＩ部２６０の本実施形態に係る構成は、それぞれ同様な構成、すなわち図４に示した構成となる。そこで、各ＵＩ部の本実施形態に係る構成は、インポートライブラリファイル形式（．ｌｉｂ）及びＤＬＬ（Ｄｙｎａｍｉｃ Ｌｉｎｋ Ｌｉｂｒａｒｙ）ファイル形式等のポータビリティ性の高い構成として提供することが可能である。しかしながら、これらの形式に限らず、ＥＸＥファイル形式で提供されるようにしてもよい。

以下、仮想プリンタドライバにより生成された中間データに対する操作を行う際に適したＵＩを表示させる本実施形態に係る情報処理装置２の動作を、図１５に示すシーケンス図を用いて説明する。ここでは、図１０（ａ）に示すように、ユーザが、印刷制御画面に表示されている「印刷設定」ボタンをマウスによりポイントしてクリックすることにより起動操作を行った場合を例として説明する。

図１５に示すように、印刷制御画面が表示されたことにより呼び出されて操作を監視している仮想プリンタドライバ２４０は、「印刷設定」ボタンがマウスによりクリックされて操作制御部２０３が操作信号を取得したことを検知すると、検知した操作信号等に基づいて命令情報を生成して取得する（Ｓ１５００）。命令情報を取得した仮想プリンタドライバ２４０は、取得した命令情報から、ユーザが使用する入力方式をマウスによる入力方式と特定して、その入力方式に対応するデスクトップＵＩの印刷設定画面を生成する（Ｓ１５０１）。また、仮想プリンタドライバ２４０は、生成した印刷設定画面を介して設定された設定情報に基づいて中間データを生成するとともに、その中間データに、取得した命令情報を付与する（Ｓ１５０２）。

中間データ記憶部２７０は、仮想プリンタドライバ２４０により生成された命令情報が付与された中間データを記憶する（Ｓ１５０３）。プレビューアプリケーション２８０は、ユーザのプレビュー要求に応じて、中間データ記憶部２７０に記憶されている中間データを取得し、中間データから命令情報を取得する（Ｓ１５０４）。

中間データから命令情報を取得したプレビューアプリケーション２８０は、命令情報から入力方式をマウスによる入力方式であると特定して、その入力方式に対応するデスクトップＵＩのプレビュー表示編集画面を生成する（Ｓ１５０５）。生成したプレビュー表示編集画面を介して印刷出力対象のデータ編集を受け付けて、編集が終了すると編集されたデータをプリンタドライバ２２０へ送信する。（Ｓ１５０６）。編集されたデータを受信したプリンタドライバ２２０は、編集されたデータに基づいて印刷ジョブを生成する（Ｓ１５０７）。

以上説明したように、本実施形態においては、仮想プリンタドライバ２４０のＵＩ部を起動させる操作により生成された命令情報を付与した中間データを生成し、中間データに対する操作を行う際に、中間データに付与された命令情報から特定された入力方式に対応するＵＩを表示させる。これにより、ユーザが使用する入力方式に対応するＵＩを介して生成されたデータをさらに操作するＵＩについても、ユーザが選択することなく、操作するユーザに適したＵＩを表示することが可能になる。

なお、上記実施形態においては、プリンタドライバ２２０の操作監視部２３１が、操作制御部２０３に入力されたＵＩの起動命令を示す操作信号を検知して、検知された操作信号等に基づいて命令情報を生成する場合を例として説明した。その他、プリンタドライバ２２０の操作監視部２３１の代わりに、図１６に示すように情報処理装置２の構成に監視アプリケーション２０５を追加し、監視アプリケーション２０５が、操作制御部２０３に入力される操作信号を監視し、プリンタドライバ２２０のＵＩ部２３０によるＵＩの起動命令を示す操作信号を検知すると、検知された操作信号等に基づいて命令情報を生成するようにしてもよい。すなわち、監視アプリケーション２０５が命令情報を取得する命令情報取得手段として機能する。この場合、ＵＩ部２３０のＵＩ情報取得部２３３が、監視アプリケーション２０５により生成された命令情報を取得して、ユーザが操作を行った際に用いられた入力方式を特定する。

また、アプリケーション２０４が、操作制御部２０３から入力される操作信号及び操作信号を入力した操作制御部２０３に対応する入力インタフェースの種類情報に基づいて命令情報を生成してもよく、その場合、プリンタドライバ２２０の操作監視部２３１や監視アプリケーション２０５は不要である。この場合、アプリケーション２０４は、命令情報を取得する命令情報取得手段としても機能する。なお、上記実施形態における仮想プリンタドライバ２４０についても、同様に操作監視部２３１の代わりに、監視アプリケーション２０５やアプリケーション２０４により命令情報が生成されてもよい。

また、上記実施形態においては、入力方式としてマウスによる入力方式及びタッチ操作による入力方式を例として説明したが、これに限定されるものではなく、音声により操作命令を入力する入力方式、カメラ等で動作をスキャニングして信号変換したデータを操作命令として入力する入力方式及び加速度センサーを用いた入力方式等、入力方式を特定するための命令情報が生成される方式であればよい。

また、上記実施形態においては、プリンタとして機能する画像処理装置１を制御するプリンタドライバ及び仮想プリンタドライバが情報処理装置２にインストールされた構成において、ユーザが使用したい入力方式に応じたＵＩが表示される場合を例として説明した。しかしながら、本実施形態が適用されるドライバはプリンタドライバに限らず、スキャナとして機能する画像処理装置１を制御するスキャナドライバ及びプロジェクタとして機能する画像処理装置１を制御するプロジェクタドライバ等、設定画面や編集画面といったＵＩを起動させる制御を行うドライバであればよい。

１ 画像処理装置
２ 情報処理端末
１０ ＣＰＵ
２０ ＲＡＭ
３０ ＲＯＭ
４０ ＨＤＤ
５０ Ｉ／Ｆ
６０ ＬＣＤ
７０ 操作部
８０ バス
２００ コントローラ
２０１ ネットワーク制御部
２０２ 表示制御部
２０３ 操作制御部
２０４ アプリケーション
２０５ 監視アプリケーション
２１０ ネットワークＩ／Ｆ
２２０ プリンタドライバ
２２１ グラフィック部
２３０ ＵＩ部
２３１ 操作監視部
２３２ ＵＩ情報ＤＢ
２３３ ＵＩ情報取得部
２３４ 画面生成部
２４０ 仮想プリンタドライバ
２５０ グラフィック部
２５１ 命令情報付与部
２６０ ＵＩ部
２７０ 中間データ記憶部
２８０ プレビューアプリケーション
２８１ 中間データ取得部
２８２ プレビュー生成部
２８３ ＵＩ部
２８４ プレビュー編集部

特開２００４−０３０１６６号公報

Claims (10)

1. 複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段と、
   前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得する命令情報取得手段と、
   前記命令情報取得手段によって取得された前記命令情報に基づいて前記画面構成情報を取得する画面構成情報取得手段と、
   取得された前記画面構成情報に基づいて、前記表示部に表示させる前記入力受付画面を生成する画面生成手段と
   を含むことを特徴とする情報処理装置。
2. 前記命令情報取得手段は、前記情報処理装置の入力装置に対して操作が行われることにより生成される操作信号を検知し、検知した前記操作信号が前記入力受付画面を表示させるために入力された命令信号である場合、検知した前記操作信号に基づいて命令情報を生成する
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記命令情報は、検知した前記操作信号に対応する操作が行われた前記入力装置の種類情報を含む
   ことを特徴とする請求項２に記載の情報処理装置。
4. 画像処理装置による画像形成出力の対象となる画像の情報である出力対象情報に基づいて生成される画像の情報であって前記画像形成出力を実行させるための前処理の際に用いられる画像の情報である前処理画像に、前記命令情報取得手段によって取得された前記命令情報を付与して前記憶媒体に記憶させる命令情報付与手段と、
   前記前処理画像を用いて、前記画像形成出力を実行させるための前記前処理を行う前処理手段と
   を含み、
   前記前処理手段は、
   前記記憶媒体に記憶されている前記前処理画像に付与された前記命令情報に基づいて前記画面構成情報を取得し、
   取得された前記画面構成情報に基づいて、前記前処理を行うための入力を受け付ける前記入力受付画面を生成する
   ことを特徴とする請求項１〜３のいずれか１項に記載の情報処理装置。
5. 前記前処理手段は、
   前記前処理画像に基づいて前記出力対象情報の出力結果を確認するための出力結果確認画像を生成し、
   生成された前記出力結果確認画像を含む前記入力受付画面を生成する
   ことを特徴とする請求項４に記載の情報処理装置。
6. 前記前処理手段は、生成された前記出力結果確認画像を含む前記入力受付画面を介して入力された情報に基づいて、前記前処理画像を編集する
   ことを特徴とする請求項５に記載の情報処理装置。
7. 前記画面生成手段は、画像処理装置による画像形成出力の際に用いられる設定情報を設定するための入力を受け付ける前記入力受付画面を生成する
   ことを特徴とする請求項１〜６のいずれか１項に記載の情報処理装置。
8. 複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段を有する情報処理装置を制御する制御プログラムであって、
   前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得するステップと、
   取得された前記命令情報に基づいて前記画面構成情報を取得するステップと、
   取得された前記画面構成情報に基づいて、前記情報処理装置の表示部に表示させる前記入力受付画面を生成するステップと
   を前記情報処理装置に実行させることを特徴とする制御プログラム。
9. 前記入力受付画面を生成するステップは、画像処理装置による画像形成出力の際に用いられる設定情報を設定するための入力を受け付ける前記入力受付画面を生成する
   ことを特徴とする請求項８に記載の制御プログラム。
10. 複数の入力形式それぞれに対応する情報であって前記入力方式による入力を受け付ける入力受付画面を構成するための情報である複数の画面構成情報を記憶する記憶手段と、
    前記入力受付画面を表示させるために入力された命令の情報である命令情報を取得する命令情報取得手段と、
    前記命令情報取得手段によって取得された前記命令情報に基づいて前記画面構成情報を取得する画面構成情報取得手段と、
    取得された前記画面構成情報に基づいて、前記情報処理装置の表示部に表示させる前記入力受付画面を生成する画面生成手段と
    を含むことを特徴とする画像処理システム。