JP5581277B2 - 情報処理装置、及びワークフロー作成プログラム - Google Patents

Description

本発明は、情報処理装置、及びワークフロー作成プログラムに関し、特に、電子機器での動作制御に用いられ、複数の機能の組み合わせでなるワークフローを作成する技術に関する。

従来から、電子機器で実行可能な複数の機能の組み合わせでなるワークフローを作成する情報処理装置においては、ソフトウェアにプラグインを組み合わせたり、又は、プラグイン同士を組み合わせることで、新たなワークフローを作成する技術が提案されている。
ここで、プラグインとは、ソフトウェアへの機能追加のため等に用いられる小さな単位のプログラムを指す。さらには、下記特許文献１に示されるように、プラグイン同士の組み合わせからなる仮想プラグインという概念を用いて、プラグイン単位での組み合わせを行う場合よりもワークフローの作成を容易にする技術も提案されている。

特開２０１１−２３８２０号公報

しかし、上記従来のワークフロー作成技術のようにプラグイン単位での組み合わせを行ってワークフローを作成する場合、各プラグインの構成が細かく設定されているため、これら各プラグインを結合可能とするためには複雑な処理が必要である。特許文献１に示される技術は、上記複数のプラグインの組み合わせからなる仮想プラグインという概念を用いるため、単にプラグイン同士での組み合わせを行う場合よりも、ワークフローの設計や作成に要する時間が短縮されるが、仮想プラグインに対する仮想プラグイン又はプラグインの結合は、プラグイン同士の結合となるため、上記同様の複雑な処理が必要になる。

本発明は、上記の問題を解決するためになされたものであり、従来よりも簡単な操作及び処理により、機能を拡張した新たなワークフローを作成できるようにすることを目的とする。

請求項１に記載の発明は、電子機器の表示部に表示される表示画面内の操作用画像に対するユーザーの操作に応じた動作制御に用いられ、複数の機能の組み合わせでなるワークフローを作成する情報処理装置であって、
表示ディスプレイと、
前記電子機器で実行可能な複数のワークフローを記憶するワークフロー記憶部と、
前記表示部の表示画面に表示させる背景画像を記憶する背景画像記憶部と、
前記表示部の表示画面に表示させる操作用画像を記憶する操作用画像記憶部と、
前記ワークフロー記憶部に記憶されたワークフローの一覧を示すワークフローリストを、前記背景画像記憶部に記憶された背景画像および前記操作用画像記憶部に記憶された操作用画像を含む表示画面とともに前記表示ディスプレイに表示させる表示制御部と、
前記表示制御部により前記表示ディスプレイに表示されたワークフローリストの中から、当該ワークフロー作成作業を行う作業者により、結合の対象とする複数のワークフローを選択する選択指示を受け付けるワークフロー受付部と、
前記ワークフロー記憶部に記憶されている各ワークフロー同士を結合可能とする条件を示す結合条件を記憶し、前記ワークフロー受付部によって受け付けられた複数のワークフロー同士が、当該結合条件に合致するか否かを判定する判定部と、
前記判定部によって前記結合条件に合致すると判定された複数のワークフローを結合させて結合ワークフローを作成する結合部と、
前記操作用画像記憶部に記憶された操作用画像の中から、当該動作制御アプリケーション生成作業を行う作業者による操作用画像の指定を受け付ける画像受付部と、
前記画像受付部によって受け付けられた操作用画像と、前記結合部により作成された結合ワークフローとを関連付ける関連付部と、
前記結合ワークフローに関連付けられた操作用画像の前記背景画像中における配置箇所を受け付け、当該配置箇所を受け付けた場合には、前記操作用画像を前記背景画像中の前記配置箇所に配置した表示画面を前記表示ディスプレイに表示させるレイアウト受付部と、
前記表示ディスプレイに表示された前記背景画像および前記操作用画像を含む表示画面の表示画面データと前記操作用画像に関連付けられた前記結合ワークフローとを有する動作制御アプリケーションを生成する動作制御アプリケーション生成部と、
を備える情報処理装置である。

請求項５に記載の発明は、電子機器の表示部に表示される表示画面内の操作用画像に対するユーザーの操作に応じた動作制御に用いられ、複数の機能の組み合わせでなるワークフローを作成するワークフロー作成プログラムであって、
前記電子機器で実行可能な複数のワークフローを記憶するワークフロー記憶部と、
前記表示部の表示画面に表示させる背景画像を記憶する背景画像記憶部と、
前記表示部の表示画面に表示させる操作用画像を記憶する操作用画像記憶部と、
前記ワークフロー記憶部に記憶されたワークフローの一覧を示すワークフローリストを、前記背景画像記憶部に記憶された背景画像および前記操作用画像記憶部に記憶された操作用画像を含む表示画面とともに表示ディスプレイに表示させる表示制御部と、
前記表示制御部により前記表示ディスプレイに表示されたワークフローリストの中から、当該ワークフロー作成作業を行う作業者により、結合の対象とする複数のワークフローを選択する選択指示を受け付けるワークフロー受付部と、
前記ワークフロー記憶部に記憶されている各ワークフロー同士を結合可能とする条件を示す結合条件を記憶し、前記ワークフロー受付部によって受け付けられた複数のワークフロー同士が、当該結合条件に合致するか否かを判定する判定部と、
前記判定部によって前記結合条件に合致すると判定された複数のワークフローを結合させて結合ワークフローを作成する結合部と、
前記操作用画像記憶部に記憶された操作用画像の中から、当該動作制御アプリケーション生成作業を行う作業者による操作用画像の指定を受け付ける画像受付部と、
前記画像受付部によって受け付けられた操作用画像と、前記結合部により作成された結合ワークフローとを関連付ける関連付部と、
前記結合ワークフローに関連付けられた操作用画像の前記背景画像中における配置箇所を受け付け、当該配置箇所を受け付けた場合には、前記操作用画像を前記背景画像中の前記配置箇所に配置した表示画面を前記表示ディスプレイに表示させるレイアウト受付部と、
前記表示ディスプレイに表示された前記背景画像および前記操作用画像を含む表示画面の表示画面データと前記操作用画像に関連付けられた前記結合ワークフローとを有する動作制御アプリケーションを生成する動作制御アプリケーション生成部と、
して情報処理装置を機能させるワークフロー作成プログラムである。

これらの発明によれば、作業者は、既に作成されているワークフローを組み合わせる操作を行うだけで、機能を拡張した新たな結合ワークフローを簡単に作成できる。また、ワークフロー同士は上記結合条件を確保することにより結合可能とするため、従来のようにプラグイン単位での結合を行って新たなワークフローを作成する場合よりも処理を簡単にできる。

また、これら発明によれば、結合ワークフローを関連付けた操作用画像を含む前記表示画面の表示画面データを有する動作制御アプリケーションを簡単に生成することができる。

また、請求項２に記載の発明は、請求項１に記載の情報処理装置であって、前記判定部は、結合対象とされる複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能とが同じであることを、前記結合条件として記憶するものである。

この発明によれば、判定部は、結合対象とされる上記第１のワークフローで最後に実行される機能と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能とが同じである場合に、当該第１及び第２のワークフローを結合するので、作成された結合ワークフローにおける第２のワークフローで最初に実行される機能の確実な実行性を確保することができる。

また、請求項３に記載の発明は、請求項２に記載の情報処理装置であって、前記結合部は、前記判定部により前記結合条件に合致すると判定された複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値を、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値として設定するものである。

この発明によれば、結合部は、前記判定部により前記結合条件に合致すると判定された複数のワークフローについて、結合対象とされる上記第１のワークフローで最後に実行される機能に用いられる設定値を、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値として設定しているので、作成された結合ワークフローにおいて第１のワークフローで処理されたデータ等を、第２のワークフローによる処理において共通して用いることが可能になる。

また、請求項４に記載の発明は、請求項２又は請求項３に記載の情報処理装置であって、前記結合部は、前記判定部により前記結合条件に合致すると判定された複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値とが、予め定められた禁則条件に反する場合には、これら両設定値の少なくとも一方を変更して当該禁則条件に適合させるものである。

この発明によれば、結合部は、結合条件に合致する上記複数のワークフローについて、先に実行される第１のワークフローで最後に実行される機能に用いられる設定値と、当該第１のワークフローに続いて実行される第２のワークフローで最初に実行される機能に用いられる設定値の少なくとも一方を変更して禁則条件に適合させるので、第１のワークフローのよる処理と第２のワークフローによる処理との連係を確保することが可能になる。

本発明によれば、従来よりも簡単な操作及び処理により、機能を拡張した新たなワークフローを作成することができる。

動作制御アプリケーション生成システムを構成するパーソナルコンピュータ及び複合機の概略構成を示す図である。 ＰＣによる結合ワークフローを含む動作制御アプリケーション作成時の処理を示す図である。 ＰＣのシーケンス図である。 ＰＣが備える表示部の表示画面の一例である。 ＰＣが備える表示部の表示画面の一例である。 (Ａ)(Ｂ)(Ｃ)は複合機１のワークフロー一覧と、結合ワークフローの例を表で示した図である。 複合機における上記生成された動作制御アプリケーションに基づく表示画面の表示部での表示処理、ユーザーからの動作実行指示の受付処理、及び複合機の動作制御を示すフローチャートである。 複合機についてのシーケンス図である。

以下、本発明の一実施形態に係る情報処理装置、動作制御アプリケーション生成システム、及び動作制御アプリケーション生成プログラムについて図面を参照して説明する。

図１は動作制御アプリケーション生成システムを構成するパーソナルコンピュータ及び複合機の概略構成を示す図である。動作制御アプリケーション生成システム１０は、電子機器の一例としての複合機１と、情報処理装置の一例としてのパーソナルコンピュータ（以下、ＰＣ）３とで構成される。

複合機１は、コピー機能、ファクシミリ機能、プリンタ機能、スキャナ機能等の機能を兼ね備えている。複合機１には、ユーザーから複合機１について操作指示を受け付ける操作部５００を有し、この操作部５００には、ＬＣＤ（Liquid Crystal Display）等からなる表示部５０が備えられている。

また、ＰＣ３は、複合機１における表示部５０の表示制御及び複合機１の動作制御に供する動作制御アプリケーションを生成する動作制御アプリケーション生成プログラムがインストールされている。この動作制御アプリケーション生成プログラムは、本発明の一実施形態でもある。ＰＣ３は、複合機１において実行可能とされている各ワークフローを記憶している。ここで、ワークフローとは、複合機１で実行可能な複数の機能の組み合わせを示す情報と、当該組み合わせを構成する各機能を実行する順序を示す情報とを有する。

複合機１では、複合機１に備えられている操作部の操作により、複数の機能（例えば、スキャン動作と、複合機１にネットワーク接続されたパーソナルコンピュータのフォルダに当該スキャン動作により得られた画像データを保存する動作（フォルダ動作）等）を組み合わせて、これら機能が示す動作を連続して行わせるワークフローが記憶されている。なお、複合機１は、ＰＣ３において作成された後述する動作制御アプリケーションの他、結合ワークフローをＰＣ３から受け取って、複合機１で実行可能なワークフローとして記憶するようにしてもよい。

複合機１は、ＰＣ３から、ＬＡＮ（Local AreaNetwork）又はUSBメモリ等を介して上記動作制御アプリケーションを受け取って記憶（インストール）し、当該動作制御アプリケーションに基づいて、表示部５０による画面表示を制御し、当該表示画面に表示された操作ボタンに基づくユーザーによる操作で入力される指示に従って動作制御を行う。

ＰＣ３は、制御部３１０を備えている。制御部３１０は、ＣＰＵ等からなり、ＰＣ３１の全体的な動作制御を司ると共に、記憶部３１２に記憶されている上記動作制御アプリケーション生成プログラムに従って動作することで、アプリケーション生成部３１００として機能し、以下に示す各部として機能する。アプリケーション生成部３１００は、複合機１の表示部５０に表示させる表示画面の表示画面データを、例えばXML（Extensible Markup Language）形式のデータで生成し、当該表示画面データを含んで複合機１の動作制御に供する動作制御プログラムを生成するツールである。アプリケーション生成部３１００は、当該表示画面を構成する各種操作ボタン等としての各操作用画像のカスタマイズを行う指示を作業者から受け付けて表示画面を生成する処理、及び、当該表示画面のデータ（以下、表示画面データという）を含んだ動作制御プログラムの生成処理を開始する。ここで、操作用画像とは、ユーザーからの指示を受け付けるために複合機１における表示部５０の表示画面に操作ボタン等として表示させる画像である。

アプリケーション生成部３１００は、画像選択指示受付部３１０１、ワークフロー受付部３１０３、表示対象パーツ構築部３１０４、レイアウト指示受付部３１０５、動作制御アプリケーション生成部３１０６、操作用画像記憶部３１０７、ワークフロー記憶部３１０８、判定部３１０９、及び結合部３１１０として機能する。

画像選択指示受付部３１０１は、複合機１の表示部５０の表示画面のカスタマイズ時に、当該表示画面に表示させる操作用画像を選択する画像選択指示を作業者から受け付ける。画像選択指示受付部３１０１は、当該表示画面内にユーザーからの指示を受け付けるために表示させる例えば操作ボタン、アイコン、文字列等の操作用画像の選択を、操作部３１３（マウス又はキーボード等）を介して作業者から受け付ける。作業者が選択可能な複数の操作用画像の画像データは、操作用画像記憶部３１０７が記憶している。例えば、作業者により操作部３１３を介してアプリケーション生成部３１００の起動指示が受け付けられると、画像選択指示受付部３１０１は、表示部３１５にカスタマイズ受付画面を表示させる。このカスタマイズ受付画面には、作業者による選択候補としての上記操作用画像が表示され、当該表示中の操作用画像から作業者所望の操作用画像が操作部の操作で作業者により指定されると、画像選択指示受付部３１０１が、当該指定された操作用画像の選択を受け付ける。

ワークフロー受付部３１０３は、結合部３１１０による結合処理の対象とするワークフローを選択する結合対象選択指示を、操作部３１３を介して作業者から受け付ける。当該ワークフローはワークフロー記憶部３１０８に記憶されている。

表示対象パーツ構築部（関連付部）３１０４は、画像選択指示受付部３１０１で受け付けられた画像選択指示が示す操作用画像に、結合部３１１０による結合処理で作成された結合ワークフローを関連付けてなる表示対象パーツを構築する。すなわち、表示対象パーツ構築部３１０４は、操作用画像に対して、これに対応する複合機１の機能を関連付けして表示対象パーツとして作成する。

例えば、表示対象パーツ構築部３１０４は、操作用画像に対して、「スキャン動作後に指定されたフォルダに、スキャン読取で得たデータを保存する」というワークフローを関連付けて表示対象パーツを構築する。さらには、表示対象パーツ構築部３１０４は、操作用画像に対して、「スキャン動作後に指定されたフォルダに、スキャン読取で得たデータを保存する」という上記ワークフロー及び「指定されたフォルダに保存されているデータを印刷する」というワークフローを結合させてなる結合ワークフローを関連付けて表示対象パーツを構築する。

レイアウト指示受付部３１０５は、画像選択指示受付部３１０１で受け付けられた操作用画像（表示対象パーツ構築部３１０４により構築された表示対象パーツでもある）についての上記表示画面内での配置を指示するレイアウト指示を、作業者から操作部３１３を介して受け付ける。例えば、レイアウト指示受付部３１０５は、上記表示画面の背景画像のデータ（例えば、アプリケーション生成部３１００が記憶している）を用いて、表示部３１５に当該表示画面の背景画像を擬似的に表示させ、当該背景画像中における任意の箇所が作業者により操作部３１３を用いて指定されると、当該指定された箇所を上記操作用画像の配置箇所として受け付ける。

動作制御アプリケーション生成部３１０６は、表示対象パーツ構築部３１０４により構築された表示対象パーツと、レイアウト指示受付部３１０５で受け付けられたレイアウト指示とによって設定される内容からなる表示画面（複合機１の表示部５０に表示される表示画面）の表示画面データを例えばXML形式で生成し、当該表示画面データを備えた動作制御アプリケーションを生成する。すなわち、動作制御アプリケーション生成部３１０６は、複合機１の表示部５０に表示させる表示画面の背景画面画像に、上記レイアウト指示が示す当該背景画面画像上の位置に上記構築された表示対象パーツが配置された表示画面の表示画面データを生成する。動作制御アプリケーション生成部３１０６によって生成された動作制御アプリケーションは、一旦記憶部３１２に記憶される。本実施形態では、動作制御アプリケーション生成部３１０６は、XML形式でScriptファイルに表示画面データをエクスポートする。なお、本実施形態では、表示画面のデータファイルとしてXML形式のScriptファイルを使用するが、システム構成上は、XML形式以外でもよく、例えば、他のマークアップ言語であっても構わない。

操作用画像記憶部３１０７は、上記操作用画像を記憶している。また、ワークフロー記憶部３１０８は、複合機１で実行可能な複数のワークフローを記憶している。

判定部３１０９は、ワークフロー記憶部３１０８に記憶されている各ワークフローを結合させる場合に、当該ワークフロー同士を結合可能とするための条件を示す結合条件を記憶している。判定部３１０９は、ワークフロー受付部３１０３によって受け付けられた複数のワークフロー同士が、当該結合条件に合致するか否かを判定する。この結合条件は、結合対象とされる複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に続いて、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能が確実に実行されることを担保するための条件である。結合条件としては、例えば、結合対象とされる複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能とが同じであること等が用いられる。

結合部３１１０は、判定部３１０９によって上記結合条件に合致すると判定された複数のワークフローを結合させて結合ワークフローを作成する。結合ワークフローとは、複合機１で実行可能な複数のワークフローの組み合わせを示す情報と、当該組み合わせを構成する各ワークフローを実行する順序を示す情報とを有し、複数のワークフローを構成する機能を連続して実行させるものである。結合ワークフローとは、結合前の各ワークフローよりも機能が拡張されたワークフローである。

結合部３１１０は、判定部３１０９により上記結合条件に合致すると判定された複数のワークフローについて結合処理を行うとき、先に実行されるものとして結合する第１のワークフローにおいて最後に実行される機能に用いられる設定値を、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値として設定する。

また、結合部３１１０は、判定部３１０９により上記結合条件に合致すると判定された複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値とが、予め定められた禁則条件に反する場合には、これら両設定値の少なくとも一方を変更して当該禁則条件に適合する値とする。なお、当該両設定値は、第１のワークフローで最後に実行される機能に用いられる設定値を、第２のワークフローで最初に実行される機能に用いられる設定値に適合させることが好ましい。

すなわち、作業者は、画像選択指示受付部３１０１での操作用画像の選択と、結合部３１１０でのワークフロー結合処理の実行指示と、レイアウト指示受付部３１０５での上記レイアウト指示とを行うと、動作制御アプリケーション生成部３１０６による動作制御アプリケーション生成処理により、複合機１の表示部５０に表示させる表示画面を、所望の表示対象パーツが所望の位置に配置されるようにカスタマイズして作成することができる。

記憶部３１２は、ＨＤＤ等からなり、当該ＰＣ３において表示画面生成を行うための動作制御アプリケーション生成プログラムがインストールされている。また、記憶部３１２には、上記動作制御アプリケーション生成部３１０６によって生成された動作制御アプリケーション等が記憶されている。

操作部３１３は、マウスポインタ又はキーボード等からなり、作業者による操作で当該作業者からの各種指示を受け付けるものである。

通信部３１１は、ネットワークを介して複合機１との間でデータ入出力を行うインタフェイスである。例えば、通信部３１１は、記憶部３１２に記憶されている上記生成された動作制御アプリケーションを複合機１に出力する。

表示部３１５は、ＬＣＤ（Liquid Crystal Display）等からなり、制御部３１０による表示制御により各種の画像を表示する。

パネルシュミレータ部３１４は、アプリケーション生成部３１００によってエクスポートされた上記Scriptファイルでなる表示画面データの内容を解析し、表示部３１５での表示を可能にするために当該表示画面データをHTML形式のデータに変換するツールである。

複合機１は、コントローラ１１と、記憶部１２と、プラットフォーム１３と、制御ユニット（Web container）２００に備えられた拡張アプリケーション１５と、ウェブブラウザ１６と、表示部５０とを有している。

複合機１の拡張アプリケーション１５は、主にScript Interpreter１５１と、Business Logic１５２とで構成される。

通信部１５４は、ＰＣ３との間で例えばＬＡＮ等を介して各種データ、例えば、上記のジョブ情報を示すデータ、又は動作制御アプリケーションの通信を行うインタフェイスである。なお、通信部１５４は、USBメモリインタフェイスを備え、USBメモリを介して、ＰＣ３から、動作制御アプリケーションを取得するようにしてもよい。

通信部１５４は、ＰＣ３の通信部３１１から受信した（或いは、上記外部メモリから取得した）上記動作制御アプリケーションを記憶部１２に記憶させる。

ScriptInterpreter１５１は、記憶部１２に登録された動作制御アプリケーションに含まれる上記表示画面データであるScriptファイルのファイルを読み込んで内容を解析する。ScriptInterpreter１５１は、表示部５０に表示画面を表示するためのHTML変換処理と、表示画面内に配置された操作ボタン等の操作用画像に関連付けられたアクション（ジョブ情報が示すジョブ）を実行するためのBusiness Logic１５２への展開処理とを行う。ScriptInterpreter１５１は、上記表示用にHTML形式への変換処理を行ったデータを、Business Logic１５２に渡す。

BusinessLogic１５２は、ウェブブラウザ１６に、Script Interpreter１５１から受け取った上記HTML変換処理済みの表示用データを送信する。また、Business Logic１５２は、上記Script Interpreter１５１から得られた情報（操作用画像に関連付けられているワークフロー又は結合ワークフロー。以下、単にワークフローというときは両方を含む。）を基に、複合機１の動作を制御する。

すなわち、Business Logic１５２は、複合機１のウェブブラウザ１６により表示部５０に表示される表示画面に表示されている操作ボタン等の操作用画像がユーザーによりウェブブラウザ１６上で指定されると、いずれの操作用画像が指定されたかのパーツ指定指示を、ウェブブラウザ１６から取得し、Script Interpreter１５１から渡された情報（ScriptInterpreter１５１によるScriptファイルの解析で得られた情報）を基に、上記パーツ指定指示が示す操作用画像に設定されているワークフローの内容、すなわち、当該ワークフローを構成する各機能及びその実行順序を解析する。Business Logic１５２は、更に、解析した各機能を上記順序で実行するために、当該解析した各機能に対応するAPIを呼び出す。当該解析した各機能に対応するAPIを示す情報は、Business Logic１５２からコントローラ１１に渡される。コントローラ１１は、当該当該解析したジョブに対応するAPIを実行する。当該複合機１は、コントローラ１１により、複合機１の各動作、例えば、コピー動作、スキャナ動作、ファクス動作、及びプリンタ動作が制御される。

記憶部１２には、上記動作制御アプリケーション、コントローラ１１として動作させるための制御プログラム、拡張アプリケーション１５のプログラム、ウェブブラウザ１６のプログラム等が記憶されている。複合機１の中央制御部であるＣＰＵが、記憶部１２に記憶されている各プログラムに従って動作することで、上記のコントローラ１１、拡張アプリケーション１５、及びウェブブラウザ１６等として機能する。

図２は、ＰＣ３による結合ワークフローを含む動作制御アプリケーション作成時の処理を示す図である。図３はＰＣ３のシーケンス図である。図４及び図５は表示部３１５の表示画面の一例である。図６(Ａ)(Ｂ)(Ｃ)は複合機１のワークフロー一覧と、結合ワークフローの例を表で示した図である。

作業者は、例えば、ＰＣ３の操作部３１３を操作して表示画面作成指示を入力する。当該作業者による表示画面作成指示の入力が制御部３１０に受け付けられると、制御部３１０は、記憶部３１２に記憶されている動作制御アプリケーション生成プログラムに基づいて、動作制御アプリケーション生成処理を開始させる（Ｓ１）。

続いて、制御部３１０は、例えば、図４に例を示すような、カスタマイズ受付画面５４を表示部３１５に表示させる（Ｓ２，図３では「カスタマイズ画面」）。制御部３１０は、このカスタマイズ受付画面５４として、ツールボックス領域Ｄ０に、操作用画像記憶部３１０７に記憶されている操作用画像の一覧を有する画面を表示部３１５に表示させる。

例えば、カスタマイズ受付画面５４の「設定コントロール」表示部分Ｄ１を、作業者がマウスポインタ等でなる操作部３１３を左クリックで指定する操作等に基づいて、当該表示部分Ｄ１に表示されている画像名が示す操作用画像を選択する指示を制御部３１０が受け付けると（Ｓ３）、制御部３１０は、図４に示すように、カスタマイズ受付画面５４の一部をなす表示領域Ｄ２内に、当該指定された操作用画像を表示する。

例えば、ワークフロー記憶部３１０８には、複合機１で実行可能なワークフローとして、図６(Ａ)に表で示す各ワークフローが予め記憶されている。各ワークフローは、それぞれを識別可能とするためにIDが付されており、Input側(先に実行される)の機能とOutput側(Input側の次に実行される)の機能とで構成される。例えば、ID001のワークフローは、Input側がScan機能、Output側がPrint機能とされ、これらScan機能及びPrint機能によりコピー動作を行うものである。

そして、制御部３１０は、図５に例を示すようなワークフローリスト画面５５として、ワークフロー記憶部３１０８に記憶されているワークフローの一覧を有する画面を表示部３１５に表示させる。例えば、制御部３１０は、既に表示しているカスタマイズ受付画面５４の上にワークフローリスト画面５５を重ねて表示させる。

このワークフローリスト画面５５の表示部３１５での表示中に、作業者による操作部３１３の操作等により、当該ワークフローリスト画面５５において所望のワークフローの名称が表示されている表示部分Ｄ３，Ｄ５が指定されることにより、結合の対象とする２つのワークフローが選択されると、当該表示部分Ｄ３，Ｄ５に表示されているワークフローを結合対象として選択する選択指示がワークフロー受付部３１０３に受け付けられる（Ｓ４）。

続いて、判定部３１０９は、ワークフロー受付部３１０３に選択が受け付けられた上記２つのワークフロー同士が結合条件に合致するか否かを判定する(Ｓ５)。本実施形態では、判定部３１０９は、結合対象とされる複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能とが同じであることを結合条件として上記判定を行う。ここで、判定部３１０９により、ワークフロー受付部３１０３に選択が受け付けられた上記２つのワークフロー同士が上記結合条件に合致しないと判定された場合は(Ｓ５でＮＯ)、処理は終了する。

ここで、判定部３１０９により、ワークフロー受付部３１０３に選択が受け付けられた上記２つのワークフロー同士が上記結合条件に合致すると判定された場合は(Ｓ５でＹＥＳ)、結合部３１１０は、上記結合条件に合致すると判定された当該２つのワークフローを結合させて結合ワークフローを作成する(Ｓ６)。例えば、図６(Ａ)に示すID004(Box保存)とID005(Box印刷)とが結合の対象として選択されている場合は、第１のワークフローで最後に実行される機能と、第２のワークフローで最初に実行される機能とが同じであるため、判定部３１０９により結合条件に合致すると判定される。一方、ID001(コピー)とID002(メール送信)とが結合の対象として選択されている場合は、第１のワークフローで最後に実行される機能と、第２のワークフローで最初に実行される機能とが異なるため、判定部３１０９により結合条件に合致しないと判定される。

また、この結合処理においては、結合部３１１０は、結合条件に合致すると判定された当該２つのワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値とが、予め定められた禁則条件に適合しているか否かを判断し、この禁則条件に反する場合には、これら両設定値の少なくとも一方を当該禁則条件に適合する値に変更する。例えば、結合部３１１０は、第１のワークフローで得られるデータと、第２のワークフローで扱われるデータとが同一のカラー設定とされていることを禁則条件として記憶しており、「モノクロでのスキャン動作後に指定されたフォルダに、スキャン読取で得たデータを保存する」という第１のワークフローと、「指定されたフォルダに保存されているデータを読み出し、当該読み出したデータをカラーで印刷する」という第２のワークフローとを結合させる場合、第１のワークフローにおけるスキャン動作と、第２のワークフローにおける印刷動作のカラー設定が異なっているため、禁則条件に反すると判断し、第１のワークフローにおけるスキャン動作と、第２のワークフローにおける印刷動作の設定をカラー又はモノクロのいずれかに統一する。例えば、結合部３１１０は、第２のワークフローにおける印刷動作の設定の「カラー」に合わせて、第１のワークフローにおけるスキャン動作の設定を「モノクロ」から「カラー」に変更する。なお、結合部３１１０は、第１及び第２のワークフローの各設定が当該禁則条件に反しない場合は、当該第１及び第２のワークフローの各設定をそのまま用いる。

また、この結合処理においては、結合部３１１０は、上記第１のワークフローにおいて最後に実行される機能に用いられる設定値を、当該第１のワークフローに続いて実行される上記第２のワークフローで最初に実行される機能に用いられる設定値として設定する。例えば、結合部３１１０は、「スキャン動作後に指定されたフォルダに、スキャン読取で得たデータを保存する」という第１のワークフローと、「指定されたフォルダに保存されているデータを読み出し、当該読み出したデータを印刷する」という第２のワークフローとが結合される場合、結合部３１１０は、第１のワークフローで最後に実行されるフォルダ保存動作によりスキャン読取で得たデータを保存したフォルダを示す情報(IPアドレス、フォルダ名等)と、当該保存した文書を特定するための文書情報を、第２のワークフローで最初に実行されるフォルダからのデータ読み出し動作で用いる、当該データ読み出し対象とするフォルダを示す情報(IPアドレス、フォルダ名等)を上記第１のワークフローのフォルダ保存動作で用いたフォルダを示す情報(IPアドレス、フォルダ名等)に設定し、読み出し対象とするデータを特定するための文書情報等を、上記第１のワークフローのフォルダ保存動作で用いた文書情報に設定する、等を行う。

例えば、結合部３１１０は、結合ワークフローとして、図６(Ａ)に示すID004(Box保存)を第１のワークフロー(Input側ワークフロー)とし、ID005(Box印刷)を第２のワークフロー(Output側ワークフロー)として結合させる場合、ID004(Box保存)を先に行った後、ID005(Box印刷)をこれに続いて行うという実行順序及び当該実行の対象となる各ワークフロー(各ワークフローのID)を結合ワークフローとして作成する（図６（Ｂ））。

また、ワークフロー受付部３１０３は、３つ以上の複数のワークフローの選択を受け付け、結合部３１１０が、当該選択された複数のワークフローを結合させて結合ワークフローを作成するものとしてもよい。例えば、図６(Ｃ)に示すように、第１のワークフロー(Input側ワークフロー)をID004(Box保存)とし、第２のワークフロー(Output側ワークフロー)をID005(Box印刷)及びID006(Box送信(メール))の２つとすることも可能である。この場合も、第１のワークフロー及び第２のワークフローに対する判定部３１０９及び結合部３１１０による上記判定及び結合処理は、同様にして行われる。この例の場合、ID004(Box保存)を先に行った後、ID005(Box印刷) 及びID006(Box送信(メール))をこれに続いて行うという実行順序及び各ワークフローが結合ワークフローとして結合部３１１０により作成される。この場合、第２のワークフローとしてのID005(Box印刷)及びID006(Box送信(メール))は、いずれかを先に行うものとしてもよいし、これらを同時に行うとしてもよい。

上記ワークフロー結合処理により結合ワークフローが作成された後、表示対象パーツ構築部３１０４が、当該作成された結合ワークフローを上記選択された操作用画像に関連付けて、表示対象パーツを作成する（Ｓ７）。例えば、表示対象パーツ構築部３１０４は、操作用画像に対して、当該結合ワークフローとの紐付けと、当該結合ワークフローが示す機能を実行するためのプログラムの紐付けとを行う(図３におけるカスタマイズ画面及び機能拡張)。

さらに、作業者が、マウスポインタ等でなる操作部３１３のドラッグ＆ドロップ操作により、領域Ｄ２に表示されている操作用画像を移動させて当該領域Ｄ２内における操作用画像の表示位置を変更すると、当該操作により変更された操作用画像の領域Ｄ２内における位置が表示画面内における操作用画像の位置を示すレイアウト指示として、当該レイアウト指示がレイアウト指示受付部３１０５に受け付けられる（Ｓ８）。

なお、上記Ｓ２乃至Ｓ９の処理は、作業者が、ＰＣ３において、カスタマイズ受付画面５４内の終了ボタン（図略）をマウス等によりクリックし、作業者からの動作制御アプリケーション生成終了指示が入力されるまで、複数の表示対象パーツ生成のために繰り返される（Ｓ９でＮＯ，Ｓ３に戻りＳ２乃至Ｓ９の処理を繰り返す）。

作業者から上記動作制御アプリケーション生成終了指示が入力されて制御部３１０に受け付けられると（Ｓ９でＹＥＳ）、この時点で生成されている各表示対象パーツと、各表示対象パーツについてのレイアウト指示に従って、動作制御アプリケーション生成部３１０６が動作制御アプリケーションを生成する（Ｓ１０）。この後、上記生成された動作制御アプリケーションは記憶部３１２に記憶される。すなわち、図３のシーケンスに沿っていえば、動作制御アプリケーション生成部３１０６は、UI部品、ソースコード、及びライブラリ等のアプリケーション構築に必要となるリソースを用いて、上記生成された表示対象パーツを備えた表示画面データ（複合機１の表示部５０に表示させる表示画面用）を同梱して動作制御アプリケーションを構築し、複合機１にインストール可能な形式にする（Packager）。

当該一連の処理によれば、作業者は、既に作成されているワークフローを組み合わせる操作を行うだけで、機能を拡張した新たな結合ワークフローを簡単に作成できる。また、ワークフロー同士は上記結合条件を確保することにより結合可能とするため、従来のようにプラグイン単位での結合を行って新たなワークフローを作成する場合よりも処理を簡単にできる。このため、作業者は、操作用画像と結合ワークフローとの関連付けを簡単に行え、所望通りにカスタマイズした表示画面の生成を簡単な操作で行える。

なお、上記動作制御アプリケーション生成部３１０６による動作制御アプリケーションの生成後、作業者による操作部３１３の操作により、上記生成された動作制御アプリケーションを複合機１に送信する指示が当該操作部３１３に受け付けられると、通信部３１１が、当該生成された動作制御アプリケーションを複合機１にネットワークを介して送信する。

複合機１において、上記生成された動作制御アプリケーションが通信部１５４により受信されると、コントローラ１１により当該動作制御アプリケーションは記憶部１２に記憶（インストール）される。

また、生成された上記動作制御アプリケーションのＰＣ３から複合機１への移行は、作業者がUSBメモリ等の運搬可能な記憶媒体に動作制御アプリケーションを記憶させ、当該USBメモリを複合機１の通信部１５４に読み取らせることによって行うことも可能である。この場合も、コントローラ１１により当該動作制御アプリケーションは記憶部１２に記憶（インストール）される。

なお、本発明の実施形態は上記の通りであるが、上記Ｓ４乃至Ｓ６に示した複数のワークフローを結合させることにより結合ワークフローを作成することをもって、本発明の実施形態と解することも可能である。

次に、複合機１における上記生成された動作制御アプリケーションに基づく表示画面の表示部５０での表示処理、ユーザーからの動作実行指示の受付処理、及び複合機１の動作制御を説明する。図７は、複合機１における上記生成された動作制御アプリケーションに基づく表示画面の表示部５０での表示処理、ユーザーからの動作実行指示の受付処理、及び複合機１の動作制御を示すフローチャートである。図８は複合機１についてのシーケンス図である。

上述したように、複合機１の記憶部１２には、ＰＣ３１から通信部１５４により取得された上記動作制御アプリケーションが記憶（インストール）されている。

ここで、ユーザーによる複合機１の操作部５００の操作等により、表示部５０に表示画面を表示させる必要が生じると、Script Interpreter１５１が、記憶部１２に記憶されている動作制御アプリケーションが含む表示画面の表示画面データ（Scriptファイル）を読み出す（Ｓ２１）。

ScriptInterpreter１５１は、当該読み出した表示画面データを解析し、表示部５０に表示画面を表示するためのHTML変換処理と、表示画面内に配置された操作用画像に関連付けられたワークフロー（又は結合ワークフロー）を構成する各機能を実行可能とするためにBusiness Logic１５２への展開処理とを行う（Ｓ２２）。

続いて、Business Logic１５２は、Script Interpreter１５１から得た上記HTML変換処理後のデータを表示部５０での表示が可能となるように解析し、ウェブブラウザ１６に渡す（Ｓ２３）。ウェブブラウザ１６は、当該受け取った表示画面データを表示部５０に表示させる（Ｓ２４）。Ｓ２３及びＳ２４は、図８では、Boundaryの「操作部」から動作制御アプリケーションの「アプリ画面」のシーケンスに対応する。

このウェブブラウザ１６による上記表示画面の表示中に、ユーザーによるタッチパネル機能を利用した操作等で、表示部５０に表示されている表示画面のいずれかの表示ボタン（操作用画像）が押下されると（Ｓ２５でＹＥＳ）、当該押下された表示ボタン（操作用画像）を示す画像指定指示が、ウェブブラウザ１６から、拡張アプリケーション１５のBusiness Logic１５２に送られる（図８における動作制御アプリケーションの「アプリ画面」から「プログラム」のシーケンスに対応）。なお、上記ウェブブラウザ１６による表示画面の表示中に、ユーザーによる上記表示ボタン押下が行われない場合は、ウェブブラウザ１６は、当該表示画面を表示部５０に表示した状態で、ユーザーによる上記表示ボタン押下を待機する（Ｓ２５でＮＯ，Ｓ２４）。

BusinessLogic１５２は、上記画像指定指示を受信すると、当該動作制御アプリケーションに含まれるUIワークフロー設定に基づいて、この画像指定指示の示す操作用画像に関連付けられて記憶されているワークフロー又は結合ワークフロー、すなわち、当該ワークフロー又は結合ワークフローを構成する機能を特定する（Ｓ２６）。Ｓ２６は、図８における動作制御アプリケーションの「プログラム」から「UIワークフロー設定」のシーケンスに対応する。

続いて、Business Logic１５２は、上記解析した設定値を用いて上記機能を実行するために、当該設定値を用いた機能に対応するAPIを特定し、当該APIを示すAPI情報をコントローラ１１に渡す（Ｓ２７）。コントローラ１１は、当該受け取ったAPI情報に従って、プログラム設定から対応するAPIを読み出し、この読み出したAPIを実行することで、当該各機能を実行する（Ｓ２８）。Ｓ２６及びＳ２７は、図８における動作制御アプリケーションの「プログラム」からControlの「プログラム実行」及びEntityの「プログラム設定」のシーケンスに対応する。

このようにして、複合機１では、ＰＣ３で生成された上記動作制御アプリケーションに基づいた動作制御が行われる。

なお、本発明は上記実施の形態の構成に限られず種々の変形が可能である。図１乃至図８に示した構成及び処理は、本発明の実施形態の例示に過ぎず、本発明を上記実施形態に限定する趣旨ではない。また、上記実施形態で示した複合機１は、本発明に係る電子機器の一例に過ぎず、本発明に係る電子機器は、複合機１及び画像形成装置以外に、他の電子機器であっても構わない。

なお、上記実施形態では、複合機１で実行可能なワークフローであって、結合部３１１０による結合処理の候補とするワークフローは、ＰＣ３のワークフロー記憶部３１０８に記憶されているとしているが、ＰＣ３が、複合機１との通信により、当該複合機１の記憶部１２に記憶されているワークフローを複合機１から取得するものとしてもよい。この場合、図１に二点鎖線で示すように、アプリケーション生成部３１００は、更にワークフロー取得部３１０２を有するものとする。ワークフロー取得部３１０２は、複合機１との通信により、当該複合機１の記憶部１２に記憶されているワークフローを複合機１から取得する。ワークフロー取得部３１０２は、複合機１から、ＬＡＮ（Local Area Network）又はUSBメモリ等を介して、当該複合機１から上記ワークフローを取得する。取得された単数又は複数のワークフローは、下記ワークフロー受付部３１０３での選択受付が可能となるようにワークフロー記憶部３１０８に記憶される。複合機１では、その通信部１５４から、ＬＡＮ（Local Area Network）又はUSBメモリ等を介して、ＰＣ３に対して当該ワークフローを送信することが可能とされている。

例えば、ワークフロー取得部３１０２は、図２に示した動作制御アプリケーション作成時の処理において、Ｓ１の処理後であって、少なくともＳ４の前の時点で、複合機１に対して、当該複合機１に保有されているワークフローの送信要求を、通信部３１１によりＬＡＮ等を介して送信し、複合機１の通信部１５４から、記憶部１２に記憶されているワークフローを受信する。ワークフロー取得部３１０２により取得された当該ワークフローはワークフロー記憶部３１０８が記憶する。

１ 複合機
１０ 動作制御アプリケーション生成システム
１１ コントローラ
１２ 記憶部
３１０ 制御部
３１００ アプリケーション生成部
３１１０ 結合部
３１０１ 画像選択指示受付部
３１０２ ワークフロー取得部
３１０３ ワークフロー受付部
３１０４ 表示対象パーツ構築部
３１０５ レイアウト指示受付部
３１０６ 動作制御アプリケーション生成部
３１０７ 操作用画像記憶部
３１０８ ワークフロー記憶部
３１０９ 判定部
３１１０ 結合部
５４ カスタマイズ受付画面
５５ ワークフローリスト画面

Claims (5)

1. 電子機器の表示部に表示される表示画面内の操作用画像に対するユーザーの操作に応じた動作制御に用いられ、複数の機能の組み合わせでなるワークフローを作成する情報処理装置であって、
   表示ディスプレイと、
   前記電子機器で実行可能な複数のワークフローを記憶するワークフロー記憶部と、
   前記表示部の表示画面に表示させる背景画像を記憶する背景画像記憶部と、
   前記表示部の表示画面に表示させる操作用画像を記憶する操作用画像記憶部と、
   前記ワークフロー記憶部に記憶されたワークフローの一覧を示すワークフローリストを、前記背景画像記憶部に記憶された背景画像および前記操作用画像記憶部に記憶された操作用画像を含む表示画面とともに前記表示ディスプレイに表示させる表示制御部と、
   前記表示制御部により前記表示ディスプレイに表示されたワークフローリストの中から、当該ワークフロー作成作業を行う作業者により、結合の対象とする複数のワークフローを選択する選択指示を受け付けるワークフロー受付部と、
   前記ワークフロー記憶部に記憶されている各ワークフロー同士を結合可能とする条件を示す結合条件を記憶し、前記ワークフロー受付部によって受け付けられた複数のワークフロー同士が、当該結合条件に合致するか否かを判定する判定部と、
   前記判定部によって前記結合条件に合致すると判定された複数のワークフローを結合させて結合ワークフローを作成する結合部と、
   前記操作用画像記憶部に記憶された操作用画像の中から、当該動作制御アプリケーション生成作業を行う作業者による操作用画像の指定を受け付ける画像受付部と、
   前記画像受付部によって受け付けられた操作用画像と、前記結合部により作成された結合ワークフローとを関連付ける関連付部と、
   前記結合ワークフローに関連付けられた操作用画像の前記背景画像中における配置箇所を受け付け、当該配置箇所を受け付けた場合には、前記操作用画像を前記背景画像中の前記配置箇所に配置した表示画面を前記表示ディスプレイに表示させるレイアウト受付部と、
   前記表示ディスプレイに表示された前記背景画像および前記操作用画像を含む表示画面の表示画面データと前記操作用画像に関連付けられた前記結合ワークフローとを有する動作制御アプリケーションを生成する動作制御アプリケーション生成部と、
   を備える情報処理装置。
2. 前記判定部は、結合対象とされる複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能とが同じであることを、前記結合条件として記憶する請求項１に記載の情報処理装置。
3. 前記結合部は、前記判定部により前記結合条件に合致すると判定された複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値を、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値として設定する請求項２に記載の情報処理装置。
4. 前記結合部は、前記判定部により前記結合条件に合致すると判定された複数のワークフローについて、先に実行されるものとして結合される第１のワークフローで最後に実行される機能に用いられる設定値と、当該第１のワークフローに続いて実行されるものとして結合される第２のワークフローで最初に実行される機能に用いられる設定値とが、予め定められた禁則条件に反する場合には、これら両設定値の少なくとも一方を変更して当該禁則条件に適合させる請求項２又は請求項３に記載の情報処理装置。
5. 電子機器の表示部に表示される表示画面内の操作用画像に対するユーザーの操作に応じた動作制御に用いられ、複数の機能の組み合わせでなるワークフローを作成するワークフロー作成プログラムであって、
   前記電子機器で実行可能な複数のワークフローを記憶するワークフロー記憶部と、
   前記表示部の表示画面に表示させる背景画像を記憶する背景画像記憶部と、
   前記表示部の表示画面に表示させる操作用画像を記憶する操作用画像記憶部と、
   前記ワークフロー記憶部に記憶されたワークフローの一覧を示すワークフローリストを、前記背景画像記憶部に記憶された背景画像および前記操作用画像記憶部に記憶された操作用画像を含む表示画面とともに表示ディスプレイに表示させる表示制御部と、
   前記表示制御部により前記表示ディスプレイに表示されたワークフローリストの中から、当該ワークフロー作成作業を行う作業者により、結合の対象とする複数のワークフローを選択する選択指示を受け付けるワークフロー受付部と、
   前記ワークフロー記憶部に記憶されている各ワークフロー同士を結合可能とする条件を示す結合条件を記憶し、前記ワークフロー受付部によって受け付けられた複数のワークフロー同士が、当該結合条件に合致するか否かを判定する判定部と、
   前記判定部によって前記結合条件に合致すると判定された複数のワークフローを結合させて結合ワークフローを作成する結合部と、
   前記操作用画像記憶部に記憶された操作用画像の中から、当該動作制御アプリケーション生成作業を行う作業者による操作用画像の指定を受け付ける画像受付部と、
   前記画像受付部によって受け付けられた操作用画像と、前記結合部により作成された結合ワークフローとを関連付ける関連付部と、
   前記結合ワークフローに関連付けられた操作用画像の前記背景画像中における配置箇所を受け付け、当該配置箇所を受け付けた場合には、前記操作用画像を前記背景画像中の前記配置箇所に配置した表示画面を前記表示ディスプレイに表示させるレイアウト受付部と、
   前記表示ディスプレイに表示された前記背景画像および前記操作用画像を含む表示画面の表示画面データと前記操作用画像に関連付けられた前記結合ワークフローとを有する動作制御アプリケーションを生成する動作制御アプリケーション生成部と、
   して情報処理装置を機能させるワークフロー作成プログラム。

Images