JP5853999B2

JP5853999B2 - 画像形成システム、画像形成装置、遠隔操作装置およびプログラム

Info

Publication number: JP5853999B2
Application number: JP2013126516A
Authority: JP
Inventors: 洋一来正; 義之玉井; 光貴森田; 美絵川端; 亮佑西村
Original assignee: Konica Minolta Inc
Current assignee: Konica Minolta Inc
Priority date: 2013-06-17
Filing date: 2013-06-17
Publication date: 2016-02-09
Anticipated expiration: 2033-06-17
Also published as: US20140368871A1; US10063730B2; JP2015001865A

Description

本発明は、ＭＦＰ（マルチ・ファンクション・ペリフェラル（Multi-Functional Peripheral））などの画像形成装置を備える画像形成システム、およびそれに関連する技術に関する。

画像形成装置を外部端末（遠隔操作装置）によって操作する技術が存在する。

たとえば、特許文献１においては、画像形成装置から外部端末へと操作画面データ自体（ビットマップ画像データ等）をそのまま送信して当該操作画面を外部端末の表示部に表示するとともに、当該操作画面内での操作位置情報（押下位置情報等）を送受信して操作画面内における操作入力を受け付ける技術が示されている。いわゆるリモート接続による遠隔操作技術である。

特開平０５−１２２４２４号公報

ところで、上記のような遠隔操作技術において、文字入力を行う際には、ソフトウエアキーボードを有するキーボード画面が用いられ得る。具体的には、画像形成装置から外部端末へとキーボード画面データ自体（ビットマップ画像データ等）が送信され当該キーボード画面が外部端末の表示部に表示される。そして、当該キーボード画面内での操作位置情報（押下位置情報等）が外部端末から画像形成装置に送信されて操作画面内における文字入力が受け付けられる。

しかしながら、キーボード画面操作に慣れていないユーザも存在し、このような技術における操作性は必ずしも十分ではない。

そこで、この発明は、遠隔操作装置において、キーボード画面を用いた文字入力手法とは別の文字入力手法を容易に利用することが可能な技術を提供することを課題とする。

上記課題を解決すべく、請求項１の発明は、画像形成装置を遠隔操作する遠隔操作装置であって、前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、キーボード画面を前記操作画面として表示するための画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を備えることを特徴とする。
請求項２の発明は、画像形成装置を遠隔操作する遠隔操作装置であって、前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子が列挙されたリストを格納する格納手段と、キーボード画面を前記操作画面として表示するための画像データと前記画像データに関する画像識別子とが前記画像形成装置から受信されたこと、および前記手書き入力アプリケーションを起動すべき旨が前記画像形成装置からの前記画像識別子と前記リスト内の前記１又は複数の画像識別子とに基づいて判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を備えることを特徴とする。
請求項３の発明は、画像形成装置を遠隔操作する遠隔操作装置であって、前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、前記操作画面に係る画像データが前記画像形成装置から受信され且つ前記画像形成装置からの前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を備えることを特徴とする。

請求項４の発明は、請求項１ないし請求項３のいずれかの発明に係る遠隔操作装置において、前記表示制御手段は、前記手書き入力アプリケーションによる前記手書き入力画面を、前記画像データに基づく前記キーボード画面とともに前記表示手段に表示することを特徴とする。

請求項５の発明は、請求項４の発明に係る遠隔操作装置において、前記表示制御手段は、前記手書き入力画面を前記キーボード画面の一部に重畳して表示することを特徴とする。

請求項６の発明は、請求項５の発明に係る遠隔操作装置において、前記表示制御手段は、前記キーボード画面において前記手書き入力画面が重畳されていない部分の押下に応じて、前記キーボード画面を有効化することを特徴とする。

請求項７の発明は、請求項４の発明に係る遠隔操作装置において、前記表示制御手段は、前記手書き入力画面を前記キーボード画面に対して並列的に配置して表示することを特徴とする。

請求項８の発明は、請求項４ないし請求項７のいずれかの発明に係る遠隔操作装置において、前記表示制御手段は、前記キーボード画面の表示開始に応じて、前記手書き入力アプリケーションを起動することを特徴とする。

請求項９の発明は、請求項８の発明に係る遠隔操作装置において、前記表示制御手段は、前記キーボード画面の表示開始時点から所定の遅延期間が経過した後に、前記手書き入力画面を表示することを特徴とする。

請求項１０の発明は、請求項８の発明に係る遠隔操作装置において、前記表示制御手段は、前記キーボード画面の表示開始と同時に、前記手書き入力画面を表示することを特徴とする。

請求項１１の発明は、請求項４ないし請求項１０のいずれかの発明に係る遠隔操作装置において、前記表示制御手段は、前記キーボード画面の入力文字表示欄に重ならないように、前記手書き入力画面を表示することを特徴とする。

請求項１２の発明は、画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、ａ）キーボード画面を前記遠隔操作装置にて表示するための画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記画像形成装置から受信するステップと、ｂ）前記キーボード画面に係る前記画像データと前記起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、を実行させるためのプログラムであることを特徴とする。
請求項１３の発明は、画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、ａ）キーボード画面を前記遠隔操作装置にて表示するための画像データと前記画像データに関する画像識別子とを前記画像形成装置から受信するステップと、ｂ）前記画像形成装置から受信された前記画像識別子と前記遠隔操作装置の格納手段に格納されたリストに列挙された１又は複数の画像識別子であって前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子とに基づいて、前記手書き入力アプリケーションを起動すべき旨が前記ステップａ）の後に判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、を実行させるためのプログラムであることを特徴とする。
請求項１４の発明は、画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、ａ）前記画像形成装置を遠隔操作するための操作画面を表示するための画像データを前記画像形成装置から受信するステップと、ｂ）前記画像形成装置から受信された前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、を実行させるためのプログラムであることを特徴とする。

請求項１５の発明は、請求項１２ないし請求項１４のいずれかの発明に係るプログラムにおいて、前記ステップｂ）において、前記キーボード画面に係る前記画像データが前記画像形成装置から受信されると、前記遠隔操作装置にインストールされている手書き入力アプリケーションが起動され、前記手書き入力画面が、前記画像データに基づく前記キーボード画面とともに前記遠隔操作装置の表示手段に表示されることを特徴とする。

請求項１６の発明は、請求項１５の発明に係るプログラムにおいて、前記ステップｂ）においては、前記キーボード画面の表示開始に応じて、前記手書き入力アプリケーションが起動されることを特徴とする。

請求項１７の発明は、請求項１６の発明に係るプログラムにおいて、前記ステップｂ）においては、前記キーボード画面の表示開始時点から所定の遅延期間が経過した後に、前記手書き入力画面が表示されることを特徴とする。

請求項１８の発明は、請求項１５ないし請求項１７のいずれかの発明に係るプログラムにおいて、前記ステップｂ）において、前記手書き入力画面は、前記キーボード画面の一部に重畳して表示されることを特徴とする。

請求項１９の発明は、請求項１５ないし請求項１８のいずれかの発明に係るプログラムにおいて、前記ステップｂ）において、前記手書き入力画面は、前記キーボード画面の入力文字表示欄に重ならないように表示されることを特徴とする。

請求項２０の発明は、請求項１８の発明に係るプログラムにおいて、前記コンピュータに、ｃ）前記キーボード画面において前記手書き入力画面が重畳されていない部分の押下に応じて、前記キーボード画面を有効化するステップ、をさらに実行させることを特徴とする。

請求項２１の発明は、画像形成システムであって、画像形成装置と、前記画像形成装置を遠隔操作する遠隔操作装置と、を備え、前記画像形成装置は、前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記遠隔操作装置に送信する送信手段と、を有し、前記遠隔操作装置は、前記操作画面を表示する表示手段と、前記キーボード画面を前記操作画面として表示するための前記画像データと前記起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を有することを特徴とする。
請求項２２の発明は、画像形成システムであって、画像形成装置と、前記画像形成装置を遠隔操作する遠隔操作装置と、を備え、前記画像形成装置は、前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面を前記操作画面として表示するための画像データと前記画像データに関する画像識別子とを前記遠隔操作装置に送信する送信手段と、を有し、前記遠隔操作装置は、前記操作画面を表示する表示手段と、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子が列挙されたリストを格納する格納手段と、前記画像データと前記画像識別子とが前記画像形成装置から受信されたこと、および前記手書き入力アプリケーションを起動すべき旨が前記画像形成装置からの前記画像識別子と前記リスト内の前記１又は複数の画像識別子とに基づいて判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を有することを特徴とする。
請求項２３の発明は、画像形成システムであって、画像形成装置と、前記画像形成装置を遠隔操作する遠隔操作装置と、を備え、前記画像形成装置は、前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データを前記操作画面に係る画像データとして前記遠隔操作装置に送信する送信手段と、を有し、前記遠隔操作装置は、前記操作画面を表示する表示手段と、前記操作画面に係る画像データが前記画像形成装置から受信され且つ前記画像形成装置からの前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、を有することを特徴とする。

請求項２４の発明は、請求項２１ないし請求項２３のいずれかの発明に係る画像形成システムにおいて、前記表示制御手段は、前記手書き入力アプリケーションによる前記手書き入力画面を、前記画像データに基づく前記キーボード画面とともに前記表示手段に表示することを特徴とする。

請求項２５の発明は、遠隔操作装置による遠隔操作が可能な画像形成装置であって、前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記遠隔操作装置に送信する送信手段と、を備えることを特徴とする。

請求項１ないし請求項２４に記載の発明によれば、遠隔操作装置にインストールされている手書き入力アプリケーションが起動され、手書き入力アプリケーションに係る入力画面が表示されるので、手書きによる文字入力を行うことが可能である。すなわち、遠隔操作装置において、キーボード画面を用いた文字入力手法とは別の文字入力手法を容易に利用することが可能である。

特に、請求項４、請求項１５および請求項２４に記載の発明によれば、キーボード画面が手書き入力画面とともに表示されている。したがって、手書き入力画面のみならずキーボード画面の存在も示唆されており、手書き入力画面を用いた文字入力操作のみならずキーボード画面を用いた文字入力操作をも行い得ることを操作者が容易に知得できる。

また、請求項２５に記載の発明によれば、遠隔操作装置にインストールされている手書き入力アプリケーションが画像形成装置からの起動指令に応じて起動され得るので、遠隔操作装置において手書きによる文字入力を行うことが可能である。すなわち、遠隔操作装置において、キーボード画面を用いた文字入力手法とは別の文字入力手法を容易に利用することが可能である。

画像形成システムを示す図である。画像形成装置の機能ブロックを示す図である。外部端末（遠隔操作装置）の概略構成を示す機能ブロック図である。メール送信画面を示す図である。キーボード画面を示す図である。手書き入力画面がキーボード画面に重畳表示される様子を示す図である。画像形成装置および外部端末の動作を示す図である。画像形成装置および外部端末の動作を示す図である。第２実施形態に係るキーボード画面を示す図である。第２実施形態に係る動作を示す図である。変形例に係る表示画面を示す図である。別の変形例に係る表示画面を示す図である。

以下、本発明の実施形態を図面に基づいて説明する。

＜１．第１実施形態＞
＜１−１．構成概要＞
図１は、画像形成システム１を示す図である。図１に示すように、画像形成システム１は、画像形成装置１０と外部端末５０とを備える。

画像形成装置１０と外部端末５０とは、ネットワークＮＷを介して互いに接続される。ネットワークＮＷは、ＬＡＮ（Local Area Network）およびインターネットなどによって構成される。また、ネットワークＮＷに対する接続態様は、有線接続であってもよく、或いは無線接続であってもよい。たとえば、画像形成装置１０はネットワークＮＷに対して有線接続され、外部端末５０はネットワークＮＷに対して無線接続される。

画像形成システム１においては、画像形成装置１０に対する各種の操作を外部端末５０を用いて行うことが可能である。すなわち、外部端末５０は、画像形成装置１０を遠隔操作することが可能である。なお、この画像形成システム１は、画像形成装置１０の遠隔操作を行う遠隔操作システムなどとも表現される。

＜１−２．画像形成装置の構成＞
図２は、画像形成装置１０の機能ブロックを示す図である。ここでは、画像形成装置１０として、ＭＦＰ（マルチ・ファンクション・ペリフェラル（Multi-Functional Peripheral））を例示する。図２においては、ＭＦＰ１０の機能ブロックが示されている。

ＭＦＰ１０は、スキャン機能、コピー機能、ファクシミリ機能およびボックス格納機能などを備える装置（複合機とも称する）である。具体的には、ＭＦＰ１０は、図２の機能ブロック図に示すように、画像読取部２、印刷出力部３、通信部４、格納部５、操作部６およびコントローラ９等を備えており、これらの各部を複合的に動作させることによって、各種の機能を実現する。

画像読取部２は、ＭＦＰ１０の所定の位置に載置された原稿を光学的に読み取って（すなわちスキャンして）、当該原稿の画像データ（原稿画像なしいスキャン画像とも称する）を生成する処理部である。この画像読取部２は、スキャン部であるとも称される。

印刷出力部３は、印刷対象に関するデータに基づいて紙などの各種の媒体に画像を印刷出力する出力部である。

通信部４は、公衆回線等を介したファクシミリ通信を行うことが可能な処理部である。さらに、通信部４は、ネットワークＮＷを介したネットワーク通信を行うことも可能である。このネットワーク通信では、たとえば、ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）等の各種のプロトコルが利用される。当該ネットワーク通信を利用することによって、ＭＦＰ１０は、所望の相手先（たとえば、外部端末５０）との間で各種のデータを授受することが可能である。通信部４は、各種データを送信する送信部４ａと各種データを受信する受信部４ｂとを有する。

格納部５は、ハードディスクドライブ（ＨＤＤ）等の記憶装置で構成される。格納部５は、各操作画面の画像データ等を記憶する。

操作部６は、ＭＦＰ１０に対する操作入力を受け付ける操作入力部６ａと、各種情報の表示出力を行う表示部６ｂとを備えている。

このＭＦＰ１０においては、略板状の操作パネル部６ｃ（図１参照）が設けられている。また、操作パネル部６ｃは、その正面側にタッチパネル２５（図１参照）を有している。タッチパネル２５は、操作入力部６ａの一部としても機能するとともに、表示部６ｂの一部としても機能する。タッチパネル２５は、液晶表示パネルに各種センサ等が埋め込まれて構成され、各種情報を表示するとともに操作者からの各種の操作入力を受け付けることが可能である。

たとえば、タッチパネル２５においては、メニュー画像（ボタン画像等を含む）が表示される。操作者は、タッチパネル２５内に仮想的に配置されるボタン（ボタン画像で表現されるボタン）を押下することによって、画像形成装置１０の各種動作内容を設定することなどが可能である。

なお、後述するように、外部端末５０のタッチパネル７５（図１参照）においては、画像形成装置１０のタッチパネル２５に表示される操作画面と同様の画面が表示される。外部端末５０のタッチパネル７５に表示された操作画面を用いることにより、画像形成装置１０のタッチパネル２５に表示された操作画面を用いる操作と同様の操作が実現される。

コントローラ９は、ＭＦＰ１０に内蔵され、ＭＦＰ１０を統括的に制御する制御装置である。コントローラ９は、ＣＰＵおよび各種の半導体メモリ（ＲＡＭおよびＲＯＭ）等を備えるコンピュータシステムとして構成される。コントローラ９は、ＣＰＵにおいて、ＲＯＭ（例えば、ＥＥＰＲＯＭ）内に格納されている所定のソフトウエアプログラム（以下、単にプログラムとも称する）ＰＧ１を実行することによって、各種の処理部を実現する。なお、当該プログラム（詳細にはプログラムモジュール群）ＰＧ１は、ＵＳＢメモリなどの可搬性の記録媒体、あるいはネットワークＮＷ等を介してＭＦＰ１０にインストールされてもよい。

具体的には、図２に示すように、コントローラ９は、プログラムＰＧ１の実行により、通信制御部１１と入力制御部１２と表示制御部１３と画面遷移制御部１４とを含む各種の処理部を実現する。

通信制御部１１は、他の装置（外部端末５０等）との間の通信動作を制御する処理部である。たとえば、通信制御部１１は、通信部４等と協働して、外部端末５０における遠隔操作画面（単に操作画面とも称する）ＭＳ（図５参照）の表示用画像（詳細にはそのデータ）等を外部端末５０に送信する。

入力制御部１２は、操作入力部６ａ（タッチパネル２５等）に対する操作入力動作を制御する制御部である。たとえば、入力制御部１２は、操作画面ＭＳ（ＳＰ）に対する操作入力を受け付ける動作を制御する。

表示制御部１３は、表示部６ｂ（タッチパネル２５等）における表示動作を制御する処理部である。表示制御部１３は、画像形成装置１０を操作するための操作画面ＭＳ（ＳＰ）等をタッチパネル２５に表示させる。

画面遷移制御部１４は、操作画面に関する画面遷移を制御する制御部である。画面遷移制御部１４は、タッチパネル２５の操作画面のみならず、タッチパネル７５における操作画面に関する画面遷移を制御する。たとえば、外部端末５０から送信されてきた操作位置情報（操作入力位置の座標値等）に基づいて、外部端末５０における操作入力の内容を判定し、当該操作入力の内容に基づく遷移先の画面等を決定する。

＜１−３．外部端末の構成＞
次に外部端末（遠隔操作装置とも称する）５０の構成について説明する。

外部端末５０は、他の装置との間でのネットワーク通信が可能な携帯式の情報入出力端末装置である。ここでは、外部端末５０として、タブレット型端末を例示する。ただし、これに限定されず、外部端末５０は、スマートフォンであってもよく、パーソナルコンピュータなどであってもよい。また、外部端末５０は、携帯式の装置であってもよく、据置型の装置であってもよい。

図３は、外部端末５０の概略構成を示す機能ブロック図である。

外部端末５０は、図３の機能ブロック図に示すように、通信部５４、格納部５５、操作部５６およびコントローラ５９等を備えており、これらの各部を複合的に動作させることによって、各種の機能を実現する。

通信部５４は、ネットワークＮＷを介したネットワーク通信を行うことが可能である。このネットワーク通信では、たとえば、ＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）等の各種のプロトコルが利用される。当該ネットワーク通信を利用することによって、外部端末５０は、所望の相手先（画像形成装置１０等）との間で各種のデータを授受することが可能である。通信部５４は、各種データを送信する送信部５４ａと各種データを受信する受信部５４ｂとを有する。たとえば、受信部５４ｂは、操作画面（遠隔操作用の操作画面）ＭＳの表示用画像（詳細にはその画像データ）等をＭＦＰ１０から受信し、送信部５４ａは、タッチパネル７５に表示された操作画面ＭＳに対する操作入力の情報（タッチ座標情報等）をＭＦＰ１０に送信する。

格納部５５は、不揮発性の半導体メモリ等の記憶装置で構成される。格納部５５には、ＭＦＰ１０から送信されてきた各種の画像データが一時的に格納される。たとえば、操作画面ＭＳの表示用画像の画像データ等が一時的に格納される。

操作部５６は、外部端末５０に対する操作入力を受け付ける操作入力部５６ａと、各種情報の表示出力を行う表示部５６ｂとを備えている。この外部端末５０においては、液晶表示パネルに各種センサ等が埋め込まれて構成されたタッチパネル７５（図１参照）が設けられている。具体的には、図１に示すように、略板状の外部端末５０の正面側において、その周縁部（枠部）を除くほぼ全面にわたってタッチパネル７５が設けられている。このタッチパネル７５は、操作入力部５６ａの一部としても機能するとともに、表示部５６ｂの一部としても機能する。

タッチパネル７５には、タッチパネル２５の操作画面と同様の操作画面が遠隔操作画面ＭＳ（ＭＦＰ１０を遠隔操作するための画面）として表示される。また、タッチパネル７５は、当該遠隔操作画面ＭＳ等に対するタッチジェスチャ操作（タッチ操作とも称する）を受け付ける。

図３のコントローラ５９は、外部端末５０に内蔵され、外部端末５０を統括的に制御する制御装置である。コントローラ５９は、ＣＰＵおよび各種の半導体メモリ（ＲＡＭおよびＲＯＭ）等を備えるコンピュータシステムとして構成される。コントローラ５９は、ＣＰＵにおいて、記憶部（半導体メモリ等）内に格納されている所定のソフトウエアプログラム（以下、単にプログラムとも称する）を実行することによって、各種の処理部を実現する。なお、当該プログラムは、ＵＳＢメモリなどの可搬性の記録媒体、あるいはネットワークＮＷ等を介して外部端末５０にインストールされるようにしてもよい。

外部端末５０には、アプリケーションソフトウエアプログラムの１つとして、手書き文字入力用のインプットメソッドエディタ（ＩＭＥ：Input Method Editor）（以下、手書き入力ＩＭＥなどとも称する）がインストールされている。当該手書き入力ＩＭＥは、操作ユーザによる手書き文字の操作入力を受け付け、手書きで入力された文字を認識する処理等を行う。

また、外部端末５０には、遠隔操作用のプログラムＰＧ２もインストールされている。当該プログラムＰＧ２は、画像形成装置１０を遠隔操作するアプリケーションソフトウエアプログラムであり、遠隔操作に関する諸機能等を実現する。

具体的には、コントローラ５９は、プログラムＰＧ２の実行により、通信制御部６１と入力制御部６２と表示制御部６３とＩＭＥ制御部６４と座標変換部６５とを含む各種の処理部を実現する。

通信制御部６１は、通信部５４等と協働して、画像形成装置１０等との通信動作を制御する処理部である。たとえば、通信制御部６１は、通信部５４等と協働して、外部端末５０における操作画面ＭＳ，ＫＳ（図４および図５参照）の表示用画像等を受信する。

入力制御部６２は、操作入力部５６ａ（タッチパネル７５等）に対する操作入力動作を制御する制御部である。たとえば、入力制御部６２は、操作画面ＭＳ，ＫＳ等に対するタッチ操作入力を受け付ける動作を制御する。

座標変換部６５は、タッチパネル７５における操作入力位置の座標値を、外部端末５０のタッチパネル７５における座標系の値から、画像形成装置１０のタッチパネル２５における座標系の値へと変換する処理部である。なお、変換後の座標値は、操作入力の操作位置を示す位置情報（操作位置情報）ＭＰとして、通信制御部６１等によって画像形成装置１０に送信される。

表示制御部６３は、表示部５６ｂ（タッチパネル７５等）における表示動作を制御する処理部である。表示制御部６３は、画像形成装置１０を遠隔操作するための操作画面ＭＳ（ＳＥ）等をタッチパネル７５に表示させる。

表示制御部６３は、ＩＭＥ制御部６４を有している。ＩＭＥ制御部６４は、外部端末５０にインストールされた手書き入力ＩＭＥの動作を制御する。ＩＭＥ制御部６４は、タッチパネル７５における手書き入力画面ＨＳの表示の有無等を制御する。具体的には、ＩＭＥ制御部６４は、キーボード画面ＫＳとともに手書き入力画面ＨＳを表示する動作（次述）等を制御する。

＜１−４．操作画面＞
この画像形成システム１においては、画像形成装置１０のタッチパネル２５に操作画面ＭＳ（ＳＰとも称する）（不図示）が表示されるとともに、外部端末５０のタッチパネル７５に操作画面ＭＳ（ＳＥとも称する）（図４参照）が表示される。タッチパネル７５にに表示された操作画面ＳＥは、外観上、タッチパネル２５に表示された操作画面ＳＰと同様の画面である。

外部端末５０の操作画面ＭＳ（ＳＥ）は、基本的には、画像形成装置１０のタッチパネル２５における操作画面ＭＳ（ＳＰ）を模した模擬画像の画像データ（模擬画像データとも称する）に基づいて表示される。模擬画像データは、たとえばビットマップ画像として構成される。

ここでは、操作画面ＭＳとして、電子メールの送信画面（メール送信画面とも称する）（図４）を例示する。

図４は、メール送信画面ＭＳを示す図である。メール送信画面ＭＳは、文書名欄ＤＮ、件名欄ＴＮ、および本文欄ＣＮ等を備える。

文書名欄ＤＮ、件名欄ＴＮ、および本文欄ＣＮに対しては、次のようにして文字入力操作が行われる。

まず、文書名欄ＤＮ自体（あるいは、文書名欄ＤＮの右横に配置されたキーボード呼出ボタンＢＮ１）が押下されると、ソフトウエアキーボード画面ＫＳ（図５参照）が表示される。

このソフトウエアキーボード画面（キーボード画面とも称する）ＫＳは、各文字に対応する複数の文字ボタン（文字キー）を有している。操作ユーザは、当該複数の文字ボタンを用いて、文字入力操作を行うことが可能である。

ただし、この実施形態では、キーボード画面ＫＳの画像データが外部端末５０によって受信される場合、当該画像データに基づきキーボード画面ＫＳが表示されるとともに、当該キーボード画面ＫＳの表示直後に手書き入力ＩＭＥが起動される。

具体的には、キーボード画面ＫＳの表示時点（表示開始時点）から所定の遅延時間Δｔ（たとえば、１００ｍｓ（ミリ秒））が経過した時点で、手書き入力ＩＭＥの入力画面（手書き入力画面とも称する）ＨＳ（図６参照）がキーボード画面ＫＳに重畳して表示される。換言すれば、キーボード画面ＫＳが表示された直後に、微少時間Δｔ遅れて手書き入力画面ＨＳがキーボード画面ＫＳにおいて表示される。より詳細には、キーボード画面ＫＳの表示直後において、手書き入力画面ＨＳがキーボード画面ＫＳの下端側から迫り上がるような動画的態様で、手書き入力画面ＨＳがタッチパネル７５に表示される。手書き入力画面ＨＳは、最終的には図６に示すような状態で表示される。

このとき、手書き入力画面ＨＳの高さｙ１は、キーボード画面ＫＳの高さｙ２よりも小さくなるように（たとえば、高さｙ１は、高さｙ２の５０％〜８０％程度の値となるように）決定され、キーボード画面ＫＳの一部分（ここでは下側部分）においてのみ手書き入力画面ＨＳが表示される。これにより、手書き入力画面ＨＳによって隠されていない部分（キーボード画面において手書き入力画面が重畳されていない部分（非重畳部分））がキーボード画面ＫＳにおいて発生する。

また、キーボード画面ＫＳ内の入力文字表示欄ＤＦは、手書き入力画面ＨＳによる文字入力操作（次述）においても用いられるので、手書き入力画面ＨＳは、当該入力文字表示欄ＤＦを隠さないように（換言すれば、入力文字表示欄ＤＦに重ならないように）表示される。具体的には、手書き入力画面ＨＳの高さｙ１は、入力文字表示欄ＤＦの下端側位置ｙ３よりも小さくなるように決定される。

このようにして、キーボード画面ＫＳと手書き入力画面ＨＳとが組み合わせられた状態で表示される。この状態においては、キーボード画面ＫＳは無効化され、手書き入力画面ＨＳが有効化されている。

そして、このような表示状態において、手書き入力画面ＨＳを用いて文字入力が行われる。すなわち、ユーザは、外部端末５０に予めインストールされた手書き入力ＩＭＥを用いて、画像形成装置１０の操作画面に対する操作入力を行うことができる。

具体的には、文字を表す線が操作者の手指により手書き入力画面ＨＳ内の手書き入力領域ＷＤに描かれると、手書き入力ＩＭＥは、手指の操作軌跡等に基づいて文字認識処理を行い、当該文字認識処理の処理結果に基づく変換候補（入力候補）を変換候補欄ＣＡに表示する。操作者が当該変換候補欄ＣＡから所望の選択肢（たとえば「上」）を選択すると、選択された文字列がキーボード画面ＫＳの入力文字表示欄ＤＦに表示される。また、当該選択された文字列は、入力文字表示欄ＤＦに表示されるとともに、画像形成装置１０にも通知される。これによって、画像形成装置１０は、手書き入力ＩＭＥを用いた操作入力内容をも知得し、外部端末５０の入力文字表示欄ＤＦにおける表示内容と同一の内容を操作者による入力内容として認識する。

また、操作者は、手書き入力ＩＭＥではなく元来のキーボード画面ＫＳを用いた操作入力を行うことを選択することも可能である。具体的には、タッチパネル７５のキーボード画面ＫＳ内において手書き入力画面ＨＳによって隠されていない部分（キーボード画面ＫＳにおける手書き入力画面ＨＳの非重畳部分）（たとえば位置ＰＴ）を操作者が押下すると、今度はキーボード画面ＫＳが有効化される。より詳細には、当該位置ＰＴに対する押下操作に応答して、外部端末５０は、手書き入力画面ＨＳを無効化且つ非表示化して、元のキーボード画面ＫＳのみをタッチパネル７５に表示する（図５参照）。そして、キーボード画面ＫＳを用いた通常の文字入力操作が受け付けられる。

このような態様によれば、キーボード画面ＫＳの画像データが受信される場合に、タッチパネル７５に手書き入力画面ＨＳが表示されるので、外部端末５０の操作者は、手書き入力画面ＨＳを用いた比較的簡易な文字入力操作（遠隔操作）を行うことが可能である。換言すれば、外部端末５０において、キーボード画面ＫＳを用いた文字入力手法とは別の文字入力手法（具体的には、手書き入力ＩＭＥによる手書き入力画面ＨＳを用いた文字入力手法）を容易に利用することが可能である。換言すれば、遠隔操作装置における文字入力手法に多様性を持たせることが可能である。

また、タッチパネル７５において、手書き入力画面ＨＳのみが表示されるのではなく、キーボード画面ＫＳと手書き入力画面ＨＳとが組み合わせられた状態で共に表示されている。より詳細には、手書き入力画面ＨＳがキーボード画面ＫＳの主に下側部分において部分的に重畳し、キーボード画面ＫＳが手書き入力画面ＨＳの背後に隠れつつも部分的に露出した状態で表示されている。したがって、手書き入力画面ＨＳのみならずキーボード画面ＫＳの存在も示唆されており、キーボード画面ＫＳを用いた文字入力操作をも行い得ることを操作者が容易に知得できる。

そして、タッチパネル７５のキーボード画面ＫＳ内において、手書き入力画面ＨＳによって隠されていない部分（たとえば位置ＰＴ）を操作者が押下すると、今度は手書き入力画面ＨＳが無効化（非表示化）されキーボード画面ＫＳが有効化される。このような状態遷移（キーボード画面ＫＳが有効化された状態への遷移）が行われると、操作者は、キーボード画面ＫＳを用いた文字入力操作を実際に行うことが可能である。

なお、ここでは、主に位置ＰＴに対する押下操作（操作画面に関する切換指示操作）に応じて、手書き入力画面ＨＳが無効化（非表示化）されキーボード画面ＫＳが有効化される態様が例示されているが、これに限定されない。たとえば、その他の操作（切換指示操作）に応じて、手書き入力画面ＨＳが無効化（非表示化）されキーボード画面ＫＳが有効化されるようにしてもよい。他の当該切替指示操作としては、手書き入力画面ＨＳ内に設けられた「閉じる」ボタンＢＣ（図１１参照）の押下操作、あるいは、キーボード画面ＫＳ内（且つ非重畳部分内）に設けられた手書き入力無効化ボタンＢＳ（図１１参照）の押下操作などがさらに例示される。具体的には、図６の画面に代えて図１１の画面が表示され、図１１に示すボタンＢＣ（あるいはボタンＢＳ）が当該切替指示操作に用いられるようにしてもよい。

＜１−５．動作＞
つぎに、この画像形成システム１における動作について図７を参照しながら説明する。図７は、画像形成装置１０および外部端末５０の動作を示す図である。

まず、操作者の操作に応じて、画像形成装置１０（送信部４ａ）は、操作画面ＭＳ（図４）の画像データ（操作画面データとも称する）を外部端末５０に送信する（ステップＳ１１）。

外部端末５０（表示制御部６３）は、受信した操作画面データに基づき、操作画面ＭＳをタッチパネル７５に表示する（ステップＳ１２）。

その後、タッチパネル７５に表示された操作画面ＭＳ内の文書名欄ＤＮを操作者が押下する（ステップＳ１３）と、外部端末５０（通信制御部１１等）は、当該操作者の操作入力に係る位置情報ＭＰ（詳細には、押下位置の座標位置情報等）を画像形成装置１０に送信する（ステップＳ１４）。

画像形成装置１０（受信部４ｂおよび画面遷移制御部１４）は、当該位置情報ＭＰを受信すると、当該位置情報ＭＰに基づいて、操作者による押下位置が文書名欄ＤＮ内の位置であり且つ操作者からの操作入力がソフトウエアキーボードの表示指示である旨を判定し、次の遷移画面としてキーボード画面ＫＳを表示することを決定する（ステップＳ１５）。

そして、当該決定に応じて、画像形成装置１０（画面遷移制御部１４）は、キーボード画面ＫＳに関する画像データと手書き入力ＩＭＥの起動指令データとを外部端末５０に送信する（ステップＳ１６）。キーボード画面ＫＳに関するデータは、キーボード画面ＫＳを新たな操作画面として表示するための画像データと、キーボード画面ＫＳに含まれる入力文字表示欄ＤＦに関するデータ（入力文字表示欄ＤＦの位置および大きさ、ならびに入力文字表示欄ＤＦ内の文字に関する情報（初期値）等）とを含む。また、起動指令に関するデータは、外部端末５０にインストールされている手書き入力ＩＭＥを起動すべき旨の起動指令（自体）を示すデータ（起動指令データ）と上述の遅延時間Δｔを示すデータとを含む。

その後、外部端末５０（表示制御部６３）は、受信した画像データに基づきキーボード画面ＫＳ（図５参照）を表示する（ステップＳ１７）。さらに、外部端末５０は、キーボード画面ＫＳの表示開始に応じて、手書き入力ＩＭＥを起動する（ステップＳ１８）。より詳細には、キーボード画面ＫＳの表示開始の直後であって遅延期間Δｔの後に手書き入力ＩＭＥに係る入力画面ＨＳがタッチパネル７５に表示される。具体的には、外部端末５０（表示制御部６３およびＩＭＥ制御部６４）は、手書き入力ＩＭＥの起動指令を示すデータと上述の遅延時間Δｔを示すデータとに基づき、手書き入力ＩＭＥを適宜のタイミングで起動し、キーボード画面ＫＳの表示開始時点から当該遅延時間Δｔ後に、手書き文字入力ＩＭＥに係る入力画面ＨＳ（図６参照）をキーボード画面ＫＳの一部に重畳して表示する（ステップＳ１８）。

上述のように、文字を表す線が操作者の手指により手書き入力画面ＨＳの手書き入力領域ＷＤに描かれると、手書き入力ＩＭＥは、当該操作軌跡等に基づいて文字認識処理を行い、当該文字認識処理の処理結果に基づく変換候補（入力候補）を変換候補欄ＣＡ（図６）に表示する。操作者が当該変換候補欄ＣＡから所望の選択肢（たとえば「上」）を選択すると、選択された文字列がキーボード画面ＫＳの入力文字表示欄ＤＦに表示される。また、当該選択された文字列（詳細には各文字の文字コード）は、画像形成装置１０にも送信される（ステップＳ１９）。画像形成装置１０は、当該文字列に関する情報を受信することにより、手書き入力ＩＭＥを用いた操作入力内容をも知得し、外部端末５０の入力文字表示欄ＤＦにおける表示内容と同一の内容を操作者による入力内容として認識する。また、当該文字列の文字コード群は、当該文字列を構成する各文字の入力文字表示欄ＤＦ内での位置などとともに、画像形成装置１０に送信されることが好ましい。

また、タッチパネル７５のキーボード画面ＫＳ内において、手書き入力画面ＨＳによって隠されていない部分（たとえば位置ＰＴ）を操作者が押下すると、手書き入力画面ＨＳが無効化（非表示化）されキーボード画面ＫＳが有効化される。この状態へ遷移すると、操作者は、キーボード画面ＫＳを用いた文字入力操作を実際に行うことが可能である。

具体的には、図８のフローチャートに示すように、操作者が位置ＰＴを押下して手書き入力画面ＨＳの終了指示が外部端末５０に対して付与される（ステップＳ３１）と、外部端末５０（通信制御部１１等）は、当該操作者の操作入力に係る位置情報ＭＰ（詳細には、位置ＰＴの座標位置情報等）を画像形成装置１０に送信する。

画像形成装置１０（受信部４ｂおよび画面遷移制御部１４）は、押下位置ＰＴの位置情報ＭＰ（座標値）を受信すると、手書き入力画面ＨＳの無効化指示（非表示化指示）が操作者から外部端末５０に対して付与された旨を判定する（ステップＳ３２）。また、画像形成装置１０（送信部４ａおよび画面遷移制御部１４）は、手書き入力画面ＨＳの無効化指令（非表示化指令）を外部端末５０に通知（送信）する（ステップＳ３３）。なお、手書き入力画面ＨＳの無効化指令（非表示化指令）は、キーボード画面ＫＳの有効化指令（表示化指令）でもある。

当該無効化指令（非表示化指令）に応じて、外部端末５０（表示制御部６３）は、手書き入力画面ＨＳを非表示化し且つキーボード画面ＫＳのみをタッチパネル７５に表示する（図５参照）とともに、当該キーボード画面ＫＳを有効化され且つ手書き入力画面ＨＳを無効化する（ステップＳ３４）。

このような表示状態においては、操作者は、キーボード画面ＫＳを用いた文字入力操作を行うことが可能である。

具体的には、操作者から各文字ボタンの押下操作が受け付けられる（ステップＳ３５）と、当該押下操作に応じて、外部端末５０（通信制御部１１等）は、当該操作者の操作入力に係る位置情報ＭＰ（詳細には、押下位置の座標位置情報等）を画像形成装置１０に送信する（ステップＳ３６）。画像形成装置１０（受信部４ｂおよび画面遷移制御部１４）は、押下位置の位置情報ＭＰを受信すると、当該位置情報ＭＰ（座標値）に対応する文字（たとえば「ａ」）が入力された旨を当該位置情報ＭＰに基づいて判定する（ステップＳ３７）。そして、画像形成装置１０（送信部４ａおよび画面遷移制御部１４）は、入力文字表示欄ＤＦに当該文字「ａ」を追加すべき旨を外部端末５０に通知（送信）する（ステップＳ３８）。当該通知に応じて、外部端末５０（表示制御部６３）は、キーボード画面ＫＳの入力文字表示欄ＤＦに当該文字を追加的に（重畳して）表示する（ステップＳ３９）。このようにして、操作者は、キーボード画面ＫＳを用いた文字入力操作を実際に行うことが可能である。

なお、ここでは、操作入力に係る文字「ａ」を追加すべき旨の情報が画像形成装置１０から外部端末５０に通知され、外部端末５０上にて当該文字「ａ」がキーボード画面ＫＳに重畳表示されているが、これに限定されない。たとえば、操作入力に係る文字「ａ」を追加したキーボード画面ＫＳの更新画像の画像データが画像形成装置１０から外部端末５０に送信され、当該更新画像の画像データに基づいて、当該更新画像が外部端末５０上に表示されるようにしてもよい。

また、上記第１実施形態では、キーボード画面ＫＳが表示された直後に、微少時間遅れて手書き入力画面ＨＳが表示される態様が例示されているが、これに限定されない。たとえば、キーボード画面ＫＳの表示と同時に手書き入力画面ＨＳがキーボード画面ＫＳの一部に重畳して表示されるようにしてもよい。より詳細には、上記の遅延時間Δｔが０ｍｓ（ミリ秒）に設定されること等により、手書き入力画面ＨＳとキーボード画面ＫＳとが同時に表示されるようにしてもよい。あるいは、手書き入力画面ＨＳの全体がキーボード画面ＫＳに重畳されて予め生成された合成画像が（瞬時に）表示されるようにしてもよい。

また、上記第１実施形態においては、キーボード画面ＫＳを示す画像データとともに手書き入力ＩＭＥの起動指令を示すデータ（起動指令データ）が画像形成装置１０から外部端末５０に送信され（ステップＳ１６等）、外部端末５０は、起動指令データに基づいて、手書き入力ＩＭＥを起動している（ステップＳ１８等）が、これに限定されない。

たとえば、外部端末５０は、表示対象の画像ＩＤを画像形成装置１０から受信するとともに、手書き入力ＩＭＥを起動すべき画像ＩＤが列挙されたリストＬＴに基づいて、手書き入力ＩＭＥを起動すべきか否かを決定するようにしてもよい。より詳細には、外部端末５０は、手書き入力ＩＭＥを起動すべき１または複数の画像ＩＤが列挙されたリストＬＴに関する情報を、その格納部５５内に予め格納しておく。そして、外部端末５０は、表示対象画像であるキーボード画面ＫＳの画像識別子（画像ＩＤ）をキーボード画面ＫＳの画像データとともに画像形成装置１０から受信すると、リストＬＴに列挙された複数の画像ＩＤの中に画像形成装置１０から受信した画像ＩＤ（キーボード画面ＫＳの画像ＩＤ）が含まれるか否かを判定する。外部端末５０は、リストＬＴに列挙された複数の画像ＩＤの中に、画像形成装置１０から受信した画像ＩＤ（たとえば、キーボード画面ＫＳを示す画像ＩＤ）が含まれることを条件として、上記と同様に手書き入力ＩＭＥを起動する（図６参照）。このように、手書き入力ＩＭＥを起動するか否かを外部端末５０が決定するようにしてもよい。

＜２．第２実施形態＞
上記第１実施形態においては、キーボード画面ＫＳの画像データの受信に応じて、キーボード画面ＫＳが表示されるとともに自動的に手書き入力画面ＨＳも表示される態様が例示されているが、これに限定されない。たとえば、キーボード画面ＫＳの画像データが受信された場合において、操作者による更なる操作に応じて手書き入力画面ＨＳが表示されるようにしてもよい。

具体的には、外部端末５０は、キーボード画面ＫＳの画像データの受信に応じて、（手書き入力画面ＨＳを表示することなく）キーボード画面ＫＳのみをタッチパネル７５に一旦表示する。その後、当該キーボード画面ＫＳ内に設けられた所定のボタン（たとえば「手書き入力」ボタンＢＮ９（図９参照））を操作者が押下すると、手書き入力画面ＨＳ（図６参照）がタッチパネル７５に表示され、当該手書き入力画面ＨＳを用いて文字入力操作が行われるようにしてもよい。第２実施形態においては、このような態様について説明する。

図１０は、第２実施形態に係る動作を示す図である。

ステップＳ１１〜Ｓ１７までは第１実施形態と同様の動作が行われる。ただし、この第２実施形態では、ステップＳ１７の次にはステップＳ１８ではなくステップＳ２１の動作が行われる。また、この第２実施形態に係るキーボード画面ＫＳにおいては、「手書き入力」ボタンＢＮ９（図９参照）が設けられている。操作者は、当該「手書き入力」ボタンＢＮ９を押下することによって、手書き入力ＩＭＥを用いた文字入力操作を選択することができる。

キーボード画面ＫＳ（図９）の表示状態（ステップＳ１７）において「手書き入力」ボタンＢＮ９の押下が受け付けられると、外部端末５０（通信制御部１１等）は、押下位置の位置情報ＭＰ等を画像形成装置１０に送信する（ステップＳ２１）。

画像形成装置１０（受信部４ｂおよび画面遷移制御部１４）は、当該位置情報ＭＰを受信すると、操作者による操作入力が「手書き入力」ボタンＢＮ９の押下操作である旨を当該位置情報ＭＰに基づいて判定し、手書き入力画面ＨＳをタッチパネル７５に表示することを決定する（ステップＳ２２）。

具体的には、ステップＳ２３では、画像形成装置１０（画面遷移制御部１４）は、手書き入力ＩＭＥの起動指令データを外部端末５０に送信する。

一方、外部端末５０は当該起動指令データを受信すると、ステップＳ２４の処理を行う。具体的には、外部端末５０（表示制御部６３およびＩＭＥ制御部６４）は、手書き入力ＩＭＥの起動指令を示すデータに基づいて手書き入力ＩＭＥを起動し、手書き文字入力ＩＭＥに係る入力画面ＨＳ（図６参照）をキーボード画面ＫＳに重畳して表示する（ステップＳ２４）。

このようにして、「手書き入力」ボタンＢＮ９（図９参照）の押下後に、手書き入力画面ＨＳ（図６参照）がタッチパネル７５に表示される。

その後、第１実施形態と同様の動作が行われる。

なお、この第２実施形態では、手書き入力ボタンＢＮ９の押下に応じて、画像形成装置１０へ当該押下位置の位置情報が画像形成装置１０に送信され、当該位置情報に基づいて画像形成装置１０側で生成された起動指令に基づいて、手書き入力ＩＭＥが起動等される態様が例示されている。しかしながら、本発明はこれに限定されない。たとえば、手書き入力ボタンＢＮ９の押下に応じて、外部端末５０側のみで手書き入力画面ＨＳの表示を行うようにしてもよい。

具体的には、キーボード画面ＫＳ（図９）の表示状態（ステップＳ１７）において「手書き入力」ボタンＢＮ９の押下が検出されると、外部端末５０（通信制御部１１等）は、当該押下によって手書き入力画面ＨＳの起動指示が付与された旨を判定し、直ちに手書き入力ＩＭＥを起動して手書き入力画面ＨＳを表示するようにしてもよい。この場合、外部端末５０は、「手書き入力」ボタンＢＮ９に関する情報（位置および大きさ等に関する情報）を画像形成装置１０から予め受信しておく（ステップＳ１６，Ｓ１７）。そして、外部端末５０は、当該「手書き入力」ボタンＢＮ９に関する情報と押下操作位置の位置情報とに基づいて、当該押下によって手書き入力画面ＨＳの起動指示が付与された旨が判定されることを条件として、手書き入力ＩＭＥを起動して手書き入力画面ＨＳを表示すればよい。

＜３．変形例等＞
以上、この発明の実施の形態について説明したが、この発明は上記説明した内容のものに限定されるものではない。

たとえば、上記各実施形態等では、手書き入力画面ＨＳがキーボード画面ＫＳの下側に重畳されて表示されているが、これに限定されない。手書き入力画面ＨＳはキーボード画面ＫＳの右側あるいは左側等に重畳して配置されるようにしてもよい。この場合においても、手書き入力画面ＨＳは、当該入力文字表示欄ＤＦを隠さないように（入力文字表示欄ＤＦに重ならないように）表示されることが好ましい。

また、上記各実施形態等では、手書き入力画面ＨＳがキーボード画面ＫＳの一部に重畳されて表示（重畳的に配置）されているが、これに限定されない。手書き入力画面ＨＳは、キーボード画面ＫＳと並んで配置（並列的に配置）されることによって、キーボード画面ＫＳとともにタッチパネル７５に表示されるようにしてもよい。たとえば、図１２に示すように、キーボード画面ＫＳを縦方向に縮小した画面と上記の手書き入力画面ＨＳとが縦方向に並んで配置されるようにしてもよい。キーボード画面ＫＳを縦方向に縮小した画面に関する画像データは、画像形成装置１０側で予め生成され、画像形成装置１０から外部端末５０に送信されればよい。

また、上記各実施形態等においては、手書き入力画面ＨＳからキーボード画面ＫＳへと戻る態様が例示されている（ステップＳ３１，Ｓ３２）。その後、さらに、キーボード画面ＫＳから手書き入力画面ＨＳへと再び遷移するようにしてもよい。より詳細には、ステップＳ１７において、「手書き入力」ボタンＢＮ９を含むキーボード画面ＫＳ（図９参照）が図５のキーボード画面ＫＳに代えて表示され、当該「手書き入力」ボタンＢＮ９が押下されることに応答して、再び手書き入力画面ＨＳが表示され且つ有効化されるようにしてもよい。これによれば、キーボード画面ＫＳと手書き入力画面ＨＳとの間での往来を容易に行うことが可能である。すなわち、キーボード画面ＫＳと手書き入力画面ＨＳとの間での画面遷移をさらに柔軟に行うことが可能である。

また、上記第１実施形態では、手書き入力画面ＨＳが自動的に表示される態様が例示され、上記第２実施形態では、手書き入力画面ＨＳが操作者のボタン操作に応答して表示される態様が例示されている。手書き入力画面ＨＳの自動表示と手動表示とは、画像形成装置１０における設定内容に応じて選択的に決定されるようにしてもよい。具体的には、両者を切り替える設定画面を画像形成装置１０において設けておき、当該設定画面における設定内容に応じて手書き入力画面ＨＳの自動表示と手動表示とが適宜に切り替えられるようにすればよい。

１画像形成システム
１０ＭＦＰ（画像形成装置）
２５（ＭＦＰの）タッチパネル
５０外部端末（遠隔操作装置）
７５（外部端末の）タッチパネル
ＤＦ入力文字表示欄
ＤＮ文書名欄
ＤＴ模擬画像データ
ＨＳ手書き入力画面
ＫＳキーボード画面
ＭＳメール送信画面（遠隔操作画面）

Claims

画像形成装置を遠隔操作する遠隔操作装置であって、
前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、
キーボード画面を前記操作画面として表示するための画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を備えることを特徴とする遠隔操作装置。
画像形成装置を遠隔操作する遠隔操作装置であって、
前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、
前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子が列挙されたリストを格納する格納手段と、
キーボード画面を前記操作画面として表示するための画像データと前記画像データに関する画像識別子とが前記画像形成装置から受信されたこと、および前記手書き入力アプリケーションを起動すべき旨が前記画像形成装置からの前記画像識別子と前記リスト内の前記１又は複数の画像識別子とに基づいて判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を備えることを特徴とする遠隔操作装置。
画像形成装置を遠隔操作する遠隔操作装置であって、
前記画像形成装置を遠隔操作するための操作画面を表示する表示手段と、
前記操作画面に係る画像データが前記画像形成装置から受信され且つ前記画像形成装置からの前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を備えることを特徴とする遠隔操作装置。
請求項１ないし請求項３のいずれかに記載の遠隔操作装置において、
前記表示制御手段は、前記手書き入力アプリケーションによる前記手書き入力画面を、前記画像データに基づく前記キーボード画面とともに前記表示手段に表示することを特徴とする遠隔操作装置。
請求項４に記載の遠隔操作装置において、
前記表示制御手段は、前記手書き入力画面を前記キーボード画面の一部に重畳して表示することを特徴とする遠隔操作装置。
請求項５に記載の遠隔操作装置において、
前記表示制御手段は、前記キーボード画面において前記手書き入力画面が重畳されていない部分の押下に応じて、前記キーボード画面を有効化することを特徴とする遠隔操作装置。
請求項４に記載の遠隔操作装置において、
前記表示制御手段は、前記手書き入力画面を前記キーボード画面に対して並列的に配置して表示することを特徴とする遠隔操作装置。
請求項４ないし請求項７のいずれかに記載の遠隔操作装置において、
前記表示制御手段は、前記キーボード画面の表示開始に応じて、前記手書き入力アプリケーションを起動することを特徴とする遠隔操作装置。
請求項８に記載の遠隔操作装置において、
前記表示制御手段は、前記キーボード画面の表示開始時点から所定の遅延期間が経過した後に、前記手書き入力画面を表示することを特徴とする遠隔操作装置。
請求項８に記載の遠隔操作装置において、
前記表示制御手段は、前記キーボード画面の表示開始と同時に、前記手書き入力画面を表示することを特徴とする遠隔操作装置。
請求項４ないし請求項１０のいずれかに記載の遠隔操作装置において、
前記表示制御手段は、前記キーボード画面の入力文字表示欄に重ならないように、前記手書き入力画面を表示することを特徴とする遠隔操作装置。
画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、
ａ）キーボード画面を前記遠隔操作装置にて表示するための画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記画像形成装置から受信するステップと、
ｂ）前記キーボード画面に係る前記画像データと前記起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、
を実行させるためのプログラム。
画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、
ａ）キーボード画面を前記遠隔操作装置にて表示するための画像データと前記画像データに関する画像識別子とを前記画像形成装置から受信するステップと、
ｂ）前記画像形成装置から受信された前記画像識別子と前記遠隔操作装置の格納手段に格納されたリストに列挙された１又は複数の画像識別子であって前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子とに基づいて、前記手書き入力アプリケーションを起動すべき旨が前記ステップａ）の後に判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、
を実行させるためのプログラム。
画像形成装置を遠隔操作する遠隔操作装置に内蔵されたコンピュータに、
ａ）前記画像形成装置を遠隔操作するための操作画面を表示するための画像データを前記画像形成装置から受信するステップと、
ｂ）前記画像形成装置から受信された前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記遠隔操作装置の表示手段に表示するステップと、
を実行させるためのプログラム。
請求項１２ないし請求項１４のいずれかに記載のプログラムにおいて、
前記ステップｂ）において、前記キーボード画面に係る前記画像データが前記画像形成装置から受信されると、前記遠隔操作装置にインストールされている手書き入力アプリケーションが起動され、前記手書き入力画面が、前記画像データに基づく前記キーボード画面とともに前記遠隔操作装置の表示手段に表示されることを特徴とするプログラム。
請求項１５に記載のプログラムにおいて、
前記ステップｂ）においては、前記キーボード画面の表示開始に応じて、前記手書き入力アプリケーションが起動されることを特徴とするプログラム。
請求項１６に記載のプログラムにおいて、
前記ステップｂ）においては、前記キーボード画面の表示開始時点から所定の遅延期間が経過した後に、前記手書き入力画面が表示されることを特徴とするプログラム。
請求項１５ないし請求項１７のいずれかに記載のプログラムにおいて、
前記ステップｂ）において、前記手書き入力画面は、前記キーボード画面の一部に重畳して表示されることを特徴とするプログラム。
請求項１５ないし請求項１８のいずれかに記載のプログラムにおいて、
前記ステップｂ）において、前記手書き入力画面は、前記キーボード画面の入力文字表示欄に重ならないように表示されることを特徴とするプログラム。
請求項１８に記載のプログラムにおいて、
前記コンピュータに、
ｃ）前記キーボード画面において前記手書き入力画面が重畳されていない部分の押下に応じて、前記キーボード画面を有効化するステップ、
をさらに実行させることを特徴とするプログラム。
画像形成システムであって、
画像形成装置と、
前記画像形成装置を遠隔操作する遠隔操作装置と、
を備え、
前記画像形成装置は、
前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、
前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記遠隔操作装置に送信する送信手段と、
を有し、
前記遠隔操作装置は、
前記操作画面を表示する表示手段と、
前記キーボード画面を前記操作画面として表示するための前記画像データと前記起動指令データとが前記画像形成装置から受信されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を有することを特徴とする画像形成システム。
画像形成システムであって、
画像形成装置と、
前記画像形成装置を遠隔操作する遠隔操作装置と、
を備え、
前記画像形成装置は、
前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、
前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面を前記操作画面として表示するための画像データと前記画像データに関する画像識別子とを前記遠隔操作装置に送信する送信手段と、
を有し、
前記遠隔操作装置は、
前記操作画面を表示する表示手段と、
前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき１又は複数の画像識別子が列挙されたリストを格納する格納手段と、
前記画像データと前記画像識別子とが前記画像形成装置から受信されたこと、および前記手書き入力アプリケーションを起動すべき旨が前記画像形成装置からの前記画像識別子と前記リスト内の前記１又は複数の画像識別子とに基づいて判定されたことに応じて、前記手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を有することを特徴とする画像形成システム。
画像形成システムであって、
画像形成装置と、
前記画像形成装置を遠隔操作する遠隔操作装置と、
を備え、
前記画像形成装置は、
前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、
前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データを前記操作画面に係る画像データとして前記遠隔操作装置に送信する送信手段と、
を有し、
前記遠隔操作装置は、
前記操作画面を表示する表示手段と、
前記操作画面に係る画像データが前記画像形成装置から受信され且つ前記画像形成装置からの前記画像データに基づく操作画面がキーボード画面であると判定されたことに応じて、前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動し、前記手書き入力アプリケーションに係る入力画面である手書き入力画面を前記表示手段に表示する表示制御手段と、
を有することを特徴とする画像形成システム。
請求項２１ないし請求項２３のいずれかに記載の画像形成システムにおいて、
前記表示制御手段は、前記手書き入力アプリケーションによる前記手書き入力画面を、前記画像データに基づく前記キーボード画面とともに前記表示手段に表示することを特徴とする画像形成システム。
遠隔操作装置による遠隔操作が可能な画像形成装置であって、
前記遠隔操作装置に表示された操作画面に対する操作者からの操作入力に関する位置情報を前記遠隔操作装置から受信する受信手段と、
前記操作入力がソフトウエアキーボードの表示指示である旨が前記位置情報に基づいて判定されると、キーボード画面に係る画像データと前記遠隔操作装置にインストールされている手書き入力アプリケーションを起動すべき旨の起動指令データとを前記遠隔操作装置に送信する送信手段と、
を備えることを特徴とする画像形成装置。