JP2013150273A - Image forming system, image forming apparatus, external terminal, and program - Google Patents
Image forming system, image forming apparatus, external terminal, and program Download PDFInfo
- Publication number
- JP2013150273A JP2013150273A JP2012011433A JP2012011433A JP2013150273A JP 2013150273 A JP2013150273 A JP 2013150273A JP 2012011433 A JP2012011433 A JP 2012011433A JP 2012011433 A JP2012011433 A JP 2012011433A JP 2013150273 A JP2013150273 A JP 2013150273A
- Authority
- JP
- Japan
- Prior art keywords
- information
- image forming
- operation screen
- input
- function
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、MFP(マルチ・ファンクション・ペリフェラル(Multi-Functional Peripheral))などの画像形成装置を備える画像形成システム、およびそれに関連する技術に関する。 The present invention relates to an image forming system including an image forming apparatus such as an MFP (Multi-Functional Peripheral), and a related technology.
画像形成装置を外部端末によって操作する技術が存在する。 There is a technique for operating an image forming apparatus with an external terminal.
たとえば、特許文献1においては、画像形成装置から外部端末へと操作画面データ自体(ビットマップ画像データ等)をそのまま送信して当該操作画面を外部端末の表示部に表示するとともに、当該操作画面内での操作位置情報(押下位置情報等)を送受信して操作画面内における操作入力を受け付ける技術が示されている。いわゆるリモート接続による操作入力技術である。
For example, in
ところで、外部端末の中には、アドレス帳などの種々の機能を有するものが存在する。そして、このような外部端末のアドレス帳などを利用することによれば、操作画面における操作性を向上させることが可能である。 By the way, some external terminals have various functions such as an address book. And by using such an address book of an external terminal, it is possible to improve the operability on the operation screen.
しかしながら、上記のようなリモート接続による操作入力技術においては、外部端末は、操作画面を画像データとして表示しているに過ぎず、外部端末は当該操作画面の部品的な構成を知らない。そのため、外部端末における操作入力において、外部端末側の各種の機能(アドレス帳等)を利用することは困難である。 However, in the operation input technique using the remote connection as described above, the external terminal only displays the operation screen as image data, and the external terminal does not know the component configuration of the operation screen. Therefore, it is difficult to use various functions (such as an address book) on the external terminal side for operation input on the external terminal.
そこで、本発明は、画像形成装置に関する操作において外部端末側の機能を容易に利用することが可能な画像形成システムおよびそれに関連する技術を提供することを課題とする。 SUMMARY An advantage of some aspects of the invention is that it provides an image forming system that can easily use functions on an external terminal side in operations related to an image forming apparatus, and a technology related thereto.
上記課題を解決すべく、請求項1の発明は、画像形成システムであって、画像形成装置と、前記画像形成装置との通信が可能な外部端末と、を備え、前記画像形成装置は、操作画面の情報である操作画面情報を生成する生成手段と、前記操作画面情報を前記外部端末に送信する送信手段と、前記操作画面への入力情報を前記外部端末から受信する受信手段と、を有し、前記外部端末は、前記画像形成装置から送信されてきた前記操作画面情報に基づいて、前記操作画面を表示する操作手段と、前記操作手段に表示される前記操作画面を用いた操作入力に基づく操作入力情報を、前記画像形成装置に送信する通信手段と、を有し、前記操作画面は、入力欄を有し、前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、前記操作手段は、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を受け付けることを特徴とする。
In order to solve the above-mentioned problems, the invention of
請求項2の発明は、請求項1の発明に係る画像形成システムにおいて、前記操作手段は、前記利用対象機能による表示内容を有する部分操作画面を前記操作画面内に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする。 According to a second aspect of the present invention, in the image forming system according to the first aspect of the present invention, the operation means synthesizes and displays a partial operation screen having display contents by the use target function in the operation screen, and An operation input is received.
請求項3の発明は、請求項2の発明に係る画像形成システムにおいて、前記操作画面情報は、前記入力欄の部品画像の情報である部品画像関連情報、をさらに有し、前記部品画像関連情報は、前記部品画像の位置に関する情報を有し、前記操作手段は、前記部品画像関連情報に基づき、前記部分操作画面を前記操作画面内における前記部品画像の近傍位置に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする。 According to a third aspect of the invention, in the image forming system according to the second aspect of the invention, the operation screen information further includes component image related information which is information of a component image in the input field, and the component image related information. Includes information related to the position of the component image, and the operation means synthesizes and displays the partial operation screen at a position near the component image in the operation screen based on the component image related information, and the input field. It is characterized by receiving an operation input for.
請求項4の発明は、請求項3の発明に係る画像形成システムにおいて、前記部品画像関連情報は、前記部品画像のサイズに関する情報をも有し、前記操作手段は、前記部品画像関連情報に基づき前記部分操作画面の大きさを決定し、前記部分操作画面を前記操作画面に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする。 According to a fourth aspect of the present invention, in the image forming system according to the third aspect of the invention, the component image related information also includes information related to a size of the component image, and the operation means is based on the component image related information. The size of the partial operation screen is determined, the partial operation screen is combined and displayed on the operation screen, and an operation input to the input field is received.
請求項5の発明は、請求項2ないし請求項4のいずれかの発明に係る画像形成システムにおいて、前記通信手段は、前記部分操作画面に対する操作入力の操作位置の情報を、前記画像形成装置と共通の座標系表現による位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする。 According to a fifth aspect of the present invention, in the image forming system according to any one of the second to fourth aspects, the communication unit transmits information on an operation position of an operation input to the partial operation screen to the image forming apparatus. The information is converted into position information based on a common coordinate system expression and transmitted to the image forming apparatus.
請求項6の発明は、請求項5の発明に係る画像形成システムにおいて、前記通信手段は、前記利用対象機能を利用して前記入力欄に入力された文字列情報を構成する複数の文字の情報をそれぞれ前記共通の座標系表現による仮想キーボード領域内の対応仮想キーの仮想位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする。 According to a sixth aspect of the present invention, in the image forming system according to the fifth aspect of the invention, the communication means uses information on a plurality of characters constituting the character string information input to the input field using the use target function. Are converted into virtual position information of the corresponding virtual key in the virtual keyboard area by the common coordinate system representation, and transmitted to the image forming apparatus.
請求項7の発明は、請求項1の発明に係る画像形成システムにおいて、前記通信手段は、前記利用対象機能を利用して前記入力欄に入力された文字列情報を構成する複数の文字の情報をそれぞれ仮想キーボード領域内の対応仮想キーの仮想位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする。 A seventh aspect of the present invention is the image forming system according to the first aspect of the present invention, wherein the communication means uses information on a plurality of characters constituting the character string information input to the input field using the use target function. Is converted into virtual position information of the corresponding virtual key in the virtual keyboard area, and transmitted to the image forming apparatus.
請求項8の発明は、請求項2の発明に係る画像形成システムにおいて、前記操作手段は、前記利用対象機能の呼出画像を前記操作手段に表示し、前記操作手段に表示された前記呼出画像に対する操作入力が受け付けられると、前記部分操作画面を含む前記操作画面を表示することを特徴とする。 According to an eighth aspect of the present invention, in the image forming system according to the second aspect of the invention, the operation means displays a call image of the function to be used on the operation means, and corresponds to the call image displayed on the operation means. When an operation input is accepted, the operation screen including the partial operation screen is displayed.
請求項9の発明は、請求項1の発明に係る画像形成システムにおいて、前記利用対象機能は、アドレス帳機能を含むことを特徴とする。 According to a ninth aspect of the invention, in the image forming system according to the first aspect of the invention, the use target function includes an address book function.
請求項10の発明は、請求項1の発明に係る画像形成システムにおいて、前記利用対象機能は、文字入力パネル機能を含むことを特徴とする。 According to a tenth aspect of the present invention, in the image forming system according to the first aspect of the invention, the use target function includes a character input panel function.
請求項11の発明は、請求項1の発明に係る画像形成システムにおいて、前記利用対象機能は、テンキーパネル機能を含むことを特徴とする。 According to an eleventh aspect of the present invention, in the image forming system according to the first aspect of the invention, the use target function includes a numeric keypad function.
請求項12の発明は、画像形成装置であって、操作画面の情報である操作画面情報を生成する生成手段と、前記操作画面情報を外部端末に送信して、前記外部端末の操作手段に前記操作画面を表示させる送信手段と、前記操作画面への入力情報を前記外部端末から受信する受信手段と、を備え、前記操作画面は、入力欄を有し、前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、前記送信手段は、前記種別情報を含む前記操作画面情報を前記外部端末に送信し、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を前記操作手段に受け付けさせることを特徴とする。
The invention according to
請求項13の発明は、画像形成装置の外部端末であって、操作画面の情報である操作画面情報を前記画像形成装置から受信する受信手段と、前記画像形成装置から送信されてきた前記操作画面情報に基づいて、前記操作画面を表示する操作手段と、前記操作画面を用いて入力された操作入力情報を前記画像形成装置に送信する送信手段と、を備え、前記操作画面は、入力欄を有し、前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、前記操作手段は、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を受け付けることを特徴とする。 According to a thirteenth aspect of the present invention, there is provided an external terminal of the image forming apparatus, the receiving unit receiving operation screen information as information of an operation screen from the image forming apparatus, and the operation screen transmitted from the image forming apparatus. Operation means for displaying the operation screen based on information, and transmission means for transmitting operation input information input using the operation screen to the image forming apparatus, wherein the operation screen includes an input field. And the operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field. An operation input to the input field is received using the use target function specified based on the type information.
請求項14の発明は、画像形成装置の外部端末に内蔵されたコンピュータに、a)操作画面の情報である操作画面情報を前記画像形成装置から受信するステップと、b)前記操作画面情報に基づいて、操作画面を表示するステップと、c)前記操作画面を用いて入力された操作入力情報を前記画像形成装置に送信するステップと、を実行させるためのプログラムであって、前記操作画面は、入力欄を有し、前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、前記ステップb)においては、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力が受け付けられることを特徴とする。 According to a fourteenth aspect of the present invention, a) a step of receiving operation screen information, which is information of an operation screen, from the image forming device in a computer built in an external terminal of the image forming device, and b) based on the operation screen information. A step of displaying an operation screen; and c) a step of transmitting operation input information input using the operation screen to the image forming apparatus, the operation screen comprising: The operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field; ), An operation input to the input field is received using the function to be used specified based on the type information.
請求項1ないし請求項11に記載の発明によれば、操作画面情報は、外部端末に設けられた機能であって入力欄に関する操作入力で拡張機能として利用可能な機能(利用対象機能)の種別情報を有し、操作手段は、当該種別情報に基づいて特定された利用対象機能を利用して、入力欄に対する操作入力を受け付けるので、画像形成装置に関する操作において外部端末側の機能を容易に利用することが可能である。 According to the first to eleventh aspects of the present invention, the operation screen information is a function provided in the external terminal and is a type of function (usage target function) that can be used as an extended function by an operation input related to the input field. Since the operation means receives the operation input for the input field using the use target function specified based on the type information, the function on the external terminal side is easily used in the operation related to the image forming apparatus. Is possible.
請求項12に記載の発明によれば、操作画面情報は、外部端末に設けられた機能であって入力欄に関する操作入力で拡張機能として利用可能な機能(利用対象機能)の種別情報を有し、送信手段は、当該種別情報を含む操作画面情報を外部端末に送信し、当該種別情報に基づいて特定された利用対象機能を利用して、入力欄に対する操作入力を操作手段に受け付けさせるので、画像形成装置に関する操作において外部端末側の機能を容易に利用することが可能である。
According to the invention described in
請求項13および請求項14に記載の発明によれば、操作画面情報は、外部端末に設けられた機能であって入力欄に関する操作入力で拡張機能として利用可能な機能(利用対象機能)の種別情報を有し、操作手段は、当該種別情報に基づいて特定された利用対象機能を利用して、入力欄に対する操作入力を受け付けるので、画像形成装置に関する操作において外部端末側の機能を容易に利用することが可能である。
According to the invention described in
以下、本発明の実施形態を図面に基づいて説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
<1.構成>
<1−1.概要>
図1は、画像形成システム1を示す図である。図1に示すように、画像形成システム1は、画像形成装置10と外部端末装置50とを備える。
<1. Configuration>
<1-1. Overview>
FIG. 1 is a diagram illustrating an
画像形成装置10と外部端末装置(単に外部端末とも称する)50とは、ネットワークNWを介して互いに通信可能に接続される。ネットワークNWは、LAN(Local Area Network)およびインターネットなどによって構成される。たとえば、画像形成装置10と外部端末50とはネットワークNW(無線LAN等を含む)を介して無線接続される。
The
外部端末50は、画像形成装置10を操作(遠隔操作)することが可能な装置である。画像形成システム1におけるユーザは、画像形成装置10に対する各種の操作を外部端末50を用いて行うことが可能である。なお、外部端末50は、操作装置(ないし遠隔操作装置)などとも称される。
The
<1−2.画像形成装置10の構成>
図2は、画像形成装置10の機能ブロックを示す図である。ここでは、画像形成装置10として、MFP(マルチ・ファンクション・ペリフェラル(Multi-Functional Peripheral))を例示する。図2においては、MFP10の機能ブロックが示されている。
<1-2. Configuration of
FIG. 2 is a diagram illustrating functional blocks of the
MFP10は、スキャン機能、コピー機能、ファクシミリ機能およびボックス格納機能などを備える装置(複合機とも称する)である。具体的には、MFP10は、図2の機能ブロック図に示すように、画像読取部2、印刷出力部3、通信部4、格納部5、操作部6、およびコントローラ9等を備えており、これらの各部を複合的に動作させることによって、各種の機能を実現する。
The
画像読取部2は、MFP10の所定の位置に載置された原稿を光学的に読み取って(すなわちスキャンして)、当該原稿の画像データ(原稿画像なしいスキャン画像とも称する)を生成する処理部である。この画像読取部2は、スキャン部であるとも称される。
The
印刷出力部3は、印刷対象に関するデータに基づいて紙などの各種の媒体に画像を印刷出力する出力部である。
The
通信部4は、公衆回線等を介したファクシミリ通信を行うことが可能な処理部である。さらに、通信部4は、ネットワークNWを介したネットワーク通信を行うことも可能である。このネットワーク通信では、たとえば、TCP/IP(Transmission Control Protocol / Internet Protocol)等の各種のプロトコルが利用される。当該ネットワーク通信を利用することによって、MFP10は、所望の相手先(たとえば、外部端末50)との間で各種のデータを授受することが可能である。通信部4は、送信部および受信部を有する。
The
格納部5は、ハードディスクドライブ(HDD)等の記憶装置で構成される。格納部5は、印刷ジョブに係るデータ等を記憶する。
The
操作部6は、MFP10に対する入力を受け付ける操作入力部6aと、各種情報の表示出力を行う表示部6bとを備えている。このMFP10においては、液晶表示パネルに圧電センサ等が埋め込まれて構成されたタッチパネル(タッチスクリーンとも称する)25(図1参照)が設けられている。このタッチパネル25は、操作入力部6aの一部としても機能するとともに、表示部6bの一部としても機能する。
The
コントローラ9は、MFP10に内蔵され、MFP10を統括的に制御する制御装置である。コントローラ9は、CPUおよび各種の半導体メモリ(RAMおよびROM)等を備えるコンピュータシステムとして構成される。コントローラ9は、CPUにおいて、ROM(例えば、EEPROM)内に格納されている所定のソフトウエアプログラム(以下、単にプログラムとも称する)PG1を実行することによって、各種の処理部を実現する。なお、当該プログラム(詳細にはプログラムモジュール群)PG1は、USBメモリなどの可搬性の記録媒体、あるいはネットワークNW等を介してMFP10にインストールされてもよい。
The controller 9 is a control device that is built in the
具体的には、図2に示すように、コントローラ9は、プログラムPG1の実行により、通信制御部11とデータ生成部13と表示制御部15と動作制御部17とを含む各種の処理部を実現する。
Specifically, as shown in FIG. 2, the controller 9 realizes various processing units including the
通信制御部11は、他の装置(外部端末50等)との間の通信動作を制御する処理部である。
The
データ生成部13は、タッチパネル25で表示される操作画面の情報である操作画面情報を生成する処理部である。データ生成部13は、タッチパネル75で表示される操作画面の情報である操作画面情報をも生成する。
The
表示制御部15は、画像形成装置10のタッチパネル25における表示内容を制御する処理部である。表示制御部15は、外部端末50のタッチパネル75における表示内容をも制御する。具体的には、表示制御部15は、通信部4および通信制御部11を用いて外部端末50と通信し、外部端末50の表示制御部65等とも協働してタッチパネル75の表示内容を制御する。
The display control unit 15 is a processing unit that controls display contents on the
動作制御部17は、画像形成装置10における印刷出力動作などの各種動作を制御する。動作制御部17は、画像形成装置10自身の操作部6を用いた操作入力、および外部端末50の操作部56を用いた操作入力に基づいて、各種動作を制御する。
The
<1−3.外部端末50の構成>
次に外部端末50の構成について説明する。ここでは、外部端末50として、タブレット型端末(携帯端末)を例示する。ただし、これに限定されず、外部端末50は、スマートフォンであってもよく、パーソナルコンピュータなどであってもよい。また、外部端末50は、携帯式の装置であってもよく、据置型の装置であってもよい。
<1-3. Configuration of
Next, the configuration of the
図3は、外部端末50の概略構成を示す機能ブロック図である。
FIG. 3 is a functional block diagram illustrating a schematic configuration of the
外部端末50は、図3の機能ブロック図に示すように、通信部54、格納部55、操作部56およびコントローラ59等を備えており、これらの各部を複合的に動作させることによって、各種の機能を実現する。
As shown in the functional block diagram of FIG. 3, the
通信部54は、ネットワークNWを介したネットワーク通信を行うことが可能である。このネットワーク通信では、たとえば、TCP/IP(Transmission Control Protocol / Internet Protocol)等の各種のプロトコルが利用される。当該ネットワーク通信を利用することによって、外部端末50は、所望の相手先(画像形成装置10等)との間で各種のデータを授受することが可能である。通信部54は、送信部および受信部を有する。
The
通信部54は、画像形成装置10に関する操作情報等を画像形成装置10との間で授受する。たとえば、通信部54(詳細にはその受信部)は、操作画面情報MSを画像形成装置10から受信する。また、通信部54(詳細にはその送信部)は、外部端末50の操作部56により受け付けられた操作入力情報EMを画像形成装置10へと送信する。
The
格納部55は、不揮発性の半導体メモリ等の記憶装置で構成される。格納部55は、画面データ格納部55cを有する。
The
操作部56は、外部端末50に対する入力を受け付ける操作入力部56aと、各種情報の表示出力を行う表示部56bとを備えている。この外部端末50においては、液晶表示パネルに圧電センサ等が埋め込まれて構成されたタッチパネル(タッチスクリーン)75(図1参照)が設けられている。このタッチパネル75は、操作入力部56aの一部としても機能するとともに、表示部56bの一部としても機能する。
The
後述するように、表示部56b(タッチパネル75)には、画像形成装置10の操作部6に類似する画面を表す画像(図8〜図10等参照)が表示される。
As will be described later, an image (see FIGS. 8 to 10 and the like) representing a screen similar to the
コントローラ59は、外部端末50に内蔵され、外部端末50を統括的に制御する制御装置である。コントローラ59は、CPUおよび各種の半導体メモリ(RAMおよびROM)等を備えるコンピュータシステムとして構成される。コントローラ59は、CPUにおいて、記憶部(半導体メモリ等)内に格納されている所定のソフトウエアプログラム(以下、単にプログラムとも称する)PG2を実行することによって、各種の処理部を実現する。なお、当該プログラムPG2は、USBメモリなどの可搬性の記録媒体、あるいはネットワークNW等を介して外部端末50にインストールされるようにしてもよい。
The
プログラムPG2は、画像形成装置10を操作(遠隔操作)するアプリケーションソフトウエアであり、画像形成装置10の操作に関する諸機能を実現する。
The program PG2 is application software that operates (remotely operates) the
具体的には、図3に示すように、コントローラ59は、プログラムPG2の実行により、通信制御部61と表示制御部65とを含む各種の処理部を実現する。
Specifically, as shown in FIG. 3, the
通信制御部61は、通信部54等と協働して、画像形成装置10等との通信動作を制御する処理部である。
The
表示制御部65は、表示部56b(タッチパネル75等)における表示動作を制御する処理部である。たとえば、表示制御部65は、画像形成装置10を遠隔操作するための操作画面GSを生成し、当該操作画面GSをタッチパネル75に表示する。
The
<1−4.画像形成装置10の操作部の構成>
図7は、画像形成装置10の操作部6(図1参照)の詳細構成を示す正面図である。図7に示すように、操作部6は、その正面側に矩形状のタッチパネル25を有している。タッチパネル25においては、各種のメニュー画像(キー画像等を含む)が表示される。操作者は、タッチパネル25内に仮想的に配置されるキー(キー画像(ボタン画像とも称する)で表現されるソフトウエアキー(ソフトウエアボタンとも称する))を押下することによって、各種の操作入力を画像形成装置10に対して付与し、画像形成装置10の各種動作内容を設定することなどが可能である。なお、タッチパネル25の周囲(ここでは右側および下側)には、電源キー、メニューキー、スタートキーおよびリセットキーなどのハードウエアキー(ハードウエアボタンとも称する)が設けられている。操作者は、これらのハードウエアキーを押下することによっても、各種の操作入力を画像形成装置10に対して付与すること等が可能である。
<1-4. Configuration of Operation Unit of
FIG. 7 is a front view illustrating a detailed configuration of the operation unit 6 (see FIG. 1) of the
<1−5.外部端末50の操作部の構成>
図8は、外部端末50(詳細には操作部56)の詳細構成を示す正面図である。図8に示すように、外部端末50は、その正面に操作部56を備えている。具体的には、略板状の外部端末50の正面側において、その周縁部(枠部)を除くほぼ全面にわたって矩形状のタッチパネル75が設けられている。
<1-5. Configuration of operation unit of
FIG. 8 is a front view showing a detailed configuration of the external terminal 50 (specifically, the operation unit 56). As shown in FIG. 8, the
ここにおいて、図7および図8は、「スキャンtoメール」動作(スキャン動作により生成した電子文書を電子メールに添付し、当該電子メールを送信する動作)における設定画面を示す図である。 Here, FIG. 7 and FIG. 8 are diagrams showing a setting screen in the “scan to mail” operation (operation for attaching an electronic document generated by the scanning operation to the electronic mail and transmitting the electronic mail).
また、図8に示すように、外部端末50が画像形成装置10に通信接続された状態においては、外部端末50の操作部56内のタッチパネル75には、画像形成装置10の操作部6(図7参照)を表す操作画面GS(GS1)が表示される。
As shown in FIG. 8, when the
操作画面GSは、タッチパネル画像GAとハードウエア画像GBと部品画像GPとを備えて構成される。 The operation screen GS includes a touch panel image GA, a hardware image GB, and a component image GP.
タッチパネル画像GA内には、タッチパネル25内の画像と同様に、ソフトウエアキーが設けられている。当該ソフトウエアキーを用いた操作入力が受け付けられると、外部端末50は、操作入力情報EM(詳細には、押下位置情報等)を画像形成装置10に送信する。画像形成装置10は、当該操作入力情報EMを受信すると、当該ソフトウエアキーを用いた操作入力に対応する処理を実行する。具体的には、画像形成装置10は、タッチパネル25内にて押下されたソフトウエアキーを押下位置情報に基づいて特定し、当該ソフトウエアキーの押下に予め割り当てられている処理を実行する。たとえば、画像GA内の送信キーGQ(図10も参照)が押下されると、送信キーGQに対する押下位置の位置情報が外部端末50から画像形成装置10に送信され、画像形成装置10は受信した位置情報に基づいて、送信キーGQに対応する指示(すなわちメール送信指示)が付与されたものと判断して、メール送信処理を実行する。
In the touch panel image GA, software keys are provided as in the image in the
ハードウエア画像GB内には、画像形成装置10の操作部6内のハードウエアキーを模したハードウエアキー画像等が表示される。ハードウエア画像GB内のハードウエアキー画像に対する押下操作が受け付けられると、外部端末50は、操作入力情報EM(詳細には、押下位置情報等)を画像形成装置10に送信する。画像形成装置10は、当該操作入力情報EMを受信すると、当該ハードウエアキー画像を用いた操作入力に対応する処理を実行する。具体的には、画像形成装置10は、タッチパネル25内にて押下されたハードウエアキー画像を押下位置情報に基づいて特定し、当該ハードウエアキー画像の押下に予め割り当てられている処理を実行する。なお、このようなハードウエアキー画像もソフトウエアキーと称される。
In the hardware image GB, a hardware key image or the like imitating a hardware key in the
たとえば、ハードウエア画像GB内のリセットキーGRが押下されると、リセットキーGRに対する押下位置の位置情報が外部端末50から画像形成装置10に送信され、画像形成装置10は、受信した位置情報に基づいて、リセットキーGRに対応する指示(すなわちリセット処理(メール送信の解除指示))が付与されたものとみなして、メール送信の解除処理を実行する。
For example, when the reset key GR in the hardware image GB is pressed, the position information of the pressed position with respect to the reset key GR is transmitted from the
また、操作画面GS内には部品画像GPも配置されている。この部品画像GPについては後述する。 A part image GP is also arranged in the operation screen GS. This component image GP will be described later.
なお、ここでは、操作画面GS内において、部品画像GP以外の領域が2つの画像GA,GBによって主に構成される態様が例示されるが、これに限定されない。部品画像GP以外の領域は、さらに多数の画像によって構成されるようにしてもよく、あるいは、逆に、単一の画像で構成されるようにしてもよい。 Here, although an example in which the region other than the component image GP is mainly configured by the two images GA and GB in the operation screen GS is illustrated, the present invention is not limited to this. The region other than the component image GP may be configured by a larger number of images, or conversely, may be configured by a single image.
<2.動作>
図4は、画像形成システム1の動作を示す図である。図4を参照しながら、画像形成システム1の動作について説明する。
<2. Operation>
FIG. 4 is a diagram illustrating the operation of the
まず、外部端末50にてプログラムPG2が起動される(ステップS1)と、外部端末50から画像形成装置10へと接続要求が送信される。画像形成装置10は、当該接続要求に応じて外部端末50との間で接続処理を実行する(ステップS2)。これにより、画像形成装置10と外部端末50との通信接続が確立される。
First, when the program PG <b> 2 is activated on the external terminal 50 (step S <b> 1), a connection request is transmitted from the
その後、画像形成装置10は、外部端末50のタッチパネル75で表示される操作画面の情報(操作画面情報MS)を生成し、外部端末50へと操作画面情報MSを送信する(ステップS3)。外部端末50は、画像形成装置10から送信されてきた操作画面情報MSに基づいて、操作画面をタッチパネル75に表示する(ステップS4)。
Thereafter, the
そして、操作者がタッチパネル75に表示された操作画面GSを用いて操作入力を行うと、外部端末50は、当該操作入力に基づく操作入力情報EMを画像形成装置10に送信する(ステップS5)。画像形成装置10は、当該操作入力情報EMを受信し、当該操作入力情報EMに応じた処理(次の設定画面への遷移動作等)を実行する(ステップS6)。具体的には、画像形成装置10は、外部端末50のタッチパネル75で表示される次の操作画面の情報(操作画面情報)MSを生成し、外部端末50へと当該操作画面情報MSを送信する。そして、外部端末50は、画像形成装置10から送信されてきた操作画面情報MSに基づいて、操作画面をタッチパネル75に表示する(ステップS7)。
When the operator performs an operation input using the operation screen GS displayed on the
以後、ステップS5〜S7の処理が繰り返し実行される。たとえば、「スキャンtoメール」動作(スキャン動作により生成した電子文書を電子メールに添付し、当該電子メールを送信する動作)における画面遷移においては、或る時点で、図7のような操作画面がタッチパネル25に表示される。また、同時点において、画像形成装置10からの操作画面情報MSに基づき、図8に示すような操作画面GS1がタッチパネル75に表示される。上述したように、図7は、画像形成装置10の操作部6を示す図であり、図8は、外部端末50の操作部56を示す図である。以下では、これらの図に示す操作画面が表示されている状況を中心に説明する。
Thereafter, the processes of steps S5 to S7 are repeatedly executed. For example, in a screen transition in a “scan to mail” operation (an operation to attach an electronic document generated by a scan operation to an electronic mail and send the electronic mail), an operation screen as shown in FIG. Displayed on the
図5および図6は、ステップS5〜S7の動作を示す詳細なフローチャートである。図5は、外部端末50の動作を示すフローチャートであり、図6は、画像形成装置10の動作を示すフローチャートである。以下では、図5および図6を参照しつつ、当該動作について詳細に説明する。
5 and 6 are detailed flowcharts showing the operations of steps S5 to S7. FIG. 5 is a flowchart showing the operation of the
ここでは、操作画面GS1(図8参照)がタッチパネル75に表示されている状況を想定する。
Here, it is assumed that the operation screen GS1 (see FIG. 8) is displayed on the
この操作画面GS1は、タッチパネル画像GA(GA1)とハードウエア画像GB(GB1)と部品画像GP(GP1〜GP5)とを備えて構成される。この操作画面GS1は、ステップS5の処理の直前の処理(ステップS4あるいはステップS7)において受信された操作画面情報MSに基づいてタッチパネル75に表示される。操作画面の情報(操作画面情報)MSは、各画像GA,GB,GPの情報MA,MB,MP(次述)を有して構成される。なお、ここでは、当該操作画面GSは、画像形成装置10の操作部6を模した画面として形成されている。
The operation screen GS1 includes a touch panel image GA (GA1), a hardware image GB (GB1), and a component image GP (GP1 to GP5). The operation screen GS1 is displayed on the
タッチパネル画像GAは、画像形成装置10のタッチパネル25に関する画像(操作用画像)であり、タッチパネル25における表示画像と同様の画像である。図8に示すように、タッチパネル画像GA(GA1)は、タッチパネル75の一部領域(ここではタッチパネル75内の中央部から上部にわたる比較的広範囲の領域)に表示される。タッチパネル画像GA1は、基準座標系(X−Y)(図12参照)における当該タッチパネル画像GA1の位置情報と、当該タッチパネル画像GA1の大きさ情報とを含む情報(タッチパネル画像関連情報)MAに付随して送信される。位置情報は、たとえば、矩形形状を有する画像GA1の左上端の座標位置の情報を含む。また、大きさ情報は、たとえば、矩形形状を有する画像GA1の水平方向長さおよび垂直方向長さの情報を含む。
The touch panel image GA is an image (operation image) related to the
ハードウエア画像GB(GB1)は、操作部6のハードウエア構成を模した画像である。図8のハードウエア画像GB1は、タッチパネル画像GAを除いた部分で構成されている。詳細には、ハードウエア画像GB1は、操作部6のハードウエア構成を模した背景画像(タッチパネル25の周囲の枠部を模した画像等)と操作部6のハードウエアキー(電源キー、スタートキー、ストップキー、リセットキー、メニューキー等)を模したハードウエアキー画像とを有して構成されている。ハードウエア画像GB1は、基準座標系における当該画像GB1の位置情報と、当該画像GB1の大きさ情報とを含む情報(ハードウエア画像関連情報)に付随して送信される。
The hardware image GB (GB1) is an image simulating the hardware configuration of the
また、部品画像(パーツ画像とも称する)GP(GP1〜GP5)は、操作画面GS内の部分画像である。詳細には、部品画像GP1〜GP5は、入力欄に関する部品画像(入力パーツ画像)である。より詳細には、部品画像GP1は、文書名の入力欄に関する矩形状の画像であり、部品画像GP2は、件名の入力欄に関する矩形状の画像である。また、部品画像GP3は、メール送信先の入力欄に関する矩形状の画像であり、部品画像GP4は、メール件名の入力欄に関する矩形状の画像であり、部品画像GP5は、メール本文の入力欄に関する矩形状の画像である。 Further, a part image (also referred to as a part image) GP (GP1 to GP5) is a partial image in the operation screen GS. Specifically, the component images GP1 to GP5 are component images (input parts images) related to the input field. More specifically, the component image GP1 is a rectangular image related to a document name input field, and the component image GP2 is a rectangular image related to a subject name input field. Also, the component image GP3 is a rectangular image related to the mail transmission destination input field, the component image GP4 is a rectangular image related to the mail subject input field, and the component image GP5 is related to the mail text input field. It is a rectangular image.
部品画像GPは、部品画像に関連する情報(部品画像関連情報)MPに付随して送信される。 The component image GP is transmitted along with information (component image related information) MP related to the component image.
図13は、各部品画像GPに関連付けられて画像形成装置10から外部端末50へ送信される部品画像関連情報MPを示す図である。
FIG. 13 is a diagram showing component image related information MP transmitted from the
図13に示すように、各部品画像関連情報MPは、当該部品画像GPの合成先の位置情報(座標情報)と当該部品画像GPの大きさ情報とを有している。位置情報は、たとえば、矩形形状を有する画像GPの左上端の座標位置(X,Y)の情報を含む。また、大きさ情報は、たとえば、矩形形状を有する画像GPの水平方向長さHおよび垂直方向長さVの情報を含む。 As shown in FIG. 13, each component image related information MP includes position information (coordinate information) of the synthesis destination of the component image GP and size information of the component image GP. The position information includes, for example, information on the coordinate position (X, Y) of the upper left corner of the image GP having a rectangular shape. The size information includes, for example, information on the horizontal length H and the vertical length V of the image GP having a rectangular shape.
さらに、各部品画像関連情報MPは、各部品画像GPの「属性情報」と「詳細属性情報」と「拡張機能情報」とを有している。属性情報は、たとえば「文字入力」属性、「呼出キー」属性などの各種の部品属性を示す情報を含む。詳細属性情報は、属性情報に関する詳細属性(下位属性)を示す情報である。たとえば、「文字入力」属性を有する部品画像に関する詳細な属性情報(たとえば、「英数字」、「数字」、「メールアドレス」、「PCアドレス(IPアドレス)」等)が詳細属性情報として記録される。また、拡張機能情報は、外部端末50の所有機能(端末側機能)であってその部品画像を用いた入力欄に関する入力操作にて拡張機能(入力支援機能)として利用可能な機能(利用対象機能とも称する)の種別(機能属性値)を示す情報(種別情報)である。たとえば、外部端末50における既存の入力支援機能(「文字入力パネル」、「テンキーパネル」、「メールアドレス帳」、「PCアドレス帳(IPアドレス帳)」)が、拡張機能情報(種別情報)として記録される。
Further, each component image related information MP includes “attribute information”, “detailed attribute information”, and “extended function information” of each component image GP. The attribute information includes information indicating various component attributes such as a “character input” attribute and a “call key” attribute. The detailed attribute information is information indicating detailed attributes (lower attributes) related to the attribute information. For example, detailed attribute information (for example, “alphanumeric characters”, “numbers”, “email address”, “PC address (IP address)”, etc.) regarding the component image having the “character input” attribute is recorded as the detailed attribute information. The The extended function information is a function (usage target function) that is an owned function (terminal side function) of the
図13に示すように、この操作画面情報MSには、部品画像GP1は「文字入力」属性および「英数字」詳細属性を有し且つ外部端末50における既存の入力支援機能「文字入力パネル」を利用可能である旨、が記述されている。部品画像GP2,GP5についても同様である。また、操作画面情報MSには、部品画像GP3が「文字入力」属性および「メールアドレス」詳細属性を有し且つ外部端末50における既存の入力支援機能「メールアドレス帳」を利用可能である旨、も記述されている。部品画像GP4についても同様である。
As shown in FIG. 13, in this operation screen information MS, the component image GP1 has a “character input” attribute and an “alphanumeric character” detailed attribute, and an existing input support function “character input panel” in the
なお、これに限定されず、たとえば、「文字入力」属性および「数字」詳細属性を有する部品画像GPに対しては、外部端末50における既存の入力支援機能「テンキーパネル」を利用可能である旨、が記述されてもよい。あるいは、「文字入力」属性および「PCアドレス(IPアドレス)」詳細属性を有する部品画像GPに対しては、外部端末50における既存の入力支援機能「PCアドレス帳(IPアドレス帳)」を利用可能である旨、が記述されてもよい。
However, the present invention is not limited to this. For example, the existing input support function “tenkey panel” in the
このような操作画面GS1がタッチパネル75に表示されている状態(図8参照)において、操作者が操作入力を行うと、外部端末50はタッチパネル75に対する操作入力を検知する(ステップS11(図5))。そして、操作入力に関する操作入力情報EMが生成される。より詳細には、操作入力位置(座標位置)の座標系変換処理(画像形成装置10でも利用される共通座標系(基準座標系)による座標系表現へと、操作入力位置の座標値等を変換する変換処理)が行われて、操作入力位置情報を含む操作入力情報EMが生成される(ステップS12)。その後、外部端末50は当該操作入力情報EMを画像形成装置10に送信する(ステップS13)。なお、ステップS12での座標系変換処理は、共通座標系(基準座標系)とタッチパネル75の固有座標系との間の変換テーブルに基づいて行われればよい。また、当該変換テーブルは、プログラムPG2に予め内蔵されるか、或いは画像形成装置10と外部端末50との通信確立(ステップS2)の直後に画像形成装置10から外部端末50へと送信されればよい。
In a state where the operation screen GS1 is displayed on the touch panel 75 (see FIG. 8), when the operator performs an operation input, the
一方、画像形成装置10は、外部端末50からの操作入力情報EMを受信する(ステップS21(図6))と、当該操作入力情報EMに基づく分岐処理(ステップS22)を行う。具体的には、操作入力位置の所属領域が、パネル領域PR(タッチパネルに対応する領域)、ハードキー領域HR(ハードウエアキーに対応する領域)および仮想キーボード領域KR(文字入力に関する仮想領域)(図12参照)のいずれであるかが判定され、その判定結果に基づく分岐処理が実行される。
On the other hand, upon receiving the operation input information EM from the external terminal 50 (step S21 (FIG. 6)), the
操作入力位置がパネル領域PR内であるときには、ステップS23に進み、タッチパネル画像GAに対する操作入力であることが判定され、タッチパネル領域内の対応位置に関する処理が実行される。その後、ステップS28に進む。 When the operation input position is in the panel area PR, the process proceeds to step S23, where it is determined that the operation input is for the touch panel image GA, and processing related to the corresponding position in the touch panel area is executed. Thereafter, the process proceeds to step S28.
操作入力位置がハードキー領域HR内であるときには、ステップS24,S25に進む。ステップS24では、操作入力位置に対応するハードウエアキーのキーコードが取得され、ステップS25では、当該キーコードのハードウエアキー入力が受け付けられたものとみなされて処理が実行される。その後、ステップS28に進む。 When the operation input position is within the hard key area HR, the process proceeds to steps S24 and S25. In step S24, the key code of the hardware key corresponding to the operation input position is acquired. In step S25, it is assumed that the hardware key input of the key code is accepted, and the process is executed. Thereafter, the process proceeds to step S28.
操作入力位置が仮想キーボード領域KR内であるときには、ステップS26,S27に進む。ステップS26では、操作入力位置に対応する(仮想キーボードの)仮想キーのキーコードが取得され、ステップS27では、当該仮想キー入力が受け付けられたものとみなされて処理が実行される。その後、ステップS28に進む。 When the operation input position is within the virtual keyboard area KR, the process proceeds to steps S26 and S27. In step S26, the key code of the virtual key (of the virtual keyboard) corresponding to the operation input position is acquired. In step S27, the virtual key input is regarded as being accepted, and the process is executed. Thereafter, the process proceeds to step S28.
ステップS28においては、タッチパネル25の表示内容が更新される。また、次のステップS29においては、タッチパネル75の更新表示用のデータ(操作画面情報MS)が生成され、外部端末50に送信される。
In step S28, the display content of the
外部端末50は、画像形成装置10から操作画面情報MSを受信する(ステップS31(図5))と、操作画面情報MSに基づいて、更新後の操作画面をタッチパネル75に表示する(ステップS32)。
When the
たとえば、タッチパネル75に表示された操作画面GS1(図8)において、操作者が画像GP3(「メール送信先」の入力欄の画像)に対する押下操作を行うと、外部端末50は、拡張機能として利用可能な端末側機能(利用対象機能ないし利用可能機能とも称する)の存否を判定する。この判定処理は、操作画面情報MS(詳細には画像GP3の部品画像関連情報MP)に基づいて行われる。操作画面情報MS内の画像GP3に対応して利用可能な端末側機能が記録されているときには、外部端末50は、拡張機能として利用可能な端末側機能が存在すると判定するとともに、当該端末側機能の種別情報をさらに取得し、当該種別情報に基づいて利用対象機能を特定する。さらに、外部端末50は、特定された利用対象機能(画像GP3に対応する端末側機能(詳細には「メールアドレス帳」機能))を利用する旨を決定し、外部端末50内の「メールアドレス帳」に登録されている(1又は)複数のメールアドレスを入力欄に対する入力候補として表示する。なお、拡張機能として利用可能な端末側機能が存在しないと判定されるときには、通常の押下操作として処理される。
For example, in the operation screen GS1 (FIG. 8) displayed on the
そして、図9に示すように、タッチパネル75は、端末側機能による表示内容を有する部分操作画面PS(図9にて太枠で囲まれた領域)を、操作画面GS1内に合成表示する。具体的には、外部端末50は、当該外部端末50内のアドレス帳(メールアドレス帳)データに登録されているユーザアドレス(各ユーザのメールアドレス)を、当該アドレス帳データから取得し、メール送信先の候補(入力内容の選択肢)として部分操作画面PSにおいて列挙する。詳細には、メールアドレス帳に登録されているユーザUB〜UEのメールアドレスが、「メール送信先」の入力欄に対する入力候補として表示される。より詳細には、LDAP(Lightweight Directory Access Protocol)等を利用して、外部端末50内の情報にアクセスすることなどによって、このような表示が実現される。
Then, as shown in FIG. 9, the
このとき、タッチパネル75においては、部品画像GP3の部品画像関連情報MPに基づき、部分操作画面PSが操作画面GS1内における部品画像GP3の近傍位置に合成表示される。たとえば、部分操作画面PSの位置(左上端位置P0(X,Y))は、部品画像GP3の位置(左上端位置)P3(X,Y)と同じ位置に設置され、部分操作画面PSの幅w0は、部品画像GP3の幅W3と同じ値に設定される(図14および図15参照)。また、部分操作画面PS内の文字のフォントサイズは、部品画像GP3内の文字のフォントサイズと同じ値に設定される。さらに、部分操作画面PSの高さh0は、部品画像GP3の高さH3の所定数倍(たとえば5倍)に設定される。このように、部品画像関連情報MP(詳細にはその位置情報および大きさ情報)に基づき、部分操作画面PSの大きさが調整され且つ部分操作画面PSが操作画面GS1内において部品画像GP3の近傍位置に合成表示される。なお、部分操作画面PSの画像データは、外部端末50内に予め格納されればよい。ただし、これに限定されず、部分操作画面PSの画像データは、たとえば、その都度、画像形成装置10から外部端末50へ送信されるようにしてもよい。
At this time, on the
そして、複数の入力候補(選択肢)のうちの一の選択肢が操作者による所定の操作(長押し操作あるいはダブルタップ操作等)によってメール送信先として決定される。上述のようなアドレスの表示動作およびアドレス選択操作等は、外部端末50のアドレス帳機能を利用して、外部端末50側で実行される。このようにして、外部端末50は、入力欄(部位画像GP3)に対する操作入力を受け付ける。換言すれば、入力欄に対する操作入力が、外部端末50の所有機能を利用して実行される。
One of the plurality of input candidates (options) is determined as a mail transmission destination by a predetermined operation (such as a long press operation or a double tap operation) by the operator. The address display operation and the address selection operation as described above are executed on the
外部端末50は、この操作に応答して、送信先として決定されたアドレス情報を文字列情報として取得し、当該アドレス情報(文字列情報)を操作画面GS1内の部品画像GP3に重畳して仮表示するとともに、これらの文字列情報を画像形成装置10に向けて送信する(ステップS11〜S13)。
In response to this operation, the
また、この実施形態においては、この文字列情報を複数の文字に分解するとともに、複数の文字の情報のそれぞれを仮想キーボード領域内の対応仮想キーの位置情報(仮想位置情報)に変換して画像形成装置10に向けて送信する。すなわち、当該文字列情報は、文字コードとして送信されるのではなく、対応仮想キーの位置情報として送信される。たとえば、アドレス情報が「userb@abc.xxx」であるときには、当該アドレス情報が文字列「u」,「s」,「e」,「r」,「b」,「@」,「a」,「b」,「c」,「.」,「x」,「x」,「x」に分解されるとともに、当該文字列の各文字を各仮想キーの仮想位置情報に変換して送信する(図12参照)。詳細には、文字「u」は、仮想キー位置Pu(X,Y)に変換され、文字「s」は、仮想キー位置Ps(X,Y)に変換され、文字「e」は仮想キー位置Pe(X,Y)に変換される。他の文字も同様である。なお、ここでは、各仮想キーの位置情報は、画像形成装置10における座標系(外部端末50と画像形成装置10との共通座標系)で表現された値で送信される。
In this embodiment, the character string information is decomposed into a plurality of characters, and each of the information on the plurality of characters is converted into position information (virtual position information) of the corresponding virtual key in the virtual keyboard area. It transmits toward the forming
そして、画像形成装置10は、ステップS22で仮想キーボード領域に関する操作入力が行われた旨を判定し、ステップS26,S27で、画像GP3に関する入力受付処理が実行される。具体的には、複数の文字列(「u」,「s」,「e」,「r」,「b」,「@」,「a」,「b」,「c」,「.」,「x」,「x」,「x」)の入力が仮想キーボード入力として受け付けられる。
In step S22, the
ここにおいて、仮想キーボード領域は、仮想的な領域であり「見えない領域」である。仮想キーボード領域KRは、パネル領域PRおよびハードキー領域HR等などの領域(実在領域)とは重複しないように配置されることが好ましい。拡張機能による操作入力情報を概念的な仮想キーボード領域KR内の仮想位置情報として取り扱うことによれば、当該操作入力情報をその他の領域(パネル領域PRおよびハードキー領域HR等)に関する位置情報と同様に取り扱うことが可能である。すなわち、各種の操作入力情報を位置情報として統一的に取り扱うことが可能である。 Here, the virtual keyboard area is a virtual area and is an “invisible area”. The virtual keyboard area KR is preferably arranged so as not to overlap with areas (real areas) such as the panel area PR and the hard key area HR. By handling the operation input information by the extended function as virtual position information in the conceptual virtual keyboard area KR, the operation input information is the same as the position information related to other areas (panel area PR, hard key area HR, etc.). Can be handled. That is, various types of operation input information can be handled uniformly as position information.
その後、ステップS28,S29,S31,S32において表示更新処理等が実行される。これにより、図11のような更新画面がタッチパネル25に表示されるとともに、図10のような更新画面GS1(GS1b)がタッチパネル75に表示される。部品画像GP3において、タッチパネル75に仮表示されていた文字列は、この時点において画像形成装置10にて受信された情報(確定情報)として正式に表示(本表示ないし確定表示とも称する)される。なお、部品画像GP3における仮表示中の文字列を点滅表示させることなどによって、当該アドレス情報が画像形成装置10によって未だ受信されていないことが示されるようにしてもよい。
Thereafter, display update processing and the like are executed in steps S28, S29, S31, and S32. As a result, an update screen as shown in FIG. 11 is displayed on the
このようなステップS5〜S7の処理が適宜繰り返され、メール送信用の情報が入力される。その後、送信キーGQ(図10参照)が押下されると、再びステップS5〜S7の処理が実行される。具体的には、押下位置の情報が外部端末50から画像形成装置10へと送信され(ステップS11〜S13)、当該押下位置の情報が送信キーGQの押下処理であることが判定され(ステップS21,S22,S24,S25)、メール送信処理が行われる。そして、メール送信の完了等を示す画面(不図示)がタッチパネル25に表示される(ステップS28)とともに、同様の画面がタッチパネル75にも表示される(ステップS29,S31,S32)。
Such processing of steps S5 to S7 is repeated as appropriate, and information for mail transmission is input. Thereafter, when the transmission key GQ (see FIG. 10) is pressed, the processes of steps S5 to S7 are executed again. Specifically, information on the pressed position is transmitted from the
以上のような態様によれば、操作画面情報MSは、外部端末50に設けられた機能であって入力欄(部品画像GP3)に関する入力操作にて拡張機能として利用可能な機能(利用対象機能)の種別情報を有するとともに、タッチパネル75は、当該種別情報に基づいて特定された利用対象機能を拡張機能として利用して、当該入力欄に対する操作入力を受け付ける。したがって、タッチパネル75を用いて画像形成装置10を操作する際に、外部端末50側の各種の機能を容易に利用することが可能である。
According to the above aspect, the operation screen information MS is a function provided in the
なお、ここでは、画像GP3に関する操作入力情報EMを構成する文字列の各文字の情報が仮想キーボード領域内の対応仮想キーの仮想位置情報として送信される態様が例示されているが、これに限定されない。たとえば、画像GP3に関する操作入力情報EMが外部端末50から画像形成装置10へとテキスト情報(文字コード)として送信されるようにしてもよい。この場合には、画像形成装置10が位置情報(座標値)のみならず、テキスト情報(文字コード)をも受け付けるようにすればよい。具体的には、画像形成装置10において、外部端末50から送信されてきた情報がテキスト情報であるか座標情報であるかを判定した上で、当該情報を受信するようにすればよい。
Here, an example is illustrated in which the information on each character of the character string constituting the operation input information EM related to the image GP3 is transmitted as the virtual position information of the corresponding virtual key in the virtual keyboard area. Not. For example, the operation input information EM related to the image GP3 may be transmitted from the
ただし、上記実施形態のように操作入力情報EMを仮想キー等の位置情報に変換して画像形成装置10へ向けて送信することによれば、画像形成装置10は、座標値のみを受信すればよく文字コードをも取り扱うことを要しない。すなわち、画像形成装置10は操作入力情報EMを位置情報に統一して受信することが可能である。換言すれば、入力内容に係る文字列情報を仮想キーボードの座標情報に変換して送信することによって、座標情報による統一的な取り扱いが可能である。
However, when the operation input information EM is converted into position information such as a virtual key and transmitted to the
<3.変形例等>
以上、この発明の実施の形態について説明したが、この発明は上記説明した内容のものに限定されるものではない。
<3. Modified example>
Although the embodiments of the present invention have been described above, the present invention is not limited to the contents described above.
たとえば、上記実施形態においては、外部端末50側における操作入力情報EMが外部端末50のタッチパネル75における座標系表現から画像形成装置10のタッチパネル25における座標系表現(共通の座標系による座標値)へと変換された後に、画像形成装置10へ送信されている。しかしながら、これに限定されず、外部端末50側における操作入力情報EMが外部端末50のタッチパネル75における座標系表現のまま画像形成装置10へ送信された後、画像形成装置10における座標系表現へと変換されるようにしてもよい。この場合には、外部端末50で利用される座標系(外部端末側座標系)と画像形成装置10で利用される座標系(画像形成装置側座標系)との変換テーブル等が予め画像形成装置10に構築されればよい。
For example, in the above embodiment, the operation input information EM on the
また、上記実施形態においては、部品画像GP3の部分を押下することによってメールアドレス帳内のアドレスが選択肢として表示される態様が例示されているが、これに限定されない。たとえば、図16に示すように、タッチパネル75内に拡張機能呼出キー画像GP11を表示し、タッチパネル75に表示された拡張機能呼出キー画像GP11に対する操作入力が受け付けられると、部分操作画面PSを含む操作画面GS1(図9)が表示されるようにしてもよい。より詳細には、部品画像GP3の仮選択操作後の画像GP11の押下処理に応答して、拡張機能が呼び出されて、メールアドレス帳内のユーザアドレスが選択肢として表示されるようにしてもよい。拡張機能呼出キー画像GP11は、拡張機能(入力支援機能)を呼び出すための部品画像(呼出パーツ画像)であり、拡張機能の呼出画像(ソフトウエアキー)であるとも表現される。なお、部品画像GP11に関する情報は、部品画像関連情報MPにて規定されるようにすればよい。詳細には、部品画像GP11が「呼出キー」属性を有する旨等が、部品画像関連情報MPにて規定されるようにすればよい。
In the above-described embodiment, an example in which an address in the mail address book is displayed as an option by pressing the part image part GP3 is exemplified, but the present invention is not limited to this. For example, as shown in FIG. 16, when an extended function call key image GP11 is displayed in the
また、上記実施形態においては、部分操作画面PSは、部品画像GP3(入力欄)に重畳して表示されるとともに当該入力欄の下側にも表示される態様が例示されているが、これに限定されない。たとえば、部分操作画面PSは、部品画像GP3(入力欄)に重畳して表示されるとともに当該入力欄の上側に表示されるようにしてもよい。より詳細には、部品画像GP3が操作画面GS内において下寄りに配置されるときには、部品画像GP3の上側に部分操作画面が表示されるようにしてもよい。 Moreover, in the said embodiment, although the partial operation screen PS is superimposed and displayed on the components image GP3 (input column), the aspect displayed on the lower side of the said input column is illustrated, It is not limited. For example, the partial operation screen PS may be displayed superimposed on the part image GP3 (input field) and displayed above the input field. More specifically, when the component image GP3 is arranged on the lower side in the operation screen GS, the partial operation screen may be displayed above the component image GP3.
また、部分操作画面PSは、部品画像GP3とともに表示される態様が例示されているが、これに限定されない。たとえば、部分操作画面PSは、部品画像GP3を一旦非表示にした状態で表示されるようにしてもよい。この場合、部分操作画面PSは、部品画像GP3が表示されていた位置付近に表示されることが好ましい。 Moreover, although the aspect displayed with the component image GP3 is illustrated for the partial operation screen PS, it is not limited to this. For example, the partial operation screen PS may be displayed in a state where the component image GP3 is once hidden. In this case, the partial operation screen PS is preferably displayed in the vicinity of the position where the component image GP3 was displayed.
また、上記実施形態においては、外部端末50のアドレス帳機能(メールアドレス帳機能)が拡張機能として利用される態様が主に例示されているが、これに限定されない。
Moreover, in the said embodiment, although the aspect in which the address book function (mail address book function) of the
たとえば、「PCアドレス(IPアドレス)帳機能」が画像形成装置10によって利用されるようにしてもよい。
For example, the “PC address (IP address) book function” may be used by the
あるいは、英数字等を入力する文字入力パネル機能(外部端末50の所有機能)が拡張機能として利用されるようにしてもよい。具体的には、図17に示すように、文字入力パネルを有する部分操作画面PS2が表示され、当該文字入力パネルを利用して文字(英数字等)が入力されるようにしてもよい。部分操作画面PS2は、外部端末50内の文字入力パネル機能を利用して文字入力パネルを表示する画面である。
Alternatively, a character input panel function for inputting alphanumeric characters or the like (owned function of the external terminal 50) may be used as an extended function. Specifically, as shown in FIG. 17, a partial operation screen PS2 having a character input panel may be displayed, and characters (alphanumeric characters, etc.) may be input using the character input panel. The partial operation screen PS2 is a screen for displaying a character input panel using a character input panel function in the
あるいは、数字を入力するテンキーパネル機能が、拡張機能として利用されるようにしてもよい。たとえば、コピー枚数を入力する入力欄において、テンキーパネル機能を利用した操作入力が行われるようにすればよい。 Alternatively, a numeric keypad function for inputting numbers may be used as an extended function. For example, an operation input using a numeric keypad function may be performed in an input field for inputting the number of copies.
1 画像形成システム
6 操作部
10 画像形成装置
25 タッチパネル
50 外部端末
56 操作部
75 タッチパネル
GQ 送信キー
GS 操作画面
MP 部品画像関連情報
MS 操作画面情報
PS 部分操作画面
DESCRIPTION OF
Claims (14)
画像形成装置と、
前記画像形成装置との通信が可能な外部端末と、
を備え、
前記画像形成装置は、
操作画面の情報である操作画面情報を生成する生成手段と、
前記操作画面情報を前記外部端末に送信する送信手段と、
前記操作画面への入力情報を前記外部端末から受信する受信手段と、
を有し、
前記外部端末は、
前記画像形成装置から送信されてきた前記操作画面情報に基づいて、前記操作画面を表示する操作手段と、
前記操作手段に表示される前記操作画面を用いた操作入力に基づく操作入力情報を、前記画像形成装置に送信する通信手段と、
を有し、
前記操作画面は、入力欄を有し、
前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、
前記操作手段は、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を受け付けることを特徴とする画像形成システム。 An image forming system,
An image forming apparatus;
An external terminal capable of communicating with the image forming apparatus;
With
The image forming apparatus includes:
Generating means for generating operation screen information which is operation screen information;
Transmitting means for transmitting the operation screen information to the external terminal;
Receiving means for receiving input information to the operation screen from the external terminal;
Have
The external terminal is
Operation means for displaying the operation screen based on the operation screen information transmitted from the image forming apparatus;
Communication means for transmitting operation input information based on operation input using the operation screen displayed on the operation means to the image forming apparatus;
Have
The operation screen has an input field,
The operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field.
The image forming system, wherein the operation means receives an operation input to the input field using the use target function specified based on the type information.
前記操作手段は、前記利用対象機能による表示内容を有する部分操作画面を前記操作画面内に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする画像形成システム。 The image forming system according to claim 1,
The image forming system, wherein the operation means displays a partial operation screen having a display content by the use target function in the operation screen, and receives an operation input to the input field.
前記操作画面情報は、
前記入力欄の部品画像の情報である部品画像関連情報、
をさらに有し、
前記部品画像関連情報は、前記部品画像の位置に関する情報を有し、
前記操作手段は、前記部品画像関連情報に基づき、前記部分操作画面を前記操作画面内における前記部品画像の近傍位置に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする画像形成システム。 The image forming system according to claim 2.
The operation screen information is
Component image related information which is information of a component image in the input field,
Further comprising
The component image related information has information regarding the position of the component image,
The operation means combines and displays the partial operation screen at a position near the component image in the operation screen based on the component image related information, and accepts an operation input to the input field. .
前記部品画像関連情報は、前記部品画像のサイズに関する情報をも有し、
前記操作手段は、前記部品画像関連情報に基づき前記部分操作画面の大きさを決定し、前記部分操作画面を前記操作画面に合成表示し、前記入力欄に対する操作入力を受け付けることを特徴とする画像形成システム。 The image forming system according to claim 3.
The component image related information also includes information on the size of the component image,
The operation means determines the size of the partial operation screen based on the component image related information, displays the partial operation screen on the operation screen, and receives an operation input to the input field. Forming system.
前記通信手段は、前記部分操作画面に対する操作入力の操作位置の情報を、前記画像形成装置と共通の座標系表現による位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする画像形成システム。 The image forming system according to any one of claims 2 to 4,
The communication unit converts operation position information of an operation input on the partial operation screen into position information based on a coordinate system expression common to the image forming apparatus, and transmits the position information to the image forming apparatus. Image forming system.
前記通信手段は、前記利用対象機能を利用して前記入力欄に入力された文字列情報を構成する複数の文字の情報をそれぞれ前記共通の座標系表現による仮想キーボード領域内の対応仮想キーの仮想位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする画像形成システム。 The image forming system according to claim 5.
The communication means uses a virtual function of the corresponding virtual key in the virtual keyboard area in the common coordinate system representation for information on a plurality of characters constituting the character string information input in the input field using the use target function. An image forming system, wherein the information is converted into position information and transmitted to the image forming apparatus.
前記通信手段は、前記利用対象機能を利用して前記入力欄に入力された文字列情報を構成する複数の文字の情報をそれぞれ仮想キーボード領域内の対応仮想キーの仮想位置情報に変換して、前記画像形成装置に向けて送信することを特徴とする画像形成システム。 The image forming system according to claim 1,
The communication means converts the information of a plurality of characters constituting the character string information input to the input field using the function to be used into virtual position information of the corresponding virtual key in the virtual keyboard area, An image forming system that transmits the image to the image forming apparatus.
前記操作手段は、
前記利用対象機能の呼出画像を前記操作手段に表示し、
前記操作手段に表示された前記呼出画像に対する操作入力が受け付けられると、前記部分操作画面を含む前記操作画面を表示することを特徴とする画像形成システム。 The image forming system according to claim 2.
The operation means includes
Displaying a call image of the function to be used on the operation means;
When the operation input for the call image displayed on the operation means is received, the operation screen including the partial operation screen is displayed.
前記利用対象機能は、アドレス帳機能を含むことを特徴とする画像形成システム。 The image forming system according to claim 1,
The image forming system, wherein the use target function includes an address book function.
前記利用対象機能は、文字入力パネル機能を含むことを特徴とする画像形成システム。 The image forming system according to claim 1,
The use target function includes a character input panel function.
前記利用対象機能は、テンキーパネル機能を含むことを特徴とする画像形成システム。 The image forming system according to claim 1,
The use target function includes a numeric keypad function.
操作画面の情報である操作画面情報を生成する生成手段と、
前記操作画面情報を外部端末に送信して、前記外部端末の操作手段に前記操作画面を表示させる送信手段と、
前記操作画面への入力情報を前記外部端末から受信する受信手段と、
を備え、
前記操作画面は、入力欄を有し、
前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、
前記送信手段は、前記種別情報を含む前記操作画面情報を前記外部端末に送信し、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を前記操作手段に受け付けさせることを特徴とする画像形成装置。 An image forming apparatus,
Generating means for generating operation screen information which is operation screen information;
Transmitting means for transmitting the operation screen information to an external terminal, and causing the operation means of the external terminal to display the operation screen;
Receiving means for receiving input information to the operation screen from the external terminal;
With
The operation screen has an input field,
The operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field.
The transmission means transmits the operation screen information including the type information to the external terminal, and uses the use target function specified based on the type information to input an operation input to the input field. An image forming apparatus characterized in that the image forming apparatus accepts the image.
操作画面の情報である操作画面情報を前記画像形成装置から受信する受信手段と、
前記画像形成装置から送信されてきた前記操作画面情報に基づいて、前記操作画面を表示する操作手段と、
前記操作画面を用いて入力された操作入力情報を前記画像形成装置に送信する送信手段と、
を備え、
前記操作画面は、入力欄を有し、
前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、
前記操作手段は、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力を受け付けることを特徴とする外部端末。 An external terminal of the image forming apparatus,
Receiving means for receiving operation screen information which is operation screen information from the image forming apparatus;
Operation means for displaying the operation screen based on the operation screen information transmitted from the image forming apparatus;
Transmission means for transmitting operation input information input using the operation screen to the image forming apparatus;
With
The operation screen has an input field,
The operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field.
The external terminal characterized in that the operation means accepts an operation input to the input field using the use target function specified based on the type information.
a)操作画面の情報である操作画面情報を前記画像形成装置から受信するステップと、
b)前記操作画面情報に基づいて、操作画面を表示するステップと、
c)前記操作画面を用いて入力された操作入力情報を前記画像形成装置に送信するステップと、
を実行させるためのプログラムであって、
前記操作画面は、入力欄を有し、
前記操作画面情報は、前記外部端末の機能であって前記入力欄に関する入力操作にて拡張機能として利用可能な機能である利用対象機能の種別情報を有し、
前記ステップb)においては、前記種別情報に基づいて特定された前記利用対象機能を利用して、前記入力欄に対する操作入力が受け付けられることを特徴とするプログラム。 In the computer built in the external terminal of the image forming device,
a) receiving operation screen information which is information of the operation screen from the image forming apparatus;
b) displaying an operation screen based on the operation screen information;
c) transmitting operation input information input using the operation screen to the image forming apparatus;
A program for executing
The operation screen has an input field,
The operation screen information includes type information of a function to be used that is a function of the external terminal and is a function that can be used as an extended function in an input operation related to the input field.
In the step b), an operation input to the input field is received using the use target function specified based on the type information.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012011433A JP2013150273A (en) | 2012-01-23 | 2012-01-23 | Image forming system, image forming apparatus, external terminal, and program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2012011433A JP2013150273A (en) | 2012-01-23 | 2012-01-23 | Image forming system, image forming apparatus, external terminal, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2013150273A true JP2013150273A (en) | 2013-08-01 |
Family
ID=49047342
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2012011433A Pending JP2013150273A (en) | 2012-01-23 | 2012-01-23 | Image forming system, image forming apparatus, external terminal, and program |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2013150273A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015158719A (en) * | 2014-02-21 | 2015-09-03 | コニカミノルタ株式会社 | Image forming system, image forming apparatus, remote control device, and program |
US9986114B2 (en) | 2015-03-26 | 2018-05-29 | Konica Minolta, Inc. | Image forming system transmitting setting information, image forming apparatus, and recording medium |
-
2012
- 2012-01-23 JP JP2012011433A patent/JP2013150273A/en active Pending
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015158719A (en) * | 2014-02-21 | 2015-09-03 | コニカミノルタ株式会社 | Image forming system, image forming apparatus, remote control device, and program |
US9986114B2 (en) | 2015-03-26 | 2018-05-29 | Konica Minolta, Inc. | Image forming system transmitting setting information, image forming apparatus, and recording medium |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9648180B2 (en) | Information processing system performing operation based on tag information, information processing device, portable terminal and non-transitory computer readable recording medium | |
JP2012243114A (en) | Multifunctional image forming apparatus | |
JP3829849B2 (en) | Scan data transmission apparatus and scan data transmission system | |
JP3829847B2 (en) | Scan data transmission apparatus and scan data transmission system | |
JP2014222481A (en) | Image forming system, remote control device, and program | |
US10552094B2 (en) | Printing apparatus and method of connecting to remote print service | |
JP2006059083A (en) | Image processor, remote operation method and remote operation program | |
JP2007140851A (en) | Electronic apparatus, image forming apparatus, and method of obtaining operation manual | |
JP2016018265A (en) | Information processing system, information processing method, and program | |
JP5853999B2 (en) | Image forming system, image forming apparatus, remote control device, and program | |
JP5800788B2 (en) | COMMUNICATION TERMINAL DEVICE, FAX COMMUNICATION SYSTEM, AND DATA TRANSMISSION PROGRAM | |
JP2013150273A (en) | Image forming system, image forming apparatus, external terminal, and program | |
JP5768841B2 (en) | Image forming system, image forming apparatus, remote control device, and program | |
JP2008065534A (en) | Information processing system and server | |
JP2013013088A (en) | Scanner and scanning method | |
JP6213297B2 (en) | Image forming system, image forming apparatus, remote control device, and program | |
JP2012168819A (en) | Image processing device, and method and program for controlling display of operation screen | |
JP2015005949A (en) | Image forming apparatus and control method thereof; and program | |
US20220303426A1 (en) | Image processing apparatus and control method | |
JP7474659B2 (en) | Image forming apparatus, control program and control method | |
JP6414633B2 (en) | Operation control system and server | |
JP6040970B2 (en) | Character input system, character input method, information processing device, portable terminal device, and character input program | |
JP2017168884A (en) | Information processing apparatus, program, system, and information processing method | |
JP2016099819A (en) | Print server, print management method and data storage printing system | |
JP3631708B2 (en) | Image output device and printing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A711 | Notification of change in applicant |
Free format text: JAPANESE INTERMEDIATE CODE: A712 Effective date: 20130418 |