JP2016164725A - Information processing device, information processing system, and information processing program - Google Patents

Information processing device, information processing system, and information processing program Download PDF

Info

Publication number
JP2016164725A
JP2016164725A JP2015044664A JP2015044664A JP2016164725A JP 2016164725 A JP2016164725 A JP 2016164725A JP 2015044664 A JP2015044664 A JP 2015044664A JP 2015044664 A JP2015044664 A JP 2015044664A JP 2016164725 A JP2016164725 A JP 2016164725A
Authority
JP
Japan
Prior art keywords
unit
function
input
setting
application
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2015044664A
Other languages
Japanese (ja)
Inventor
暁子 北山
Akiko Kitayama
暁子 北山
潤田 浩也
Hiroya Uruta
浩也 潤田
優香 斎藤
Yuka Saito
優香 斎藤
大介 岡田
Daisuke Okada
大介 岡田
有登 柴田
Yuto Shibata
有登 柴田
ゼン 顧
Zheng Ko
ゼン 顧
圭輔 中沢
Keisuke Nakazawa
圭輔 中沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2015044664A priority Critical patent/JP2016164725A/en
Publication of JP2016164725A publication Critical patent/JP2016164725A/en
Pending legal-status Critical Current

Links

Images

Landscapes

  • Accessory Devices And Overall Control Thereof (AREA)
  • Facsimiles In General (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

PROBLEM TO BE SOLVED: To quickly provide a function desired by an operator.SOLUTION: An information processing device detects a function corresponding to an operation track that is input via an input unit, from setting information which is stored in a storage unit and contains operation track information indicating an operation track and start function information indicating a function to be started; and controls a function providing unit so as to provide the detected function. As an example, by a first multi-touch gesture input operation, a corresponding application is started; and by a second multi-touch gesture input operation, the detailed operation of the started application is provided. Thus, an application desired by an operator can be quickly started and an operation desired by the operator can be quickly provided.SELECTED DRAWING: Figure 15

Description

本発明は、情報処理装置、情報処理システム及び情報処理プログラムに関する。   The present invention relates to an information processing apparatus, an information processing system, and an information processing program.

一般的に、オフィス等で用いられる画像形成装置は、節電の観点から、一定時間利用されない場合に、省電力モード(以下、省エネモードという)に移行する設定となっている場合が多い。省エネモードに移行している画像形成装置は、何らかの入力操作を行うことで、通常モードへ復帰する。   In general, an image forming apparatus used in an office or the like is often set to shift to a power saving mode (hereinafter referred to as an energy saving mode) when not used for a certain time from the viewpoint of power saving. The image forming apparatus that has shifted to the energy saving mode returns to the normal mode by performing some input operation.

ここで、省エネモードの画像形成装置が通常モードに復帰して、実際に利用可能となるまでの時間(復帰時間)が長くなると、操作者の待ち時間が長くなる不都合を生ずる。このため、復帰時間を短縮化するために、画像形成装置に人感センサを設け、操作者が画像形成装置に近接したことを検出して省エネモードから通常モードに復帰させる技術が知られている。また、省エネモードから通常モードに復帰する際に、画像形成装置の操作部だけを先に復帰させ、操作部だけで可能な一部の機能を迅速に利用可能にする技術が知られている。   Here, if the time (restoration time) until the image forming apparatus in the energy saving mode returns to the normal mode and becomes actually usable becomes longer, the waiting time of the operator becomes longer. For this reason, in order to shorten the recovery time, a technique is known in which a human sensor is provided in the image forming apparatus, and the operator detects that the operator has approached the image forming apparatus and returns from the energy saving mode to the normal mode. . Further, when returning from the energy saving mode to the normal mode, a technique is known in which only the operation unit of the image forming apparatus is returned first, and a part of functions that can be performed only by the operation unit can be used quickly.

また、従来、表示部上を接触操作することで入力が可能な、いわゆるタッチパネルを備えた電子機器では、指等の接触操作部材でタッチパネル上に所定形状の軌跡を描くマルチタッチジェスチャーと呼ばれる操作により、アプリケーションの起動又はアプリケーションの操作を行う技術も知られている。   Conventionally, in an electronic device equipped with a so-called touch panel that can be input by performing a touch operation on the display unit, an operation called a multi-touch gesture that draws a locus of a predetermined shape on the touch panel with a touch operation member such as a finger is performed. A technique for starting an application or operating an application is also known.

また、特許文献1(特開2006−330843号公報)には、省エネモードから復帰する際に、操作者の利用頻度の高い機能を自動的に起動させることで、復帰時間の短縮化を図る情報機器が開示されている。   Patent Document 1 (Japanese Patent Laid-Open No. 2006-330443) discloses information for shortening the return time by automatically activating a function frequently used by the operator when returning from the energy saving mode. A device is disclosed.

特許文献1に開示されている情報機器も含め、従来の画像形成装置は、省エネモードから通常モードに復帰する際に、使用頻度が高い機能が自動的に起動するのは良い。しかし、使用頻度の高い機能が、操作者が使用を希望する機能とは、必ずしも言えない。利用を希望しない機能が起動した場合、操作者は、再度、所望の機能を選択し起動し直す必要がある。このため、所望の機能が使用可能となるまでに、無駄な操作及び時間を要する。   In the conventional image forming apparatus including the information device disclosed in Patent Document 1, it is preferable that a function that is frequently used is automatically activated when returning from the energy saving mode to the normal mode. However, a function that is frequently used is not necessarily a function that an operator desires to use. When a function that is not desired to be used is activated, the operator needs to select and activate the desired function again. For this reason, useless operation and time are required before a desired function can be used.

また、従来の画像形成装置は、自動的な機能の起動は、機能の初期画面を表示するまでである。このため、操作者が、希望する機能を実際に使用可能となるまでには、「省エネモードから通常モードに復帰して、使用頻度の高い機能の初期画面を表示するまでの時間+操作者が初期画面から操作を行い、所望の動作を指定するまでに要する時間」を必要とする。これは、省エネモードから通常モードに復帰した画像形成装置を操作者が操作して、所望の機能及び動作を指定するまでに要する時間と、それほど変わり無い時間である。   Further, in the conventional image forming apparatus, the automatic activation of the function is until the initial screen of the function is displayed. For this reason, until the operator can actually use the desired function, “the time until returning to the normal mode from the energy saving mode and displaying the initial screen of the frequently used function + the operator The time required to operate from the initial screen and specify a desired action is required. This is a time that is not much different from the time required for the operator to operate the image forming apparatus that has returned from the energy saving mode to the normal mode and specify the desired function and operation.

本発明は、上述の課題に鑑みてなされたものであり、操作者が希望する機能を迅速に提供可能な情報処理装置、情報処理システム及び情報処理プログラムの提供を目的とする。   SUMMARY An advantage of some aspects of the invention is that it provides an information processing apparatus, an information processing system, and an information processing program that can quickly provide a function desired by an operator.

上述した課題を解決し、目的を達成するために、本発明は、記憶部に記憶された、操作軌跡を示す操作軌跡情報、及び、起動させる機能を示す起動機能情報を含む設定情報から、入力部を介して入力された操作軌跡に対応する機能を検出する機能検出部と、検出された機能を提供するように機能の提供部を制御する制御部と、を有する。   In order to solve the above-described problems and achieve the object, the present invention inputs from setting information including operation trajectory information indicating an operation trajectory and activation function information indicating a function to be activated, stored in a storage unit. A function detection unit that detects a function corresponding to the operation trajectory input via the unit, and a control unit that controls the function providing unit so as to provide the detected function.

本発明によれば、操作者が希望する機能を迅速に提供できるという効果を奏する。   According to the present invention, it is possible to quickly provide a function desired by an operator.

図1は、第1の実施の形態のMFPのハードウェア構成図である。FIG. 1 is a hardware configuration diagram of the MFP according to the first embodiment. 図2は、第1の実施の形態のMFPのソフトウェア構成図である。FIG. 2 is a software configuration diagram of the MFP according to the first embodiment. 図3は、第1の実施の形態のMFPの本体及び操作部の機能ブロック図である。FIG. 3 is a functional block diagram of the main body and operation unit of the MFP according to the first embodiment. 図4は、第1の実施の形態のMFPの入力待機画面の一例を示す図である。FIG. 4 is a diagram illustrating an example of an input standby screen of the MFP according to the first embodiment. 図5は、第1の実施の形態のMFPの登録一覧画面の一例を示す図である。FIG. 5 is a diagram illustrating an example of a registration list screen of the MFP according to the first embodiment. 図6は、第1の実施の形態のMFPのマルチタッチジェスチャーの入力画面の一例を示す図である。FIG. 6 is a diagram illustrating an example of a multi-touch gesture input screen of the MFP according to the first embodiment. 図7は、第1の実施の形態のMFPのアプリの選択画面の一例を示す図である。FIG. 7 is a diagram illustrating an example of an application selection screen of the MFP according to the first embodiment. 図8は、第1の実施の形態のMFPのスキャナ機能の詳細設定選択画面の一例を示す図である。FIG. 8 is a diagram illustrating an example of a detailed setting selection screen for the scanner function of the MFP according to the first embodiment. 図9は、第1の実施の形態のMFPのスキャナ機能で読み取った情報の送信宛先を登録するための登録番号の選択画面の一例を示す図である。FIG. 9 is a diagram illustrating an example of a registration number selection screen for registering a transmission destination of information read by the scanner function of the MFP according to the first embodiment. 図10は、第1の実施の形態のMFPのマルチタッチジェスチャーの入力画面の一例を示す図である。FIG. 10 is a diagram illustrating an example of a multi-touch gesture input screen of the MFP according to the first embodiment. 図11は、第1の実施の形態のMFPのスキャナ機能で読み取った情報の送信宛先の選択画面の一例を示す図である。FIG. 11 is a diagram illustrating an example of a screen for selecting a transmission destination of information read by the scanner function of the MFP according to the first embodiment. 図12は、第1の実施の形態のMFPのスキャナ機能で読み取った情報の送信宛先の入力画面の一例を示す図である。FIG. 12 is a diagram illustrating an example of an input screen for a transmission destination of information read by the scanner function of the MFP according to the first embodiment. 図13は、第1の実施の形態のMFPにおける設定内容の確認表示例を示す図である。FIG. 13 is a diagram illustrating a confirmation display example of setting contents in the MFP according to the first embodiment. 図14は、第1の実施の形態のMFPの登録一覧画面に新たな設定情報が登録された状態を示す図である。FIG. 14 is a diagram illustrating a state in which new setting information is registered in the registration list screen of the MFP according to the first embodiment. 図15は、第1の実施の形態のMFPが省エネモードから通常モードに復帰するまでの流れを示す図である。FIG. 15 is a diagram illustrating a flow until the MFP according to the first embodiment returns from the energy saving mode to the normal mode. 図16は、第1の実施の形態のMFPの省エネモード時のタッチパネルを介して入力されたマルチタッチジェスチャーの操作軌跡の一例を示す図である。FIG. 16 is a diagram illustrating an example of an operation trajectory of a multi-touch gesture input via the touch panel when the MFP according to the first embodiment is in the energy saving mode. 図17は、第1の実施の形態のMFPの省エネモード時のタッチパネルを介して入力されたマルチタッチジェスチャーの操作軌跡の他の一例を示す図である。FIG. 17 is a diagram illustrating another example of the operation trajectory of the multi-touch gesture input via the touch panel when the MFP according to the first embodiment is in the energy saving mode. 図18は、第1の実施の形態のMFPにおいて、マルチタッチジェスチャーの入力操作に応じて表示される詳細設定画面の一例を示す図である。FIG. 18 is a diagram illustrating an example of a detailed setting screen displayed in response to the multi-touch gesture input operation in the MFP according to the first embodiment.

以下、添付図面を参照して、本発明を適用した実施の形態の複合機を詳細に説明する。   DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, a multi-function device according to an embodiment to which the invention is applied will be described in detail with reference to the accompanying drawings.

(第1の実施の形態)
(複合機のハードウェア構成)
まず、図1は、第1の実施の形態の複合機(MFP:Multifunction Peripheral)1のハードウェア構成図である。MFP1は、例えばコピー機能、スキャナ機能、ファクシミリ機能及びプリンタ機能等の各種の機能を備えた本体10と、操作者の操作に応じた入力を受け付ける操作部20とを備える。本体10は、提供部の一例である。
(First embodiment)
(Hardware configuration of MFP)
First, FIG. 1 is a hardware configuration diagram of a MFP (Multifunction Peripheral) 1 according to the first embodiment. The MFP 1 includes a main body 10 having various functions such as a copy function, a scanner function, a facsimile function, and a printer function, and an operation unit 20 that receives an input corresponding to an operation by the operator. The main body 10 is an example of a providing unit.

本体10と操作部20は、専用の通信路30を介して相互に通信可能に接続されている。通信路30は、例えばUSB(Universal Serial Bus)規格のものを用いることもできるが、有線又は無線を問わず、任意の規格のものでよい。また、本体10は、コピー機能、スキャナ機能、ファクシミリ機能及びプリンタ機能等の画像生成機能のうち、一つの機能を有していてもよいし又は複数の機能を有していてもよい。   The main body 10 and the operation unit 20 are connected via a dedicated communication path 30 so that they can communicate with each other. The communication path 30 may be, for example, a USB (Universal Serial Bus) standard, but may be of any standard regardless of wired or wireless. The main body 10 may have one function or a plurality of functions among image generation functions such as a copy function, a scanner function, a facsimile function, and a printer function.

操作部20としては、単独で完結した情報処理を実行可能な電子機器を用いることができる。一例として、操作部20としては、スマートフォン又はタブレット型端末等の情報処理端末を用いることができる。この場合、操作部20として用いられる情報処理端末は、MFP1の操作部として機能する。   As the operation unit 20, an electronic device capable of executing complete information processing independently can be used. As an example, an information processing terminal such as a smartphone or a tablet terminal can be used as the operation unit 20. In this case, the information processing terminal used as the operation unit 20 functions as the operation unit of the MFP 1.

より詳しくは、操作部20として用いられる情報処理端末は、従来、MFP1専用の操作部として固定され設置されていた操作パネルの代わりに、MFP1に着脱可能に接続される。すなわち、操作部20として用いられる情報処理端末は、例えばMFP1の操作パネルが配置される位置等の所定の位置に取り外し可能(分離可能)ながらも、MFP1と一体的に設置される。従って、操作部20として用いられる情報処理端末及びMFP1は、一台の装置として把握されてもよい。操作部20である情報処理端末は、MFP1から取り外されると、MFP1との間で、例えばBluetooth(登録商標)又は赤外線通信等の無線通信を行い、MFP1の操作部として機能する。   More specifically, an information processing terminal used as the operation unit 20 is detachably connected to the MFP 1 instead of an operation panel that has been conventionally fixed and installed as an operation unit dedicated to the MFP 1. That is, the information processing terminal used as the operation unit 20 is installed integrally with the MFP 1 while being detachable (separable) at a predetermined position such as a position where the operation panel of the MFP 1 is disposed. Accordingly, the information processing terminal and the MFP 1 used as the operation unit 20 may be grasped as a single device. When the information processing terminal that is the operation unit 20 is removed from the MFP 1, the information processing terminal performs wireless communication such as Bluetooth (registered trademark) or infrared communication with the MFP 1 and functions as an operation unit of the MFP 1.

本体10は、操作部20で受け付けた入力に応じた動作を行う。また、本体10は、クライアントPC(パーソナルコンピュータ)等の外部装置とも通信可能であり、外部装置から受信した指示に応じた動作も行う。   The main body 10 performs an operation according to the input received by the operation unit 20. The main body 10 can also communicate with an external device such as a client PC (personal computer), and performs an operation according to an instruction received from the external device.

(本体のハードウェア構成)
次に、本体10のハードウェア構成について説明する。図1に示すように、本体10は、CPU11、ROM12、RAM13及びHDD(ハードディスクドライブ)14を備える。また、本体10は、通信I/F(インタフェース)15、接続I/F16、エンジン部17及びファクシミリモデム(FAXモデム)19を備える。各部11〜17及びFAXモデム19は、システムバス18を介して相互に接続されている。
(Hardware configuration of the main unit)
Next, the hardware configuration of the main body 10 will be described. As shown in FIG. 1, the main body 10 includes a CPU 11, a ROM 12, a RAM 13, and an HDD (hard disk drive) 14. The main body 10 includes a communication I / F (interface) 15, a connection I / F 16, an engine unit 17, and a facsimile modem (FAX modem) 19. The units 11 to 17 and the FAX modem 19 are connected to each other via a system bus 18.

CPU11は、本体10の動作を統括的に制御する。CPU11は、RAM13をワークエリア(作業領域)としてROM12又はHDD14等に格納されたプログラムを実行することで、本体10全体の動作を制御し、上述したコピー機能、スキャナ機能、ファクシミリ機能、プリンタ機能等の各種機能を実現する。また、CPU11は、ROM12(HDD14等でも良い)に格納された、本体10側の入力処理プログラムを実行する。これにより、CPU11は、本体10及び操作部20で、操作者の入力操作に対応する機能及び動作を迅速に提供する動作のうち、本体10側の動作を制御する。   The CPU 11 comprehensively controls the operation of the main body 10. The CPU 11 controls the overall operation of the main body 10 by executing a program stored in the ROM 12 or the HDD 14 or the like using the RAM 13 as a work area (work area), and the above-described copy function, scanner function, facsimile function, printer function, etc. Implement various functions. Further, the CPU 11 executes an input processing program on the main body 10 side stored in the ROM 12 (which may be the HDD 14 or the like). Thereby, the CPU 11 controls the operation on the main body 10 side among the operations for quickly providing the function and operation corresponding to the input operation of the operator by the main body 10 and the operation unit 20.

通信I/F15は、ネットワーク40上のクライアントPC(パーソナルコンピュータ)、Webサーバ装置又は認証サーバ装置等の外部装置と通信するためのインタフェースである。接続I/F16は、通信路30を介して操作部20と通信するためのインタフェースである。なお、図1及び後述する図2において、通信路30は、有線的に図示されているが、上述のように操作部20は、MFP1の本体10に対して装着及び取り外しが可能となっている。このため、操作部20をMFP1に装着しているときには、通信路30は有線通信路として機能し、操作部20をMFP1から取り外したときには、通信路30は無線通信路として機能するものと理解されたい。   The communication I / F 15 is an interface for communicating with an external device such as a client PC (personal computer), a Web server device, or an authentication server device on the network 40. The connection I / F 16 is an interface for communicating with the operation unit 20 via the communication path 30. In FIG. 1 and FIG. 2 to be described later, the communication path 30 is illustrated in a wired manner, but the operation unit 20 can be attached to and detached from the main body 10 of the MFP 1 as described above. . Therefore, it is understood that the communication path 30 functions as a wired communication path when the operation unit 20 is attached to the MFP 1, and the communication path 30 functions as a wireless communication path when the operation unit 20 is detached from the MFP 1. I want.

エンジン部17は、コピー機能、スキャナ機能及びプリンタ機能を実現させるための、汎用的な情報処理及び通信以外の処理を行うハードウェアである。FAXモデム19は、ファクシミリ通信を行うことでファクシミリ機能を実現するためのモデムである。エンジン部17は、例えば原稿の画像をスキャンして読み取るスキャナ(画像読取部)、及び、用紙等のシート材への印刷を行うプロッタ(画像生成部)等を備えている。さらに、印刷済みシート材を仕分けるフィニッシャ及び原稿を自動給送するADF(自動原稿給送装置)等の特定のオプションを設けてもよい。   The engine unit 17 is hardware that performs processing other than general-purpose information processing and communication for realizing a copy function, a scanner function, and a printer function. The FAX modem 19 is a modem for realizing a facsimile function by performing facsimile communication. The engine unit 17 includes, for example, a scanner (image reading unit) that scans and reads an image of a document, and a plotter (image generation unit) that performs printing on a sheet material such as paper. Further, specific options such as a finisher for sorting printed sheet materials and an automatic document feeder (ADF) for automatically feeding a document may be provided.

HDD14には、CPU11により実行される、コピーアプリケーションプログラム(以下、アプリケーションを単にアプリという)、スキャナアプリ、プリンタアプリ、及びファクスアプリ等の各種機能のアプリが記憶されている。   The HDD 14 stores applications of various functions such as a copy application program (hereinafter referred to simply as an application), a scanner application, a printer application, and a fax application that are executed by the CPU 11.

(操作部のハードウェア構成)
次に、操作部20のハードウェア構成について説明する。図1に示すように、操作部20は、CPU21、ROM22、RAM23、フラッシュメモリ24、通信I/F25、接続I/F26、タッチパネル27及びICカードI/F29を備え、これらがシステムバス28を介して相互に接続されている。タッチパネル27は、入力部の一例である。
(Hardware configuration of operation unit)
Next, the hardware configuration of the operation unit 20 will be described. As shown in FIG. 1, the operation unit 20 includes a CPU 21, a ROM 22, a RAM 23, a flash memory 24, a communication I / F 25, a connection I / F 26, a touch panel 27, and an IC card I / F 29, which are connected via a system bus 28. Are connected to each other. The touch panel 27 is an example of an input unit.

RAM23(又はROM22でもよい)は、記憶部の一例である。RAM23には、操作者のタッチパネル27上の操作軌跡毎に、操作軌跡に対応するタッチパネル27上の各座標情報(操作軌跡情報)、起動する機能(起動機能情報)、及び、起動した機能の詳細な動作(詳細動作情報)を含む設定情報が記憶されている。なお、設定情報は、本体10側のROM12、RAM13又はHDD14等の記憶部に記憶してもよい。   The RAM 23 (or the ROM 22) is an example of a storage unit. For each operation locus on the touch panel 27 of the operator, the RAM 23 stores each coordinate information (operation locus information) on the touch panel 27 corresponding to the operation locus, a function to be activated (activation function information), and details of the activated function. Setting information including various operations (detailed operation information) is stored. The setting information may be stored in a storage unit such as the ROM 12, the RAM 13, or the HDD 14 on the main body 10 side.

CPU21は、操作部20の動作を統括的に制御する。CPU21は、RAM23をワークエリア(作業領域)としてROM22等に格納されたプログラムを実行することで操作部20全体の動作を制御する。また、後述するように、CPU21は、ROM22等に格納された操作部20側の入力処理プログラムを実行する。これにより、CPU21は、本体10及び操作部20で、操作者の入力操作に対応する機能及び動作を迅速に提供する動作のうち、操作部20側の動作を制御する。   The CPU 21 comprehensively controls the operation of the operation unit 20. The CPU 21 controls the operation of the entire operation unit 20 by executing a program stored in the ROM 22 or the like using the RAM 23 as a work area (work area). As will be described later, the CPU 21 executes an input processing program on the operation unit 20 side stored in the ROM 22 or the like. Thereby, the CPU 21 controls the operation on the operation unit 20 side among the operations for quickly providing functions and operations corresponding to the input operation of the operator by the main body 10 and the operation unit 20.

通信I/F25は、例えばネットワーク40上の認証サーバ装置と通信するためのインタフェースである。接続I/F26は、通信路30を介して本体10と通信するためのインタフェースである。ICカードI/F29は、非接触無線通信により、ICカードに記憶されている情報の読み取りを行うカードリーダとなっている。   The communication I / F 25 is an interface for communicating with an authentication server device on the network 40, for example. The connection I / F 26 is an interface for communicating with the main body 10 via the communication path 30. The IC card I / F 29 is a card reader that reads information stored in the IC card by non-contact wireless communication.

タッチパネル27は、液晶表示装置(LCD)又は有機EL表示装置等の表示部の表示面に、透明電極等で形成されたタッチセンサを設けて形成されている。タッチパネル27は、操作者の操作に応じた各種の入力を受け付けると共に、例えば受け付けた入力に応じた情報、MFP1の動作状況を示す情報、設定状態を示す情報等の各種の情報を表示する。また、タッチパネル27は、操作者が表示面上に描く操作軌跡を検出する。CPU21は、操作者が表示面上に描く操作軌跡の各座標情報と、選択された機能及び動作を関連付けた設定情報を、RAM23に記憶する。詳しくは、後述する。   The touch panel 27 is formed by providing a touch sensor formed of a transparent electrode or the like on a display surface of a display unit such as a liquid crystal display device (LCD) or an organic EL display device. The touch panel 27 receives various types of input corresponding to the operation of the operator, and displays various types of information such as information corresponding to the received input, information indicating the operation status of the MFP 1, and information indicating the setting state. The touch panel 27 detects an operation locus drawn on the display surface by the operator. The CPU 21 stores, in the RAM 23, each coordinate information of the operation trajectory drawn on the display surface by the operator and setting information in which the selected function and operation are associated. Details will be described later.

(MFPのソフトウェア構成)
次に、図2に、MFP1のソフトウェア構成の一例を示す。図2に示すように、本体10は、アプリ層101と、サービス層102と、OS層103とを有する。アプリ層101,サービス層102及びOS層103の実体は、ROM12又はHDD14等に格納されている各種ソフトウェアである。CPU11が、これらのソフトウェアを実行することにより、各種の機能が提供される。
(Software configuration of MFP)
Next, FIG. 2 shows an example of the software configuration of the MFP 1. As illustrated in FIG. 2, the main body 10 includes an application layer 101, a service layer 102, and an OS layer 103. The entities of the application layer 101, the service layer 102, and the OS layer 103 are various software stored in the ROM 12, the HDD 14, or the like. Various functions are provided by the CPU 11 executing these software.

アプリ層101のソフトウェアは、ハードウェア資源を動作させて所定の機能を提供するためのアプリである。例えばアプリとしては、コピー機能を提供するためのコピーアプリ、スキャナ機能を提供するためのスキャナアプリ、ファクシミリ機能を提供するためのファクシミリアプリ、プリンタ機能を提供するためのプリンタアプリ等が挙げられる。   The software of the application layer 101 is an application for operating a hardware resource and providing a predetermined function. For example, examples of the application include a copy application for providing a copy function, a scanner application for providing a scanner function, a facsimile application for providing a facsimile function, a printer application for providing a printer function, and the like.

サービス層102のソフトウェアは、アプリ層101とOS層103との間に介在し、アプリに対し、本体10が備えるハードウェア資源を利用するためのインタフェースを提供するソフトウェアである。具体的には、ハードウェア資源に対する動作要求の受け付け、動作要求の調停を行う機能を提供するためのソフトウェアである。サービス層102が受け付ける動作要求としては、スキャナによる読み取りやプロッタによる印刷等の要求が考えられる。   The software of the service layer 102 is software that is interposed between the application layer 101 and the OS layer 103 and provides an interface for using hardware resources included in the main body 10 for the application. Specifically, it is software for providing a function of accepting an operation request for a hardware resource and arbitrating the operation request. As an operation request received by the service layer 102, a request such as reading by a scanner or printing by a plotter can be considered.

なお、サービス層102によるインタフェースの機能は、本体10のアプリ層101だけではなく、操作部20のアプリ層201に対しても提供される。すなわち、操作部20のアプリ層201(アプリ)も、サービス層102のインタフェース機能を介して、本体10のハードウェア資源(例えばエンジン部17)を利用した機能を実現できる。   Note that the interface function by the service layer 102 is provided not only to the application layer 101 of the main body 10 but also to the application layer 201 of the operation unit 20. That is, the application layer 201 (application) of the operation unit 20 can also realize a function using hardware resources (for example, the engine unit 17) of the main body 10 through the interface function of the service layer 102.

OS層103のソフトウェアは、本体10が備えるハードウェアを制御する基本機能を提供するための基本ソフトウェア(オペレーティングシステム)である。サービス層102のソフトウェアは、各種アプリからのハードウェア資源の利用要求を、OS層103が解釈可能なコマンドに変換してOS層103に渡す。そして、OS層103のソフトウェアによりコマンドが実行されることで、ハードウェア資源は、アプリの要求に従った動作を行う。   The software of the OS layer 103 is basic software (operating system) for providing a basic function for controlling hardware included in the main body 10. The software of the service layer 102 converts a hardware resource use request from various applications into a command interpretable by the OS layer 103 and passes the command to the OS layer 103. Then, when the command is executed by the software of the OS layer 103, the hardware resource performs an operation according to the request of the application.

同様に、操作部20は、アプリ層201と、サービス層202と、OS層203とを有する。操作部20が備えるアプリ層201、サービス層202及びOS層203も、階層構造については本体10側と同様である。ただし、アプリ層201のアプリにより提供される機能及びサービス層202が受け付け可能な動作要求の種類は、本体10側とは異なる。アプリ層201のアプリは、操作部20が備えるハードウェア資源を動作させて所定の機能を提供するためのソフトウェアである。主には、本体10が備える機能(コピー機能、スキャナ機能、ファクシミリ機能、プリンタ機能)に関する操作及び表示を行うためのUI(操作者インタフェース)の機能を提供するためのソフトウェアである。   Similarly, the operation unit 20 includes an application layer 201, a service layer 202, and an OS layer 203. The application layer 201, the service layer 202, and the OS layer 203 included in the operation unit 20 have the same hierarchical structure as that of the main body 10 side. However, the functions provided by the applications in the application layer 201 and the types of operation requests that can be accepted by the service layer 202 are different from those on the main body 10 side. The application of the application layer 201 is software for operating a hardware resource included in the operation unit 20 and providing a predetermined function. Mainly software for providing a UI (operator interface) function for performing operations and displays related to functions (copy function, scanner function, facsimile function, printer function) provided in the main body 10.

なお、第1の実施の形態の例では、機能の独立性を保つために、本体10側のOS層103のソフトウェアと操作部20側のOS層203のソフトウェアが互いに異なる。つまり、本体10と操作部20は、別々のオペレーティングシステムで互いに独立して動作する。一例ではあるが、本体10側のOS層103のソフトウェアとしては、Linux(登録商標)を用いている。また、操作部20側のOS層203のソフトウェアとしては、Android(登録商標)を用いている。   In the example of the first embodiment, the software of the OS layer 103 on the main body 10 side and the software of the OS layer 203 on the operation unit 20 side are different from each other in order to maintain the independence of functions. That is, the main body 10 and the operation unit 20 operate independently of each other with different operating systems. As an example, Linux (registered trademark) is used as software of the OS layer 103 on the main body 10 side. Also, Android (registered trademark) is used as software of the OS layer 203 on the operation unit 20 side.

本体10及び操作部20を別々のオペレーティングシステムで動作させることで、本体10と操作部20との間の通信は、共通の装置内のプロセス間通信ではなく、異なる装置間の通信として行われる。操作部20が受け付けた入力(操作者からの指示内容)を本体10へ伝達する動作(コマンド通信)及び本体10が操作部20へイベントを通知する動作等がこれに該当する。ここでは、操作部20が本体10へコマンド通信を行うことにより、本体10の機能を使用できる。また、本体10から操作部20に通知するイベントには、本体10における動作の実行状況、本体10側で設定された内容などが挙げられる。   By operating the main body 10 and the operation unit 20 with different operating systems, communication between the main body 10 and the operation unit 20 is performed as communication between different devices, not communication between processes in a common device. The operation (command communication) for transmitting the input (instruction content from the operator) received by the operation unit 20 to the main body 10 and the operation for the main body 10 notifying the operation unit 20 of an event correspond to this. Here, the function of the main body 10 can be used when the operation unit 20 performs command communication to the main body 10. The event notified from the main body 10 to the operation unit 20 includes the execution status of the operation in the main body 10 and the contents set on the main body 10 side.

また、第1の実施の形態の例では、操作部20に対する電力供給は、本体10から通信路30を経由して行われているので、操作部20の電源制御を、本体10の電源制御とは別に(独立して)行うことができる。   In the example of the first embodiment, the power supply to the operation unit 20 is performed from the main body 10 via the communication path 30, so that the power control of the operation unit 20 is the power control of the main body 10. Can be done separately (independently).

なお、この例では、本体10と操作部20は、通信路30を介して電気的かつ物理的に接続されているが、上述のように本体10から操作部20を取り外すこともできる。この場合、本体10及び操作部20に、例えば赤外線通信部、RF通信部、ブルートゥース(登録商標)通信部等の近距離無線通信部を設ける。RFは、「Radio Frequency」の略記である。又は、本体10及び操作部20に、Wi−Fi(登録商標)等の無線LAN通信機能を設け、図2に示すように無線LANアクセスポイント(無線LANAP)41及びネットワーク40を介して相互に通信可能としてもよい。LANは、「Local Area Network」の略記である。本体10から操作部20を取り外し可能である場合、操作部20は、通信路30を介して本体10から供給された電力を二次電池に蓄電しておき、本体10から取り外された際に、二次電池に蓄電された電力で動作して本体10と通信を行う。   In this example, the main body 10 and the operation unit 20 are electrically and physically connected via the communication path 30, but the operation unit 20 can be detached from the main body 10 as described above. In this case, the main body 10 and the operation unit 20 are provided with a short-range wireless communication unit such as an infrared communication unit, an RF communication unit, or a Bluetooth (registered trademark) communication unit. RF is an abbreviation for “Radio Frequency”. Alternatively, the main body 10 and the operation unit 20 are provided with a wireless LAN communication function such as Wi-Fi (registered trademark), and communicate with each other via the wireless LAN access point (wireless LANAP) 41 and the network 40 as shown in FIG. It may be possible. LAN is an abbreviation for “Local Area Network”. When the operation unit 20 can be removed from the main body 10, the operation unit 20 stores the power supplied from the main body 10 via the communication path 30 in the secondary battery, and when the operation unit 20 is removed from the main body 10, It operates with the power stored in the secondary battery and communicates with the main body 10.

(本体の機能)
次に、図3にMFP1の本体10及び操作部20の機能ブロック図を示す。この図3に示すように、本体10側のHDD14には、コピーアプリ61、スキャナアプリ62及びファクスアプリ63等の各種機能のアプリが記憶されている。本体10のCPU11は、ROM12に記憶されている入力処理プログラムを実行することでアプリ制御部60として機能する。アプリ制御部60は、後述するように操作部20側と通信を行い、指定されたアプリを起動制御し、各種情報を操作部20側に提供する。また、アプリ制御部60は、上述の設定情報に対応するアプリの動作を制御する。
(Function of the main unit)
Next, FIG. 3 shows a functional block diagram of the main body 10 and the operation unit 20 of the MFP 1. As shown in FIG. 3, the HDD 14 on the main body 10 side stores applications of various functions such as a copy application 61, a scanner application 62, and a fax application 63. The CPU 11 of the main body 10 functions as the application control unit 60 by executing the input processing program stored in the ROM 12. As will be described later, the application control unit 60 communicates with the operation unit 20 side, controls activation of a designated application, and provides various types of information to the operation unit 20 side. In addition, the application control unit 60 controls the operation of the application corresponding to the setting information described above.

(操作部の機能)
次に、操作部20のCPU21は、ROM22に記憶されている入力処理プログラムを実行することで、図3に示すように、入力処理部51、省エネ制御部52、表示処理部53、設定部54、決定部55、解析部56、設定項目制御部57及び通信処理部58として機能する。入力処理部51は、操作者がタッチパネル27を接触操作することで入力された情報を取得し、省エネ制御部、設定部54又は通信処理部58を介して、本体側に供給する。入力処理部51は、終了検出部又は入力検出部の一例である。表示処理部53は、表示制御部の一例である。設定部54は、機能検出部の一例である。
(Function of the operation unit)
Next, the CPU 21 of the operation unit 20 executes the input processing program stored in the ROM 22, and as shown in FIG. 3, the input processing unit 51, the energy saving control unit 52, the display processing unit 53, and the setting unit 54. , Function as a determination unit 55, an analysis unit 56, a setting item control unit 57, and a communication processing unit 58. The input processing unit 51 acquires information input by an operator touching the touch panel 27 and supplies the information to the main body side via the energy saving control unit, the setting unit 54, or the communication processing unit 58. The input processing unit 51 is an example of an end detection unit or an input detection unit. The display processing unit 53 is an example of a display control unit. The setting unit 54 is an example of a function detection unit.

なお、「接触操作」の概念には、指又はスタイラスペン等の操作物をタッチパネル27に物理的に接触させて入力を行う行為の他、操作物を物理的に接触させずに、タッチパネル27に近い位置で操作して入力を行う行為(非接触操作)を含むと理解されたい。   It should be noted that the concept of “contact operation” includes an act of performing input by physically touching an operation object such as a finger or a stylus pen on the touch panel 27, or touching the touch panel 27 without physically touching the operation object. It should be understood to include an act of performing input at a close position (non-contact operation).

省エネ制御部52は、送信部の一例である。省エネ制御部52は、通常モードから省エネモードに移行させる移行要求を本体10に送信し、また、省エネモードから通常モードに復帰させるための移行要求を本体10に送信する。省エネモードは、第1の動作モードの一例である。通常モードは、第2の動作モードの一例である。省エネモードから通常モードに復帰する場合、省エネ制御部52は、決定部55及びと本体10側のCPU11に、通常モードへの復帰を指示する。表示処理部53は、MFP1及びアプリの状態をタッチパネル27上に表示する。   The energy saving control unit 52 is an example of a transmission unit. The energy saving control unit 52 transmits a transition request for shifting from the normal mode to the energy saving mode to the main body 10, and transmits a transition request for returning from the energy saving mode to the normal mode to the main body 10. The energy saving mode is an example of a first operation mode. The normal mode is an example of a second operation mode. When returning from the energy saving mode to the normal mode, the energy saving control unit 52 instructs the determination unit 55 and the CPU 11 on the main body 10 side to return to the normal mode. The display processing unit 53 displays the state of the MFP 1 and application on the touch panel 27.

設定部54は、所望の操作軌跡を描くようにタッチパネル27上を接触操作するマルチタッチジェスチャーにより入力された操作軌跡に対応する表示面の座標情報と、操作軌跡に対応する入力操作で起動させるアプリと、起動させたアプリの詳細動作とを関連付けた設定情報を生成する。生成された設定情報は、操作軌跡毎にRAM23に記憶される。   The setting unit 54 is an application that is activated by an input operation corresponding to the coordinate information of the display surface corresponding to the operation locus input by the multi-touch gesture that performs a touch operation on the touch panel 27 so as to draw a desired operation locus. And setting information that associates the detailed operation of the activated application. The generated setting information is stored in the RAM 23 for each operation locus.

決定部55は、送信制御部又は移行送信制御部の一例である。決定部55は、入力処理部51により検出されたマルチタッチジェスチャーの情報を、省エネ制御部52を介して取得し、解析部56に解析を依頼する。決定部55は、解析部56の解析結果に基づいて、マルチタッチジェスチャーに対応するアプリを設定部54に問い合わせる。そして、決定部55は、マルチタッチジェスチャーに対応付けられたアプリの設定項目及び設定値を、設定項目制御部57に通知する。   The determination unit 55 is an example of a transmission control unit or a transition transmission control unit. The determination unit 55 acquires the information of the multi-touch gesture detected by the input processing unit 51 via the energy saving control unit 52 and requests the analysis unit 56 to perform analysis. The determination unit 55 inquires of the setting unit 54 about an application corresponding to the multi-touch gesture based on the analysis result of the analysis unit 56. Then, the determination unit 55 notifies the setting item control unit 57 of the setting items and setting values of the application associated with the multi-touch gesture.

解析部56は、入力処理部51で取得されたマルチタッチジェスチャーを解析し、RAM23に記憶されている設置情報と照合して、マルチタッチジェスチャーに関連付けられているアプリ及び詳細情報を決定部55に通知する。   The analysis unit 56 analyzes the multi-touch gesture acquired by the input processing unit 51, compares the multi-touch gesture with the installation information stored in the RAM 23, and sends the application and detailed information associated with the multi-touch gesture to the determination unit 55. Notice.

設定項目制御部57は、マルチタッチジェスチャーで設定する設定項目を、本体10のアプリ制御部60を介して、各アプリから収集する。また、設定項目制御部57は、決定部55から通知されたマルチタッチジェスチャーに対応するアプリの設定項目及び設定値を、本体10のアプリ制御部60に通知する。設定項目制御部57は、制御部の一例である。   The setting item control unit 57 collects setting items set by the multi-touch gesture from each application via the application control unit 60 of the main body 10. In addition, the setting item control unit 57 notifies the setting items and setting values of the application corresponding to the multi-touch gesture notified from the determination unit 55 to the application control unit 60 of the main body 10. The setting item control unit 57 is an example of a control unit.

通信処理部58は、本体10側のアプリ制御部60と通信を行い、各アプリの設定項目等を取得する。取得された各設定項目は、表示処理部53を介してタッチパネル27に表示される。操作者は、タッチパネル27に表示される各設定項目から所望の設定項目を選択し、所望の設定値を設定する。また、通信処理部58は、決定部55及び設定項目制御部57を介して通知されたマルチタッチジェスチャーに対応するアプリの設定項目及び設定値を、本体10のアプリ制御部60に通知する。本体10のアプリ制御部60は、通知された設定項目及び設定値で動作するように、通知されたアプリを制御する。   The communication processing unit 58 communicates with the application control unit 60 on the main body 10 side, and acquires setting items of each application. Each acquired setting item is displayed on the touch panel 27 via the display processing unit 53. The operator selects a desired setting item from the setting items displayed on the touch panel 27 and sets a desired setting value. Further, the communication processing unit 58 notifies the application control unit 60 of the main body 10 of the setting items and setting values of the application corresponding to the multi-touch gesture notified via the determination unit 55 and the setting item control unit 57. The application control unit 60 of the main body 10 controls the notified application so as to operate with the notified setting item and setting value.

この例では、本体10側のCPU11のアプリ制御部60、操作部20側のCPU21の入力処理部51〜通信処理部58は、ROM12又はROM22に記憶されている入力処理プログラムにより、ソフトウェア的に実現されることとして説明を進める。しかし、アプリ制御部60、及び、入力処理部51〜通信処理部58のうち、一部又は全部を、IC(Integrated Circuit)等のハードウェアで実現してもよい。   In this example, the application control unit 60 of the CPU 11 on the main body 10 side and the input processing unit 51 to the communication processing unit 58 of the CPU 21 on the operation unit 20 side are realized in software by an input processing program stored in the ROM 12 or the ROM 22. The explanation will proceed as it is. However, part or all of the application control unit 60 and the input processing unit 51 to the communication processing unit 58 may be realized by hardware such as an IC (Integrated Circuit).

また、入力処理プログラムは、インストール可能な形式または実行可能な形式のファイルでCD−ROM、フレキシブルディスク(FD)などのコンピュータ装置で読み取り可能な記録媒体に記録して提供してもよい。また、CD−R、DVD、ブルーレイディスク(登録商標)、半導体メモリ等のコンピュータ装置で読み取り可能な記録媒体に記録して提供してもよい。DVDは、「Digital Versatile Disk」の略記である。また、入力処理プログラムは、インターネット等のネットワーク経由でインストールするかたちで提供してもよい。また、入力処理プログラムは、機器内のROM等に予め組み込んで提供してもよい。   The input processing program may be provided as a file in an installable or executable format recorded on a computer-readable recording medium such as a CD-ROM or a flexible disk (FD). Further, the program may be provided by being recorded on a computer-readable recording medium such as a CD-R, a DVD, a Blu-ray disc (registered trademark), or a semiconductor memory. DVD is an abbreviation for “Digital Versatile Disk”. The input processing program may be provided by being installed via a network such as the Internet. The input processing program may be provided by being incorporated in advance in a ROM or the like in the device.

(設定情報の登録動作)
次に、マルチタッチジェスチャーに所望のアプリの起動及び動作を関連付けて登録する、設定情報の登録動作を説明する。なお、以下に説明する設定情報の登録動作は、操作部20のCPU21により、ROM22に記憶されている入力処理プログラムに従って実行される。
(Setting information registration operation)
Next, a setting information registration operation for registering the activation and operation of a desired application in association with a multi-touch gesture will be described. The setting information registration operation described below is executed by the CPU 21 of the operation unit 20 in accordance with an input processing program stored in the ROM 22.

図4は、操作部20のタッチパネル27に表示される入力待機画面の一例である。この図4に示す例の場合、コピーアプリの起動を指定する際に接触操作するコピーアイコン71と、スキャナアプリの起動を指定する際に接触操作するスキャナアイコン72と、ファクスアプリの起動を指定する際に接触操作するファクスアイコン73とが表示されている。また、図4に示す例の場合、次のページのアイコンの表示を指定するための次ページアイコン74と、マルチタッチジェスチャーに所望のアプリの起動及び動作を関連付ける設定情報の登録を指定するための起動アプリ設定アイコン75とが表示されている。   FIG. 4 is an example of an input standby screen displayed on the touch panel 27 of the operation unit 20. In the case of the example shown in FIG. 4, the copy icon 71 that is touched when specifying the start of the copy application, the scanner icon 72 that is touched when specifying the start of the scanner application, and the start of the fax application are specified. A fax icon 73 to be touched is displayed. In the case of the example shown in FIG. 4, the next page icon 74 for designating the display of the icon for the next page and the registration of setting information for associating the activation and operation of a desired application with the multi-touch gesture are designated. A start application setting icon 75 is displayed.

この場合、操作者は、起動アプリ設定アイコン75を接触操作する。起動アプリ設定アイコン75が接触操作されると、表示処理部53は、図5に例示する登録一覧画面をタッチパネル27に表示する。図5に示す例は、登録番号「01」に、頂点が解放された略三角形状のマルチタッチジェスチャーにコピーアプリの起動が関連付けられて登録されている例である。また、図5に示す例は、登録番号「02」〜登録番号「04」は、未設定(未登録)となっている例である。操作者は、登録一覧画面から、例えば登録番号「02」等の未設定となっている登録番号の表示領域82〜84のうち、いずれかの表示領域を接触操作する。なお、既に登録済みの登録番号「01」の表示領域81を接触操作してもよい。この場合、登録番号「01」に対しては、設定情報の再登録として処理される。   In this case, the operator performs a touch operation on the activation application setting icon 75. When the activation application setting icon 75 is touched, the display processing unit 53 displays a registration list screen illustrated in FIG. The example shown in FIG. 5 is an example in which the registration number “01” is registered in association with the activation of the copy application in the substantially triangular multi-touch gesture with the vertex released. In the example illustrated in FIG. 5, the registration numbers “02” to “04” are not set (not registered). From the registration list screen, the operator performs a touch operation on any one of the display areas 82 to 84 of the registration number that has not been set, such as the registration number “02”. Note that the display area 81 with the registration number “01” that has already been registered may be touched. In this case, the registration number “01” is processed as re-registration of the setting information.

表示処理部53は、登録番号の表示領域の接触操作を検出すると、図6に例示するマルチタッチジェスチャーの入力画面をタッチパネル27に表示する。図6に例示するマルチタッチジェスチャーの入力画面は、マルチタッチジェスチャーの入力領域86と、アプリの選択画面の表示指定ボタン87とが表示されている例である。操作者は、入力領域86に対して所望の軌跡を描くように接触操作を行う。表示処理部は、操作者の接触操作の軌跡を所定の色の線で入力領域86上に表示する。なお、入力する操作軌跡は、いわゆる一筆書きのように、一連の操作軌跡でも良いし、複数本の不連続な操作軌跡でもよい。操作者は、所望の操作軌跡を入力すると、アプリの選択画面の表示指定ボタン87を接触操作する。入力処理部51は、アプリの選択画面の表示指定ボタン87が接触操作されると、入力領域86上の操作軌跡に対応する各座標情報を取得し、RAM23に一旦記憶する。   When the display processing unit 53 detects a contact operation in the display area of the registration number, the display processing unit 53 displays the input screen of the multi-touch gesture illustrated in FIG. The multi-touch gesture input screen illustrated in FIG. 6 is an example in which a multi-touch gesture input area 86 and a display designation button 87 on the application selection screen are displayed. The operator performs a contact operation so as to draw a desired locus on the input area 86. The display processing unit displays the locus of the contact operation of the operator on the input area 86 with a line of a predetermined color. The input operation trajectory may be a series of operation trajectories as in a so-called one-stroke drawing, or may be a plurality of discontinuous operation trajectories. When the operator inputs a desired operation locus, the operator touches the display designation button 87 on the application selection screen. When the display designation button 87 on the application selection screen is touched, the input processing unit 51 acquires coordinate information corresponding to the operation locus on the input area 86 and temporarily stores it in the RAM 23.

次に、アプリの選択画面の表示指定ボタン87が接触操作されると、表示処理部53は、図7に例示するアプリの選択画面をタッチパネル27に表示する。図7に例示するアプリの選択画面は、コピーアプリを選択する際に接触操作するコピーアイコン91と、スキャナアプリを選択する際に接触操作するスキャナアイコン92と、ファクスアプリを選択る際に接触操作するファクスアイコン93とが表示されている。また、図7に示す例の場合、選択した機能の詳細設定を行う際に接触操作する詳細設定ボタン94と、マルチタッチジェスチャーに関連付ける機能の設定が完了した際に接触操作する完了ボタン95とが表示されている。また、図7に示す例の場合、マルチタッチジェスチャーの入力画面に戻る際に接触操作する戻りボタン96が表示されている。   Next, when the display designation button 87 on the application selection screen is touched, the display processing unit 53 displays the application selection screen illustrated in FIG. 7 on the touch panel 27. The application selection screen illustrated in FIG. 7 includes a copy icon 91 that performs a contact operation when selecting a copy application, a scanner icon 92 that performs a contact operation when selecting a scanner application, and a contact operation when selecting a fax application. A fax icon 93 to be displayed is displayed. In the case of the example shown in FIG. 7, there are a detailed setting button 94 for performing a contact operation when performing detailed setting of a selected function and a completion button 95 for performing a contact operation when setting of a function associated with a multi-touch gesture is completed. It is displayed. In the case of the example shown in FIG. 7, a return button 96 for performing a touch operation when returning to the multi-touch gesture input screen is displayed.

操作者は、アプリの選択画面に表示された各アイコン91〜93のうち、マルチタッチジェスチャーの入力画面で入力した操作軌跡に関連付ける機能のアイコンを選択する。図7の例は、スキャナアイコン92が選択されている例である。表示処理部53は、この図7に示すように、操作者により選択されたアイコンを高輝度で表示する。操作者は、マルチタッチジェスチャーの入力画面で入力した操作軌跡に関連付ける機能のアイコンを選択すると、詳細設定ボタン94を接触操作して、選択した機能の詳細設定を行う。   The operator selects an icon of a function associated with the operation locus input on the multi-touch gesture input screen from among the icons 91 to 93 displayed on the application selection screen. The example of FIG. 7 is an example in which the scanner icon 92 is selected. As shown in FIG. 7, the display processing unit 53 displays the icon selected by the operator with high luminance. When the operator selects an icon of a function associated with the operation locus input on the multi-touch gesture input screen, the operator performs a touch operation on the detail setting button 94 to perform detailed setting of the selected function.

次に、所望の機能が選択された状態で詳細設定ボタン94の接触操作を検出すると、表示処理部53は、選択された機能の詳細設定選択画面をタッチパネル27に表示する。例えば、図7の例は、スキャナ機能が選択された状態である。この状態で、詳細設定ボタン94の接触操作を検出すると、表示処理部53は、図8に例示するように、スキャナ機能の詳細設定選択画面をタッチパネル27に表示する。図8に示すスキャナ機能の詳細設定選択画面としては、表示処理部53は、送信宛先の設定メニュー101、読み取りカラーの設定メニュー102、読み取りサイズの設定メニュー103、及び、解像度の設定メニュー104等を表示する。   Next, when a touch operation of the detailed setting button 94 is detected in a state where a desired function is selected, the display processing unit 53 displays a detailed setting selection screen for the selected function on the touch panel 27. For example, the example of FIG. 7 shows a state where the scanner function is selected. In this state, when the touch operation of the detailed setting button 94 is detected, the display processing unit 53 displays a detailed setting selection screen for the scanner function on the touch panel 27 as illustrated in FIG. As the detailed setting selection screen for the scanner function shown in FIG. 8, the display processing unit 53 includes a transmission destination setting menu 101, a reading color setting menu 102, a reading size setting menu 103, a resolution setting menu 104, and the like. indicate.

なお、表示処理部53は、このような設定メニュー101〜104と共に、所望の機能の再選択時等に操作する起動アプリ設定ボタン105も表示する。起動アプリ設定ボタン105が接触操作されると、表示処理部53は、図7に例示するアプリの選択画面をタッチパネル27に表示する。操作者は、アプリの選択画面を用いて、所望のアプリを再選択する。   The display processing unit 53 also displays a startup application setting button 105 that is operated when a desired function is reselected, along with such setting menus 101 to 104. When the activation application setting button 105 is touched, the display processing unit 53 displays an application selection screen illustrated in FIG. 7 on the touch panel 27. The operator reselects a desired application using the application selection screen.

次に、詳細設定選択画面の各設定メニューのうち、操作者が希望する設定メニューの表示領域が接触操作されると、表示処理部53は、選択された設定メニューに対応する詳細設定画面をタッチパネル27に表示する。例えば、図7に例示した各設定メニュー1010〜104のうち、送信宛先の設定メニューが選択された場合、表示処理部53は、図9に例示するように、スキャナ機能で読み取った読み取り情報の送信宛先を登録するための登録番号の選択画面を表示する。   Next, when the display area of the setting menu desired by the operator is touched among the setting menus on the detailed setting selection screen, the display processing unit 53 displays the detailed setting screen corresponding to the selected setting menu on the touch panel. 27. For example, when the transmission destination setting menu is selected from the setting menus 1010 to 104 illustrated in FIG. 7, the display processing unit 53 transmits the read information read by the scanner function as illustrated in FIG. A registration number selection screen for registering the destination is displayed.

具体的には、図9の例の場合、登録番号「01」の登録欄111に対しては、「aaa@bbb.ccc」の送信宛先が登録されており、この送信宛先を指定するためのマルチタッチジェスチャーとして縦の直線状の操作軌跡が登録されている。また、図9の例は、登録番号「02」の登録欄112に対しては、送信宛先及びマルチタッチジェスチャーは未登録であることを示している。操作者は、例えば送信宛先が未登録の登録欄である、登録番号「02」の登録欄112の表示領域を接触操作して、送信宛先及びマルチタッチジェスチャーを登録する登録番号を選択する。   Specifically, in the case of the example in FIG. 9, a transmission destination of “aaa@bbb.ccc” is registered in the registration field 111 of the registration number “01”, and this transmission destination is designated. A vertical linear operation locus is registered as a multi-touch gesture. Further, the example of FIG. 9 indicates that the transmission destination and the multi-touch gesture are not registered in the registration field 112 of the registration number “02”. For example, the operator touches the display area of the registration field 112 with the registration number “02”, which is a registration field where the transmission destination is unregistered, and selects the registration number for registering the transmission destination and the multi-touch gesture.

なお、登録済みの登録番号「01」を選択してもよい。この場合、登録番号「01」に対して、送信宛先及びマルチタッチジェスチャーが再登録される。また、表示処理部53は、タッチパネル27の表示を詳細設定選択画面の表示に戻すための次設定指定ボタン113も、詳細設定画面上に表示する。入力処理部51により、次設定指定ボタン113の接触操作が検出されると、表示処理部53は、タッチパネル27の表示を、図8に例示した詳細設定選択画面の表示に戻す。   A registered registration number “01” may be selected. In this case, the transmission destination and multi-touch gesture are re-registered for the registration number “01”. The display processing unit 53 also displays a next setting designation button 113 for returning the display of the touch panel 27 to the display of the detailed setting selection screen on the detailed setting screen. When the input processing unit 51 detects a touch operation of the next setting designation button 113, the display processing unit 53 returns the display on the touch panel 27 to the display of the detailed setting selection screen illustrated in FIG.

次に、図9に示す詳細設定画面において、所望の登録番号が選択されると、表示処理部53は、図10に例示するマルチタッチジェスチャーの入力画面をタッチパネル27に表示する。表示処理部53は、マルチタッチジェスチャーの入力画面に、マルチタッチジェスチャーの入力領域121、及び、送信宛先を登録するための登録番号の選択画面に表示を戻すための戻りボタン122を表示する。また、表示処理部53は、送信宛先の入力画面への移行を指定するための宛先入力ボタン123を、マルチタッチジェスチャーの入力画面に表示する。操作者は、入力領域121上に所望の操作軌跡を描くことで、所望のマルチタッチジェスチャーを入力し、宛先入力ボタン123を接触操作する。宛先入力ボタン123を接触操作されると、設定部54は、入力された操作軌跡に対応する各座標情報を取得し、一時的にRAM23に記憶する。   Next, when a desired registration number is selected on the detailed setting screen illustrated in FIG. 9, the display processing unit 53 displays the input screen for the multi-touch gesture illustrated in FIG. 10 on the touch panel 27. The display processing unit 53 displays a multi-touch gesture input area 121 on the multi-touch gesture input screen and a return button 122 for returning the display to a registration number selection screen for registering a transmission destination. In addition, the display processing unit 53 displays a destination input button 123 for designating the transition to the transmission destination input screen on the input screen of the multi-touch gesture. The operator draws a desired operation locus on the input area 121 to input a desired multi-touch gesture and perform a contact operation on the destination input button 123. When the destination input button 123 is touched, the setting unit 54 acquires each coordinate information corresponding to the input operation locus, and temporarily stores it in the RAM 23.

次に、宛先入力ボタン123が接触操作されると、表示処理部53は、図11に例示する送信宛先の選択画面を表示する。図11の例は、表示処理部53が、RAM23のアドレス帳の記憶領域から読み出した、各ユーザのユーザ名等を表示した例である。また、表示処理部53は、アドレス帳から送信宛先を選択する場合に接触操作するアドレス帳指定ボタン134を表示する。また、表示処理部53は、操作者自身で送信宛先を入力する場合に接触操作する直接入力指定ボタン135を表示する。さらに、表示処理部53は、送信宛先の選択が完了した場合に接触操作する完了ボタン136、及び、図10に例示したマルチタッチジェスチャーの入力画面に表示を戻す場合に接触操作する戻りボタン137を表示する。   Next, when the destination input button 123 is touched, the display processing unit 53 displays a transmission destination selection screen illustrated in FIG. The example of FIG. 11 is an example in which the display processing unit 53 displays the user name of each user read from the address book storage area of the RAM 23. In addition, the display processing unit 53 displays an address book designation button 134 for performing a contact operation when a transmission destination is selected from the address book. Further, the display processing unit 53 displays a direct input designation button 135 for performing a contact operation when the transmission destination is input by the operator himself. Further, the display processing unit 53 includes a completion button 136 for performing a contact operation when selection of a transmission destination is completed, and a return button 137 for performing a contact operation when returning the display to the multi-touch gesture input screen illustrated in FIG. indicate.

RAM23のアドレス帳の記憶領域には、各ユーザのユーザ名、電話番号、電子メールアドレス等のユーザ情報が記憶されている。このアドレス帳から送信宛先を選択する場合、操作者は、アドレス帳指定ボタン134を接触操作する。アドレス帳指定ボタン134を接触操作されると、表示処理部53は、RAM53のアドレス帳に登録されている各ユーザのユーザ名を読み出し、図11に示すように各表示欄131〜133に一覧表示する。操作者は、各表示欄131〜133のうち、所望のユーザ名が表示されている表示欄を接触操作し、続けて完了ボタン136を接触操作する。完了ボタン136が接触操作されると、設定部54は、接触操作された表示欄のユーザ名及び電子メールアドレス等の送信宛先情報をアドレス帳から読み出し、一時的に記憶した操作軌跡に対応する各座標情報に関連付けて設定情報を生成し、RAM23に記憶する。   User information such as the user name, telephone number, and e-mail address of each user is stored in the address book storage area of the RAM 23. When selecting a transmission destination from this address book, the operator touches the address book designation button 134. When the address book designation button 134 is touched, the display processing unit 53 reads the user name of each user registered in the address book of the RAM 53, and displays a list in each of the display fields 131 to 133 as shown in FIG. To do. The operator performs a contact operation on a display field in which a desired user name is displayed among the display fields 131 to 133, and then performs a contact operation on the completion button 136. When the completion button 136 is touched, the setting unit 54 reads out transmission destination information such as a user name and an e-mail address in the display column for which touching has been performed, from the address book, and each of the corresponding operation trajectories temporarily stored. Setting information is generated in association with the coordinate information and stored in the RAM 23.

一方、操作者自身で送信宛先を入力する場合、操作者は、直接入力指定ボタン135を接触操作する。直接入力指定ボタン135が接触操作されると、表示処理部53は、図12に例示するように、送信宛先の入力画面をタッチパネル27に表示する。この図12の例は、所望の送信宛先を入力するためのキーボード142が表示された例である。操作者は、キーボード142を接触操作して所望の文字又は記号等を入力する。表示処理部53は、操作者により入力された文字又は記号等を、表示欄141に表示する。操作者は、所望の宛先の入力が完了すると、完了ボタン136を接触操作する。   On the other hand, when the operator himself / herself inputs the transmission destination, the operator performs a touch operation on the direct input designation button 135. When the direct input designation button 135 is touched, the display processing unit 53 displays a transmission destination input screen on the touch panel 27 as illustrated in FIG. The example of FIG. 12 is an example in which a keyboard 142 for inputting a desired transmission destination is displayed. The operator touches the keyboard 142 to input desired characters or symbols. The display processing unit 53 displays characters or symbols or the like input by the operator in the display column 141. When the input of the desired destination is completed, the operator performs a touch operation on the completion button 136.

所望の宛先が入力され、完了ボタン136が接触操作されると、設定部54は、入力された電子メールアドレス等の送信宛先情報を、一時的に記憶した操作軌跡に対応する各座標情報に関連付けた設定情報を生成し、RAM23に記憶する。そして、表示処理部53は、図9を用いて説明した、操作者が選択した登録番号の表示欄に、登録番号、入力されたマルチタッチジェスチャーの操作軌跡、及び、入力された宛先情報を表示する。なお、アドレス帳から送信宛先が選択された場合も、操作者が選択した登録番号の表示欄に、登録番号、入力されたマルチタッチジェスチャーの操作軌跡、及び、アドレス帳から選択された宛先情報に対応するユーザ名が表示される。また、この段階の表示は、入力された宛先情報等を操作者に確認させるための表示(確認表示)である。   When a desired destination is input and the completion button 136 is touched, the setting unit 54 associates the input destination information such as an e-mail address with each coordinate information corresponding to the temporarily stored operation locus. The generated setting information is generated and stored in the RAM 23. Then, the display processing unit 53 displays the registration number, the input multi-touch gesture operation trajectory, and the input destination information in the display column of the registration number selected by the operator described with reference to FIG. To do. Even when the transmission destination is selected from the address book, the registration number, the input multi-touch gesture operation trajectory, and the destination information selected from the address book are displayed in the registration number display field selected by the operator. The corresponding user name is displayed. The display at this stage is a display (confirmation display) for allowing the operator to confirm the input destination information and the like.

図13に、確認表示の表示例を示す。上述のように、操作者により、先に登録番号「02」の登録欄112が選択されている。このため、表示処理部53は、登録番号「02」の登録欄に、操作者により入力されたマルチタッチジェスチャーの操作軌跡、及び、操作者により直接入力された送信宛先、又はアドレス帳から選択された送信宛先を表示する。操作者は、このような確認表示で登録内容を確認し、次設定指定ボタン113を接触操作する。   FIG. 13 shows a display example of the confirmation display. As described above, the registration field 112 having the registration number “02” is selected by the operator first. Therefore, the display processing unit 53 is selected from the operation track of the multi-touch gesture input by the operator and the transmission destination or address book directly input by the operator in the registration field of the registration number “02”. Display the destination. The operator confirms the registration contents with such a confirmation display, and touches the next setting designation button 113.

次設定指定ボタン113を接触操作されると、表示処理部53は、図8を用いて説明したスキャナ機能の詳細設定選択画面に、タッチパネル27の表示画面を戻す。操作者は、スキャナ機能における、他の詳細設定を行う場合は、詳細設定選択画面から所望の設定メニューを選択操作する。これにより、上述の送信宛先の設定動作と同様に、操作者により選択された詳細設定の設定画面が表示処理部53により表示され、例えば読み取りカラー、読み取りサイズ、及び、解像度等の詳細設定が、順次、可能となる。   When the next setting designation button 113 is touched, the display processing unit 53 returns the display screen of the touch panel 27 to the detailed setting selection screen for the scanner function described with reference to FIG. When performing other detailed settings in the scanner function, the operator selects and operates a desired setting menu from the detailed setting selection screen. As a result, the setting screen for the detailed setting selected by the operator is displayed by the display processing unit 53 in the same manner as the above-described transmission destination setting operation. For example, the detailed settings such as the reading color, the reading size, and the resolution are set. It becomes possible sequentially.

操作者は、このように詳細設定が完了すると、図8に示す詳細設定選択画面の起動アプリ設定ボタン105を接触操作する。表示処理部53は、起動アプリ設定ボタン105が接触操作されると、図7を用いて説明したアプリの選択画面をタッチパネル27に表示する。そして、操作者は、上述の確認表示で確認した各詳細設定の設定内容で、スキャナ機能における詳細設定を登録する場合、完了ボタン95を接触操作する。完了ボタン95が接触操作されると、表示処理部53は、操作者により選択されたアプリを示す情報(図7参照)、選択されたアプリを起動させるためのマルチタッチジェスチャーの操作軌跡に対応する座標情報(図6参照)、アプリの選択された詳細設定を示す情報(図8参照)、選択された詳細設定の処理を指定するためのマルチタッチジェスチャーの操作軌跡に対応する座標情報(図10参照)、及び選択された詳細設定の設定値(図13参照)を関連付けた設定情報を生成し、RAM23に記憶する(本登録)。また、表示処理部53は、設定情報が本登録されると、図14に示すように、上述の登録一覧画面(図5参照)に、新たに登録された設定情報に対応するマルチタッチジェスチャーの操作軌跡、及び、マルチタッチジェスチャーで起動するアプリのアイコンを表示する。   When the detailed setting is completed in this way, the operator performs a touch operation on the activation application setting button 105 on the detailed setting selection screen shown in FIG. When the activation application setting button 105 is touched, the display processing unit 53 displays the application selection screen described with reference to FIG. Then, the operator touches the completion button 95 when registering the detailed setting in the scanner function with the setting contents of each detailed setting confirmed in the confirmation display described above. When the completion button 95 is touched, the display processing unit 53 corresponds to information indicating the application selected by the operator (see FIG. 7) and the operation locus of the multi-touch gesture for starting the selected application. Coordinate information (see FIG. 6), information indicating the selected detailed setting of the application (see FIG. 8), coordinate information corresponding to the operation trajectory of the multi-touch gesture for designating the processing of the selected detailed setting (FIG. 10) (See FIG. 13) and setting information associated with the selected setting value of the detailed setting (see FIG. 13) is generated and stored in the RAM 23 (main registration). Further, when the setting information is fully registered, the display processing unit 53 displays the multi-touch gesture corresponding to the newly registered setting information on the above-described registration list screen (see FIG. 5) as shown in FIG. An operation locus and an icon of an application activated by a multi-touch gesture are displayed.

換言すると、設定情報は、所望のアプリを起動させるためのマルチタッチジェスチャーを示す情報、及び、起動させたアプリの詳細な処理を指定するためのマルチタッチジェスチャーを示す情報を含んでいる。このため、以下に説明するように、操作者は、第1回目のマルチタッチジェスチャーの入力操作を行うことで、所望のアプリを機能させることができ、続けて、第2回目のマルチタッチジェスチャーの入力操作を行うことで、起動させたアプリに所望の詳細な処理を実行させることができる。   In other words, the setting information includes information indicating a multi-touch gesture for activating a desired application and information indicating a multi-touch gesture for designating detailed processing of the activated application. For this reason, as will be described below, the operator can make a desired application function by performing an input operation of the first multi-touch gesture, and subsequently, the second multi-touch gesture. By performing an input operation, the activated application can execute desired detailed processing.

(設定情報に基づくアプリの起動動作)
次に、図15のフローチャートに、上述の設定情報に基づくアプリの起動動作の流れを示す。一例であるが、この図15のフローチャートは、MFP1が省エネモードから通常モードに復帰するまでの流れを示している。また、この図15のフローチャートは、一定時間使用されない時間が経過することで、MFP1を極力少ない電力で駆動して入力待機状態とする省エネモードに移行することで、ステップS1から処理が開始される。
(App launch operation based on setting information)
Next, the flowchart of FIG. 15 shows the flow of the application activation operation based on the setting information. As an example, the flowchart in FIG. 15 shows a flow until the MFP 1 returns from the energy saving mode to the normal mode. Further, in the flowchart of FIG. 15, when a time that is not used for a certain period of time has elapsed, the process is started from step S <b> 1 by shifting to the energy saving mode in which the MFP 1 is driven with as little power as possible to enter an input standby state. .

ステップS1では、図3に示す操作部20の入力処理部51が、タッチパネル27の操作状況を監視し、省エネモード中におけるタッチパネル27を介した1回目の入力操作(第1の入力操作)の有無を判別する。入力処理部51は、入力操作を検出するまでの間(ステップS1:No)、ステップS1の処理を繰り返し実行する。また、入力処理部51は、入力操作を検出すると(ステップS1:Yes)、ステップS2に処理を進める。   In step S1, the input processing unit 51 of the operation unit 20 shown in FIG. 3 monitors the operation status of the touch panel 27, and whether or not there is a first input operation (first input operation) via the touch panel 27 in the energy saving mode. Is determined. The input processing unit 51 repeatedly executes the process of step S1 until an input operation is detected (step S1: No). Further, when the input processing unit 51 detects an input operation (step S1: Yes), the process proceeds to step S2.

すなわち、省エネモードに移行すると、操作部20のCPU21は、タッチパネル27のバックライトを消灯制御した状態で、タッチセンサに対する通電は継続する。これにより、図16又は図17に示すように、タッチパネル27には何も表示されていない状態(いわゆる黒画面)ではあるが、入力操作は検出可能な状態に維持されている。このような省エネモード中のタッチパネル27に対して、操作者は、図16又は図17に例示するように、起動を希望するアプリに関連付けて登録したマルチタッチジェスチャーの操作軌跡を、タッチパネル27上に描く。   That is, when shifting to the energy saving mode, the CPU 21 of the operation unit 20 continues to energize the touch sensor while the backlight of the touch panel 27 is controlled to be turned off. Thus, as shown in FIG. 16 or FIG. 17, the input operation is maintained in a detectable state although nothing is displayed on the touch panel 27 (so-called black screen). With respect to the touch panel 27 in such an energy saving mode, as illustrated in FIG. 16 or FIG. 17, the operator displays on the touch panel 27 the operation locus of the multi-touch gesture registered in association with the application desired to be activated. Draw.

ステップS2では、操作部20の省エネ制御部52が、入力処理部51により、タッチパネル27に対する操作者の接触操作が検出されたタイミングで、タッチパネル27の液晶表示装置に対する通電を開始すると共に、通信処理部58及びアプリ制御部60を介して、本体10に対して通常モードへの復帰要求を行う。また、ステップS2では、入力処理部51が、図16又は図17に例示するような、タッチパネル27に対する操作者の接触操作の軌跡に対応する各座標の座標情報を、設定部54を介して決定部55に供給する。   In step S <b> 2, the energy saving control unit 52 of the operation unit 20 starts energization of the liquid crystal display device of the touch panel 27 at the timing when the input processing unit 51 detects the contact operation of the operator on the touch panel 27 and performs communication processing. The main body 10 is requested to return to the normal mode via the unit 58 and the application control unit 60. In step S2, the input processing unit 51 determines coordinate information of each coordinate corresponding to the trajectory of the contact operation of the operator with respect to the touch panel 27 as illustrated in FIG. Supplied to the unit 55.

次に、決定部55が、マルチタッチジェスチャーの操作軌跡に対応する各座標情報を解析部56に供給し、マルチタッチジェスチャーの解析要求を行う。解析部56は、各座標情報からマルチタッチジェスチャーの操作軌跡を解析し、解析結果を決定部55に供給する。決定部55は、解析結果を設定部54に供給し、マルチタッチジェスチャーの操作軌跡に関連付けられているアプリの検出要求を行う。設定部54は、ステップS3において、RAM23の設定情報23を参照し、決定部55から供給された解析結果に対応するマルチタッチジェスチャーの操作軌跡と同じ操作軌跡の登録の有無を判別する。すなわち、設定部54は、ステップS3において、操作者により入力された操作軌跡と同じ操作軌跡が、RAM23の設定情報23内に登録されているか否かの判別を行う。   Next, the determination unit 55 supplies each coordinate information corresponding to the operation trajectory of the multi-touch gesture to the analysis unit 56, and makes an analysis request for the multi-touch gesture. The analysis unit 56 analyzes the operation trajectory of the multi-touch gesture from each coordinate information, and supplies the analysis result to the determination unit 55. The determination unit 55 supplies the analysis result to the setting unit 54 and makes a detection request for an application associated with the operation locus of the multi-touch gesture. In step S <b> 3, the setting unit 54 refers to the setting information 23 of the RAM 23 and determines whether or not the same operation locus as the operation locus of the multi-touch gesture corresponding to the analysis result supplied from the determination unit 55 is registered. That is, in step S3, the setting unit 54 determines whether or not the same operation locus as the operation locus input by the operator is registered in the setting information 23 of the RAM 23.

操作者により入力された操作軌跡と同じ操作軌跡が、RAM23の設定情報内に登録されているものと判別した場合(ステップS3:Yes)、設定部54は、操作者により入力された操作軌跡と同じ操作軌跡に関連付けられているアプリを設定情報から検出する。そして、設定部54は、検出したアプリを示す情報を、決定部55に通知する。これにより、処理がステップS4に進む。   When it is determined that the same operation locus as the operation locus input by the operator is registered in the setting information in the RAM 23 (step S3: Yes), the setting unit 54 determines that the operation locus input by the operator is the same as the operation locus input by the operator. An application associated with the same operation locus is detected from the setting information. Then, the setting unit 54 notifies the determination unit 55 of information indicating the detected application. Thereby, a process progresses to step S4.

これに対して、操作者により入力された操作軌跡と同じ操作軌跡が、RAM23の設定情報23内に登録されていないものと判別した場合(ステップS3:No)、処理はステップS8に進む。操作者により入力された操作軌跡と同じ操作軌跡が、RAM23の設定情報23内に登録されていないということは、操作者の入力操作は、特定のアプリの起動は指定せず、省エネモードから通常モードにMFP1を復帰させるための入力操作であることを意味する。このため、決定部55は、ステップS8において、タッチパネル27に対して、図4を用いて説明した入力待機画面を表示する表示要求を表示処理部53に行うと共に、通信処理部58を介して本体10のCPU11に、本体10の起動要求を行う。これにより、操作部20のタッチパネル27には、入力待機画面が表示され、また、省エネモード中は電力の供給が停止されていた本体10の各部に対して給電が再開され、MFP1が通常モードに復帰する。   On the other hand, when it is determined that the same operation locus as the operation locus input by the operator is not registered in the setting information 23 of the RAM 23 (step S3: No), the process proceeds to step S8. The fact that the same operation locus as the operation locus input by the operator is not registered in the setting information 23 of the RAM 23 means that the input operation of the operator does not specify the activation of a specific application, and the normal operation from the energy saving mode This means an input operation for returning the MFP 1 to the mode. For this reason, the determination unit 55 makes a display request for displaying the input standby screen described with reference to FIG. 4 to the display processing unit 53 on the touch panel 27 in step S8 and the main body via the communication processing unit 58. The CPU 11 is requested to start the main body 10. As a result, an input standby screen is displayed on the touch panel 27 of the operation unit 20, and power supply is resumed to each unit of the main body 10 for which power supply has been stopped during the energy saving mode, and the MFP 1 enters the normal mode. Return.

一方、操作者により入力された操作軌跡と同じ操作軌跡が、RAM23の設定情報内に登録されているものと判別されることで処理がステップS4に進むと、決定部55が、操作軌跡に関連付けられているアプリの起動要求を、通信処理部58を介して、本体10のアプリ制御部60に供給する。アプリ制御部60は、例えばコピーアプリ61〜ファクスアプリ63のうち、決定部55から起動要求のあったアプリを起動制御する。これにより、操作者は所定のマルチタッチジェスチャーの入力操作を行うだけで、マルチタッチジェスチャーに関連付けられて記憶されているアプリを自動的に起動させることができる。   On the other hand, when it is determined that the same operation locus as the operation locus input by the operator is registered in the setting information of the RAM 23 and the process proceeds to step S4, the determination unit 55 associates the operation locus with the operation locus. The application activation request is supplied to the application control unit 60 of the main body 10 via the communication processing unit 58. For example, the application control unit 60 controls activation of the application requested to be activated from the determination unit 55 among the copy application 61 to the fax application 63. As a result, the operator can automatically activate the application stored in association with the multi-touch gesture only by performing a predetermined multi-touch gesture input operation.

次に、操作者は、起動させたアプリの詳細な動作に関連付けて登録したマルチタッチジェスチャーの操作軌跡を、タッチパネル27上に描く。入力処理部51は、ステップS5において、このような2回目の入力操作(第2の入力操作)の有無を判別する。入力処理部51で第2の入力操作が検出されない場合(ステップS5:No)、処理はステップS9に進む。また、入力処理部51で第2の入力操作が検出された場合(ステップS5:Yes)、処理はステップS6に進む。   Next, the operator draws on the touch panel 27 the operation locus of the multi-touch gesture registered in association with the detailed operation of the activated application. In step S5, the input processing unit 51 determines whether or not there is such a second input operation (second input operation). When the second input operation is not detected by the input processing unit 51 (step S5: No), the process proceeds to step S9. If the second input operation is detected by the input processing unit 51 (step S5: Yes), the process proceeds to step S6.

入力処理部51で第2の入力操作が検出されないことで処理がステップS9に進むと、決定部55は、タッチパネル27に対して、上述の第1の入力操作で起動が指定されたアプリのトップ画面の表示要求を表示処理部53に行うと共に、通信処理部58を介して本体10のCPU11に、本体10の起動要求を行う。これにより、操作部20のタッチパネル27には、第1の入力操作で起動が指定されたアプリのトップ画面が表示され、また、省エネモード中は電力の供給が停止されていた本体10の各部に対して給電が再開され、MFP1が通常モードに復帰する。   When the process proceeds to step S9 because the input processing unit 51 does not detect the second input operation, the determination unit 55 causes the touch panel 27 to start the top of the application whose activation is designated by the first input operation described above. A screen display request is sent to the display processing unit 53 and a startup request for the main body 10 is sent to the CPU 11 of the main body 10 via the communication processing unit 58. As a result, the top screen of the application whose activation is designated by the first input operation is displayed on the touch panel 27 of the operation unit 20, and the power supply is stopped in each part of the main body 10 that has been stopped in the energy saving mode. In contrast, the power supply is resumed, and the MFP 1 returns to the normal mode.

これに対して、第2の入力操作が検出されたことで処理がステップS6に進むと、入力処理部51が、タッチパネル27に対する操作者の接触操作の軌跡に対応する各座標の座標情報を、設定部54を介して決定部55に供給する。決定部55は、第2の入力操作の操作軌跡に対応する各座標情報を解析部56に供給し、マルチタッチジェスチャーの解析要求を行う。解析部56は、各座標情報からマルチタッチジェスチャーの操作軌跡を解析し、解析結果を決定部55に供給する。決定部55は、解析結果を設定部54に供給し、マルチタッチジェスチャーの操作軌跡に関連付けられているアプリの検出要求を行う。   On the other hand, when the process proceeds to step S6 when the second input operation is detected, the input processing unit 51 obtains coordinate information of each coordinate corresponding to the trajectory of the operator's contact operation on the touch panel 27. The data is supplied to the determination unit 55 via the setting unit 54. The determination unit 55 supplies each coordinate information corresponding to the operation trajectory of the second input operation to the analysis unit 56, and makes a multi-touch gesture analysis request. The analysis unit 56 analyzes the operation trajectory of the multi-touch gesture from each coordinate information, and supplies the analysis result to the determination unit 55. The determination unit 55 supplies the analysis result to the setting unit 54 and makes a detection request for an application associated with the operation locus of the multi-touch gesture.

設定部54は、ステップS6において、RAM23の設定情報23を参照し、第1の入力操作で起動が指定されたアプリの詳細設定のうち、決定部55から供給された解析結果に対応する第2の入力操作の操作軌跡と同じ操作軌跡が関連付けされている詳細設定の有無を判別する。第2の入力操作の操作軌跡と同じ操作軌跡が関連付けられている詳細設定が存在する場合、処理がステップS7に進む。また、第2の入力操作の操作軌跡と同じ操作軌跡が関連付けられている詳細設定が存在しない場合、処理がステップS9に進む。   In step S6, the setting unit 54 refers to the setting information 23 in the RAM 23, and among the detailed settings of the application whose activation is designated by the first input operation, the setting unit 54 corresponds to the second analysis result supplied from the determination unit 55. It is determined whether or not there is a detailed setting associated with the same operation locus as the operation locus of the input operation. If there is a detailed setting associated with the same operation locus as the operation locus of the second input operation, the process proceeds to step S7. If there is no detailed setting associated with the same operation locus as the operation locus of the second input operation, the process proceeds to step S9.

起動したアプリの設定情報の詳細設定の中に、第2の入力操作の操作軌跡が関連付けされている詳細設定が存在しないということは、第2の入力操作は誤操作であることを意味する。このため、決定部55は、ステップS9において、タッチパネル27に対して、上述の第1の入力操作で起動が指定されたアプリのトップ画面の表示要求を表示処理部53に行うと共に、通信処理部58を介して本体10のCPU11に、本体10の起動要求を行う。これにより、操作部20のタッチパネル27には、第1の入力操作で起動が指定されたアプリのトップ画面が表示され、また、省エネモード中は電力の供給が停止されていた本体10の各部に対して給電が再開され、MFP1が通常モードに復帰する。   The fact that there is no detailed setting associated with the operation locus of the second input operation among the detailed settings of the setting information of the activated application means that the second input operation is an erroneous operation. For this reason, in step S9, the determination unit 55 requests the display processing unit 53 to display the top screen of the application whose activation is specified by the first input operation described above on the touch panel 27, and the communication processing unit. Via 58, the CPU 11 of the main body 10 is requested to start up the main body 10. As a result, the top screen of the application whose activation is designated by the first input operation is displayed on the touch panel 27 of the operation unit 20, and the power supply is stopped in each part of the main body 10 that has been stopped in the energy saving mode. In contrast, the power supply is resumed, and the MFP 1 returns to the normal mode.

これに対して、起動したアプリの設定情報の詳細設定の中に、第2の入力操作の操作軌跡が関連付けされている詳細設定を検出することで処理がステップS7に進むと、決定部55が、タッチパネル27に対して、第2の入力操作の操作軌跡が関連付けされている詳細設定画面の表示要求を表示処理部53に行う。また、決定部55が、通信処理部58を介して本体10のCPU11に、本体10の起動要求を行う。これにより、操作部20のタッチパネル27には、第2の入力操作の操作軌跡が関連付けされている詳細設定画面が表示され、また、省エネモード中は電力の供給が停止されていた本体10の各部に対して給電が再開され、MFP1が通常モードに復帰する。   On the other hand, when the processing proceeds to step S7 by detecting the detailed setting associated with the operation locus of the second input operation in the detailed setting of the setting information of the activated application, the determining unit 55 The display processing unit 53 is requested to display a detailed setting screen in which the operation locus of the second input operation is associated with the touch panel 27. In addition, the determination unit 55 requests the CPU 11 of the main body 10 to start the main body 10 via the communication processing unit 58. Thereby, the touch panel 27 of the operation unit 20 displays a detailed setting screen associated with the operation locus of the second input operation, and each part of the main body 10 in which power supply is stopped during the energy saving mode. Power supply is resumed, and MFP 1 returns to the normal mode.

図18に、詳細設定画面の一例を示す。この図18の例は、起動したアプリがスキャナアプリであり、読み取った原稿の送信宛先が、「xxx@yyy.zzz」の電子メールアドレスに設定されていることを示している。また、図18の例は、スキャナの読み取り設定は「フルカラー」、読み取りサイズは「自動読み取り(自動で検出した読み取りサイズに設定)」、読み取り解像度は「300dpi」に設定されていることを示している。   FIG. 18 shows an example of the detailed setting screen. The example of FIG. 18 indicates that the activated application is a scanner application, and the transmission destination of the read document is set to an e-mail address of “xxx@yyy.zzz”. Further, the example of FIG. 18 shows that the reading setting of the scanner is set to “full color”, the reading size is set to “automatic reading (set to the automatically detected reading size)”, and the reading resolution is set to “300 dpi”. Yes.

表示処理部53は、このような詳細設定の情報と共に、スキャナ機能の動作の取り消しを指定するための取り消しボタン121、及び、表示されている詳細設定に対応する動作の開始を指定するためのスタートボタン122をタッチパネル27に表示する。取り消しボタン121が操作されると、表示処理部53は、図4に示した入力待機画面を表示する(起動しているアプリのトップ画面等を表示してもよい)。この場合、操作者は、所望のアプリを選択して起動し直す。   The display processing unit 53, together with such detailed setting information, a cancel button 121 for specifying cancellation of the operation of the scanner function, and a start for specifying the start of the operation corresponding to the displayed detailed setting A button 122 is displayed on the touch panel 27. When the cancel button 121 is operated, the display processing unit 53 displays the input standby screen shown in FIG. 4 (the top screen of the activated application may be displayed). In this case, the operator selects a desired application and restarts it.

スタートボタン122が操作されると、設定項目制御部57は、タッチパネル27に表示されている詳細設定に対応する詳細設定情報を、RAM23の設定情報から読み出し、通信処理部58を介して、本体10のアプリ制御部60に通知する。アプリ制御部60は、通知された詳細設定情報に基づいて、対応するアプリの動作を制御する。これにより、第2の入力操作の操作軌跡に対して予め関連付けしておいた詳細設定に対応する動作が、第1の入力操作の操作軌跡に対して予め関連付けしておいたアプリで実行される。   When the start button 122 is operated, the setting item control unit 57 reads the detailed setting information corresponding to the detailed setting displayed on the touch panel 27 from the setting information in the RAM 23, and the main body 10 via the communication processing unit 58. To the application control unit 60. The application control unit 60 controls the operation of the corresponding application based on the notified detailed setting information. Thereby, the operation corresponding to the detailed setting previously associated with the operation locus of the second input operation is executed by the application previously associated with the operation locus of the first input operation. .

なお、上述の例は、第1の入力操作及び第2の入力操作の、計2回の入力操作で所望のアプリの詳細動作まで制御する例であったが、1回の入力操作又は3回以上の入力操作で所望のアプリの詳細動作を制御してもよい。1回の入力操作で所望のアプリの詳細動作まで制御する場合、起動するアプリ及び詳細動作を、所望のマルチタッチジェスチャーに関連付ければよい。同様に、3回以上の入力操作で所望のアプリの詳細動作を制御する場合も、各マルチタッチジェスチャーに、それぞれ所望の詳細情報等を関連付ければよい。   The above example is an example in which the detailed operation of the desired application is controlled by a total of two input operations of the first input operation and the second input operation. The detailed operation of a desired application may be controlled by the above input operation. When controlling up to a detailed operation of a desired application with a single input operation, the activated application and the detailed operation may be associated with a desired multi-touch gesture. Similarly, when the detailed operation of a desired application is controlled by three or more input operations, the desired detailed information or the like may be associated with each multi-touch gesture.

(第1の実施の形態の効果)
以上の説明から明らかなように、第1の実施の形態のMFP1は、省エネモードに移行している状態で、操作者によりマルチタッチジェスチャーの入力操作が行われた際に、通常モードに復帰して、マルチタッチジェスチャーに対応する動作を行う。これにより、操作者が希望する動作を迅速に提供できる。
(Effects of the first embodiment)
As is clear from the above description, the MFP 1 according to the first embodiment returns to the normal mode when an input operation of a multi-touch gesture is performed by the operator in the state of shifting to the energy saving mode. To perform operations corresponding to multi-touch gestures. Thereby, the operation desired by the operator can be quickly provided.

また、1回目のマルチタッチジェスチャーの入力操作で、対応するアプリを起動し、2回目のマルチタッチジェスチャーの入力操作で、起動したアプリの詳細な動作を提供する。このため、操作者が希望するアプリを迅速に起動し、また、操作者が希望する動作を迅速に提供できる。   Further, the corresponding application is activated by the first multi-touch gesture input operation, and the detailed operation of the activated application is provided by the second multi-touch gesture input operation. For this reason, an application desired by the operator can be quickly activated, and an operation desired by the operator can be provided quickly.

なお、省エネモードに移行している状態で、操作者によりマルチタッチジェスチャーの入力操作が行われた際に、通常モードに復帰して、マルチタッチジェスチャーに対応する動作を行うこととした。しかし、通常モード時にマルチタッチジェスチャーの入力操作が行われた際に、マルチタッチジェスチャーに対応する動作を実行してもよい。この場合でも、操作者が希望する動作を迅速に提供できる。   In addition, when the operator performs an input operation of a multi-touch gesture in the state of shifting to the energy saving mode, the operation returns to the normal mode and performs an operation corresponding to the multi-touch gesture. However, when a multi-touch gesture input operation is performed in the normal mode, an operation corresponding to the multi-touch gesture may be executed. Even in this case, the operation desired by the operator can be quickly provided.

また、マルチタッチジェスチャーは、操作者がタッチパネル27上を接触操作して入力することとした。しかし、タッチパネル27以外であっても、例えばスライドパット等の接触操作を検出可能なデバイスであれば、どのようなデバイスを用いてもよい。さらに、マウス装置等の入力装置の移動軌跡を、上述の操作軌跡として入力してもよい。   The multi-touch gesture is input by the operator touching the touch panel 27. However, any device other than the touch panel 27 may be used as long as it can detect a contact operation such as a slide pad. Furthermore, a movement locus of an input device such as a mouse device may be input as the above-described operation locus.

また、タッチパネル27を介してマルチタッチジェスチャーを入力した。しかし、他の手法でマルチタッチジェスチャーを入力してもよい。例えば、カメラ装置で操作物の移動を撮像し、撮像画像を解析してマルチタッチジェスチャーの操作軌跡を検出してもよい。この場合でも、上述と同様の効果を得ることができる。   A multi-touch gesture was input via the touch panel 27. However, a multi-touch gesture may be input by other methods. For example, the movement of the operation article may be imaged with a camera device, and the captured image may be analyzed to detect the operation locus of the multi-touch gesture. Even in this case, the same effect as described above can be obtained.

(第2の実施の形態)
次に、第2の実施の形態のMFPの説明をする。上述の第1の実施の形態のMFP1の場合、第1の入力操作で、所望のアプリ起動用のマルチタッチジェスチャーの入力を行った後に、第2の入力操作で、詳細設定用のマルチタッチジェスチャーの入力を行う。このため、第1の入力操作を開始する最初の接触操作で省エネモードから通常モードに復帰し、又は第1の入力操作を行った後に第2の入力操作を行う前に、省エネモードから通常モードに復帰し、操作者の入力操作が中断される不都合が考えらえる。
(Second Embodiment)
Next, an MFP according to the second embodiment will be described. In the case of the MFP 1 according to the first embodiment described above, after a multi-touch gesture for starting a desired application is input by the first input operation, the multi-touch gesture for detailed setting is input by the second input operation. Input. For this reason, the energy saving mode returns to the normal mode from the energy saving mode by the first contact operation that starts the first input operation, or before the second input operation is performed after the first input operation is performed. It can be considered that the operator's input operation is interrupted.

このため、第2の実施の形態のMFPは、終了検出部の一例である決定部55(図3参照)が、操作者の入力操作の終了を検出する。具体的には、決定部55は、入力処理部51により、例えばダブルタップ操作等の、所定の入力終了操作が検出された際に、操作者の入力操作の終了を検出する。または、決定部55は、設定部54により、アプリの詳細設定の全ての項目に対する入力の完了が検出された際に、操作者の入力操作の終了を検出する。または、決定部55は、入力されたマルチタッチジェスチャーの操作軌跡が、設定部54によりRAM23の設定情報から検出されなかった場合に、操作者の入力操作の終了を検出する。または、決定部55は、入力処理部51によりタッチパネル27に対する操作物の接触操作が検出された後に、操作物が非接触状態とされ、一定時間経過した場合に、操作者の入力操作の終了を検出する。   Therefore, in the MFP according to the second embodiment, the determination unit 55 (see FIG. 3), which is an example of the end detection unit, detects the end of the input operation by the operator. Specifically, the determination unit 55 detects the end of the operator's input operation when the input processing unit 51 detects a predetermined input end operation such as a double tap operation. Or the determination part 55 detects completion | finish of an operator's input operation, when the setting part 54 detects completion of the input with respect to all the items of the detailed setting of an application. Or the determination part 55 detects completion | finish of an operator's input operation, when the operation locus | trajectory of the input multi-touch gesture is not detected from the setting information of RAM23 by the setting part 54. FIG. Alternatively, the determination unit 55 terminates the input operation of the operator when the operation object is brought into a non-contact state after a certain time has elapsed after the input processing unit 51 detects the contact operation of the operation object on the touch panel 27. To detect.

省エネモード時において、復帰制御部の一例である省エネ制御部52は、入力処理部51により入力操作が検出された場合でも、決定部55により上述の入力操作の終了が検出されるまでの間、本体10側に対して復帰要求を送信せずに、復帰要求の送信待機状態となる。そして、省エネ制御部52は、決定部55により上述の入力操作の終了が検出された際に、本体10側に対して復帰要求を送信する。   In the energy saving mode, the energy saving control unit 52, which is an example of the return control unit, even when the input operation is detected by the input processing unit 51, until the end of the input operation is detected by the determination unit 55. A return request is not sent to the main body 10 side, and a return request transmission standby state is entered. And the energy-saving control part 52 transmits a return request | requirement with respect to the main body 10 side, when the determination part 55 detects completion | finish of the above-mentioned input operation.

これにより、操作者の入力操作の途中で省エネモードから通常モードに復帰し、操作者の入力操作が中断される不都合を防止できる。このため、入力途中のマルチタッチジェスチャーの誤検知、及び、設定操作が途中で強制終了となる不都合等を防止できる他、上述の第1の実施の形態と同様の効果を得ることができる。   Accordingly, it is possible to prevent the inconvenience that the energy saving mode returns to the normal mode in the middle of the operator's input operation and the operator's input operation is interrupted. For this reason, it is possible to prevent the erroneous detection of the multi-touch gesture in the middle of input and the inconvenience that the setting operation is forcibly terminated in the middle, and the same effects as in the first embodiment described above can be obtained.

(第3の実施の形態)
次に、第3の実施の形態のMFPの説明をする。上述の第1の実施の形態のMFP1の場合、一例として第1の入力操作で所望のアプリを起動し、第2の入力操作で、起動したアプリの所望の詳細な動作を指定するものであった。このような複数の入力操作に所望の動作をそれぞれ関連付ける設定操作を行う場合、全ての設定項目の設定が完了するまでの間、省エネモードから通常モードへの復帰を待機状態とすると、通常モードへの復帰が遅くなるおそれがある。すなわち、極端な例であるが、計10回の入力操作に対して、所望のアプリの起動及び動作をそれぞれ関連付ける設定操作を行う場合、10回目の入力操作に対する所望の動作の関連付けが完了するまのでの間、MFP1は通常モードに復帰できない状態となる。
(Third embodiment)
Next, an MFP according to the third embodiment will be described. In the case of the MFP 1 according to the first embodiment described above, as an example, a desired application is activated by a first input operation, and a desired detailed operation of the activated application is designated by a second input operation. It was. When performing a setting operation that associates each desired operation with a plurality of input operations as described above, if the return from the energy saving mode to the normal mode is in a standby state until the setting of all setting items is completed, the normal mode is entered. May be delayed. That is, as an extreme example, when a setting operation that associates activation and operation of a desired application with each of a total of 10 input operations is performed, the association of the desired operation with the 10th input operation is completed. During this time, the MFP 1 cannot return to the normal mode.

このため、第3の実施の形態のMFPの場合、設定操作の途中であっても、通常モードに復帰可能となった際に、MFP1を通常モードに復帰させる。具体的には、第3の実施の形態のMFP1において、操作者が省エネモード中に操作部20を操作することで、上述のように所望のアプリの起動、及び、起動するアプリの詳細動作を、それぞれ所望のマルチタッチジェスチャーに関連付ける設定操作を行っていたとする。図3に示す操作部20の入力処理部51は、設定操作中において、タッチパネル27上を接触操作している操作物が所定時間以上、離れた事象を検出する。すなわち、入力処理部51は、設定操作中において、タッチパネル27が非接触操作状態となってから経過した時間を検出する。省エネ制御部52は、入力処理部51により、タッチパネル27が非接触操作状態となってから所定時間の経過が検出された際に、本体10に対して通常モードへの復帰要求を行う。これにより、CPU11は、省エネモード時には電力の供給を停止していた本体10の各部に対して給電を再開し、通常モードへ復帰させる。   For this reason, in the case of the MFP according to the third embodiment, the MFP 1 is returned to the normal mode when it is possible to return to the normal mode even during the setting operation. Specifically, in the MFP 1 according to the third embodiment, when the operator operates the operation unit 20 during the energy saving mode, activation of a desired application and detailed operation of the application to be activated are performed as described above. Assume that a setting operation associated with each desired multi-touch gesture is performed. The input processing unit 51 of the operation unit 20 illustrated in FIG. 3 detects an event in which the operation article that is in contact with the touch panel 27 is separated for a predetermined time or more during the setting operation. That is, the input processing unit 51 detects the time that has elapsed since the touch panel 27 entered the non-contact operation state during the setting operation. The energy-saving control unit 52 requests the main body 10 to return to the normal mode when the input processing unit 51 detects that a predetermined time has elapsed since the touch panel 27 is in a non-contact operation state. Thereby, CPU11 restarts electric power feeding with respect to each part of the main body 10 which stopped supply of electric power at the time of energy saving mode, and returns to normal mode.

次に、設定部54は、本体10を通常モードに復帰させるまでの間に、操作者による設定が完了している設定情報(途中までの設定情報)をRAM23から読み出し、決定部55に通知する。決定部55は、通知された途中までの設定情報を、通信処理部58を介して本体10のアプリ制御部60に供給する。アプリ制御部60は、途中までの設定情報に従って、アプリの起動及び詳細動作の提供を実行制御する。これにより、タッチパネル27の非接触操作が検出されるまでの間に入力が完了した設定情報に対応するアプリが起動され、また、詳細な動作が提供される。   Next, the setting unit 54 reads the setting information (setting information up to the middle) that has been set by the operator from the RAM 23 until the main body 10 returns to the normal mode, and notifies the determination unit 55 of the setting information. . The determination unit 55 supplies the notified setting information until halfway to the application control unit 60 of the main body 10 via the communication processing unit 58. The application control unit 60 executes and controls activation of the application and provision of detailed operations according to the setting information up to the middle. Thereby, the application corresponding to the setting information that has been input until the non-contact operation of the touch panel 27 is detected is activated, and detailed operations are provided.

また、設定部54は、表示処理部53を介して、例えば図8に示した詳細設定選択画面をタッチパネル27に表示する。上述のように、図8の例は、スキャナ機能の詳細設定選択画面の例である。そして、詳細設定選択画面には、送信宛先の設定メニュー101、読み取りカラーの設定メニュー102、読み取りサイズの設定メニュー103、及び、解像度の設定メニュー104等が表示されている。設定部54は、表示処理部53を介して、このような設定メニューのうち、設定が完了していない設定メニューの表示形態を変更して表示する。   Further, the setting unit 54 displays, for example, the detailed setting selection screen illustrated in FIG. 8 on the touch panel 27 via the display processing unit 53. As described above, the example of FIG. 8 is an example of the detailed setting selection screen for the scanner function. On the detailed setting selection screen, a transmission destination setting menu 101, a reading color setting menu 102, a reading size setting menu 103, a resolution setting menu 104, and the like are displayed. The setting unit 54 changes and displays the display form of the setting menu that has not been set among the setting menus via the display processing unit 53.

例えば、送信宛先の設定メニュー101及び読み取りカラーの設定メニュー102の設定が完了した時点で、タッチパネル27の非接触操作が検出され、通常モードへ復帰させた場合、設定部54は、設定が完了している送信宛先の設定メニュー101及び読み取りカラーの設定メニュー102を黒文字で表示し、設定が完了していない読み取りサイズの設定メニュー103及び解像度の設定メニュー104を、例えば赤文字で表示する。すなわち、設定部54は、設定が完了している設定メニューと、設定が完了していない設定メニューとを、異なる表示形態で表示する。なお、他の表示形態としては、表示輝度を異ならせてもよいし、字体を変更してもよい。また、飾り文字等にしてもよい。これにより、操作者は、未設定の設定メニューを容易に認識でき、通常モードに移行された後からでも、設定操作を継続して行うことで、設定情報の設定を完了させることができる。   For example, when the non-contact operation of the touch panel 27 is detected and the setting is returned to the normal mode when the setting of the transmission destination setting menu 101 and the reading color setting menu 102 is completed, the setting unit 54 completes the setting. The setting menu 101 for the transmission destination and the setting menu 102 for the reading color are displayed in black characters, and the setting menu 103 for the reading size and the setting menu 104 for the resolution that have not been set are displayed in red characters, for example. That is, the setting unit 54 displays the setting menu for which setting has been completed and the setting menu for which setting has not been completed in different display forms. As other display forms, the display luminance may be varied or the font may be changed. Moreover, it may be a decorative character. As a result, the operator can easily recognize the setting menu that has not been set, and the setting information can be completed by continuing the setting operation even after the transition to the normal mode.

このように第3の実施の形態のMFPは、設定情報の設定操作の間に、所定のタイミングで省エネモードから通常モードに復帰させる。これにより、設定情報の設定の完了を待たずに、本体10を通常モードに復帰させておくことができる。このため、設定情報の設定が完了した際に、設定情報で指定されている機能及び動作をスムーズに提供できる。   As described above, the MFP according to the third embodiment returns from the energy saving mode to the normal mode at a predetermined timing during the setting information setting operation. Thereby, the main body 10 can be returned to the normal mode without waiting for the setting information setting to be completed. For this reason, when the setting information setting is completed, the functions and operations specified by the setting information can be smoothly provided.

また、設定が完了している設定値(例えば、上述の設定メニュー)と、設定が完了していない設定値との表示形態を異ならせて一覧表示する。これにより、操作者は、設定が完了していない設定値を容易に認識できる。このため、本体10が通常モードに復帰した後でも、設定が完了していない設定値の設定を行い、設定値の設定を完了させることができる。   Further, a list is displayed with different display forms of setting values for which setting has been completed (for example, the setting menu described above) and setting values for which setting has not been completed. As a result, the operator can easily recognize a set value that has not been set. For this reason, even after the main body 10 returns to the normal mode, setting values that have not been set can be set to complete setting of the setting values.

(第4の実施の形態)
次に、第4の実施の形態のMFPの説明をする。上述の各実施の形態のMFPの場合、あくまでも一例であるが、1本の操作物の接触操作で描かれる操作軌跡を、操作者により入力された操作軌跡として取得する説明とした。これに対して、第4の実施の形態のMFPは、複数の操作物で略々同時に描かれた各操作軌跡を、操作者により入力された操作軌跡として取得する例である。
(Fourth embodiment)
Next, an MFP according to the fourth embodiment will be described. In the case of the MFP according to each of the above-described embodiments, the operation locus drawn by the contact operation of one operation article is acquired as an operation locus input by the operator. On the other hand, the MFP according to the fourth embodiment is an example in which each operation locus drawn substantially simultaneously with a plurality of operation objects is acquired as an operation locus input by the operator.

この場合、タッチパネル27は、マルチタッチ方式対応のタッチパネルとなっている。入力処理部51は、タッチパネル27の表示面に対する、2箇所以上同時の接触操作を検出し、各箇所を始点とした複数の操作軌跡(マルチタッチジェスチャー)を検出する。各マルチタッチジェスチャーには、所定の機能及び動作が割り当てられている。例えば、2本の指で縦又は横の直線状の直線の操作軌跡(=2本の直線の操作軌跡)を描いた場合、設定部54はRAM23の設定情報を参照することで、このようなマルチタッチジェスチャーに関連付けされて記憶されている機能及び動作を検出する。   In this case, the touch panel 27 is a multi-touch type touch panel. The input processing unit 51 detects two or more simultaneous contact operations on the display surface of the touch panel 27, and detects a plurality of operation trajectories (multi-touch gestures) starting from each location. Predetermined functions and operations are assigned to each multi-touch gesture. For example, when a vertical or horizontal straight line operation trajectory (= two straight line operation trajectories) is drawn with two fingers, the setting unit 54 refers to the setting information in the RAM 23 to obtain such an operation trajectory. Detecting functions and operations stored in association with multi-touch gestures.

例えば、このようなマルチタッチジェスチャーに、2部の印刷部数でコピーを行う動作が関連付けされていた場合、決定部55は、コピー機能を起動し、コピーを2部行う動作要求を、通信処理部58を介してアプリ制御部60に行う。アプリ制御部60は、このような動作要求に対応して、コピー機能を起動すると共に、印刷部数2部のコピーを行うようにコピー機能を制御する。これにより、タッチパネル27上を2本の指で直線状の操作軌跡を描くように接触操作しただけで、コピーされた2部の印刷物を得ることができる。   For example, when such a multi-touch gesture is associated with an operation of copying with two copies, the determining unit 55 activates the copy function and sends an operation request to make two copies to the communication processing unit. This is performed to the application control unit 60 via 58. In response to such an operation request, the application control unit 60 activates the copy function and controls the copy function so that two copies are made. As a result, it is possible to obtain two copies of the printed matter simply by performing a contact operation on the touch panel 27 so as to draw a linear operation locus with two fingers.

なお、操作本数及び操作軌跡の形態は一例である。このため、3本以上の指で所望の操作軌跡を描くように入力操作を行ってもよい。また、マルチタッチジェスチャーに対して、どのような機能及び動作を関連付けてもよい。例えば、2本指で入力操作したときには、印刷部数を「3部」としてもよい。また、2本指で入力操作したときには、印刷部数を「4部」としてもよい。   Note that the number of operations and the form of the operation trajectory are examples. For this reason, the input operation may be performed so as to draw a desired operation locus with three or more fingers. Any function and operation may be associated with the multi-touch gesture. For example, when an input operation is performed with two fingers, the number of copies may be “3”. Further, when an input operation is performed with two fingers, the number of copies may be set to “4”.

上述の各実施の形態は、一例として提示したものであり、本発明の範囲を限定することは意図していない。この新規な実施の形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことも可能である。また、各実施の形態及び各実施の形態の変形は、発明の範囲や要旨に含まれると共に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。   Each of the above-described embodiments has been presented as an example, and is not intended to limit the scope of the present invention. The novel embodiment can be implemented in various other forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. Each embodiment and modifications of each embodiment are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

1 複合機(MFP)
10 本体
11 CPU
12 ROM
13 RAM
14 HDD
15 通信I/F
16 接続I/F
17 エンジン部
18 バスライン
19 FAXモデム
20 操作部
21 CPU
22 ROM
23 RAM
24 フラッシュメモリ
25 通信I/F
26 接続I/F
27 タッチパネル
28 バスライン
29 ICカードI/F
30 通信路
40 ネットワーク
51 入力処理部
52 省エネ制御部
53 表示処理部
54 設定部
55 決定部
56 解析部
57 設定項目制御部
58 通信処理部
60 アプリ制御部
61 コピーアプリ
62 スキャナアプリ
63 ファクスアプリ
75 起動アプリ設定アイコン
86 マルチタッチジェスチャーの入力領域
121 マルチタッチジェスチャーの入力領域
1 MFP (MFP)
10 Body 11 CPU
12 ROM
13 RAM
14 HDD
15 Communication I / F
16 Connection I / F
17 Engine part 18 Bus line 19 FAX modem 20 Operation part 21 CPU
22 ROM
23 RAM
24 Flash memory 25 Communication I / F
26 Connection I / F
27 Touch Panel 28 Bus Line 29 IC Card I / F
DESCRIPTION OF SYMBOLS 30 Communication path 40 Network 51 Input processing part 52 Energy-saving control part 53 Display processing part 54 Setting part 55 Determination part 56 Analysis part 57 Setting item control part 58 Communication processing part 60 Application control part 61 Copy application 62 Scanner application 63 Fax application 75 Start-up Application setting icon 86 Multi-touch gesture input area 121 Multi-touch gesture input area

特開2006−330843号公報JP 2006-330843 A

Claims (9)

記憶部に記憶された、操作軌跡を示す操作軌跡情報、及び、起動させる機能を示す起動機能情報を含む設定情報から、入力部を介して入力された操作軌跡に対応する機能を検出する機能検出部と、
検出された前記機能を提供するように前記機能の提供部を制御する制御部と、
を有する情報処理装置。
Function detection for detecting a function corresponding to the operation trajectory input via the input unit, from setting information including operation trajectory information indicating the operation trajectory and activation function information indicating the function to be activated, stored in the storage unit And
A control unit that controls the function providing unit so as to provide the detected function;
An information processing apparatus.
前記設定情報は、前記機能の詳細動作を示す詳細動作情報を、さらに含み、
前記機能検出部は、前記設定情報から前記操作軌跡に対応する機能及び詳細動作を検出し、
前記制御部は、検出された前記機能及び前記詳細動作を提供するように前記機能の提供部を制御すること
を特徴とする請求項1に記載の情報処理装置。
The setting information further includes detailed operation information indicating a detailed operation of the function,
The function detection unit detects a function and a detailed operation corresponding to the operation locus from the setting information,
The information processing apparatus according to claim 1, wherein the control unit controls the function providing unit so as to provide the detected function and the detailed operation.
前記提供部を第1の動作モードから第2の動作モードへ移行させる移行要求を送信する送信部と、
所定の入力終了操作を検出する終了検出部と、
前記入力部により前記操作軌跡が入力されてから、前記終了検出部で前記所定の入力終了操作が検出されるまでの間、前記提供部に対する前記移行要求の送信を待機するように前記送信部を制御し、前記終了検出部で前記所定の入力終了操作が検出された際に、前記提供部に対して前記移行要求を送信するように前記送信部を制御する送信制御部と、をさらに備えたこと
を特徴とする請求項1又は請求項2に記載の情報処理装置。
A transmission unit for transmitting a transition request for causing the providing unit to shift from the first operation mode to the second operation mode;
An end detection unit for detecting a predetermined input end operation;
The transmission unit is configured to wait for transmission of the transition request to the providing unit after the operation locus is input by the input unit until the predetermined input end operation is detected by the end detection unit. And a transmission control unit that controls the transmission unit to transmit the transition request to the providing unit when the predetermined input end operation is detected by the end detection unit. The information processing apparatus according to claim 1 or claim 2, wherein
前記提供部を第1の動作モードから第2の動作モードへ移行させる移行要求を送信する送信部と、
入力された前記操作軌跡に対応する前記機能及び前記詳細動作を含む前記設定情報を生成し前記記憶部に記憶する生成部と、
所定の入力操作を検出する入力検出部と、
前記所定の入力操作が検出された際に、前記提供部に対して前記移行要求を送信するように前記送信部を制御する移行送信制御部と、をさらに備えたこと
を特徴とする請求項1又は請求項2に記載の情報処理装置。
A transmission unit for transmitting a transition request for causing the providing unit to shift from the first operation mode to the second operation mode;
A generation unit that generates the setting information including the function and the detailed operation corresponding to the input operation locus, and stores the setting information in the storage unit;
An input detection unit for detecting a predetermined input operation;
2. A transition transmission control unit that controls the transmission unit to transmit the transition request to the providing unit when the predetermined input operation is detected. Alternatively, the information processing apparatus according to claim 2.
前記所定の入力操作が検出される前に設定が完了した前記機能の前記詳細動作の表示形態と、設定が完了していない前記機能の前記詳細動作の表示形態とを、それぞれ異なる表示形態で表示部に一覧表示する表示制御部と、をさらに備えること
を特徴とする請求項4に記載の情報処理装置。
The display form of the detailed operation of the function that has been set before the predetermined input operation is detected and the display form of the detailed operation of the function that has not been set are displayed in different display forms. The information processing apparatus according to claim 4, further comprising: a display control unit that displays a list on the unit.
前記設定情報は、複数の操作軌跡を示す操作軌跡情報、起動させる機能を示す起動機能情報、及び、前記機能の詳細動作を示す詳細動作情報を含み、
前記入力部は、複数の操作軌跡の入力を検出すること
を特徴とする請求項1から請求項5のうち、いずれか一項に記載の情報処理装置。
The setting information includes operation trajectory information indicating a plurality of operation trajectories, activation function information indicating a function to be activated, and detailed operation information indicating a detailed operation of the function,
The information processing apparatus according to any one of claims 1 to 5, wherein the input unit detects an input of a plurality of operation trajectories.
前記第1の動作モードは、前記提供部の各箇所のうち、所定の箇所に対する通電を停止して省エネルギー化を図る省エネルギーモードであり、
前記第2の動作モードは、前記提供部の前記通電を停止していた箇所に対する通電を再開する通常モードであること
を特徴とする請求項1から請求項6のうち、いずれか一項に記載の情報処理装置。
The first operation mode is an energy saving mode in which energization to a predetermined place is stopped to save energy among the places of the providing unit,
The said 2nd operation mode is a normal mode which restarts the electricity supply with respect to the location which has stopped the said electricity supply of the said provision part. The any one of Claims 1-6 characterized by the above-mentioned. Information processing device.
操作軌跡を示す操作軌跡情報、及び、起動させる機能を示す起動機能情報を含む設定情報が記憶された記憶部と、
前記操作軌跡の入力を行うための入力部と、
入力された操作軌跡に対応する前記機能を、前記記憶部の前記設定情報から検出する機能検出部と、
検出された前記機能を提供するように前記機能の提供部を制御する制御部と
を有する情報処理システム。
A storage unit in which setting information including operation trajectory information indicating an operation trajectory and activation function information indicating a function to be activated is stored;
An input unit for inputting the operation locus;
A function detection unit that detects the function corresponding to the input operation locus from the setting information of the storage unit;
An information processing system comprising: a control unit that controls the function providing unit so as to provide the detected function.
コンピュータを、
記憶部に記憶された、操作軌跡を示す操作軌跡情報、及び、起動させる機能を示す起動機能情報を含む設定情報から、入力部を介して入力された操作軌跡に対応する機能を検出する機能検出部と、
検出された前記機能を提供するように前記機能の提供部を制御する制御部として機能させること
を特徴とする情報処理プログラム。
Computer
Function detection for detecting a function corresponding to the operation trajectory input via the input unit, from setting information including operation trajectory information indicating the operation trajectory and activation function information indicating the function to be activated, stored in the storage unit And
An information processing program that functions as a control unit that controls the function providing unit so as to provide the detected function.
JP2015044664A 2015-03-06 2015-03-06 Information processing device, information processing system, and information processing program Pending JP2016164725A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2015044664A JP2016164725A (en) 2015-03-06 2015-03-06 Information processing device, information processing system, and information processing program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2015044664A JP2016164725A (en) 2015-03-06 2015-03-06 Information processing device, information processing system, and information processing program

Publications (1)

Publication Number Publication Date
JP2016164725A true JP2016164725A (en) 2016-09-08

Family

ID=56876613

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2015044664A Pending JP2016164725A (en) 2015-03-06 2015-03-06 Information processing device, information processing system, and information processing program

Country Status (1)

Country Link
JP (1) JP2016164725A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019207468A (en) * 2018-05-28 2019-12-05 京セラドキュメントソリューションズ株式会社 Electronic apparatus
JP2023529529A (en) * 2020-10-07 2023-07-11 ビュンス キム remote control system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019207468A (en) * 2018-05-28 2019-12-05 京セラドキュメントソリューションズ株式会社 Electronic apparatus
JP2023529529A (en) * 2020-10-07 2023-07-11 ビュンス キム remote control system
JP7457834B2 (en) 2020-10-07 2024-03-28 ビュンス キム Remote Control System

Similar Documents

Publication Publication Date Title
US9294638B2 (en) Information processing system, information processing apparatus, information processing method, and computer-readable storage medium
US10298790B2 (en) Image-forming apparatus, system, information processing method and storage medium for causing an operation screen to be displayed based on display language information
KR101921569B1 (en) Image processing apparatus, method for controlling image processing apparatus, and storage medium
US20230269336A1 (en) Image processing apparatus, method for controlling image processing apparatus, and storage medium
JP6492428B2 (en) Information processing apparatus, image processing method, program, and image forming apparatus
JP5894454B2 (en) Image forming apparatus, control method thereof, and program
JP2013196267A (en) Image forming apparatus, control method for image forming apparatus, and control program for image forming apparatus
JP7187286B2 (en) Image processing device, image processing method and program
JP2016154331A (en) Information processing system, information processing method, information processing device, and program
KR102333135B1 (en) Method for providing a screen for manipulating application execution of image forming apparatus and image forming apparatus using the same
JP6187063B2 (en) Information processing apparatus, information processing system, information processing method, and program
US9794437B2 (en) Information processing apparatus, information processing system, and information processing method
JP6398190B2 (en) Information processing apparatus, information processing method, and program
JP2016164725A (en) Information processing device, information processing system, and information processing program
JP2015143940A (en) Display system, image forming apparatus, program, and display state control method
JP7110637B2 (en) Display input device, image forming device, screen display method and program
US10681229B2 (en) Image processing apparatus for controlling display of a condition when the displayed condition is obscured by a hand of a user and method and non-transitory recording medium storing computer readable program
JP6569381B2 (en) Information processing apparatus, image processing apparatus, and program
JP6786777B2 (en) Image processing equipment, information processing equipment and programs
US20160191726A1 (en) Information processing system, information processing apparatus, and control method
JP6938917B2 (en) Display control device, image processing device and program
JP6798580B2 (en) Multifunction devices, information processing systems and information processing methods
JP7010345B2 (en) Operation device, information processing system, information processing method and program
JP2016127462A (en) Information processing device, information processing method, information processing program, and storage medium
JP2016106307A (en) Image forming apparatus, control method for image forming apparatus, and control program for image forming apparatus