CN104679424A - 信息处理装置中的触摸操作的再现 - Google Patents

Abstract

本发明公开信息处理装置中的触摸操作的再现。信息处理装置具备：显示部，显示受理针对该信息处理装置的触摸操作的画面；触摸操作部，受理该触摸操作；触摸事件发行部，发行与针对该触摸操作部的1个以上的触摸操作分别对应的1个以上的触摸事件；以及手势控制部，能够分别执行根据由该触摸事件发行部发行的该1个以上的触摸事件进行对应的处理的模式、和再生预先存储的该触摸事件的再生模式，该手势控制部构成为在该再生模式下，对与该触摸事件关联起来的区域附加表示与存储的该触摸事件对应的触摸操作的操作图像，并显示于该显示部。

Description

信息处理装置中的触摸操作的再现

技术领域

本公开涉及信息处理装置的控制，更确定而言涉及能够受理触摸操作的信息处理装置中的触摸操作的再现。

背景技术

关于针对装置的操作的显示，例如，在日本特开2008-040560号公报中公开了“在显示对装置进行的操作等的历史信息时，能够不会看丢地显示继续的操作的历史显示装置”。

另外，在日本特开2000-235549号公报中公开了用于“在之后在其它终端中再生操作者进行的鼠标的动作等的情况下，使得在再生时得到相同的结果”的技术。

发明内容

根据在日本特开2008-040560号公报中公开的技术，在显示对装置进行的操作等的历史信息时，为了不看丢地显示继续的操作，在生成操作历史时，能够在操作部图像上沿着将以时系列邻接的2个操作部之间进行连接的路径，以预定的显示间隔显示表示被操作的操作部的位置的操作位置图像。但是，例如，在应用于手势(gesture)操作的情况下，手势操作是连续的操作，2点接近，所以存在无法显示轨迹这样的问题。

另外，根据在日本特开2000-235549号公报中公开的技术，能够存储鼠标的输入事件(鼠标点击、鼠标移动等)和结果事件(视窗的生成、指针位置更新等)，并发行所存储的事件。但是，在个人计算机上始终显示鼠标，相对于此，在图像形成装置中不存在鼠标。因此，存在如下问题：仅通过发生输入事件，无法知道在面板上的何处发生了输入事件。

另外，在其它局面中，作为图像形成装置的操作内容的再生单元，考虑如下方法：存储触摸事件，并再生成/发行所存储的触摸事件，从而再生与存储时相同的操作内容。通过使用该方法，能够完全地再现触摸操作、手势操作等用户操作的内容。但是，在进行触摸事件的自动再生的情况下，在图像形成装置的内部中发生触摸事件，所以用户无法知道何处的键被按压、并且进行了什么样的操作。因此，需要能够容易地掌握被触摸的点的坐标值、操作(例如轻拂(flick)操作等)的内容。

因此，需要用于解决上述那样的问题的技术。本公开是为了解决上述问题而实施的，其目的在于提供一种容易地知道被触摸的点、操作内容的信息处理装置。另一目的在于提供一种用于控制信息处理装置以容易地知道被触摸的点、操作内容的方法。又一目的在于提供一种用于使计算机执行该方法的程序。

基于一个实施方式的信息处理装置具备：显示部，构成为显示受理针对该信息处理装置的触摸操作的画面；触摸操作部，构成为受理该触摸操作；触摸事件发行部，构成为发行与针对该触摸操作部的1个以上的触摸操作分别对应的1个以上的触摸事件；以及手势控制部，构成为能够分别执行根据由该触摸事件发行部发行的该1个以上的触摸事件进行对应的处理的模式、和再生预先存储的该触摸事件的再生模式。该手势控制部构成为在该再生模式下，对与该触摸事件关联起来的区域附加表示与存储的该触摸事件对应的触摸操作的操作图像，并显示于该显示部。

根据另一实施方式，提供用于控制信息处理装置的方法。该方法具备如下步骤：显示受理针对该信息处理装置的触摸操作的画面；受理该触摸操作；发行与该1个以上的触摸操作分别对应的1个以上的触摸事件；以及分别执行根据发行的该1个以上的触摸事件进行对应的处理的模式、和再生预先存储的该触摸事件的再生模式。该执行的步骤包括在该再生模式下对与该触摸事件关联起来的区域附加表示与存储的该触摸事件对应的触摸操作的操作图像并显示的步骤。

根据又一实施方式，提供保存了用于使计算机执行用于控制信息处理装置的方法的程序的并非临时的计算机可读取的记录介质。该程序使该计算机执行如下步骤：显示受理针对该信息处理装置的触摸操作的画面；受理该触摸操作；发行与该1个以上的触摸操作分别对应的1个以上的触摸事件；以及分别执行根据发行的该1个以上的触摸事件进行对应的处理的模式、和再生预先存储的该触摸事件的再生模式。该执行的步骤包括在该再生模式下对与该触摸事件关联起来的区域附加表示与存储的该触摸事件对应的触摸操作的操作图像并显示的步骤。

本发明的上述以及其它目的、特征、局面以及优点根据与附图关联地理解的与本发明有关的接下来的详细说明将会更加明确。

附图说明

图1是表示由本发明的实施方式的图像形成装置100实现的功能的框图。

图2是表示本发明的实施方式的图像形成装置100的硬件结构的一个例子的图。

图3是表示应用本发明的技术思想的图像形成装置100的概略的图。

图4是表示本发明的实施方式的图像形成装置100和其它设备连接的状态的图。

图5是表示本发明的实施方式的图像形成装置100中的各种触摸事件的图。

图6是表示本发明的实施方式的图像形成装置100具备的触摸面板110中的操作的图。

图7是表示本发明的实施方式的手势判定部140的结构的图。

图8是表示用于存储触摸事件的处理的流程图。

图9是表示本发明的实施方式的图像形成装置100为了存储触摸事件而具备的结构的图。

图10是表示本发明的实施方式的图像形成装置100执行的处理的一部分的流程图。

图11是表示触摸事件的再生处理的图。

图12是表示触摸面板110的画面的推移的图。

图13是表示本发明的实施方式的图像形成装置100存储轻拂操作的情况下的触摸面板110的画面的推移的图。

图14是表示本发明的实施方式的图像形成装置100的触摸面板110再生操作事件的情况下的画面的推移的图。

图15是表示本发明的实施方式的图像形成装置100的触摸面板110中的夹捏操作和手势的图。

图16是表示本发明的实施方式的图像形成装置100中的触摸事件的导入和导出的图。

图17是表示对在图像形成装置100具备的触摸面板110中显示的手势附加信息的局面的图。

图18是表示在图像形成装置100再生轻拂手势的情况下附加轨迹的图。

图19是表示在触摸面板110中显示了夹捏手势的轨迹以及方向的样式的图。

图20是表示在对触摸面板110进行了使图像旋转的操作的情况下附加信息的一个样式的图。

图21是表示登记了触摸事件的图像形成装置100的触摸面板110的大小和再生该触摸事件的信息处理装置的触摸面板的大小不同的情况下的图像的显示样式的图。

图22是表示图像形成装置100执行的处理的一部分的流程图。

图23是表示图像形成装置100执行动画的情况下的手势的显示处理的流程图。

具体实施方式

以下，参照附图，说明本发明的实施方式。在以下的说明中，对同一部件附加了同一符号。它们的名称以及功能也相同。因此，不重复进行关于它们的详细的说明。

首先，说明作为信息处理装置的一个样式的图像形成装置的一个局面。在某个局面中，将图像形成装置连接到处于远处的远程终端，从所连接的远程终端侧向图像形成装置侧发送指示操作方法的信息，从而图像形成装置能够对指示操作方法的信息进行合成而显示。考虑对操作员从远程终端侧发送的指示操作方法的信息(例如○标记、箭头、手的图像等)进行合成。但是，在该情况下，产生如下问题：在将指示多点触摸操作的操作方法指示信息从远程终端发送到图像形成装置时，由于不知道实际实施了手势操作时的时间、强度、方向，所以对在图像形成装置上再现的操作内容进行观察的用户不知道进行何种程度的操作为好。

另外，构成为：在从远程终端侧向图像形成装置提供两次放大的命令的情况下，使与第2次的命令对应的放大率比与第1次的命令对应的放大率大预先规定的大小。因此，针对远程终端侧的操作，无法在图像形成装置侧忠实地再现操作内容。

另外，在其它局面中，在从远处进行操作支援时，考虑对服务台的操作员的面板操作施加校正，将操作员独特的动作变换为适合的动作。这是作为操作支援者的从第1操作位置(操作开始位置)至第2操作位置(操作结束位置)为止的操作支援画面，在从第1操作画面至第2操作画面为止的期间，根据操作时间对操作画面进行插值的、在操作面板中连续地动画显示的动作。作为从远程终端侧向图像形成装置侧发送的信息，仅为触摸开始时的信息(第1坐标值)和触摸结束时的信息(第2坐标值)，无法在图像形成装置侧确定手势操作。这是因为，在手势的确定中，需要开始了触摸操作时的坐标值、触摸操作继续的期间的坐标值、以及触摸操作结束了时的坐标值。因此，在该局面中，成为省略触摸操作继续中的坐标值来校正用户的操作内容的情况，变得与用户实际操作的内容不同。

以下例示。

(夹捏(pinch)手势的情况的例子)

在用二点的手指触摸了操作面板的状态下，图像形成装置在一个手指移动的时间点判定为夹捏手势，在检测到手指缓慢移动而该移动停止了预先规定的一定时间的情况或者一个手指离开了面板的情况下，判断为手势操作结束。

图像形成装置将该结束位置作为第2坐标值，对最初的坐标值与最后的坐标值(第2坐标值)之间进行插值(通过插值图像的合成而使手势操作内容动画显示)。

如果应用上述内容，则不仅无法忠实地再现操作内容，而且在夹捏手势中图像放大时，若放开手指则在此图像的放大应结束，但在放开了手指时被判断为手势结束位置，会进行从开始位置至结束位置为止的插值。

即，在再生时进行了夹捏手势的情况下，发生在手势结束之后接着插值的版本的夹捏手势操作的内容合成到主体面板上这样的问题，无法忠实地再现操作内容并视觉化。

因此，图像形成装置、其它信息处理装置在根据来自用户的触摸操作自动再生触摸事件的情况下，需要由用户容易地识别被触摸的点的坐标值、操作的内容(轻拂操作、夹捏操作等)的技术。因此，本发明的实施方式的图像形成装置100具备以下那样的结构。

[图像形成装置100的结构]

参照图1，说明本发明的实施方式的图像形成装置100。图1是表示由本发明的实施方式的图像形成装置100实现的功能的框图。以下，作为应用本发明的技术思想的信息处理装置的一个例子，使用图像形成装置100。但是，该技术思想的应用对象不限于图像形成装置100。本发明的技术思想能够应用于平板终端、触摸面板型计算机、其它至少具备触摸面板的信息处理装置。

在某个局面中，图像形成装置100具备触摸面板110、触摸事件受理部120、触摸信息附加部130、手势判定部140、画面控制部150、以及触摸事件处理部160。画面控制部150包括手势控制部151。触摸事件处理部160包括触摸事件存储部161和触摸事件再生部162。在图像形成装置100中，外部终端170能够通过无线或者有线连接。无线连接的样式没有特别限定，例如，能够使用WiFi(WirelessFidelity，无线保真)、其它方式。

图像形成装置100具有用于存储触摸操作(以下称为触摸事件)的动作模式和用于再生触摸操作的动作模式。

触摸面板110受理针对图像形成装置100的命令输入。输入的命令与识别触摸面板110的数据一起，被送到触摸事件受理部120。

在其它局面中，外部终端170与触摸面板110同样地受理针对图像形成装置100的命令输入。输入的命令与用于识别外部终端170的数据一起，被送到触摸事件受理部120。

触摸事件受理部120将提供的命令和用于识别提供了该命令的触摸面板110或者外部终端170的数据送到触摸事件处理部160。

在某个局面中，触摸事件处理部160将从触摸事件受理部120发送的数据存储于触摸事件存储部161。在其它局面中，触摸事件处理部160读出存储的数据。

(触摸事件存储时)

更具体而言，在图像形成装置100的动作模式是用于存储触摸事件的动作模式时，触摸事件存储部161将与输入的命令相当的数据和用于识别触摸面板110或者外部终端170的数据保持为触摸事件。

(触摸事件再生时)

另一方面，在图像形成装置100的动作模式是再生触摸事件的动作模式时，触摸事件再生部162读出在触摸事件存储部161中保存的数据来再生触摸事件。

触摸信息附加部130通过针对对触摸面板110或者外部终端170提供的触摸操作附加颜色、图像等信息来进行视觉化，以让用户知道在触摸面板110或者外部终端170的哪个部分中发生了触摸事件。

手势判定部140根据触摸面板110或者外部终端170中的画面的种类和表示基于触摸操作的触摸事件的数据，判断可否显示手势。更具体而言，手势判定部140从触摸事件受理部120接收表示画面的种类的数据，根据该数据，判断在触摸面板110或者外部终端170中显示的画面是否为能够显示手势的画面。

在该显示的画面能够显示手势的情况下，手势判定部140将从触摸事件受理部120接收到的触摸事件和表示手势的数据(还称为“手势事件”)送到画面控制部150。

画面控制部150根据从触摸事件受理部120送来的触摸事件和与该触摸事件关联起来的信息，控制图像形成装置100中的画面的显示。手势控制部151能够分别执行根据1个以上的触摸事件进行对应的处理的通常模式和再生预先存储的触摸事件的再生模式。在某个局面中，手势控制部151在再生模式下，对与触摸事件关联起来的区域，附加表示与该存储的触摸事件对应的触摸操作的操作图像，使该操作图像显示于触摸面板110的显示区域。在其它局面中，手势控制部151在再生模式下，使该操作图像与表示基于触摸事件的处理的结果的图像一起显示于触摸面板110的显示区域。

更具体而言，在图像形成装置100的动作模式能够显示基于触摸操作的手势的动画的情况下，手势控制部151通过对触摸事件附加用于显示动画的信息标记、箭头、其它图像、颜色，生成反映了表示手势的动画的数据。

画面控制部150使用这样的数据，在触摸面板110或者外部终端170的显示区域中显示表示手势的动画。图像形成装置100的用户通过对该动画进行视觉辨认，能够将在图像形成装置100中进行的触摸操作识别为图像形成装置100的手势。

参照图2，进一步说明图像形成装置100的结构。图2是表示本发明的实施方式的图像形成装置100的硬件结构的一个例子的图。图像形成装置100具备MFP(Multi－Functional Peripheral，多功能外围设备)主体系统控制部200、面板CPU(Central Processing Unit，中央处理单元)201、ROM(Read-Only Memory，只读存储器)202、RAM(Random Access Memory，随机存取存储器)203、LCD(LiquidCrystal Display，液晶显示器)控制部204、VRAM(Video RandomAccess Memory，视频随机存取存储器)205、LCD面板部206、硬件键操作部208、输入输出控制部211、以及连接端子部220。LCD面板部206包括触摸面板110。

如图2所示，各构成要素与其它构成要素电连接。能够对连接端子部220安装USB(Universal Serial Bus，通用串行总线)存储器221。

MFP主体系统控制部200控制图像形成装置100的动作。MFP主体系统控制部200是通过例如构成为执行图像形成装置100的各处理的控制器、处理器、其它装置来实现的。

面板CPU201与MFP主体系统控制部200进行通信。面板CPU201控制触摸面板110的动作。更具体而言，面板CPU201根据通过针对触摸面板110的触摸操作而输出的信号，将用该触摸操作指定的命令送出到MFP主体系统控制部200。MFP主体系统控制部200根据该命令，控制图像形成装置100的动作。例如，MFP主体系统控制部200根据触摸操作，变更复印的放大或者缩小的倍率，或者变更单面复印或者双面复印的设定。在其它局面中，面板CPU201与输入输出控制部211进行通信。

ROM202保持有规定图像形成装置100的动作的控制程序、数据。RAM203临时地将在图像形成装置100中生成的数据进行保持。

LCD控制部204执行VRAM205的读/写控制。LCD控制部204控制LCD面板部206中的图像的显示。LCD控制部204读出作为用于显示图像的数据在ROM202中保存的图像数据，并将该图像数据暂时写入到VRAM205。LCD控制部204从VRAM205读出该图像数据，并将该图像数据送到LCD面板部206。LCD面板部206根据该图像数据，显示图像。显示的图像包括例如受理利用图像形成装置100进行的复印的设定值的输入的画面、用于设定通过图像形成装置100扫描的图像的发送目的地的画面等。

LCD面板部206检测在显示区域中被触摸的位置，将表示该位置的信息(例如坐标值)送到输入输出控制部211。输入输出控制部211使用该信息，确定选择了画面上的哪个功能，将表示该功能的数据发送到面板CPU201。面板CPU201根据该数据，进行触摸面板110中的设定。面板CPU201将设定后的数据送到MFP主体系统控制部200。MFP主体系统控制部200根据该信号，控制图像形成装置100的动作。

硬件键操作部208包括：硬件键；表示图像形成装置100的状态的LED(Light Emitting Diode，发光二极管)、其它发光装置；以及用于通知在硬件键或者LCD面板部206中进行了输入的意思的声音输出部。硬件键包括例如开始键、数字键、面板复位键等。声音输出部通过例如蜂鸣器、扬声器等来实现。

通过输入输出控制部211来控制硬件键操作部208。在某个局面中，硬件键操作部208响应于开始键(未图示)的按压，经由输入输出控制部211和面板CPU201，与MFP主体系统控制部200进行通信。

连接端子部220检测USB存储器221的安装，向MFP主体系统控制部200发送检测结果。在USB存储器221适当地被安装于连接端子部220的情况下，能够在USB存储器221与图像形成装置100之间交换数据。

[外观]

参照图3，进一步说明图像形成装置100。图3是表示应用本发明的技术思想的图像形成装置100的概略的图。图像形成装置100具备触摸面板110、ADF(Auto Document Feeder，自动进稿器)320、供纸托盘330、硬盘340、打印机350、以及后处理装置360。

触摸面板110根据由用户实施的触摸操作，受理针对图像形成装置100的命令输入。触摸面板110的形式没有特别限定。

ADF320是例如流读类型的自动原稿急送装置。供纸托盘330是例如大容量型的外置类型的供纸装置。硬盘340保存用于使图像形成装置100动作的程序及数据、以及在图像形成装置100中生成的数据或者输入到图像形成装置100的数据。

打印机350根据对触摸面板110提供的触摸操作，使用在硬盘340、RAM、其它存储装置中保持的数据，在纸张上形成图像。另外，图像形成装置100的输出不限于纸张，在其它局面中，也可以输出包括被扫描的图像的数据。

后处理装置360对从打印机350输出的纸张执行预先规定的后处理。另外，图像形成装置100的硬件是公知的。因此，不重复进行硬件的详细的说明。

[使用样式]

参照图4，说明图像形成装置100的使用样式。图4是表示本发明的实施方式的图像形成装置100和其它设备连接的状态的图。在某个局面中，图像形成装置100与外部终端170通过无线连接。无线是例如WiFi(Wireless Fidelity)、红外线通信、Bluetooth(注册商标)等，但也可以使用其它无线方式。图像形成装置100还具备连接端子部220。对连接端子部220能连接USB集线器400。对USB集线器400能安装存储器221。

在图像形成装置100和外部终端170无线连接的情况下，外部终端170作为对图像形成装置100提供命令的操作部，与触摸面板110同样地发挥功能。

[触摸事件]

参照图5，说明触摸事件。图5是表示本发明的实施方式的图像形成装置100中的各种触摸事件的图。在某个局面中，触摸事件包括按压(press)、移动(move)以及释放。

(1)“按压”是指，在图像形成装置100的用户用手指510触摸了触摸面板110的画面时产生的事件(状态(A))。更具体而言，用户使离开了触摸面板110的手指510向箭头520的方向移动，触摸到触摸面板110上的区域530。此时，在区域530中，作为触摸事件发生“按压”。

(2)“移动”是指，在用户用手指510触摸了触摸面板110的画面的状态下发生的事件。即，“移动”是触摸面板110保持被按压的状态。更具体而言，在手指510接触到触摸面板110的区域540时，作为触摸事件发生“移动”(状态(B))。

(3)“释放”是指，在用户将触摸着画面的手指挪开了时发生的事件。例如，如果与触摸面板110相接触的手指510如箭头方向所示离开触摸面板110，则作为触摸事件发生“释放”(状态(C))。

另外，在本实施方式中，例示了上述触摸事件，但应用本实施方式的技术思想的触摸事件不限于上述例示。

[手势判定]

参照图6，说明图像形成装置100中的手势判定。图6是表示本发明的实施方式的图像形成装置100具备的触摸面板110中的操作的图。

(状态A)

在某个局面中，图像形成装置100的用户对触摸面板110的操作面进行触摸。例如，区域610被手指510触摸。图像形成装置100探测到发生了触摸事件(按压)。用户使手指510朝向箭头的方向在触摸面板110的操作面上滑动(移动)。例如，用户将手指510从区域610经由区域630滑动至区域640(移动)，在区域640中将手指510从触摸面板110挪开(释放)。在从该按压至释放为止的时间比预先规定的时间长时，即，在进行了按压→移动→释放这样的一连串的操作的时间比预先规定的时间长时，手势判定部140将拖动(drag)手势确定为图像形成装置100的手势(动作)。

另一方面，在进行了一连串的操作的时间比预先规定的时间短时，手势判定部140将轻拂(flick)手势确定为图像形成装置100的手势轻拂。

(状态B)

在其它局面中，如果用户将手指510在触摸面板110持续按压预定的时间，则手势判定部140将长按(long tap)手势确定为图像形成装置100的手势。在其它局面中，如果用户在预定的时间的期间进行了触摸→释放→触摸→释放这样的一连串的操作，则手势判定部140将双击(double tap)手势确定为图像形成装置100的手势。

(状态C)

在进一步其它局面中，如果用户使用两根手指510、511进行了对触摸面板110的区域660、670触摸(按压)并使手指510、511向箭头方向移动(move)，之后停止手指510、511的移动这样的操作，则手势判定部140将该操作检测为二点触摸手势的开始状态。如果移动状态的手指510、511的某一点的坐标值发生变化，则手势判定部140探测到触摸面板110的状态是二点触摸手势中的状态。画面控制部150根据开始了二点触摸手势时的坐标值和当前的坐标值，进行放大或者旋转。

[手势判定]

参照图7以及图8，说明本实施方式的图像形成装置100中的手势判定。图7是表示本发明的实施方式的手势判定部140的结构的图。图8是表示用于存储触摸事件的处理的流程图。

如图7所示，在某个局面中，手势判定部140和触摸面板110经由触摸事件受理部120连接。手势判定部140具备手势管理器710、轻敲(tap)识别器720、轻拂识别器730、夹捏识别器740、以及触摸事件临时保存区域750。手势管理器710的输出被输入到轻敲识别器720、轻拂识别器730、以及夹捏识别器740中的至少某一个。

在实施方式中，例如，如以下那样识别轻拂手势。在触摸面板110中，图像形成装置100的用户将手指510触摸到区域(按压701)。用户进行将手指510描向左方向那样的操作(移动702、703)。之后，用户将手指510从触摸面板110挪开(释放704)。

来自触摸面板110的输出被输入到触摸事件受理部120。更详细而言，表示触摸面板110中的手指510的操作(例如按压701、移动702、703、释放704)的信号被输入到触摸事件受理部120。该信号包括在触摸面板110中检测到的点的坐标值、表示该点的移动方向的坐标值的推移等。触摸事件受理部120作为触摸面板110和手势判定部140的接口发挥功能。触摸事件受理部120将来自触摸面板110的输出变换为适合于手势判定部140中的处理的格式，将变换后的信号送到手势判定部140。

在手势判定部140中，手势管理器710根据来自触摸事件受理部120的输出信号，确定触摸面板110中的触摸事件的种类。手势管理器710根据该确定的种类，将信号送到轻敲识别器720、轻拂识别器730、以及夹捏识别器740中的某一个。接受了该信号的识别器判定该信号的内容(坐标值的推移等)，判定是否发生了规定的手势(例如轻拂)。

在一个实施方式中，在图像形成装置100中预先登记有可执行的手势。以下，例示轻拂手势被登记为可受理的手势的情况。在该情况下，针对在触摸面板110中能够实施轻拂操作的区域(以下还称为“轻拂可能区域”)，规定轻拂识别功能(轻拂识别器)。轻拂识别器根据来自触摸面板110的输出信号，识别轻拂操作。在某个局面中，轻拂识别器例如通过触摸面板110或者图像形成装置100具备的处理器执行识别处理来实现。在其它局面中，用于实现轻拂识别功能的结构也可以通过电路元件、其它硬件来实现。

在某个局面中，轻拂识别器730向触摸事件临时保存区域750写入各信号。更具体而言，轻拂识别器730将基于按压701的数据写入到区域751。该数据能够包括在触摸面板110中检测到接触的点的坐标值、检测到该接触时的时刻等。

之后，轻拂识别器730将在进行了移动702时检测出的数据写入到区域752。该数据包括在移动702的期间检测出的各接触点的坐标值。进而，轻拂识别器730将在进行了移动703时检测出的数据写入到区域753。向区域753写入的数据的形式与向区域752写入的数据的形式相同。

轻拂识别器730使用在触摸事件临时保存区域750中保存的数据，判断是否在触摸面板110中发生了轻拂手势。在图7的例子中，在接受到在区域751中保存的数据的时间点，轻拂识别器730不判断为进行了轻拂手势。如果接受到在区域751～754中保存的所有数据，则轻拂识别器730判断为在触摸面板110中发生了轻拂手势。轻拂识别器730将判断的结果送到手势管理器710。

在本实施方式中，轻敲识别器720、轻拂识别器730、以及夹捏识别器740根据与图像形成装置100具有的各功能对应的画面而被登记。例如，在用于实现图像形成装置100的某个功能(例如复印)的设定画面仅受理轻拂手势的情况下，在手势判定部140中，仅登记轻拂识别器730。即，只有轻拂识别器730的功能被设定为有效(激活)。

在其它局面中，在用于实现图像形成装置100的其它功能(例如扫描)的设定画面中，轻拂手势和二点触摸操作有效的情况下，在手势判定部140中，登记轻拂识别器730和夹捏识别器740。即，轻拂识别器730的功能和夹捏识别器740的功能被设定为有效。

参照图8，在步骤S810中，触摸事件受理部120根据来自触摸面板110的输出信号，受理触摸事件。

在步骤S820中，手势管理器710根据来自触摸事件受理部120的输出，确定被检测到的触摸事件的种类。手势管理器710经由与确定的种类对应的识别器，保存触摸事件。例如，如果手势管理器710确定了轻拂识别器730，则轻拂识别器730将触摸事件的数据保存于触摸事件临时保存区域750。

[触摸事件的存储]

参照图9，说明触摸事件的存储。图9是表示本发明的实施方式的图像形成装置100为了存储触摸事件而具备的结构的图。

在某个局面中，触摸面板110受理由图像形成装置100的用户实施的触摸操作，将与受理的触摸操作对应的信号作为触摸事件输出。通过触摸事件受理部120受理从触摸面板110输出的触摸事件。

在某个局面中，从触摸事件受理部120输出的触摸事件保存于触摸事件存储部161。例如，触摸事件存储部161在区域910～930的各个中保存了触摸事件。在区域910中，保存了表示第1触摸事件的数据。该数据具体而言包括触摸操作的种类(＝按压)、检测到该触摸的点的坐标值(X：760、Y：450)、以及从开始触摸操作的存储至检测到触摸事件(＝按压)为止的时间(＝Time1)。在区域920中，保存了表示第2触摸事件的数据。该数据具体而言包括触摸操作的种类(＝释放)、检测到该触摸的点的坐标值(X：760、Y：450)、以及从开始触摸操作的存储至检测到该触摸事件(＝释放)为止的时间(＝Time2)。在区域930中，保存了表示第3触摸事件的数据。该数据具体而言包括触摸操作的种类(＝按压)、检测到该触摸的点的坐标值(X：760、Y：450)、以及从开始触摸操作的存储至检测到该触摸事件(＝按压)为止的时间(＝Time3)。

从触摸事件受理部120输出的触摸事件被输入到手势判定部140。手势判定部140以图7所示的样式确定手势的种类。表示由手势判定部140确定的手势的数据被输入到手势控制部151。另一方面，表示从触摸事件受理部120输出的触摸事件的数据还被输入到画面控制部150。

手势控制部151根据由手势判定部140实施的判定的结果和触摸事件的数据，控制手势的显示。

[触摸事件的再生]

参照图10，说明图像形成装置100中的触摸事件的再生。图10是表示本发明的实施方式的图像形成装置100执行的处理的一部分的流程图。关于该处理，例如，如果触摸事件的再生的命令被提供到图像形成装置100，则由MFP主体系统控制部200执行该处理。

在步骤S1010中，MFP主体系统控制部200读出在触摸事件存储部161中保存的数据，生成触摸事件，并向画面控制部150发行该触摸事件。

在步骤S1020中，MFP主体系统控制部200受理对触摸面板110提供的触摸事件。

在步骤S1030中，MFP主体系统控制部200根据图像形成装置100的动作模式，判断可否受理与用户的操作对应的手势。MFP主体系统控制部200如果判断为能够受理手势(在步骤S1030中“是”)，则将控制切换为步骤S1040。否则(在步骤S1030中“否”)，MFP主体系统控制部200将控制切换为步骤S1070。

在步骤S1040中，MFP主体系统控制部200进行手势判定，确定与触摸操作对应的图像形成装置100的手势。

在步骤S1050中，MFP主体系统控制部200判断在步骤S1020中受理的触摸事件是否被确定为图像形成装置100执行的手势。MFP主体系统控制部200如果判断为触摸事件被确定为手势(在步骤S1050中“是”)，则将控制切换为步骤S1060。否则(在步骤S1050中“否”)，MFP主体系统控制部200将控制切换为步骤S1070。

在步骤S1060中，MFP主体系统控制部200根据在步骤S1040中确定的手势，执行图像形成装置100中的手势控制。在某个局面中，MFP主体系统控制部200作为手势控制部151，在触摸面板110的显示区域中显示该手势。该手势是例如与用户对图像形成装置100登记的一连串的操作对应的动作的演示(demonstration)。

在步骤S1070中，MFP主体系统控制部200根据在步骤S1020中受理的触摸事件，执行画面控制。在某个局面中，MFP主体系统控制部200作为画面控制部150，执行与该触摸事件对应的画面控制。

[事件的再生]

参照图11，说明触摸事件的再生。图11是表示触摸事件的再生处理的图。

在某个局面中，通过用户将再生的指示提供给图像形成装置100来实现触摸事件的再生处理。如果再生触摸事件的指示被提供到触摸面板110，则该指示通过触摸事件受理部120受理而被送到触摸事件处理部160。在触摸事件处理部160中，触摸事件再生部162从触摸事件存储部161读出与所存储的触摸事件有关的数据。读出的数据的一个例子如图9所示。

触摸事件再生部162使用读出的数据来生成触摸事件。例如，在图11所示的例子中，能够生成按压→释放→按压这样的触摸事件。触摸事件再生部162通过将规定所生成的触摸事件的数据送到触摸事件受理部120，将触摸事件发行到触摸事件受理部120。触摸事件受理部120将该数据发送到画面控制部150。画面控制部150使用该数据，控制画面迁移、设定的变更、其它图像形成装置100的动作。

在某个局面中，在图像形成装置100的画面是能够受理手势操作的画面的情况下，手势判定部140使用由触摸事件受理部120受理的触摸事件，判定手势。例如，在手势的判定(手势的种类的确定)中，使用由触摸事件再生部162生成并发行的多个触摸事件(区域910～930)。手势判定部140如果根据触摸事件确定了手势，则将该确定的结果送到手势控制部151。手势控制部151根据其结果，执行作为图像形成装置100的动作的演示的触摸面板110中的手势的显示控制。

[触摸操作的存储以及再生]

参照图12，说明针对图像形成装置100的操作仅为触摸操作的情况。图12是表示触摸面板110的画面的推移的图。状态(A)至状态(C)表示在图像形成装置100存储触摸事件的情况下显示的画面的推移。状态(D)～状态(F)表示在图像形成装置100再生触摸事件的情况下显示的画面的推移。

如状态(A)所示，在某个局面中，触摸面板110显示着受理用于复印的操作的画面。用户的手指510接触到软件键1210(触摸操作)。该触摸操作作为触摸事件(按压)，与被检测到触摸的点的坐标值和规定的时间一起保存到触摸事件存储部161。关于坐标值，例如能够通过将触摸面板110的左上的端点规定为原点(0、0)来测量。

如状态(B)所示，如果用户将手指510从软件键1210挪开，则该操作作为触摸事件(释放)，与被检测到触摸的点的坐标值和规定的时间一起，保存于触摸事件存储部161。

如状态(C)所示，如果用户将手指510触摸到软件键1220，则该操作作为触摸事件(按压)，保存于触摸事件存储部161。

如状态(D)所示，在其它局面中，图像形成装置100从用户(例如说明图像形成装置100的销售员)受理触摸事件的再生的命令。响应于该命令，触摸面板110从触摸事件存储部161的区域910读出数据，显示消息1230。消息1230表示如状态(A)所示那样保存的触摸事件(按压)的制作。此时，触摸面板110也可以显示表示在软件键1210中进行了触摸的标记。关于该标记，例如如状态(D)所示是圆形的图形，但也可以显示其它图形、文字、记号等。另外，在其它局面中，也可以变更软件键1210的颜色。另外，在进一步其它局面中，也可以使软件键1210闪烁。

如状态(E)所示，之后，触摸面板110再生触摸事件(释放)。具体而言，触摸面板110根据区域920的数据，显示消息1240。此时，也可以与状态(D)的情况同样地，触摸面板110显示表示在软件键1210中进行了触摸的标记。关于该标记，例如如状态(E)所示是圆形的图形，但也可以显示其它图形、文字、记号等。另外，在其它局面中，也可以变更软件键1210的颜色。另外，在进一步其它局面中，也可以使软件键1210闪烁。

如状态(F)所示，触摸面板110再生触摸事件(按压)。具体而言，触摸面板110根据区域930的数据，显示消息1250。此时，与状态(D)的情况同样地，触摸面板110也可以显示表示在软件键1220中进行了触摸的标记。关于该显示，例如如状态(F)所示是圆形的图形，但也可以显示其它图形、文字、记号等。另外，在其它局面中，也可以变更软件键1220的颜色。另外，在进一步其它局面中，也可以使软件键1220闪烁。

[轻拂操作的存储]

参照图13，说明轻拂操作的存储以及再生。图13是表示本发明的实施方式的图像形成装置100存储轻拂操作的情况下的触摸面板110的画面的推移的图。

状态(A)至状态(C)表示响应于用户的操作而图像形成装置100存储轻拂操作的触摸事件的情况下的触摸面板110的画面的推移。状态(D)至状态(F)表示基于手势判定部140得到的手势的判定结果和向触摸事件存储部161的数据保存的状态。

如状态(A)所示，在某个局面中，用户进行菜单操作，将图像形成装置100的动作模式切换为触摸操作的存储模式。用户使用手指510对软件键1310进行触摸(按压)。

如状态(B)所示，用户在手指510按压画面的状态下使右手向左方向移动。此时，例如，识别出5个触摸事件。表示这些事件的数据被保存于触摸事件存储部161的区域1331～1335。

如状态(C)所示，如果用户将手指510从触摸面板110挪开，则该操作被识别为触摸事件(释放)，被保存于触摸事件存储部161的区域1336。

之后，手势判定部140根据来自触摸面板110的输出，判断触摸事件的内容，将对应的数据保存于触摸事件存储部161。

更具体而言，如状态(D)所示，手势判定部140根据来自触摸面板110的输出，探测进行了轻拂操作。手势判定部140将与轻拂操作对应的手势确定为图像形成装置100执行的手势。如果确定了手势，则制作表示该手势的动画。将与状态(A)的画面所示的操作对应的数据作为触摸事件(按压)，与检测到该操作的点的坐标值和规定的时间一起保存于区域1330。

进而，如状态(E)所示，手势判定部140识别在触摸面板110中显示使画面向左方向移动的意思的箭头1340，同时使画面向左滚动。此时，将与状态(B)的画面所示的操作对应的数据作为触摸事件(移动)，与检测到该操作的点的坐标值和规定的时间一起保存于区域1331～1335。

如果画面滚动与在触摸事件存储部161中保存的数据相当的量，则如状态(F)所示，轻拂手势的动画停止。

[操作事件再生时]

参照图14，说明操作事件的再生。图14是表示本发明的实施方式的图像形成装置100的触摸面板110再生操作事件的情况下的画面的推移的图。

在某个局面中，图像形成装置100响应于图13所示那样的处理，在触摸事件存储部161中保存了数据。图像形成装置100如果从用户接受到表示与触摸操作对应的手势的动画的再生的指示，则参照在触摸事件存储部161中保存的数据，开始该动画的再生。

更详细而言，如画面(A)所示，触摸面板110在软件键1410中显示表示进行了触摸操作的标记1420。标记1420相当于用户的手指的前端。该显示的样式不限于圆形的标记，也可以使用其它形状、记号。另外，标记1420也可以闪烁。另外，在其它局面中，标记1420的颜色也可以与触摸面板110的其它区域的颜色不同。触摸面板110还显示表示发行了触摸事件的消息1430。

之后，如画面(B)所示，触摸面板110显示与移动相当的画面的推移作为触摸事件。例如，触摸面板110为了表示在画面(A)中显示的标记1420正在移动，依次显示标记1421、1422、1423、1424。由此，观察触摸面板110的人(例如观察示范画面的潜在顾客)能够容易地识别进行了用于将画面从右向左送走的操作。进而，在其它局面中，触摸面板110也可以显示表示发行了触摸事件(移动)的消息1440。

画面(C)是表示在轻拂操作的最后用户的手指从触摸面板110挪开的状态的画面。触摸面板110显示表示从画面挪开了手指的标记1425。由此，观察触摸面板110的人(例如观察示范画面的潜在顾客)能够容易地识别轻拂操作结束。进而，在其它局面中，触摸面板110也可以显示表示发行了触摸事件(释放)的消息1450。

[夹捏操作]

参照图15，说明夹捏操作的存储和再生。图15是表示本发明的实施方式的图像形成装置100的触摸面板110中的夹捏操作和基于该夹捏操作的手势的图。

参照画面(A)，在某个局面中，在触摸面板110的动作模式是受理夹捏操作的模式的情况下，用户为了进行夹捏操作，进行将拇指和食指放到触摸面板110并扩大拇指和食指的间隔那样的操作。触摸面板110将与这样的操作对应的信号输出到触摸事件受理部120。触摸事件受理部120在将信号的形式变更为与由手势判定部140实施的处理对应的形式之后，将变更后的信号输出到手势判定部140。

手势判定部140根据该信号，探测针对触摸面板110的操作是夹捏操作。在手势判定部140中，夹捏识别器740生成表示触摸操作(夹捏)的数据，将该数据保存于触摸事件存储部161。该数据保存于例如区域1510～1515中。

更详细而言，在区域1510中，保存表示拇指被触摸的数据。在区域1511中，保存表示食指被触摸的数据。在区域1512中，保存表示拇指持续按了触摸面板110的状态的数据。在区域1513中，保存表示食指持续按了触摸面板110的状态的数据。在区域1514中，保存表示拇指的移动操作的数据。在区域1515中，保存表示食指的移动操作的数据。

这样，图像形成装置100能够在受理了夹捏操作的输入之后，受理夹捏操作的再生的指示、即手势再生的命令。如果这样的命令被提供到图像形成装置100，则触摸面板110开始手势的显示。

更具体而言，如画面(C)所示，触摸面板110显示图像。该图像是例如在画面(A)中输入夹捏操作时使用的图像，但不限于这样的图像，也可以使用其它图像。在其它局面中，也可以根据在图像形成装置100的存储装置(例如RAM203、USB存储器221、硬盘340等)中保存的其它图像数据，将该其它图像显示于触摸面板110。

如果触摸面板110执行与夹捏操作对应的动作，则如画面(D)所示显示被放大的图像。

[触摸事件的导入(Import)或者导出(Export)]

参照图16，说明触摸事件的导入和导出。图16是表示本发明的实施方式的图像形成装置100中的触摸事件的导入和导出的图。在某个局面中，在图像形成装置100中生成的触摸事件还能在具备同样的功能的其它图像形成装置、其它信息处理装置中使用。

在图16中，画面(A)是进行使图像形成装置100保存触摸事件的操作的画面。在某个局面中，在图像形成装置100的动作模式是存储触摸事件的模式时，用户通过触摸软件键1611，能够使图像形成装置100存储与该触摸操作对应的触摸事件(按压)。此时，触摸事件存储部161保存表示触摸操作的数据。

更具体而言，区域1620保存了在坐标值(760、450)中，在某个定时(Time1)进行了触摸事件(按压)。另外，该定时是例如从存储的模式起动起经过的时间，但时间的起算点不限于存储的模式起动了时。在图像形成装置100内置了时钟的情况下，也可以将通过该时钟测量的时刻用作定时。

另外，在其它局面中，触摸面板110也可以显示表示进行了触摸事件的消息1610。用户能够确认通过图像形成装置100识别了什么样的触摸事件，所以能够防止识别错误的触摸操作。

即使在进行了其它操作的情况下，触摸事件存储部161也保存与该操作对应的数据。例如，在区域1621中保存了进行了触摸事件(释放)情况、进行了该触摸事件的点的坐标值、进行了该触摸事件的定时。在区域1622中，针对触摸事件(按压)，保持了同样的数据。

依照某个局面的图像形成装置100能够将在触摸事件存储部161中保存的数据导出到可装卸的外部的存储装置。图像形成装置100在导出数据时，在将在触摸事件存储部161、其它存储器区域中保存的数据变换为任意的文件形式(例如csv文件)之后，将变换后的文件保存于USB存储器221。

在图16的例子中，图像形成装置100能够将在区域1620～1622中保存的数据导出到USB存储器221。USB存储器221如果连接到这样的图像形成装置100，则生成触摸事件保存文件夹1630。触摸事件保存文件夹1630将与在区域1620～1622中保存的数据相当的数据保存于触摸事件保存文件1631。之后，USB存储器221连接到其它信息处理装置。

画面(B)是具有与图像形成装置100同样的功能的其它信息处理装置具备的触摸面板1640的画面。即，在该其它信息处理装置的动作模式是再生触摸事件的模式时，如果USB存储器221安装于该其它信息处理装置，则触摸事件保存文件1631从USB存储器221读出到其它信息处理装置的触摸事件存储部161。在读出的数据的形式是csv、其它任意的形式的情况下，该其它信息处理装置能够将该数据的形式变换为可识别的数据的形式。

触摸面板1640根据在触摸事件保存文件1631中包含的数据、例如在区域1620中保存的数据，显示表示进行了触摸事件(按压)的标记1650。这样，能够将在图像形成装置100中发行的触摸事件导入到其它信息处理装置，并且，该其它信息处理装置能够从图像形成装置100导入该触摸事件。具备与图像形成装置100同样的功能、即触摸事件的再生功能的其它信息处理装置能够根据该导入的数据，再生在图像形成装置100中登记的触摸事件。因此，例如，将在某个据点对图像形成装置100设定的触摸事件的内容也能够在处于与该据点分离的其它据点的其它信息处理装置中再现。

[向手势附加信息]

参照图17，说明向触摸事件附加信息的情况。图17是表示对在图像形成装置100具备的触摸面板110中显示的手势附加信息的局面的图。

如画面(A)所示，触摸面板110受理用用户的手指510针对软件键1710进行的触摸操作。触摸事件存储部161将表示该触摸操作的数据保存为触摸事件(按压)。

如画面(B)所示，之后如果在图像形成装置100或者具备同样的功能的其它信息处理装置中再生了触摸事件，则触摸面板110显示表示用用户的手指进行了触摸操作的标记1720。此时，标记1720与在触摸面板110的画面中使用的颜色不同。由此，观察触摸面板110的画面的用户能够容易地识别标记1720，所以能够容易地理解手势的内容。另外，作为对触摸事件附加的信息，不限于颜色。例如，标记1720也可以闪烁。在该情况下，对触摸事件作为命令附加使标记1720闪烁这样的动作信息。这样用户也能够容易地理解针对触摸面板110的手势的内容。

另外，对标记1720附加上述那样的信息的定时可以是登记触摸事件时、再生触摸事件时中的任意一个定时。在登记触摸事件时附加该信息的情况下，触摸事件存储部161保持与该触摸事件关联起来的该信息。在再生触摸事件时附加该信息的情况下，图像形成装置100能够使用作为触摸事件的再生模式的设定项目的一个受理用于将这样的信息附加到触摸事件的设定(附加/不附加)的结构。

[轨迹信息的附加]

参照图18，进一步说明针对触摸事件附加信息的情况。图18是表示在图像形成装置100再生轻拂手势的情况下附加轨迹的图。

在某个局面中，触摸事件存储部161在区域1801、1802等中，保持了表示触摸事件的信息。如果图像形成装置100受理了轻拂手势的再生的指示的输入，则如画面(A)所示，触摸面板110显示表示对软件键1810进行了触摸操作的标记1820。在其它局面中，为了更详细地说明，也可以显示表示生成并发行了触摸事件的消息1821。

如画面(B)所示，触摸面板110显示表示软件键1810以及标记1820向左滚动了的图像。在该时间点，图像形成装置100的用户能够识别触摸事件登记于图像形成装置100。如果图像形成装置100成为触摸事件的再生模式，则手势判定部140根据触摸事件存储部161的区域1801、1802，将轻拂手势识别作为应执行的手势。

之后，如画面(C)以及画面(D)所示，触摸面板110再生显示所登记的轻拂手势。此时，触摸面板110显示标记1831、1832、1833、1834。各标记的大小是标记1831→标记1832→标记1833→标记1834的顺序。由此，用户易于掌握进行了轻拂手势、以及其内容。

另外，在其它局面中，图像形成装置100也可以将连接标记1831～标记1834那样的线显示于触摸面板110。另外，在进一步其它局面中，图像形成装置100也可以直至在手势发生时执行的动画结束为止，重复显示与手势操作对应的轨迹。用户能够识别触摸事件的轨迹。

[针对夹捏手势附加信息]

在进一步其它局面中，图像形成装置100也可以针对夹捏手势附加信息。在此，参照图19，说明针对夹捏手势附加信息的情况。图19是表示在触摸面板110中显示了夹捏手势的轨迹以及方向的样式的图。在某个局面中，触摸事件存储部161将表示夹捏手势的数据保存于区域1901、1902。

如画面(A)所示，触摸面板110显示表示用户的手指被触摸的标记1910、1920。之后，用户进行撑开(pinch out)操作。手势判定部140探测进行了夹捏手势。

之后，如画面(B)所示，触摸面板110根据在触摸事件存储部161中保存的数据，显示夹捏手势、和该夹捏手势的轨迹以及方向。更具体而言，触摸面板110显示表示进行了夹捏手势的多个标记、即标记1910、1911、1912、和标记1920、1921、1922。进而，触摸面板110显示向外的箭头1930、1940。通过这样的显示，用户能够容易地理解进行了夹捏手势。

另外，各标记的显示样式不限于上述，在其它局面中，也可以对各标记附加颜色，进而，也可以代替始终显示而进行闪烁显示。

[针对夹捏手势(旋转)附加信息]

在进一步其它局面中，图像形成装置100也可以在触摸面板110中显示的图像旋转的情况下，对图像附加信息。在此，参照图20，说明作为夹捏手势进行旋转的情况下的信息的附加。图20是表示在对触摸面板110进行了使图像旋转的操作的情况下附加信息的一个样式的图。

在某个局面中，触摸事件存储部161将表示由图像形成装置100的用户登记的触摸事件的数据保存于区域2001、2002。之后，如果起动再生触摸事件的模式，则触摸面板110显示再生触摸事件的画面。

更具体而言，如画面(A)所示，触摸面板110显示表示在画面上进行了夹捏手势(旋转)的情况下从触摸面板110释放了手指的点的2个标记2014、2024。手势判定部140根据在触摸事件存储部161中保存的数据，识别进行了夹捏手势(旋转)。

之后，如画面(B)所示，触摸面板110显示画面(A)所示的图像被旋转了之后的图像。进而，在触摸面板110中，作为表示进行了夹捏手势(旋转)的标记，除了标记2014、2024以外，还显示标记2011、2012、2013、和标记2021、2022、2023。进而，触摸面板110显示圆弧状的箭头2010、2020。由此，观察了画面(B)的用户能够容易地识别进行了用于使图像旋转的触摸操作。

另外，各标记的显示样式不限于上述，在其它局面中，也可以对各标记附加颜色，进而，也可以代替始终显示而进行闪烁显示。

[附加信息的区域的大小的变更]

如参照图16说明那样，本发明的实施方式的图像形成装置100在某个局面中，能够导出表示触摸事件的数据，其它信息处理装置能够导入该数据。在该情况下，有时图像形成装置100的触摸面板110的大小和该其它信息处理装置的触摸面板的大小不同。

因此，参照图21，说明在触摸事件的登记时和再生时触摸面板的显示区域的大小不同的情况。图21是表示登记了触摸事件的图像形成装置100的触摸面板110的大小和再生该触摸事件的信息处理装置的触摸面板的大小不同的情况下的图像的显示样式的图。

状态(A)表示在图像形成装置100具备的触摸面板110中显示了软件键2120和表示触摸事件的标记2130的状态。状态(B)表示在其它信息处理装置具备的触摸面板2140中显示了软件键2150和表示触摸事件的标记2160的状态。

如状态(A)和状态(B)所示，存在触摸面板110的大小和触摸面板2140的大小不同的情况。在这样的情况下，具备触摸面板2140的信息处理装置通常根据触摸面板110的大小与触摸面板2140的大小的比例，在触摸面板2140中显示软件键2150和标记2160。因此，在触摸面板2140小于触摸面板110的情况下，在触摸面板2140中显示的软件键2150以及标记2160小于在触摸面板110中显示的软件键2120以及标记2130。

但是，如状态(C)所示，在某个局面中，在其它信息处理装置中，作为表示进行了触摸事件的标记，也可以显示比标记2160大的标记2170。在该情况下，软件键2150和标记2170的比例与软件键2120和标记2130的比例不同，但标记2170不会被较小地显示，所以用户能够容易地识别标记2170，所以易于掌握进行了触摸事件。

[控制构造]

参照图22以及图23，说明图像形成装置100的控制构造。图22是表示图像形成装置100执行的处理的一部分的流程图。

在步骤S2210中，MFP主体系统控制部200取出在RAM203、其它存储装置中保存的触摸事件的内容，生成并发行触摸事件。

在步骤S2220中，MFP主体系统控制部200受理触摸事件的输入。

在步骤S2230中，MFP主体系统控制部200对触摸事件附加信息。信息用于变更表示触摸事件的标记的显示样式。如果对触摸事件附加了该信息，则该标记的颜色被变更为与触摸面板110的画面的其它颜色不同的颜色。在其它局面中，表示手势的轨迹与该标记一起显示于触摸面板110。

在步骤S2240中，MFP主体系统控制部200根据对LCD面板部206或者硬件键操作部208提供的操作，判断可否受理手势。例如，根据按照该操作从LCD面板部206或者硬件键操作部208输出的信号的内容，进行该判断。

作为一个例子，在用户对LCD面板部206进行了触摸操作的情况、此时的图像形成装置100的动作模式是受理手势操作的模式的情况下，MFP主体系统控制部200判断为能够受理手势操作。在图像形成装置100的动作模式是不受理手势操作的模式的情况、例如显示了受理复印份数的输入的画面的情况下，MFP主体系统控制部200判断为无法受理手势。

作为其它例子，在用户对硬件键操作部208进行了操作的情况下，从硬件键操作部208输出的信号包括表示对硬件键操作部208进行了操作的信息。因此，在该情况下，MFP主体系统控制部200判断为无法受理手势。

MFP主体系统控制部200如果判断为能够受理手势(在步骤S2240中“是”)，则将控制切换为步骤S2250。否则(在步骤S2240中“否”)，MFP主体系统控制部200将控制切换为步骤S2290。

在步骤S2250中，MFP主体系统控制部200根据从面板CPU201输出的信号，判断对触摸面板110提供的操作是否为手势操作，进而，在该操作是手势操作的情况下，判断手势的种类。

在步骤S2260中，MFP主体系统控制部200如果判定为该操作是手势(在步骤S2260中“是”)，则将控制切换为步骤S2270。否则(在步骤S2260中“否”)，MFP主体系统控制部200将控制切换为步骤S2290。

在步骤S2270中，MFP主体系统控制部200经由LCD控制部204，在LCD面板部206中，对手势判定用的触摸事件附加信息，并显示手势的轨迹。

在步骤S2280中，MFP主体系统控制部200经由LCD控制部204，执行手势控制。LCD面板部206执行基于在图像形成装置100中登记的触摸事件的手势的再生显示。

在步骤S2290中，MFP主体系统控制部200经由LCD控制部204，执行通常的画面控制。LCD面板部206根据图像形成装置100的动作模式，受理与用户的操作对应的设定的输入、或者根据该操作将画面切换为其它画面。

参照图23，说明图像形成装置100的其它局面中的控制构造。图23是表示图像形成装置100执行了动画的情况下的手势的显示处理的流程图。

在步骤S2310中，MFP主体系统控制部200判断图像形成装置100是否正在执行表示手势操作的动画。例如，根据表示图像形成装置100的动作模式的数据，进行该判断。MFP主体系统控制部200如果判断为图像形成装置100正在执行动画(在步骤S2310中“是”)，则将控制切换为步骤S2320。否则(在步骤S2310中“否”)，MFP主体系统控制部200将控制切换为步骤S2330。

在步骤S2320中，MFP主体系统控制部200执行手势操作的轨迹的重复显示。由此，图像形成装置100的用户在LCD面板部206中能够可靠地视觉辨认表示手势操作的轨迹。

在步骤S2330中，MFP主体系统控制部200停止手势操作的轨迹的显示。

<总结>

如以上那样，本发明的实施方式的图像形成装置100受理针对触摸面板110的操作，将基于该操作的动作显示为图像形成装置100的手势。此时，图像形成装置100显示对该手势附加的信息。由此，易于掌握使用了图像形成装置100的触摸面板110的操作内容。

虽然说明了本发明的实施方式，但应该认为本次公开的实施方式在全部方面上仅为例示，而不是限制性的。本发明的范围基于权利要求书来示出，试图包括与权利要求书均等的意思以及范围内的全部变更。

Claims (11)

1.一种信息处理装置，具备：

显示部，构成为显示受理针对所述信息处理装置的触摸操作的画面；

触摸操作部，构成为受理所述触摸操作；

触摸事件发行部，构成为发行与针对所述触摸操作部的1个以上的触摸操作分别对应的1个以上的触摸事件；以及

手势控制部，构成为能够分别执行根据由所述触摸事件发行部发行的所述1个以上的触摸事件进行对应的处理的模式、和再生预先存储的所述触摸事件的再生模式，

所述手势控制部构成为：在所述再生模式下，对与所述触摸事件关联起来的区域附加表示与存储的所述触摸事件对应的触摸操作的操作图像，并显示于所述显示部。

2.根据权利要求1所述的信息处理装置，其特征在于，

所述触摸操作部构成为受理一连串的触摸操作，

所述信息处理装置还具备判断部，该判断部构成为判断所述一连串的触摸操作是否与用于实现所述信息处理装置的功能的操作相应，

所述信息处理装置构成为：在所述一连串的触摸操作与用于实现所述信息处理装置的功能的操作相应的情况下，所述手势控制部使所述1个以上的触摸事件和表示进行了针对所述信息处理装置的触摸操作的信息显示于所述显示部。

3.根据权利要求1或者2所述的信息处理装置，其特征在于，

还具备取得部，该取得部构成为从所述信息处理装置的外部装置取得数据，

所述触摸事件发行部构成为根据从所述外部装置取得的数据，发行所述1个以上的触摸事件。

4.根据权利要求3所述的信息处理装置，其特征在于，

所述外部装置包括具备触摸面板的信息通信终端，

所述信息处理装置还具备校正部，该校正部构成为将所述信息通信终端中的采样数校正为所述信息处理装置中的采样数。

5.根据权利要求1或者2所述的信息处理装置，其特征在于，

所述触摸事件发行部包括存储部，该存储部构成为将从预先规定的定时至进行了所述1个以上的触摸操作的各个触摸操作的定时为止经过的时间和该触摸操作关联起来进行存储，

所述信息处理装置还包括再生部，该再生部构成为针对所述1个以上的触摸操作的各个触摸操作，根据所述时间和该触摸操作，使所述信息处理装置执行与所述1个以上的触摸操作对应的动作。

6.根据权利要求1或者2所述的信息处理装置，其特征在于，

所述手势控制部构成为重复进行所述1个以上的触摸操作或者表示进行了针对所述信息处理装置的触摸操作的信息的显示。

7.根据权利要求1或者2所述的信息处理装置，其特征在于，

能够在所述信息处理装置与其它信息处理装置之间移送表示进行了针对所述信息处理装置的触摸操作的信息，

显示所述信息的区域构成为根据显示该信息的信息处理装置具备的显示部的显示区域的大小而被变更。

8.根据权利要求1或者2所述的信息处理装置，其特征在于，

针对所述信息处理装置的触摸操作包括轻拂操作，

所述信息处理装置构成为：在进行了所述轻拂操作的情况下，所述显示部显示所述轻拂操作的轨迹。

9.根据权利要求1或者2所述的信息处理装置，其特征在于，

针对所述信息处理装置的触摸操作包括两点触摸操作，

所述显示部构成为根据进行了所述两点触摸操作的点的坐标值的变化来显示表示该变化的方向。

10.根据权利要求1或者2所述的信息处理装置，其特征在于，

所述手势控制部构成为在所述再生模式下将所述操作图像与表示基于所述触摸事件的所述处理的结果的图像一起显示于所述显示部。

11.一种用于控制信息处理装置的方法，具备如下步骤：

显示受理针对所述信息处理装置的触摸操作的画面；

受理所述触摸操作；

发行与所述1个以上的触摸操作分别对应的1个以上的触摸事件；以及

分别执行根据发行的所述1个以上的触摸事件进行对应的处理的模式、和再生预先存储的所述触摸事件的再生模式，

所述执行的步骤包括在所述再生模式下对与所述触摸事件关联起来的区域附加表示与存储的所述触摸事件对应的触摸操作的操作图像并显示的步骤。