CN104808836A - 电子设备及操作支援方法 - Google Patents

Abstract

本发明提供电子设备及操作支援方法。本发明的电子设备具备触摸面板、视线检测部、视线校正区域计算部以及操作坐标视线校正部。触摸面板检测由用户进行的触摸输入的操作点的坐标。视线检测部从用户对触摸面板进行触摸输入的时间点开始，在特定的时间范围内，计算用户的视线所朝向的触摸面板上的注视点的坐标。视线校正区域计算部根据注视点的坐标计算特定范围的视线校正区域。操作坐标视线校正部是如果操作点的坐标在视线校正区域内，则将操作点的坐标变更为注视点的坐标，如果操作点的坐标不在视线校正区域内，则不变更操作点的坐标。根据本发明，能够进行防止误操作的触摸输入。

Description

电子设备及操作支援方法

技术领域

本发明涉及对触摸输入的误操作进行校正的电子设备及操作支援方法。

背景技术

典型的电子设备具备通过触摸输入对显示部的GUI进行指示的触摸面板。在触摸面板上，有时会发生对与用户所意图的位置不同的位置进行了触摸输入这样的误操作。如果发生了误操作，则需要取消指示并再次进行正确的触摸输入。

典型的电子设备能够将与视线对应的软键盘的一部分放大显示。通过根据视线来放大所显示的位置，导致所显示的信息减少。

发明内容

本发明实施方式的电子设备具备触摸面板、视线检测部、视线校正区域计算部以及操作坐标视线校正部。触摸面板检测由用户进行的触摸输入的操作点的坐标。视线检测部从所述用户对所述触摸面板进行触摸输入的时间点开始，在特定的时间范围内，计算所述用户的视线所朝向的所述触摸面板上的注视点的坐标。视线校正区域计算部根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算特定范围的视线校正区域。操作坐标视线校正部是如果所述操作点的坐标在通过所述视线校正区域计算部计算出的所述视线校正区域内，则将所述操作点的坐标变更为所述注视点的坐标，如果所述操作点的坐标不在所述视线校正区域内，则不变更所述操作点的坐标。

本发明实施方式的操作支援方法包括：(i)通过触摸面板，检测由用户进行的触摸输入的操作点的坐标；(ii)通过视线检测部，从所述用户对所述触摸面板进行触摸输入的时间点开始，在特定的时间范围内，计算所述用户的视线所朝向的所述触摸面板上的注视点的坐标；(iii)通过视线校正区域计算部，根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算特定范围的视线校正区域；(iv)通过操作坐标视线校正部，如果所述操作点的坐标在通过所述视线校正区域计算部计算出的所述视线校正区域内，则将所述操作点的坐标变更为所述注视点的坐标，如果所述操作点的坐标不在所述视线校正区域内，则不变更所述操作点的坐标。

附图说明

图1示出本发明实施方式所涉及的图像形成装置的整体结构。

图2示出本发明第一实施方式所示的操作面板部和视线检测部的外观的例子。

图3示出图1所示的图像形成装置的控制结构。

图4示出本发明第一实施方式所涉及的操作坐标视线校正处理的步骤。

图5A和图5B示出操作坐标视线校正处理的概念。

图6是示出本发明第二实施方式所示的图像形成装置的控制结构的框图。

图7示出本发明第二实施方式所涉及的操作坐标视线校正处理的步骤。

图8示出图7所示的视线校正时间区域修正处理的步骤。

图9A和图9B示出图8所示的视线校正区域扩大处理的概念。

图10A和图10B示出图8所示的视线校正区域缩小处理的概念。

图11A和图11B示出图8所示的视线校正区域移动处理的概念。

具体实施方式

第一实施方式

首先，参考图1和图2对本发明实施方式的电子设备的整体结构进行说明。

图像形成装置1是本发明实施方式的电子设备的一例。在图像形成装置1中，图像处理部11、原稿读取部12、原稿供给部13、运送部14、网络发送接收部15、操作面板部16、图像形成部17、计时器部18、存储部19以及视线检测部20被连接到控制部10。各部通过控制部10来进行动作控制。

控制部10是通用处理器(GPP，General Purpose Processor)、中央处理器(CPU，Central Processing Unit)、微处理器(MPU，Micro Processing Unit)、数字信号处理器(DSP，Digital Signal Processor)、图形处理器(GPU，Graphics Processing Unit)、专用集成电路(ASIC，Application Specific Integrated Circuit)等信息处理设备。

控制部10读出在存储部19的ROM或HDD中存储的控制程序，通过使该控制程序在RAM中展开并执行，从而作为后述功能块的各部来进行动作。此外，控制部10根据从外部终端或操作面板部16输入的指示信息，对装置的整体进行控制。

图像处理部11是数字信号处理器(DSP，Digital Signal Processor)或图形处理器(GPU，Graphics Processing Unit)等控制运算设备。图像处理部11是对图像数据进行图像处理的设备，例如，进行放大缩小、浓度调整、灰度调整、图像改善等各种图像处理。

图像处理部11将通过原稿读取部12读取到的图像作为打印数据存储到存储部19中。此时，图像处理部11也可以将打印数据转换为PDF或TIFF等格式的文件单位。

原稿读取部12是对所放置的原稿进行读取的扫描仪。

原稿供给部13是对由原稿读取部12读取的原稿进行运送的设备。

运送部14从供纸盒中运送记录纸张，并使记录纸张在图像形成部17进行图像形成，之后向堆叠托盘运送记录纸张。

网络发送接收部15是用于连接到LAN、无线LAN、WAN、移动电话网等外部网络的包括LAN网卡或无线发送接收机等的网络连接设备。

网络发送接收部15在数据通信用线路上发送接收数据，在语音电话线路上发送接收语音信号。

操作面板部16具备触摸面板60、按钮部61以及显示部62。

触摸面板60是静电电容方式、电阻膜方式、超声波检测方式等的触摸输入设备，用于获取用户进行了基于手指按下的操作(以下称为“触摸输入”)的坐标等指示。此外，触摸面板60也可以与显示部62一体构成。

触摸面板60通过图形用户界面(GUI，Graphical User Interface)等获取用户的各种指示。具体而言，触摸面板60将用户进行了触摸输入的坐标作为操作点来进行检测。触摸面板60此时也可以将操作点作为与显示部62上的坐标相对应的坐标来进行检测。

另外，如果触摸面板60对应于多点触摸，则可以对多个坐标进行检测。此外，触摸面板60也可以对通过专用笔等的笔尖输入的坐标进行检测。并且，触摸面板60还可以对用户按下的按压进行检测。此外，触摸面板60如果为静电电容式或超声波式等，则即使用户的手指没有进行接触，也可以将显示部62上的坐标作为操作点来进行检测。此时，还可以对距显示部62的距离进行检测。

按钮部61是包含机械式开关或静电电容式开关等的输入设备。按钮部61包括开始键、数字键、复印或扫描仪或传真发送接收等动作模式的切换按钮、用于获取与所选择的文档的打印/发送/接收等有关的指示的按钮等。

显示部62是液晶显示器(LCD，Liquid Crystal Display)、有机电激发光(OELD，Organic Electro-Luminescence Display)、场发射显示器(FED，Field EmissionDisplay)等平面显示面板、投影仪、状态显示用LED等显示设备。显示部62对各种操作画面进行显示。

显示部62能够显示GUI的各种图像。并且，在显示部62上，还能够显示用于使用户在触摸面板60上进行文字等的输入的软键盘(Software keyboard)。显示部62此时还能够进行与通过后述的操作坐标视线校正部被变更的或者未被变更的操作点的坐标相对应的显示。另外，显示部62也能够显示存储部19中存储的预览(preview)图像等。

计时器部18是CPU内置时钟、实时时钟、全球定位系统(GPS，GlobalPositioning System)接收机、NTP客户端等时刻获取设备。计时器部18能够获取误差小的实时的时刻信息。

此外，计时器部18能够设定用于在经过所设定的时间后产生中断等的计时器。

图像形成部17按照用户的输出指示，根据存储在存储部19中的或者通过原稿读取部12读取的或者从外部终端获取的数据进行对记录纸张的图像形成。

存储部19是使用了只读存储器(ROM，Read Only Memory)、随机存取存储器(RAM，Random Access Memory)等半导体存储器或硬盘驱动器(HDD，Hard DiskDrive)等记录介质的存储设备。

存储部19的ROM或HDD中存储有用于对图像形成装置1进行动作控制的控制程序。除此之外，存储部19还存储有用户的账户设定。此外，存储部19中也可以包含每个用户的文件夹等区域。

视线检测部20是具备例如多个摄像机和DSP等的视线检测设备。图2示出图像形成装置1的操作面板部16和视线检测部20的外观的例子。

视线检测部20例如根据拍摄到的图像数据检测出用户的脸和眼睛，进而以三维矢量形式等计算出视线。视线检测部20计算出用户的视线与触摸面板60的交点的坐标(以下称为“注视坐标”)，并将其设定为注视点。视线检测部20此时在用户对触摸面板60进行触摸输入的时间点前后的时间范围210内，计算出注视坐标的平均值或者注视时间最长的坐标以作为注视点220的坐标。此外，视线检测部20也可以根据对各注视坐标进行注视的时间、注视坐标的移动矢量、注视坐标的方差等，计算出注视点计算的概率即注视概率等值。

其中，时间范围被设定为比之于对象的触摸输入的前后触摸输入之间的时间短的值。由于触摸输入间隔存在个体差异，因此可以预先测定用户使用操作面板部16时的触摸输入间隔的平均值，根据该实测值确定每个用户的时间范围。例如，时间范围可以设为触摸输入间隔的平均值，也可以设为将该平均值除以一常数后得到的值。

此外，视线检测部20可以设置于操作面板部16。在图2所示的例子中，视线检测部20设置于操作面板部16的端部，但也可以设置于操作面板部16的表面上，还可以内置于操作面板部16。并且，视线检测部20也可以设置于离开操作面板部16的位置。此外，视线检测部20还可以具备对用户进行照射的照明部等。

另外，在图像形成装置1中，控制部10及图像处理部11还可以以内置GPU的CPU等或芯片模块封装的方式一体形成。

此外，控制部10及图像处理部11也可以内置RAM、ROM或闪存等。

此外，图像形成装置1还可以包括用于进行传真的发送接收的FAX发送接收部。

接着，根据图3对图像形成装置1的控制结构进行说明。

图像形成装置1的控制部10具备视线校正区域计算部100、操作坐标视线校正部110以及视线校正时间区域修正部130。

存储部19存储有操作点200、时间范围210、注视点220、视线校正区域230、视线校正范围240。

视线校正区域计算部100根据视线校正范围240和通过视线检测部20计算出的触摸面板60上的注视点220的坐标，来计算出视线校正区域230的坐标，并将其存储到存储部19中。视线校正区域计算部100例如以注视点220为中心坐标，计算出视线校正范围240内的坐标以作为视线校正区域230。

操作坐标视线校正部110将操作点200的坐标与通过视线校正区域计算部100计算出的视线校正区域230相对应地变更。如果操作点200在视线校正区域230内，则操作坐标视线校正部110将操作点200的坐标变更为注视点220的坐标。并且，如果操作点200不在视线校正区域230内，则操作坐标视线校正部110不变更操作点200的坐标。

此外，操作坐标视线校正部110在进行这些坐标校正后，调用GUI的各处理。

此外，在通过操作坐标视线校正部110变更操作点200的坐标后，当用户对与操作点200的坐标相对应的触摸输入的显示进行修正时，操作坐标视线校正部110也可以进行不使与对显示的修正相对应的触摸输入的操作点200的坐标变更的处理。

视线校正时间区域修正部130对时间范围210和视线校正区域230的已设定范围进行修正。在通过操作坐标视线校正部110变更操作点200的坐标后，视线校正时间区域修正部130检测用户对GUI中所输入的文字等的显示的修正。当检测到对显示的修正时，视线校正时间区域修正部130对其进行检测并进行修正。此时，视线校正时间区域修正部130将时间范围210从设定值进行变更，或者对视线校正区域230的面积或形状进行变更。

操作点200是通过触摸面板60被检测出的由用户进行的触摸输入的操作点的坐标数据。在操作点200中可以设定有显示部62的画面上的显示坐标。并且，操作点200还可以包含有按压或多点触摸的触摸顺序、移动的方向及加速度等数据。

时间范围210是用于指定通过视线检测部20对注视点220的坐标进行计算的时间(期间)的范围的数据。对于时间范围210，如果为软键盘，则可以在触摸面板60的触摸输入的时间点前后设定数μ秒～数秒程度的计算开始时间点与计算结束时间点之间的范围。

注视点220是通过视线检测部20计算出的用户的视线所朝向的触摸面板60上的注视点的坐标数据。在注视点220中设定有显示部62的画面上的显示坐标等能够与操作点200进行比较的坐标。并且，注视点220还可以包含有对各注视坐标进行注视的时间、注视坐标的移动矢量、注视坐标的方差值、注视概率等的值等。

视线校正区域230是操作点200的坐标通过操作坐标视线校正部110被变更的区域的坐标数据。视线校正区域230由视线校正区域计算部100根据注视点220的坐标和视线校正范围240计算得到。

视线校正范围240是用于通过视线校正区域计算部100来计算出视线校正区域230的、特定范围的坐标组及公式等数据。作为视线校正范围240的坐标组等的初始值，例如可以是自注视点220起包含有软键盘中相邻的数个按键的区域这种距离范围的值。并且，该范围的大小及面积也可以通过视线校正时间区域修正部130来修正。

另外，视线校正范围240也可以是用于确定以注视点220为中心的圆形、椭圆形或任意范围的形状的数据。并且，该范围的形状为椭圆形时，还可以设定与在纵横方向上包含软键盘中按键的数量相应的长轴和短轴的范围。此外，作为该范围的形状，也可以指定包含软键盘中多个按键这种区域的形状本身。

在此，图像形成装置1的控制部10通过执行存储部19中存储的控制程序，从而作为视线校正区域计算部100、操作坐标视线校正部110以及视线校正时间区域修正部130来发挥功能。

此外，上述的图像形成装置1的各部成为执行本发明的图像形成方法的硬件资源。

接着，参考图4～图5对本发明实施方式所涉及的图像形成装置1所进行的操作坐标视线校正处理进行说明。

在第一实施方式的操作坐标视线校正处理中，计算出以处于视线目的地的注视点220为中心的视线校正范围240以作为视线校正区域230。之后，如果进行了触摸输入的操作点200在视线校正区域230的内部，则认为注视点220被触摸而变更操作点200的坐标(以下将如此根据视线并在特定条件下对操作点200的坐标进行校正称为“进行视线校正”)。如果操作点200在视线校正区域230的外部，则不变更操作点200的坐标而直接判断为操作位置被触摸。

第一实施方式的操作坐标视线校正处理主要由控制部10与各部协作并利用硬件资源来执行存储部19中存储的程序。

以下参考图4的流程图对操作坐标视线校正处理的详细内容按照每个步骤进行说明。

(步骤S101)

首先，控制部10作为视线校正区域计算部100进行视线检测开始处理。

当通过GUI显示出软键盘等通过触摸面板60来获取用户指示的画面时，控制部10使通过视线检测部20进行的视线检测开始进行。由此，视线检测部20开始进行视线检测，并开始计算注视点220。

(步骤S102)

接着，触摸面板60进行操作点检测处理。

触摸面板60在检测到通过用户按下手指而进行的触摸输入时，对被触摸输入的操作点200设定坐标，并将其存储到存储部19中。并且，触摸面板60将该触摸输入的时间点通知给视线检测部20。

(步骤S103)

接着，视线检测部20进行注视点计算处理。

视线检测部20在触摸输入的时间点前后的时间范围210内计算出用户的视线所朝向的触摸面板60上的注视坐标数据。视线检测部20根据计算出的注视坐标数据来计算出注视点220的坐标，并将其存储到存储部19中。视线检测部20通知控制部10已计算出注视点220的坐标。

(步骤S104)

接着，控制部10作为视线校正区域计算部100进行视线校正区域计算处理。

控制部10根据来自视线检测部20的通知，计算出以注视点220为中心的视线校正范围240的坐标组等以作为视线校正区域230。

在图5A的画面例500和图5B的画面例501中，示出了被计算出以作为视线校正区域230的例子，该视线校正区域230被计算成以注视点220为中心并包含软键盘中1个～3个左右的按键的图像这种距离的圆形。在图5A和图5B中，描绘有作为文字输入栏的显示栏600以及用于在显示栏600中输入文字的软键盘610。此外，按钮700是表示已完成输入的按钮。

(步骤S105)

接着，控制部10作为操作坐标视线校正部110来判断操作点200是否在视线校正区域230内。若如图5A的画面例500那样，操作点200在视线校正区域230的内侧，则控制部10判断为“是”。相反，若如图5B的画面例501那样，操作点200在视线校正区域230的外侧，则控制部10判断为“否”。另外，即使操作点200在校正区域的内部，如果注视概率等值为阈值以下，则控制部10也可以判定为“否”。

在“是”时，控制部10将处理推进至步骤S106。

在“否”时，控制部10将处理推进至步骤S107。

(步骤S106)

如果操作点200在视线校正区域230的内侧，则控制部10作为操作坐标视线校正部110来进行操作点坐标变更处理。

控制部10将操作点的坐标变更为注视点220的坐标。控制部10此时也可以将操作点的坐标不是单纯地变更为注视点220的坐标，而是变更为特定的坐标。该特定的坐标例如可以是软键盘中包含注视点220的按键的中心等。

(步骤S107)

在此，控制部10作为操作坐标视线校正部110来进行操作点指示操作执行处理。

控制部10通知GUI对操作点200(如果进行了步骤S106的操作点坐标变更处理，则是被变更为注视点220后的操作点200。此外，如果未进行步骤S106的操作点坐标变更处理，则是被触摸输入的操作点200。)的坐标执行与用户的触摸输入相对应的处理。由此，例如在GUI为软键盘的情况下，控制部10通过GUI输入与所通知的操作点200处的按键相对应的文字等，并使其显示在显示部62的输入栏等。

(步骤S108)

接着，控制部10作为视线校正时间区域修正部130来判定是否存在用户修正。如果对于在步骤S107中输入并被显示的文字等存在由用户进行的修正，则控制部10判定为“是”。具体来进行说明，在软键盘的情况下，如果用户对所输入的文字按下“修正”按键等并触摸输入其他文字，则由于存在修正，因此控制部10判定为“是”。如果是除此之外的情况，例如，如果不进行修正而输入其他文字，或者按下完成按钮700，则控制部10判定为“否”。

在“是”时，控制部10将处理推进至步骤S109。

在“否”时，控制部10结束操作坐标视线校正处理。

(步骤S109)

在上述的步骤S108中，如果存在由用户进行的修正，则控制部10作为视线校正时间区域修正部130来进行操作点坐标变更抑制处理。

上述的其他文字的触摸输入是基于与用户进行修正时的触摸输入的操作点的坐标相对应的按键而进行的。

此时，控制部10进行控制以使对其他文字的触摸输入的操作点不执行通过操作坐标视线校正部110进行的操作点坐标变更处理。也就是说，控制部10不变更与对显示的修正相对应的触摸输入的操作点200的坐标。

另外，也可以构成为根据存储部19中存储的设定，在进行该处理时将操作点200的坐标的变更范围缩小或者根本不进行变更。

(步骤S110)

接着，控制部10作为视线校正时间区域修正部130来进行视线校正时间区域修正处理。

控制部10例如在软键盘的情况下能够将时间范围210从设定值进行变更。

此外，例如，如果变更前的操作点200的坐标是被修正后的按键的坐标，则控制部10进行修正而使视线校正范围240缩小，以使变更前的操作点200的坐标不被包含在视线校正范围240内。此外，相反地，如果注视点220的坐标是被修正后的按键的坐标，则控制部10进行修正而使视线校正范围240扩大，以使操作点200的坐标被包含在视线校正范围240内。

通过以上所述，结束本发明实施方式所涉及的操作坐标视线校正处理。

第二实施方式

第二实施方式所涉及的电子设备具备与图1及图2所示的第一实施方式所涉及的图像形成装置1同样的整体结构。

根据图6对图像形成装置1的控制结构进行说明。

图像形成装置1的控制部10具备视线校正区域计算部100、操作坐标视线校正部110、操作校正结果信息保存部120以及视线校正时间区域修正部130。

存储部19存储有操作点200、时间范围210、注视点220、视线校正区域230、视线校正范围240以及操作校正结果信息250。

视线校正区域计算部100根据视线校正范围240和通过视线检测部20计算出的触摸面板60上的注视点220的坐标，计算出视线校正区域230的坐标，并将其存储到存储部19中。视线校正区域计算部100例如以注视点220为中心坐标，计算出视线校正范围240内的坐标以作为视线校正区域230。此时，视线校正区域计算部100在参考视线校正范围240所包含的特定的坐标变更值的基础上，计算出视线校正区域230。

操作坐标视线校正部110与第一实施方式的操作坐标视线校正部110相同。

操作校正结果信息保存部120将操作点200的坐标、注视点220的坐标以及通过操作坐标视线校正部110对操作点200的坐标进行变更的结果作为操作校正结果信息250存储到存储部19中保存。

此外，操作校正结果信息保存部120对于由用户对文字等的显示进行修正的操作历史信息等，也可以使其包含在操作校正结果信息250中保存。

视线校正时间区域修正部130对时间范围210和视线校正区域230的已设定范围进行修正。在通过操作坐标视线校正部110变更操作点200的坐标后，视线校正时间区域修正部130检测用户对GUI中所输入的文字等的显示的修正。当检测到对显示的修正时，视线校正时间区域修正部130在显示部62上对修正进行显示。此时，视线校正时间区域修正部130将时间范围210从设定值进行变更，或者对视线校正区域230的面积或形状进行变更。

此外，视线校正时间区域修正部130是如果由用户进行的修正与注视点220的显示一致，则扩大视线校正区域230；如果由用户进行的修正与操作点200的显示一致，则缩小视线校正区域230；如果由用户进行的修正与注视点220的显示及操作点200的显示均不一致，则参考操作校正结果信息250来使视线校正范围240移动。

操作点200、时间范围110、注视点220、视线校正区域230、视线校正范围240被定义为与第一实施方式相同。

但是，视线校正范围240还可以包括在通过视线校正区域计算部100并根据由视线检测部20计算出的注视点220来计算视线校正区域230时作为补偿值等对坐标等进行变更所使用的特定的坐标变更值。

操作校正结果信息250是操作点200的坐标、注视点220的坐标以及通过操作坐标视线校正部110对操作点200的坐标进行变更的结果的历史信息等数据。操作校正结果信息250是为了进行视线校正区域230的自动变更而以特定的保存期间或保存量被保存的。作为该特定的保存期间，例如可以设定特定的时间、数秒～数分钟程度的时间。此外，作为特定的保存量，例如在软键盘的情况下可以设定一个文字～数十个文字这样的特定文字数的输入部分的数据量。另外，也可以被构成为与存储部19的存储容量相对应地保存所需数量的操作校正结果信息250。此外，操作校正结果信息250还可以包含与用户对显示进行修正的操作历史信息等有关的信息。

在此，图像形成装置1的控制部10通过执行存储部19中存储的控制程序所包含的操作支援程序，从而作为视线校正区域计算部100、操作坐标视线校正部110、操作校正结果信息保存部120以及视线校正时间区域修正部130来发挥功能。

此外，上述的图像形成装置1的各部成为执行本发明的图像形成方法的硬件资源。

接着，参考图7～图8对本发明实施方式所涉及的图像形成装置1所进行的操作坐标视线校正处理进行说明。

在第二实施方式的操作坐标视线校正处理中，计算出以处于视线目的地的注视点220为中心的视线校正范围240以作为视线校正区域230。之后，如果进行了触摸输入的操作点200在视线校正区域230的内部，则认为注视点220被触摸而变更操作点200的坐标(以下将如此根据视线并在特定条件下对操作点200的坐标进行校正称为“进行视线校正”)。如果操作点200在视线校正区域230的外部，则不变更操作点200的坐标而直接判断为操作位置被触摸。

第二实施方式的操作坐标视线校正处理主要由控制部10与各部协作并利用硬件资源来执行存储部19中存储的程序。

以下参考图7的流程图对操作坐标视线校正处理的详细内容按照每个步骤进行说明。

(步骤S1101至S1106)

步骤S1101至S1106分别与图4所示的步骤S101至S106相同。

(步骤S1107)

在此，控制部10作为操作校正结果信息保存部120来进行操作校正结果信息存储处理。

例如，在显示部62上显示的是软键盘的情况下，控制部10每进行一个文字的输入及操作点坐标变更处理，则将操作校正结果信息250存储到存储部19中。该操作校正结果信息250还可以包括操作点200的坐标、注视点220的坐标以及操作点200的坐标的变更结果。

(步骤S1108)

接着，控制部10作为操作坐标视线校正部110来进行操作点指示操作执行处理。

控制部10通知GUI对操作点200(如果进行了步骤S1106的操作点坐标变更处理，则是被变更为注视点220后的操作点200。此外，如果未进行步骤S1106的操作点坐标变更处理，则是被触摸输入的操作点200。)的坐标执行与用户的触摸输入相对应的处理。由此，例如在GUI为软键盘的情况下，控制部10通过GUI输入与所通知的操作点200处的按键相对应的文字等，并使其显示在显示部62的输入栏等。

(步骤S1109)

接着，控制部10作为视线校正时间区域修正部130来判断是否存在用户修正。如果对于在步骤S1108中输入并被显示的文字等存在由用户进行的修正，则控制部10判断为“是”。具体来进行说明，在软键盘的情况下，如果用户对所输入的文字按下“修正”按键等并触摸输入其他文字，则由于存在修正，因此控制部10判断为“是”。如果是除此之外的情况，例如，如果不进行修正而输入其他文字，或者按下完成按钮700，则控制部10判断为“否”。

在“是”时，控制部10将处理推进至步骤S1110。

在“否”时，控制部10结束操作坐标视线校正处理。

(步骤S1110)

在上述的步骤S1109中，如果存在由用户进行的修正，则控制部10作为视线校正时间区域修正部130来进行操作点坐标变更抑制处理。

上述的其他文字的触摸输入是基于与用户进行修正时的触摸输入的操作点的坐标相对应的按键而进行的。

此时，控制部10进行控制以使对其他文字的触摸输入的操作点不执行通过操作坐标视线校正部110进行的操作点坐标变更处理。也就是说，控制部10不变更与对显示的修正相对应的触摸输入的操作点200的坐标。

另外，也可以构成为根据存储部19中存储的设定，在进行该处理时将操作点200的坐标的变更范围缩小或者根本不进行变更。

此外，控制部10作为操作校正结果信息保存部120，对于修正的结果也可以将其包含在操作校正结果信息250中而存储到存储部19中。

(步骤S1111)

接着，控制部10作为视线校正时间区域130来进行视线校正时间区域修正处理。

对于该处理的详细内容，将在下面进行说明。

通过以上所述，结束本发明实施方式所涉及的操作坐标视线校正处理。

以下参考图8的流程图以及图9～图11对视线校正时间区域修正处理的详细内容按照每个步骤进行说明。

(步骤S1201)

首先，控制部10判断由用户进行的修正是否与注视点220的显示一致。

控制部10对于对在步骤S1108中输入的文字等的显示的修正，参考操作校正结果信息250，在修正后的显示与注视点220的显示一致的情况下，判断为“是”。根据图9A的例子，由于修正后的显示260的文字“D”与注视点220所指示的文字一致，因此控制部10判断为“是”。在除此之外的情况下，也即在修正后的显示与注视点220所指示的显示不一致的情况下，控制部10判断为“否”。

在“是”的情况下，控制部10将处理推进至步骤S1202。

在“否”的情况下，控制部10将处理推进至步骤S1203。

(步骤S1202)

如果修正与注视点220的显示一致，则控制部10进行视线校正区域扩大处理。

根据图9B的例子，控制部10扩大视线校正范围240来进行修正，以使视线校正区域230内包含操作点200。之后，在通过触摸面板60输入有操作点200这样的坐标时，例如，如果用户将视线朝向注视点220的坐标，则由于操作点200会包含在根据视线校正范围240计算出的视线校正区域230内，因此能够进行视线校正。由此，能够减少用户的输入差错。

之后，控制部10结束视线校正时间区域修正处理。

(步骤S1203)

如果修正与注视点220的显示不一致，则控制部10判断由用户进行的修正是否与操作点200的显示一致。

控制部10参考操作校正结果信息250，如果修正后的显示与操作点200的显示一致，则判断为“是”。根据图10A的例子，由于修正后的显示260的文字“X”与操作点200所指示的文字一致，因此控制部10判断为“是”。如果是除此之外的情况，也即如果修正后的显示与操作点200所指示的显示不一致，则控制部10判断为“否”。

在“是”时，控制部10将处理推进至步骤S1204。

在“否”时，控制部10将处理推进至步骤S1205。

(步骤S1204)

如果修正与操作点200的显示一致，则控制部10进行视线校正区域缩小处理。

根据图10B的例子，控制部10缩小视线校正范围240来进行修正，以使视线校正区域230内不包含操作点200。由此，即使之后通过触摸面板60输入操作点200这样的坐标，例如，如果用户将视线朝向注视点220的坐标，则由于操作点200在根据视线校正范围240计算出的视线校正区域230外，因此也不进行视线校正。从而，能够防止由视线校正带来的误修正，能够提高用户的使用方便性。

之后，控制部10结束视线校正时间区域修正处理。

(步骤S1205)

在此，如果修正与操作点200的显示不一致，也即如果修正与注视点220及操作点200均不一致，则控制部10进行视线校正区域移动处理。在该处理中，控制部10参考操作校正结果信息250中的历史信息，使视线校正范围240的坐标等移动。

图11A示出了尽管操作点200所指示的文字与注视点220所指示的文字一致而未进行视线校正但用户却将其修改为显示260的文字“S”的例子。在此例中，控制部10进行变更以使视线校正范围240所包含的坐标变更值向左移动特定的坐标。

图11B示出了在视线校正范围240变更后通过触摸面板60输入操作点200这样的坐标且通过视线检测部20检测出注视点220的坐标的例子。在此例中，控制部10对注视点220应用坐标变更值，计算出注视点220’的坐标，并计算出与该注视点220’的坐标相对应的视线校正区域230。由此，按用户所意图那样的视线校正被执行，文字“S”被输入。

在此，控制部10可以参考操作校正结果信息250中多个对文字等的显示进行修正的历史信息，计算出修正后的显示与注视点220的差分的平均值或中值等值，并将其设定为视线校正范围240的坐标变更值。另外，控制部10对于该坐标变更值可以直接设定所计算出的差分的平均值或中值等，也可以向偏离的方向每次增减特定的值来设定。此外，控制部10还可以不设定特定的坐标变更值，而是变更视线校正范围240的形状或范围本身。

此外，控制部10能够将时间范围210从设定值进行变更。例如，在显示为软键盘的情况下，控制部10可以根据操作校正结果信息250中的修正历史信息计算出适当的时间范围210，以便能够计算出视线校正区域230，使该视线校正区域230包含与对文字等的显示进行的修正相对应的坐标。

通过以上所述，结束第二实施方式所涉及的视线校正时间区域修正处理。

另外，在第二实施方式中，按照控制部10在通过视线校正时间区域修正处理来变更视线校正范围240时立即进行变更的方式进行了说明。然而，也可以不立即进行变更，而是在超过特定阈值时进行变更。作为该特定阈值，控制部10例如可以在用户进行了数次以上特定次数的修正时进行变更。

此外，作为变更视线校正范围240的时机，控制部10在操作过程中的画面上可以不立即进行变更。也就是说，控制部10可以与例如成为节能状态时、电源关闭时、通过计时器指定的日期时间等各种条件相对应地变更视线校正范围240。

本发明实施方式的图像形成装置1能够进行防止误操作的触摸输入而无需放大显示内容或变更显示文字数等。由此，能够显示的信息不会减少，能够提高用户的使用方便性。

在本发明实施方式的图像形成装置1中，由于在进行视线校正时显示部62上显示的显示内容未被放大，因此不会使用户产生混乱，从而能够提高操作性。

并且，在本发明实施方式的图像形成装置1中，如果检测到由用户进行的修正，则通过对时间范围210和视线校正范围240进行修正，从而能够提高用户的视线校正的精度。据此，由于能够指示出用户所意图的位置处的按键等，因此能够提高操作性。

特别是，通过保存操作校正结果信息250并在修正视线校正范围240时对其进行参考，从而对用户所输入的显示即使不立即进行修正也能够应对。例如，在软键盘的情况下，即使是在数个文字前输入的文字等的显示被修正时，也能够修正视线校正范围240。

本发明实施方式的图像形成装置1能够对照用户的修正来调整视线校正范围240，从而能够提高视线校正的精度。

本发明实施方式的图像形成装置1能够在对所输入的文字等的显示进行修正时防止无意中变更所输入的显示，从而提高用户的操作性。

此外，在本发明实施方式中，对于对软键盘中按键的触摸输入进行视线校正的例子进行了说明。然而，除了软键盘之外，本发明实施方式的操作坐标视线校正处理还能够应用到所有在触摸面板60上进行触摸输入并对GUI上的图像等的显示进行选择这样的处理中。也就是说，如果例如预览图像或缩略图像的选择、文件的选择等所选择的图像或文字等相靠近，则控制部10能够以应用本发明实施方式的操作坐标视线校正处理的方式进行控制。此外，对于误操作少的GUI上的画面，控制部10也能够以不应用本发明实施方式的操作坐标视线校正处理的方式进行控制。

此外，在本发明实施方式中，对于与显示部62的画面成为一体的触摸面板60的输入进行了说明。然而，也可以为显示部62与触摸面板60被分离这样的结构。在这种情况下，视线检测部20也能够检测朝向被分离的触摸面板60的用户视线。

然而，本发明也能够应用于除了图像形成装置之外的各种电子设备。例如，能够应用于具备触摸面板60和视线检测部20的智能手机、移动电话、个人计算机(PC，Personal Computer)以及个人数字助理(PDA，Personal Data Assistant)等信息处理装置。并且，还能够应用于具备触摸面板60和视线检测部20的诸如电视机、微波炉、电冰箱、家用机器人、家庭安全系统之类的家电设备等中。并且，还能够应用于电动摩托车、汽车、飞机、船舶等操纵用系统等中。除此之外，还能够使其作为部件以具备触摸面板60和视线检测部20的诸如基板之类的形状搭载到各种各样的设备中。

此外，上述实施方式的结构及动作为示例且在不脱离本发明宗旨的范围内可以适当变更来执行，这是不言而喻的。

Claims (8)

1.一种电子设备，具备触摸面板，所述触摸面板检测由用户进行的触摸输入的操作点的坐标，所述电子设备进一步具备：

视线检测部，从所述用户对所述触摸面板进行触摸输入的时间点开始，在特定的时间范围内，计算所述用户的视线所朝向的所述触摸面板上的注视点的坐标；

视线校正区域计算部，根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算特定范围的视线校正区域；以及

操作坐标视线校正部，如果所述操作点的坐标在通过所述视线校正区域计算部计算出的所述视线校正区域内，则将所述操作点的坐标变更为所述注视点的坐标，如果所述操作点的坐标不在所述视线校正区域内，则不变更所述操作点的坐标。

2.根据权利要求1所述的电子设备，

进一步具备：显示部，进行与通过所述操作坐标视线校正部被变更的或者未被变更的所述操作点的坐标相对应的显示，

在通过所述操作坐标视线校正部变更所述操作点的坐标后，当所述用户对所述显示进行修正时，所述操作坐标视线校正部不变更与对所述显示的修正相对应的触摸输入的操作点的坐标。

3.根据权利要求2所述的电子设备，进一步具备：

视线校正时间区域修正部，在通过所述操作坐标视线校正部变更所述操作点的坐标后，如果所述用户对所述显示进行修正，则修正所述时间范围和所述视线校正区域的范围。

4.根据权利要求1所述的电子设备，进一步具备：

操作校正结果信息保存部，将所述操作点的坐标、所述注视点的坐标以及通过所述操作坐标视线校正部对所述操作点的坐标进行变更的结果作为操作校正结果信息来保存；

显示部，进行与通过所述操作坐标视线校正部被变更的或者未被变更的所述操作点的坐标相对应的显示；以及

视线校正时间区域修正部，在通过所述操作坐标视线校正部变更所述操作点的坐标后，如果检测到由所述用户对所述显示部上显示的所述显示进行的修正，则参考通过所述操作校正结果信息保存部保存的所述操作校正结果信息，来修正所述时间范围和视线校正范围，

所述视线校正区域计算部根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算与特定的视线校正范围相对应的视线校正区域。

5.根据权利要求4所述的电子设备，所述视线校正时间区域修正部

如果由所述用户进行的修正与所述注视点的所述显示一致，则扩大所述视线校正范围；

如果由所述用户进行的修正与所述操作点的所述显示一致，则缩小所述视线校正范围；

如果由所述用户进行的修正与所述注视点的所述显示及所述操作点的所述显示均不一致，则根据所述操作校正结果信息来使所述视线校正范围移动。

6.根据权利要求4所述的电子设备，

所述操作坐标视线校正部在变更所述操作点的坐标后，当所述用户对所述显示进行修正时，不变更与对所述显示的修正相对应的触摸输入的操作点的坐标。

7.一种电子设备的操作支援方法，所述电子设备具备触摸面板，所述操作支援方法包括：

通过所述触摸面板，检测由用户进行的触摸输入的操作点的坐标；

通过视线检测部，从所述用户对所述触摸面板进行触摸输入的时间点开始，在特定的时间范围内，计算所述用户的视线所朝向的所述触摸面板上的注视点的坐标；

通过视线校正区域计算部，根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算特定范围的视线校正区域；

通过操作坐标视线校正部，如果所述操作点的坐标在通过所述视线校正区域计算部计算出的所述视线校正区域内，则将所述操作点的坐标变更为所述注视点的坐标，如果所述操作点的坐标不在所述视线校正区域内，则不变更所述操作点的坐标。

8.根据权利要求7所述的操作支援方法，进一步包括：

通过操作校正结果信息保存部，将所述操作点的坐标、所述注视点的坐标以及通过所述操作坐标视线校正部对所述操作点的坐标进行变更的结果作为操作校正结果信息来保存；

通过显示部，进行与通过所述操作坐标视线校正部被变更的或者未被变更的所述操作点的坐标相对应的显示；

通过视线校正时间区域修正部，在通过所述操作坐标视线校正部变更所述操作点的坐标后，如果检测到由所述用户对所述显示部上显示的所述显示进行的修正，则参考通过所述操作校正结果信息保存部保存的所述操作校正结果信息，来修正所述时间范围和视线校正范围，

通过所述视线校正区域计算部，根据通过所述视线检测部计算出的所述触摸面板上的所述注视点的坐标，计算与特定的视线校正范围相对应的视线校正区域。