CN104822005A - 电子设备以及操作画面显示方法 - Google Patents

电子设备以及操作画面显示方法 Download PDF

Info

Publication number
CN104822005A
CN104822005A CN201510029459.9A CN201510029459A CN104822005A CN 104822005 A CN104822005 A CN 104822005A CN 201510029459 A CN201510029459 A CN 201510029459A CN 104822005 A CN104822005 A CN 104822005A
Authority
CN
China
Prior art keywords
user
picture
display
selection
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510029459.9A
Other languages
English (en)
Other versions
CN104822005B (zh
Inventor
大岸良辅
新田刚
高桥稔
丹波正登
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Publication of CN104822005A publication Critical patent/CN104822005A/zh
Application granted granted Critical
Publication of CN104822005B publication Critical patent/CN104822005B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483Interaction with page-structured environments, e.g. book metaphor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials

Abstract

本发明提供一种电子设备以及操作画面显示方法。本发明的实施方式所涉及的电子设备具备:显示部、视线检测部、对象目视确认时间计算部、以及选择除去部。视线检测部对用户的视线所指向的显示部上的目视确认坐标进行检测。对象目视确认时间计算部对通过视线检测部检测出的目视确认坐标处于对象的范围内的时间进行计算。选择除去部为如果通过对象目视确认时间计算部计算出的时间比时间阈值长、且对象被选择的频率比频率阈值多,则将对象从用户的选择候补中除去。根据本发明,用户能够容易地对特定的对象进行检索。

Description

电子设备以及操作画面显示方法
技术领域
本发明涉及电子设备以及操作画面显示方法,特别涉及对在画面上显示的对象进行选择的电子设备以及操作画面显示方法。
背景技术
典型的电子设备为用户提供图形用户界面(GUI,Graphical User Interface)。用户通过使用操作面板部的按钮等,对与各功能相对应地显示在显示部上的图标等对象进行选择,从而能够选择这些功能。
如果是经常利用的功能,则用户能够根据在操作面板部的画面上显示的对象的图像来回忆出该功能,从而容易地对该功能的对象进行选择。
在这里,典型的电子设备对用户的视线指向显示部的位置进行确定,当通过视线位置确定部检测出用户的视线位置指向显示部内的特定的区域时,在显示部上显示用于示出用户的视线位置的光标,在光标选中图标的状态下,执行图标的操作。
然而,由于典型的电子设备具备多种功能,因此用户有时难以在画面上寻找出与特定的功能等相对应的对象。
发明内容
本发明的实施方式所涉及的电子设备具备:显示部、视线检测部、对象目视确认时间计算部、以及选择除去部。视线检测部对所述用户的视线所指向的所述显示部上的目视确认坐标进行检测。对象目视确认时间计算部对通过所述视线检测部检测出的所述目视确认坐标处于所述对象的范围内的时间进行计算。选择除去部为如果通过所述对象目视确认时间计算部计算出的时间比时间阈值长、且所述对象被选择的频率比频率阈值多,则将所述对象从用户的选择候补中除去。
本发明的实施方式所涉及的操作画面显示方法包括:(i)通过显示部,将由用户选择的多个对象在显示部上显示于一个画面中;(ii)通过视线检测部,对所述用户的视线所指向的所述显示部上的目视确认坐标进行检测;(iii)通过对象目视确认时间计算部,对通过所述视线检测部检测出的所述目视确认坐标处于所述对象的范围内的时间进行计算;(iv)通过选择除去部,如果通过所述对象目视确认时间计算部计算出的时间比时间阈值长、且所述对象被选择的频率比频率阈值多,则将所述对象从用户的选择候补中除去。
根据本发明,用户能够容易地对特定的对象进行检索。
附图说明
图1示出本发明的实施方式所涉及的图像形成装置的整体结构。
图2示出图1所示的操作面板部和视线检测部的概略。
图3示出图1所示的图像形成装置的控制结构。
图4示出图3所示的对象的数据结构。
图5示出本发明的实施方式所涉及的视线选择辅助处理的步骤。
图6示出伴随着图5所示的视线选择辅助处理的画面的变化。
具体实施方式
首先,参照图1,对本发明的实施方式的电子设备的整体结构进行说明。图像形成装置1(信息处理装置)是本发明的实施方式的电子设备的一例。
在图像形成装置1中,图像处理部11、原稿读取部12、原稿供给部13、运送部14、网络发送接收部15、操作面板部16、图像形成部17、计时器部18、存储部19以及视线检测部20被连接到控制部10。各部通过控制部10来进行动作控制。
控制部10为通用处理器(GPP,General Purpose Processor)、中央处理器(CPU,Central Processing Unit、中央处理装置)、微处理器(MPU,Micro Processing Unit)、数字信号处理器(DSP,Digital Signal Processor)、图形处理单元(GPU,GraphicsProcessing Unit)、专用处理器(ASIC,Application Specific Integrated Circuit)等信息处理设备。
控制部10读出在存储部19的ROM或HDD中存储的控制程序,通过使该控制程序在RAM中展开并执行,从而使其作为后述功能块的各部来进行动作。此外,控制部10根据从外部终端或操作面板部16输入的指示信息,对装置的整体进行控制。
图像处理部11为数字信号处理器(DSP,Digital Signal Processor)或图形处理单元(GPU,Graphics Processing Unit)等控制运算设备。图像处理部11对图像数据进行例如放大缩小、浓度调整、灰度调整、图像改善等各种图像处理。
图像处理部11将通过原稿读取部12读取到的图像作为打印数据存储到存储部19中。此时,图像处理部11也可以将打印数据转换为PDF或TIFF等格式的文件单位。
原稿读取部12为对所放置的原稿进行读取的扫描仪。
原稿供给部13为对由原稿读取部12读取的原稿进行运送的机构。
运送部14从供纸盒中运送记录纸张,并使其在图像形成部17进行图像形成,之后向堆叠托盘运送记录纸张。
网络发送接收部15为用于连接到LAN、无线LAN、WAN、移动电话网等外部网络的包括LAN网卡或无线发送接收机等的网络连接设备。
网络发送接收部15在数据通信用线路上发送接收数据,在语音电话线路上发送接收声音信号。
操作面板部16具备输入部61和显示部62。
输入部61为用于获取用户的各种指示的触摸面板或按钮等。
输入部61的触摸面板通过静电电容方式、电阻膜方式、超声波检测方式等,对用户所按下的显示部62上的坐标或按压等进行检测。另外,输入部61的触摸面板对应于多点触摸时,也可以对多个坐标或按压等进行检测。此外,输入部61的触摸面板也可以与显示部62一体构成。
输入部61的按钮部包括开始键、数字键、复印或扫描仪或传真发送接收等动作模式的切换按钮、用于获取与所选择的文档的打印/发送/接收等有关的指示的按钮等。
显示部62为液晶显示器(LCD,Liquid Crystal Display)、有机电激发光(OELD,Organic Electro-Luminescence Display)、场发射显示器(FED,Field EmissionDisplay)等平面显示面板、投影仪、状态显示用LED等显示设备。显示部62对各种操作画面进行显示。显示部62在一个画面上显示由用户选择的多个对象200(图3)。
显示部62能够显示GUI的各种图像。在这里,作为各种图像,包含有用于使用户进行选择的对象200(图3)的数据。此外,显示部62还能够显示预览(preview)图像等。
图像形成部17按照用户的输出指示,进行根据存储在存储部19中的、通过原稿读取部12读取或者从外部终端获取的数据向记录纸张的图像形成。
计时器部18为CPU内置时钟、实时时钟、全球定位系统(GPS,GlobalPositioning System)接收机、NTP客户端等时刻获取设备。计时器部18能够获取误差少的实际时间的时刻信息。
另外,计时器部18能够设定用于在经过所设定的时间后产生中断等的计时器。
存储部19为使用了只读存储器(ROM,Read Only Memory)、随机存取存储器(RAMR,Random Access Memory)等半导体存储器或硬盘驱动器(HDD,HardDisk Drive)等记录介质的存储设备。
存储部19存储多个画面选择信息300(图3),该画面选择信息300表示多个对象200显示在一个画面上而构成的组合。
此外,在存储部19的ROM或HDD中存储有用于对图像形成装置1进行动作控制的控制程序。除此之外,存储部19还存储有用户的账户设定。此外,存储部19中也可以包含每个用户的文件夹等区域。
视线检测部20为具备例如多个摄像机和DSP的视线检测设备。图2示出图像形成装置1的操作面板部16和视线检测部20的外观的例子。
视线检测部20对用户的视线所指向的显示部62上的目视确认坐标400(图3)进行检测。视线检测部20例如根据拍摄到的图像数据,检测出用户的脸和眼睛,进而以三维矢量形式等计算出视线,并计算出该视线与显示部62的交点的坐标即目视确认坐标400。
此外,视线检测部20可以设置于操作面板部16。在图2所示的例子中,视线检测部20设置于操作面板部16的端部,但也可以设置于操作面板部16的表面上,还可以内置于操作面板部16。此外,视线检测部20也可以设置于离开操作面板部16的位置。此外,视线检测部20还可以具备对用户进行照射的照明部等。
另外,在图1所示的图像形成装置1中,控制部10和图像处理部11还可以以内置GPU的CPU等或芯片模块封装的方式一体形成。
此外,控制部10和图像处理部11也可以内置RAM、ROM或闪存等。
此外,图像形成装置1还可以包括用于进行传真的发送接收的FAX发送接收部。
在这里,根据图3,对图像形成装置1的控制结构进行说明。
图像形成装置1的控制部10具备对象选择频率计算部100、对象目视确认时间计算部110、以及选择除去部120。
存储部19存储有图像显示信息的一个形式即画面选择信息300、时间阈值310、以及频率阈值320。
对象选择频率计算部100对各对象200被选择的频率进行计算。对象选择频率计算部100获取对象选择完成指示,所述对象选择完成指示是用户通过输入部61的触摸面板或按钮对在显示部62上显示的画面上的对象200-1~200-n(以下,表示这些对象200-1~200-n的任一个时,仅称为“对象200”)进行选择时的指示。对象选择频率计算部100获取到该对象选择完成指示时,针对每个与所显示的画面相对应的画面选择信息300,计算各对象200在特定的期间内被选择的频率。对象选择频率计算部100将各对象200的被计算出的频率存储到选择频率数据202(图4)。
此外,对象选择频率计算部100还可以从用户的操作历史中提取经常利用的功能,用以计算各对象200的选择频率数据202。在这种情况下,对象选择频率计算部100也可以对用户没有犹豫而到达特定的功能的次数进行测定,在一定以上次数的利用能得到确认的时点,对于与特定的功能相对应的对象200,判断为经常利用的功能,并设定到选择频率数据202并且存储于存储部19。
对象目视确认时间计算部110对通过视线检测部20检测出的目视确认坐标400处于各对象200的范围内的时间进行计算。也就是,对象目视确认时间计算部110对目视确认时间进行计算,所述目视确认时间是关于用户对在画面上显示的哪个图标等的对象200观看了多久的时间。该目视确认时间如果为后述的时间阈值310以上,则用户识别出与对象200相对应的功能的可能性提高。
具体而言,对象目视确认时间计算部110对目视确认坐标400与各对象200的坐标数据201(图4)进行比较,判断目视确认坐标400是否处于对象200的范围内,并对处于范围内的时间进行计数来计算。在此基础上,对象目视确认时间计算部110将计算出的时间存储到对象200的目视确认时间数据203中。
如果通过对象目视确认时间计算部110计算出的时间比时间阈值310长、且对象200被选择的频率比频率阈值320多,则选择除去部120判断为已被识别为与用户欲选择的功能等不同的功能,并将对象200从用户进行选择的候补中除去(以下称为“选择除去”)。选择除去部120将已被选择除去的情况设定到如此选择除去的对象200的选择除去数据204(图4)中并存储。
另外,如果通过用户指定其他画面的显示,则选择除去部120将画面选择信息300变更为其他的画面选择信息,以便在显示部62上描绘在被变更的其他的画面选择信息中包含的各对象。此时,如果画面选择信息300被变更为其他的画面选择信息,之后,返回到画面选择信息300,则选择除去部120读出在返回的画面选择信息300中包含的各对象200的选择除去数据204。选择除去部120对于与所读出的选择除去数据204相对应的各对象200,如果通过选择除去数据204使其从用户的选择候补中被除去,则使其与未被除去的其他的对象200相区别地显示在显示部62上。作为该区别,选择除去部120对于对象200进行例如使其变灰或根本不进行显示等的显示。
画面选择信息300为用于表示在显示部62上显示的多个可选择的对象200的画面上的组合的数据(以下,表示画面选择信息300-1~300-n的任一个时,仅称为“画面选择信息300”)。画面选择信息300与用于选择欲显示的画面的用户指示相对应地被选择。此外,画面选择信息300可以包含多个相同或不同的对象200-1~200-n。
此外,在画面选择信息300中还可以包含未被用户选择的预览图像或菜单显示等对象200的信息。
时间阈值310为关于通过视线检测部20计算出的目视确认坐标400处于各对象200的范围内的时间的阈值。时间阈值310在各对象200通过选择除去部120被选择除去时使用。时间阈值310作为用户能够在画面上对与对象200相对应的功能等进行识别的时间,可以被设定为数百m秒~数秒程度的时间。此外,时间阈值310可以通过基于操作面板部16的输入部61的用户指示来设定。
频率阈值320为关于各对象200在特定的期间内被用户选择的频率的阈值。频率阈值320也在各对象200通过选择除去部120被选择除去时使用。频率阈值320还可以通过用户对功能进行使用的频率来设定。此外,时间阈值320也可以通过基于操作面板部16的输入部61的用户指示来设定。此外,关于用于计算出频率阈值320的特定的期间,可以被变更为数日~数个月程度的期间。另外,时间阈值310和频率阈值320还可以针对每个用户来设定。
目视确认坐标400为通过视线检测部20计算出的、用户的视线所指向的显示部62上的坐标的数据。另外,目视确认坐标400可以暂时存储于存储部19。
接下来,根据图4,对对象200的数据的详细结构进行说明。对象200包括坐标数据201、选择频率数据202、目视确认时间数据203、选择除去数据204。
坐标数据201为用于表示对象200在显示部62的画面上被显示的范围的坐标的数据。坐标数据201例如可以被指定为多边形(多角形)、圆形或椭圆形等形状。
选择频率数据202为用于表示对象200在特定的期间内被用户选择的频率的数据。
目视确认时间数据203为用于表示包含对象200的画面选择信息300被显示之后,由用户进行目视确认的时间的合计等的数据。
选择除去数据204为用于表示对象200是被选择除去的状态、还是未被选择除去的通常状态等的数据。
另外,在对象200中还可以包含所显示的图标的图像数据或说明的文字数据等。此外,对象200还可以针对每个画面选择信息300,包含不同的坐标数据201、选择频率数据202、目视确认时间数据203、选择除去数据204等。
在这里,图像形成装置1的控制部10通过执行在存储部19中存储的控制程序,从而作为对象选择频率计算部100、对象目视确认时间计算部110、以及选择除去部120来发挥功能。
此外,上述的图像形成装置1的各部成为执行本发明的图像形成方法的硬件资源。
接下来,参照图5~图6,对本发明的实施方式所涉及的图像形成装置1所执行的视线选择辅助处理进行说明。
在本实施方式的视线选择辅助处理中,当用户对平常不利用的功能等的对象200进行选择时,执行基于视线检索的辅助。具体而言,进行用户的视线检索,在通过标签等被选择并被显示的画面上,对于用户进行目视确认的时间比时间阈值310长、且被选择的频率比频率阈值320多的对象200,判断为该对象200已被识别为并不是用户正在寻找的功能。对于这种对象200,进行选择除去的设定以使用户可以不进行选择,当从变更后的画面返回到原来的画面时,通过变灰等来区别显示,从而使用户第二次以后的检索时间减少。
本实施方式的视线选择辅助处理主要是控制部10与各部协作并使用硬件资源来执行存储于存储部19的程序。
下面,参照图5的流程图,按照每个步骤对视线选择辅助处理进行详细说明。
首先,在步骤S100中,控制部10作为对象目视确认时间计算部110,进行目视确认时间初始设定处理。
控制部10在用户通过输入部61等进行指示时,获取该指示,所述指示为显示用于从多个画面中选择对象200的菜单等的指示。控制部10对与能够通过该菜单等选择的所有画面相对应的画面选择信息300进行确定,并对上述画面选择信息300中包含的对象200的目视确认时间数据203进行初始化。
此外,控制部10选择通过菜单被最初显示的初始画面的画面选择信息300,将该画面选择信息300中包含对象200通过GUI的程序描绘在显示部62上。
在图6的(a)的画面例500中,示出在“标签α”的画面作为初始画面被显示的显示栏600中显示有“功能A”~“功能F”的对象200的例子。
此外,控制部10还可以进行用户的认证、视线检测部20的启动以及其他各种初始化处理。
接下来,在步骤S101中,视线检测部20进行目视确认坐标检测处理。
视线检测部20将用户的视线作为目视确认坐标400来进行检测。目视确认坐标400能够被控制部10读出并存储。
接下来,在步骤S102中,控制部10作为对象目视确认时间计算部110,进行目视确认时间计算处理。
控制部10对于在显示部62上显示的画面的画面选择信息300中所包含的各对象200,通过坐标数据201对由视线检测部20检测出的目视确认坐标400是否处于对象200的范围内进行判断。控制部10对于目视确认坐标400处于范围内的对象200,通过计时器部18对处于范围内的时间进行测量,并追加到对象200的目视确认时间数据203中,并且存储于存储部19。
接下来,在步骤S103中,控制部10作为对象目视确认时间计算部110,对用户是否进行了变更画面的指示进行判断。如果用户由输入部61输入用于对在显示部62上显示的画面的选择进行变更的指示,则控制部10判断为“是”。如果是除此以外的情况,也就是如果用户正在阅览画面上的对象200或选择对象200,则控制部10判断为“否”。
根据图6的(a)~(c)的画面例500~画面例502,如果自“标签α”的画面被显示的显示栏600选择“标签β”的画面被显示的显示栏610,或者自“标签β”的显示栏610选择“标签α”的显示栏600,则作为存在有画面显示的变更指示,控制部10判断为“是”。具体而言,例如,如果除了显示栏600或显示栏610的被记载为“功能A”~“功能L”的各对象200以外的部分通过输入部61的触摸面板被按下或者“前进”“返回”等按钮被按下,则控制部10判断为存在有画面显示的变更指示。
如果为“是”,则控制部10将处理推进到步骤S104。
如果为“否”,则控制部10将处理推进到步骤S109。
如果画面被变更,则在步骤S104中,控制部10作为选择除去部120,对于目视确认时间数据203的值为时间阈值310以上、且选择频率数据202的值为频率阈值320以上的对象200进行判断。控制部10对于所选择的画面的画面选择信息300中所包含的各对象200之中、目视确认时间数据203的值为时间阈值310以上、且选择频率数据202的值为频率阈值320以上的对象200,判断为“是”。控制部10对于除此以外的对象200,判断为“否”。
如果为“是”,则控制部10将处理推进到步骤S105。
如果为“否”,则控制部10将处理推进到步骤S 106。
在步骤S105中,对于目视确认时间数据203的值为时间阈值310以上、且选择频率数据202的值为频率阈值320以上的各对象200,控制部10作为选择除去部120,进行选择除去设定处理。
控制部10将已被选择除去的情况设定到上述对象200的选择除去数据204中并存储于存储部19。
示出如下例子,即在图6的(a)的画面例500中,对于显示栏600的“功能A”、“功能C”、“功能E”的各对象200设定了选择除去。但是,如下述说明所示,由于变更后的画面被立刻描绘,因此在之后,当返回到显示栏600的画面时,该选择除去被反映。
在步骤S106中,控制部10作为选择除去部120,判断画面显示是否已被返回。如果由用户选择的画面已经显示在显示部62上,则控制部10判断为“是”。若为除此以外的情况,则控制部10判断为“否”。
在图6的(b)的画面例501中,“标签β”的显示栏610被显示时,如果用户指示对“标签α”的显示栏600进行显示,则控制部10判断为“是”。
如果为“是”,则控制部10将处理推进到步骤S107。
如果为“否”,则控制部10将处理推进到步骤S 108。
画面显示被返回时,在步骤S107中,控制部10作为选择除去部120,进行选择除去区别显示处理。
控制部10将在选择除去数据204中设定了选择除去的对象200与在选择除去数据204中未设定选择除去的对象200区别地显示在显示部62上。据此,画面选择信息300被变更,之后,当返回到画面选择信息300时,用户能够区别地识别出被选择除去的对象200与除此以外的对象200。
在图6的(c)的画面例502的显示栏600中,示出被选择除去的“功能A”、“功能C”、“功能E”的各对象200通过变灰而被区别显示的例子。控制部10对于该状态的各对象200,也可以设定为用户无法进行选择。此外,在该例子中,在显示栏600中,对于未被选择除去的通常状态的“功能B”、“功能D”、“功能F”的对象200,不使其变灰显示。
然后,控制部10将处理推进到步骤S109。
另外,控制部10还可以进行控制使得对象200即使处在变灰的状态下,如果用户多次按下,也能够使其显示为通常的状态并进行选择。在这种情况下,控制部10可以自对象200的选择除去数据204的选择除去的状态重新设定为通常状态并存储于存储部19。而且,在此时,控制部10还可以重新设定时间阈值310和频率阈值320。
如果画面显示为不同的画面显示,则在步骤S108中,控制部10作为选择除去部120,进行通常显示处理。
控制部10将包含在与由用户选择的画面相对应的画面选择信息300中的对象200显示在显示部62上。
在图6的(b)中,示出画面以自“标签α”的显示栏600到“标签β”的显示栏610的方式被变更并显示的例子。另外,即使如此使所显示的画面变化,控制部10也能够如预览的显示栏620所示,显示未变化的对象200。
在步骤S109中,控制部10作为对象选择频率计算部100,判断是否存在对象选择完成指示。控制部10对于在显示部62上显示的对象200中的任一个,如果用户按下输入部61的触摸面板或按钮等来完成选择,则获取该对象选择完成指示,并判断为“是”。若为除此之外的情况,则控制部10判断为“否”。
如果为“是”,则控制部10将处理推进到步骤S110。
如果为“否”,则控制部10使处理返回到步骤S101,以使视线检测部20继续检测视线。
如果获取对象选择完成指示,则在步骤S110中,控制部10作为对象选择频率计算部100,进行选择频率更新处理。
控制部10将所选择的画面选择信息300的对象200的选择频率数据202增加,来重新计算出频率并存储于存储部19。此外,控制部10使超过特定的期间而未被选择的对象200的选择频率数据202的频率减少并存储于存储部19。
通过上述,结束本发明的实施方式所涉及的视线选择辅助处理。
通过如上述那样构成,能够得到如下这样的效果。
以往,即使使用如专利文件1那样的视线检索,用户也难以从多个功能中检索出特定的功能。具体说明为,在以往的图像形成装置中,如果是经常利用的功能,则用户能够根据操作面板部的画面上的图标来回忆出功能,从而容易地选择该功能并加以利用。然而,如果是几乎未利用的功能,则需要进行下述工作,即,切换多个画面,并根据一个一个功能的图标和名称来想象功能,在实际选择图标并确认其设定内容等的基础上,确认该功能是否为所请求的功能。在此,如果大致进行了确认也未找到特定的功能,则需要将画面返回,并再次从头重新观看。在这种情况下,有时会发生用户没有记住确认过哪个图标的设定内容,而对应当已确认过的功能再次进行确认的事态。
与此相对,本发明的实施方式所涉及的图像形成装置1的特征在于,具备:显示部62,将由用户选择的多个对象200显示在一个画面上;视线检测部20,对用户的视线所指向的显示部62上的目视确认坐标400进行检测;对象目视确认时间计算部110,对通过视线检测部20检测出的目视确认坐标400处于对象200的范围内的时间进行计算;以及选择除去部120,如果通过对象目视确认时间计算部110计算出的时间比特定的时间阈值310长、且对象200被选择的频率比特定的频率阈值320多,则将对象200从用户的选择候补中除去。
通过如此构成,用户能够根据视线检索以及迄今为止的对象200的选择频率,将与一旦检索且已判断为不同的功能等相对应的对象200设为非选择对象。据此,能够缩小用户欲检索的目标的对象200,使检索顺利地进行。因此,能够使用户更加方便使用。
此外,本发明的实施方式所涉及的图像形成装置1的特征在于,进一步具备:存储部19,存储多个画面选择信息300,该画面选择信息300表示多个对象200被显示在一个画面上而构成的组合,选择除去部120在画面选择信息300被变更,之后返回到画面选择信息300时,将从用户的选择候补中除去的对象200与未被除去的对象200区别地显示在显示部62上。
通过如此构成,当用户寻找平常不利用的功能时,能够使已判断为不是正在寻找的功能的对象200以变灰显示或从画面显示中消除的方式被区别显示。据此,能够使用户意识到被区别显示的功能所具有的状态,并使第二次以后的检索量减少。因此,能够防止用户重复检索的麻烦,使其高效地检索。
汇总以上的效果,本实施方式的图像形成装置1使用户无需对以前已确认过的功能再次进行确认,从而能够使用户更加方便使用。
再次参照图6进行说明,以往,用户在利用图像形成装置1的功能时,需要如图6的(a)所示从标签α的“功能A”直到“功能F”大致检索想要利用的功能,如果没有找到,则如图6的(b)所示切换到标签β,与标签α时同样地寻找功能。在这里,如果没有找到想要利用的功能,则再次返回到标签α,从功能A开始按顺序寻找。
与此相对,在本实施方式中,如果已经结束检索,对于判断为不是用户所要求的功能的对象200,则被选择除去,如图6的(c)所示以变灰等方式显示。这样一来,用户对标签α进行第二次的检索时,仅检索功能B、功能D、功能F即可。
因此,用户无需特别注意哪个功能被配置在哪个位置那样有意识地进行操作,如果判断为以前检索过的功能与所要求的不同,则无需再次进行确认。因此,能够使用户更加方便使用。
此外,在本实施方式中,对在选择功能时利用视线检测的例子进行了说明。然而,除此以外,本实施方式的视线功能选择处理也能够全部适用于如利用输入部61选择图像这样的处理中。也就是,控制部10能够将其用于例如预览图像或缩略图像的选择、文件的选择等从多个对象200中选择需要的对象的处理中。
通过这样的结构,能够使用户更加方便使用。
另外,在本实施方式中,对利用图像形成装置1的操作面板部16进行对象200的选择的例子进行了说明。
但是,本发明也能够适用于除了图像形成装置以外的信息处理装置。例如,还能够适用于具备触摸面板的智能手机、移动电话、个人计算机(PC,PersonalComputer)、个人数据助理(PDA,Personal Data Assistant)、电视机等中。
另外,上述实施方式的结构和动作仅为例子,可以在不脱离本发明宗旨的范围内适当变更执行,这是不言而喻的。

Claims (6)

1.一种电子设备,具备显示部,将由用户选择的多个对象显示在一个画面上,该电子设备进一步具备:
视线检测部,对所述用户的视线所指向的所述显示部上的目视确认坐标进行检测;
对象目视确认时间计算部,对通过所述视线检测部检测出的所述目视确认坐标处于所述对象的范围内的时间进行计算;以及
选择除去部,如果通过所述对象目视确认时间计算部计算出的时间比时间阈值长、且所述对象被选择的频率比频率阈值多,则将所述对象从用户的选择候补中除去。
2.根据权利要求1所述的电子设备,进一步具备:
存储部,存储多个画面显示信息,所述画面显示信息表示所述多个对象被显示在一个画面上而构成的组合,
所述选择除去部在所述画面显示信息被变更为其他的画面显示信息,之后返回到所述画面显示信息时,将从所述用户的选择候补中除去的所述对象与未被除去的所述对象区别地显示在所述显示部上。
3.根据权利要求2所述的电子设备,
所述选择除去部将被除去的所述对象以与未被除去的所述对象不同的显示形态显示。
4.一种操作画面显示方法,由用户选择的多个对象在显示部上显示于一个画面中,该操作画面显示方法包括:
通过视线检测部,对所述用户的视线所指向的所述显示部上的目视确认坐标进行检测;
通过对象目视确认时间计算部,对通过所述视线检测部检测出的所述目视确认坐标处于所述对象的范围内的时间进行计算;以及
通过选择除去部,如果通过所述对象目视确认时间计算部计算出的时间比时间阈值长、且所述对象被选择的频率比频率阈值多,则将所述对象从用户的选择候补中除去。
5.根据权利要求4所述的操作画面显示方法,进一步包括:
通过存储部,存储多个画面显示信息,所述画面显示信息表示所述多个对象被显示在一个画面上而构成的组合,
通过所述选择除去部,在所述画面显示信息被变更为其他的画面显示信息,之后返回到所述画面显示信息时,将从所述用户的选择候补中除去的所述对象与未被除去的所述对象区别地显示在所述显示部上。
6.根据权利要求5所述的操作画面显示方法,进一步包括:
通过所述选择除去部,将被除去的所述对象以与未被除去的所述对象不同的显示形态显示。
CN201510029459.9A 2014-01-30 2015-01-21 电子设备以及操作画面显示方法 Expired - Fee Related CN104822005B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-015440 2014-01-30
JP2014015440A JP5932858B2 (ja) 2014-01-30 2014-01-30 電子機器及び操作画面表示プログラム

Publications (2)

Publication Number Publication Date
CN104822005A true CN104822005A (zh) 2015-08-05
CN104822005B CN104822005B (zh) 2018-02-09

Family

ID=

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107544732A (zh) * 2016-06-23 2018-01-05 富士施乐株式会社 信息处理装置、信息处理系统和图像形成装置
CN113467614A (zh) * 2021-06-30 2021-10-01 北京市商汤科技开发有限公司 显示界面选择方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284797A (ja) * 2004-03-30 2005-10-13 Honda Motor Co Ltd 走行安全装置
CN102830793A (zh) * 2011-06-16 2012-12-19 北京三星通信技术研究有限公司 视线跟踪方法和设备
CN103313080A (zh) * 2012-03-16 2013-09-18 索尼公司 控制设备、电子装置、控制方法和程序

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005284797A (ja) * 2004-03-30 2005-10-13 Honda Motor Co Ltd 走行安全装置
CN102830793A (zh) * 2011-06-16 2012-12-19 北京三星通信技术研究有限公司 视线跟踪方法和设备
CN103313080A (zh) * 2012-03-16 2013-09-18 索尼公司 控制设备、电子装置、控制方法和程序

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107544732A (zh) * 2016-06-23 2018-01-05 富士施乐株式会社 信息处理装置、信息处理系统和图像形成装置
CN113467614A (zh) * 2021-06-30 2021-10-01 北京市商汤科技开发有限公司 显示界面选择方法及装置
WO2023273138A1 (zh) * 2021-06-30 2023-01-05 北京市商汤科技开发有限公司 显示界面选择方法、装置、设备、存储介质及程序产品

Also Published As

Publication number Publication date
JP5932858B2 (ja) 2016-06-08
US9696889B2 (en) 2017-07-04
JP2015141668A (ja) 2015-08-03
US20150212720A1 (en) 2015-07-30

Similar Documents

Publication Publication Date Title
US20210081090A1 (en) Portable terminal causing an image processing device to execute operations for image data
US10666869B2 (en) Image display apparatus and image display method
US9652144B2 (en) Method and apparatus for providing POI information in portable terminal
US9696889B2 (en) Electronic device that displays an operation screen including an object
EP3128731A1 (en) Mobile terminal and method for controlling the same
EP2899611B1 (en) Electronic device, method, and program for supporting touch panel operation
JP5696489B2 (ja) サーバー装置、印刷システム、および、印刷方法
US9258440B2 (en) Image forming apparatus, remote operation device, remote control method, remote operation method, non-transitory computer-readable recording medium encoded with remote control program, and non-transitory computer-readable recording medium encoded with remote operation program for performing remote operation
US10686927B2 (en) Non-transitory computer-readable medium and portable device
US10645246B2 (en) Non-transitory computer-readable medium and portable device
JP2009176166A (ja) 印刷指示装置、印刷システム、印刷方法、プログラムおよび記録媒体
JP5673121B2 (ja) サーバー装置、印刷システム、および、印刷方法
JP2022145775A (ja) 端末装置及びプログラム
US9456093B2 (en) Image processing apparatus on which output candidate images less than or equal to a predetermined number are selectably displayed
JP6277981B2 (ja) 情報コード画像表示システム、情報コード画像表示端末、情報コード画像表示プログラム
JP2015184698A (ja) 電子機器及び操作支援プログラム
CN104822005B (zh) 电子设备以及操作画面显示方法
JP5976708B2 (ja) 電子機器及び操作支援プログラム
CN109218599B (zh) 全景图像的显示方法及其电子装置
JP6477590B2 (ja) 電子機器
EP3460728A1 (en) Recording medium, management terminal, and method for managing sales data processing device
JP2014171190A (ja) 携帯機器、携帯機器用プログラムおよび機器情報表示システム
JP2009225281A (ja) プリント受付装置、プリント受付システム、サーバ装置、端末装置、プリントサイズ提案方法、プリントサイズ設定方法及びプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180209

Termination date: 20220121