CN106331407B - 操作系统 - Google Patents

操作系统 Download PDF

Info

Publication number
CN106331407B
CN106331407B CN201610465325.6A CN201610465325A CN106331407B CN 106331407 B CN106331407 B CN 106331407B CN 201610465325 A CN201610465325 A CN 201610465325A CN 106331407 B CN106331407 B CN 106331407B
Authority
CN
China
Prior art keywords
image
type terminal
candidate
viewpoint
glasses type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610465325.6A
Other languages
English (en)
Other versions
CN106331407A (zh
Inventor
市川大介
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kyocera Document Solutions Inc
Original Assignee
Kyocera Document Solutions Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kyocera Document Solutions Inc filed Critical Kyocera Document Solutions Inc
Publication of CN106331407A publication Critical patent/CN106331407A/zh
Application granted granted Critical
Publication of CN106331407B publication Critical patent/CN106331407B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00251Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00249Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
    • H04N1/00267Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with a viewing or projecting apparatus, e.g. for reading image information from a film
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00352Input means
    • H04N1/00381Input by recognition or interpretation of visible user gestures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00408Display of information to the user, e.g. menus
    • H04N1/00413Display of information to the user, e.g. menus using menus, i.e. presenting the user with a plurality of selectable options
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00405Output means
    • H04N1/00482Output means outputting a plurality of job set-up options, e.g. number of copies, paper size or resolution
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/0035User-machine interface; Control console
    • H04N1/00493Particular location of the interface or console
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00912Arrangements for controlling a still picture apparatus or components thereof not otherwise provided for
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/50Picture reproducers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/603Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/332Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0008Connection or combination of a still picture apparatus with another apparatus
    • H04N2201/0074Arrangements for the control of a still picture apparatus by the connected apparatus
    • H04N2201/0075Arrangements for the control of a still picture apparatus by the connected apparatus by a user operated remote control device, e.g. receiving instructions from a user via a computer terminal or mobile telephone handset
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/0077Types of the still picture apparatus
    • H04N2201/0094Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • User Interface Of Digital Computer (AREA)
  • Processing Or Creating Images (AREA)
  • Position Input By Displaying (AREA)
  • Facsimiles In General (AREA)

Abstract

本发明提供能够使用眼镜型终端简单地进行存在许多能够选择的设定值的操作并能够提高便利性的操作系统。眼镜型终端(1)包括:视野拍摄部(11),其拍摄前方视野图像;能够看见的画面显示部(13);画面生成部(161),其生成配置有选择项目的画面并显示于画面显示部;视点检测部(162),其接受用户将视点对上的选择项目的选择,并确定前方视野图像上的视点位置;样本数据截取部(163),其从前方视野图像截取样本数据;以及通信部(14),其将被选择的选择项目及样本数据向图像形成装置(2)发送,图像形成装置执行基于从眼镜型终端接收到的选择项目的动作,并基于样本数据确定作为选择项目的设定值候选并向眼镜型终端发送。

Description

操作系统
技术领域
本发明涉及通过戴在用户头部的眼镜型的可穿戴式终端(以下,称为眼镜型终端)来对主体装置进行操作的操作系统。
背景技术
近年来,提出了能够通过视线输入进行操作的头戴显示装置。这样的头戴显示装置显示与操作内容对应的标志,在检测出用户对标志进行一定时间以上的注视的情况下,执行与标志对应的操作。
发明内容
发明要解决的问题
然而,对于以往的技术,存在以下问题:在从多个设定值中选择操作项目的设定值的情况下,由于利用用户的视线进行选择的关系,在显示设备中能够显示的设定值的数量受限制,不能应对存在许多设定值的操作。
本发明是鉴于上述问题而完成的,其目的在于提供能够使用眼镜型终端简单地进行存在许多能够选择的设定值的操作,并能够提高便利性的操作系统。
解决问题的方案
本发明的操作系统是用户通过戴在头部的眼镜型终端对主体装置进行操作的操作系统,其特征在于,所述眼镜型终端包括:视野拍摄部,其拍摄用户的前方视野的图像;眼球拍摄部,其拍摄用户的眼球的图像;用户能够看见的画面显示部;画面生成部,其生成配置有选择项目的画面并在所述画面显示部显示;视点检测部,其基于由所述眼球拍摄部拍摄到的图像,检测出所述画面显示部上的用户的视点,接受用户将视点对上的所述选择项目的选择,并且基于由所述眼球拍摄部拍摄到的图像,确定由所述视野拍摄部拍摄到的图像上的视点位置;样本数据截取部,其基于由所述视点检测部确定的所述视点位置,从由所述视野拍摄部拍摄到的图像中截取样本数据;以及终端通信部,其将由所述视点检测部接受了选择的所述选择项目及由所述样本数据截取部截取的所述样本数据向所述主体装置发送,并且,所述主体装置包括:控制部,其执行基于从所述眼镜型终端接收到的所述选择项目的动作;样本数据分析部,其基于从所述眼镜型终端接收到的所述样本数据,确定要在所述眼镜型终端的所述画面显示部显示的作为所述选择项目的设定值候选;以及主体通信部,其将所述设定值候选向所述眼镜型终端发送。
发明效果
根据本发明,利用基于用户的视点而截取的样本数据44,确定设定值候选,作为用户进行选择的选择项目。从而,实现以下效果:即使存在许多能够选择的设定值,通过在眼镜型终端1中对设定值候选进行选择,从而用户能够简单地进行所期望的操作,能够提高便利性。
附图简要说明
图1是本发明的操作系统的系统构成图。
图2是表示图1所示的眼镜型终端的构成的方框图。
图3是表示图1所示的图像形成装置的构成的方框图。
图4是表示图1所示的眼镜型终端中的印刷数据的印刷动作的流程图。
图5是表示图1所示的图像形成装置中的印刷数据的印刷动作的流程图。
图6是表示图2所示的画面显示部中的显示例的图。
具体实施方式
下面,参照附图对本发明的实施方式详细地进行说明。此外,下面的实施方式中,对于表示相同功能的构成,赋予相同的符号。
如图1所示,本实施方式的操作系统包括眼镜型终端1、及通过无线等网络与眼镜型终端1连接的主体装置即图像形成装置2。图像形成装置2是打印机、复印机、MFP(Multifunction Peripheral/Printer/Product,多功能外设/打印机/事物机)等具有印刷功能的装置。眼镜型终端1是对利用图像形成装置2印刷的印刷数据的编辑进行操作的装置。
眼镜型终端1是用户戴在头部的眼镜型的可穿戴式终端。如图2所示,眼镜型终端1包括视野拍摄部11、眼球拍摄部12、画面显示部13、通信部14、存储部15及控制部16。
如图1所示,视野拍摄部11是朝向眼镜型终端1的前方侧而配置的CCD摄像机或CMOS摄像机等由固态成像器件构成的摄像机,拍摄用户的前方视野的图像。以下,将通过视野拍摄部11拍摄到的图像称为视野图像。
如图1所示,眼球拍摄部12是朝向眼镜型终端1的后方侧而配置的CCD摄像机或CMOS摄像机等由固态成像器件构成的摄像机,拍摄用户的眼球的图像。以下,将通过眼球拍摄部12拍摄到的图像称为视点检测图像。
画面显示部13具有如图1所示那样的半反射镜13a作为显示画面,若用户戴上了眼镜型终端1则该半反射镜13a位于用户的眼球的正前面,通过将图像光投影于半反射镜13a,从而显示用户能够看见的各种画面。
通信部14具有利用无线LAN等无线通信与图像形成装置2进行各种数据的发送和接收的功能。
存储部15是半导体存储器等存储单元,存储从图像形成装置2接收到的印刷数据一览表或印刷图像。
控制部16分别与视野拍摄部11、眼球拍摄部12、画面显示部13、通信部14、及存储部15连接,执行眼镜型终端1整体的动作控制。控制部16是具有CPU(Central ProcessingUnit,中央处理器)、ROM(Read Only Memory,只读存储器)、RAM(Random Access Memory,随机存储器)等的微型计算机等信息处理部。在ROM中存储有用于进行眼镜型终端1的动作控制的控制程序。控制部16的CPU通过读出存储于ROM的控制程序,并在RAM中展开控制程序,来进行终端整体的控制。另外,控制部16分别作为画面生成部161、视点检测部162、样本数据截取部163发挥功能。
画面生成部161生成配置有从图像形成装置2接收到的印刷数据一览表的印刷数据一览表画面,并将所生成的印刷数据一览表画面显示于画面显示部13的半反射镜13a。另外,画面生成部161生成配置有从图像形成装置2接收到的印刷图像的印刷数据编辑画面,并将所生成的印刷数据编辑画面显示于画面显示部13的半反射镜13a。
视点检测部162基于视点检测图像,检测出显示于半反射镜13a的各种画面中的用户的视点或视野图像上的用户的视点。
样本数据截取部163将含有由视点检测部162确定的视点位置的规定区域(例如,将指定位置作为中心的预先设定的大小的矩形区域)作为样本数据截取。
接着,参照图3对图像形成装置2进行说明。本实施方式的图像形成装置2是MFP(Multifunction Printer,多功能数码复合一体机),包括操作面板21、原稿读取部22、存储部23、图像处理部24、印刷部25、通信部26、传真部27、及控制部28。
操作面板21包括触摸面板和操作按钮。触摸面板在各种操作键或显示图像形成情况的显示部的表面设置有透明的压敏传感器,作为显示单元及输入单元而发挥功能。触摸面板检测对显示面的触摸操作,输出与检测出触摸操作的位置对应的信号,由此接受对在显示部显示的操作键的操作。另外,操作按钮包括用于输入印刷张数等数值的数字键、用于输入使设定信息初始化的指示的复位键、用于使复印动作停止的停止键、及用于输入使印刷动作开始的输出指示的开始键等各种操作键。
原稿读取部22是对由未图示的原稿给纸装置供给来的原稿或由用户载置于稿台玻璃的原稿照射光,接收其反射光等而读取原稿图像的扫描仪。
存储部23是半导体存储器或HDD等存储单元,是将通过通信部26接收的包含字符串的文档数据、通过原稿读取部22读取的图像数据、或通过通信部26、传真部27接收的图像数据等作为印刷数据进行存储的存储单元。另外,在存储部23中,存储有多个不同的字体(○○明朝、××黑体等)。并且,在存储部23中,存储有用于将文档数据的字符串翻译为其他语言的辞典。
图像处理部24是对图像数据进行规定的图像处理的单元。图像处理部24例如进行放大缩小处理、浓度调整、或灰度调整等图像改善处理。
印刷部25是将存储于存储部23的图像数据进行印刷的印刷单元。印刷部25例如基于从存储部23读出的图像数据在感光体鼓的表面形成潜像,进行利用调色剂使该潜像成为调色剂像的图像形成,将调色剂像从该感光体鼓转印到记录纸,使该调色剂像在记录纸上定影并排纸。另外,印刷部25具有使用青色、洋红、黄色、黑色等的调色剂分别形成调色剂像的功能,将这些调色剂像重叠并在记录纸上定影,从而与全彩印刷进行对应。
通信部26具有利用无线LAN等无线通信,与眼镜型终端1或外部终端进行各种数据的发送和接收的功能。此外,通信部26具有通过LAN电缆等有线电缆与外部终端进行各种数据的发送和接收的功能。
传真部27具有调制解调器,具备从利用原稿读取部22读取的图像数据、或存储于存储部23的图像数据生成传真信号,并经由公共线路网发送所生成的传真信号的传真发送功能,和经由公共线路网接收传真信号的传真接收功能。
控制部28分别与操作面板21、原稿读取部22、存储部23、图像处理部24、印刷部25、通信部26及传真部27连接。控制部28是具备ROM、RAM等的微型计算机等信息处理部。在ROM中存储有用于进行图像形成装置2的动作控制的控制程序。控制部28读出存储于ROM的控制程序,并在RAM中展开控制程序,由此进行装置整体的控制。另外,控制部28作为印刷数据一览表生成部281、印刷图像生成部282、印刷数据编辑部283、及样本数据分析部284而发挥功能。
印刷数据一览表生成部281从存储于存储部23的印刷数据中确定能够编辑的印刷数据,生成所确定的印刷数据的文件名的一览表,作为印刷数据一览表。能够编辑的印刷数据是包含字符串的文档数据。能够对该文档数据进行字符串的颜色、字体、及语言的编辑。
印刷图像生成部282生成从眼镜型终端1通知了文件名的印刷数据的印刷图像,经由通信部26将所生成的印刷图像向眼镜型终端1发送。另外,印刷图像生成部282生成由印刷数据编辑部283生成的变更候选印刷数据的印刷图像,经由通信部26将所生成的印刷图像向眼镜型终端1发送。
印刷数据编辑部283生成将从眼镜型终端1通知了文件名的印刷数据变更为由样本数据分析部284确定的变更候选语言、变更候选字体、变更候选颜色后的变更候选印刷数据。
样本数据分析部284基于从眼镜型终端1接收到的样本数据,确定变更候选语言、变更候选字体及变更候选颜色。
接着,参照图4至图6对本实施方式的操作系统中的印刷数据的印刷动作详细地进行说明。
若开始了眼镜型终端1与图像形成装置2之间的通信,则图像形成装置2的控制部28作为印刷数据一览表生成部281发挥功能。例如,通过戴上眼镜型终端1的用户将图像形成装置2捕捉到视野,从而开始眼镜型终端1与图像形成装置2之间的通信。在该情况下,眼镜型终端1的控制部16具有识别图像形成装置2的形状的功能,通过识别视野图像内的图像形成装置2,从而开始与图像形成装置2之间的通信。此外,也可以在眼镜型终端1设置指示开始与图像形成装置2之间的通信的操作部。另外,也能够从图像形成装置2的操作面板21指示开始与眼镜型终端1之间的通信。
印刷数据一览表生成部281从存储于存储部23的印刷数据中确定能够编辑的印刷数据(包含字符串的文档数据),生成所确定的印刷数据的文件名一览表作为印刷数据一览表。并且,印刷数据一览表生成部281经由通信部26将所生成的印刷数据一览表向眼镜型终端1发送(图5,步骤B1)。
眼镜型终端1的控制部16若从图像形成装置2经由通信部14接收了印刷数据一览表(图4,步骤A1),则作为画面生成部161发挥功能。画面生成部161生成图6中(a)所示那样的配置有接收到的印刷数据一览表的印刷数据一览表画面30,将所生成的印刷数据一览表画面30显示于画面显示部13的半反射镜13a(图4,步骤A2)。在印刷数据一览表画面30中,印刷数据一览表的每个文件名成为根据用户的视点选择的选择项目。
接着,眼镜型终端1的控制部16作为视点检测部162发挥功能。视点检测部162基于视点检测图像,检测出显示于半反射镜13a的印刷数据一览表画面30上的用户的视点,接受基于用户的视点进行的选择项目(文件名)的选择。此外,视点检测部162利用反白显示或框等向用户通知位于用户视点的选择项目,若视点在该选择项目停留一定时间,则接受对位于用户视点的选择项目的选择。并且,视点检测部162经由通信部14将已接受选择的文件名向图像形成装置2通知(图4,步骤A3)。
图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收了已接受选择的文件名的通知(图5,步骤B2),则作为印刷图像生成部282发挥功能。印刷图像生成部282对在步骤B2中被通知了文件名的印刷数据进行备份,并且生成在步骤B2中被通知了文件名的印刷数据的印刷图像,经由通信部26将所生成的印刷图像向眼镜型终端1发送(图5,步骤B3)。然后,控制部28对印刷指示的接收、结束指示的接收、及样本数据44的接收进行待机(图5,步骤B4、B5、B6)。此外,可以根据眼镜型终端1中的画面显示部13的分辨率适宜地变更向眼镜型终端1发送的印刷图像。另外,也可以以印刷数据的全部页为对象来生成印刷图像,但是若仅设为扉页等代表页,则能够减轻生成所涉及的处理,并且能够减轻眼镜型终端1与图像形成装置2之间的通信量。
眼镜型终端1的控制部16若从图像形成装置2经由通信部14接收了印刷图像(图4,步骤A4),则作为画面生成部161发挥功能。画面生成部161生成图6中(b)所示那样的配置有接收到的印刷图像的印刷数据编辑画面40,将所生成的印刷数据编辑画面40显示于画面显示部13的半反射镜13a(图4,步骤A5)。在印刷数据编辑画面40中,作为根据用户的视点选择的选择项目而配置有向图像形成装置2指示印刷所显示的印刷图像的印刷指示按钮41,及指示结束编辑动作的结束指示按钮42。另外,在印刷数据编辑画面40中,配置有将设定项目(颜色、字体、语言)的设定值作为选择项目显示的编辑区域43。
接着,眼镜型终端1的控制部16作为视点检测部162发挥功能。视点检测部162对利用印刷指示按钮41进行的印刷指示的选择、利用结束指示按钮42进行的结束指示的选择、及视野图像上的视点位置的确定进行待机(图4,步骤A6、A7、A8)。视点检测部162基于视点检测图像,检测出在半反射镜13a显示的印刷数据编辑画面40上的用户的视点,接受基于用户的视点进行的选择项目(印刷指示按钮41、结束指示按钮42)的选择。
用户在印刷数据编辑画面40的所显示的印刷图像可以的情况下,将视点与印刷数据编辑画面40上的作为选择项目的印刷指示按钮41对上来进行选择。若利用印刷指示按钮41进行的印刷指示被选择了(图4,步骤A6),则视点检测部162经由通信部14将印刷指示的通知向图像形成装置2发送(图4,步骤A9),结束印刷动作。并且,图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到印刷指示的通知(图5,步骤B4),则利用印刷部25对在步骤B2中被通知了文件名的印刷数据进行印刷(图5,步骤B7),结束印刷动作。
用户在想要结束印刷动作的情况下,将视点与印刷数据编辑画面40上的作为选择项目的结束指示按钮42对上来进行选择。若利用结束指示按钮42进行的结束指示被选择了(图4,步骤A7),则视点检测部162经由通信部14将结束指示的通知向图像形成装置2发送(图4,步骤A10),结束印刷动作。并且,图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到结束指示的通知(图5,步骤B5),则也结束印刷动作。
另一方面,在不能接受印刷数据编辑画面40的所显示的印刷图像而想要进行编辑的情况下,用户将在自身周围、例如桌子上存在的印刷物或物体作为想要变更的颜色、字体、语言的样本,将视点移动到该样本,将视点在规定范围内停留规定时间。由此,视点检测部162确定视野图像上的视点位置。此外,相比对视野图像上的视点位置的确定,优先对印刷数据编辑画面40上的选择项目的选择。若利用视点检测部162确定了视野图像上的视点位置(图4,步骤A8),则眼镜型终端1的控制部16作为样本数据截取部163发挥功能。样本数据截取部163将包含有由视点检测部162确定的视点位置的规定的区域(例如,将指定位置作为中心的预先设定的大小的矩形区域)作为样本数据44截取,经由通信部14将所截取的样本数据44向图像形成装置2发送(图4,步骤A11)。
图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到样本数据44(图5,步骤B6),则作为样本数据分析部284发挥功能。样本数据分析部284判断在样本数据44内是否包含字符串(图5,步骤B8),当在样本数据44内包含字符串的情况下,确定其语言作为变更候选语言,并且从存储于存储部23的多个字体中确定与样本数据44内的字符串相似的字体,作为变更候选字体(图5,步骤B9)。从相似度较高的字体起进行排序,来确定多个变更候选字体。此外,能够适宜地对要确定的变更候选字体的数量(M个)进行设定。
当在样本数据44内未包含字符串的情况下,样本数据分析部284确定样本数据44内的颜色,作为变更候选颜色(图5,步骤B10)。当在样本数据44内存在多个颜色的情况下,从面积较大的颜色起进行排序,确定多个变更候选颜色。此外,能够适宜地对要确定的变更候选颜色的数量(N个)进行设定。
若利用样本数据分析部284确定了变更候选语言、变更候选字体、及变更候选颜色,则作为印刷数据编辑部283发挥功能。印刷数据编辑部283生成变更为所确定的变更候选语言、变更候选字体、及变更候选颜色后的变更候选印刷数据(图5,步骤B11)。印刷数据编辑部283在印刷数据的字符串与由样本数据分析部284确定的变更候选语言不同的情况下,使用存储于存储部23的辞典,生成将印刷数据的字符串翻译成变更候选语言而进行了变更后的变更候选印刷数据。另外,印刷数据编辑部283使用存储于存储部23的字体,生成将印刷数据的字符串分别变更为变更候选字体后的变更候选印刷数据。并且,印刷数据编辑部283分别生成将印刷数据的字符串分别变更为变更候选颜色后的变更候选印刷数据。由此,生成变更为变更候选字体后的M个变更候选印刷数据、变更为变更候选语言及变更候选字体后的M个变更候选印刷数据、变更为变更候选颜色后的N个变更候选印刷数据、变更为变更候选语言、变更候选字体及变更候选颜色后的N×M个变更候选印刷数据、或者变更为变更候选字体及变更候选颜色后的N×M个变更候选印刷数据。此外,对于变更候选印刷数据,也可以以印刷数据的全部页为对象来生成,但是若仅设为扉页等代表页,则能够减轻生成所涉及的处理。另外,也可以仅以位次为第一的变更候选字体及变更候选颜色作为对象来生成变更候选印刷数据。
若利用印刷数据编辑部283生成了变更候选印刷数据,则控制部28作为印刷图像生成部282发挥功能。印刷图像生成部282生成由印刷数据编辑部283生成的变更候选印刷数据的印刷图像(以下,称为变更候选图像),经由通信部26将变更候选图像和该变更候选图像的变更候选语言、变更候选字体及变更候选颜色向眼镜型终端1发送(图5,步骤B12)。此外,在利用印刷数据编辑部283生成多个变更候选印刷数据的情况下,生成各变更候选图像,并向该眼镜型终端1发送。并且,控制部28对更新印刷指示的通知、无更新印刷指示的通知、及结束指示的接收进行待机(图5,步骤B13、B14、B15)。
眼镜型终端1的控制部16若从图像形成装置2经由通信部14接收到变更候选图像(图4,步骤A12),则作为画面生成部161发挥功能。画面生成部161生成图6中(c)所示那样的配置有接收到的变更候选图像的印刷数据编辑画面40a,将所生成的印刷数据编辑画面40a显示于画面显示部13的半反射镜13a(图4,步骤A13)。在印刷数据编辑画面40a中,配置有变更候选图像,并且配置有用于向图像形成装置2指示向与所显示的变更候选图像对应的变更候选印刷数据更新、以及印刷所显示的变更候选图像的第一印刷指示按钮41a、和不变更印刷数据而向图像形成装置2指示印刷所显示的变更候选图像的第二印刷指示按钮41b。另外,在印刷数据编辑画面40a的编辑区域43中,作为选择项目显示变更候选语言、变更候选字体、和变更候选颜色。以相似度最高的变更候选字体且面积最大的变更候选颜色为初始值,显示变更候选图像。
接着,眼镜型终端1的控制部16作为视点检测部162发挥功能。视点检测部162对编辑区域43的变更候选的选择、利用第一印刷指示按钮41a进行的更新印刷指示的选择、利用第二印刷指示按钮41b进行的无更新印刷指示的选择、及利用结束指示按钮42进行的结束指示的选择进行待机(图4,步骤A14、A15、A16、A17)。
另外,将与印刷数据编辑画面40a中显示的变更候选图像对应的变更候选语言、变更候选字体、及变更候选颜色,在编辑区域43中,如图6中(c)所示那样,利用反白显示或框等通知给用户。并且,用户在想要将变更候选图像切换为其他的变更候选语言、变更候选字体、及变更候选颜色的情况下,将视点与其他的变更候选语言、变更候选字体、及变更候选颜色对上来进行选择。
若利用视点检测部162接受了编辑区域43的其他的变更候选的选择(图4,步骤A14),则控制部16作为画面生成部161发挥功能,切换为与所选择的变更候选语言、变更候选字体、及变更候选颜色对应的变更候选图像的显示(图4,步骤A18)。由此,用户能够容易地从作为候选确定的较少的设定值(变更候选语言、变更候选字体、及变更候选颜色)中,利用视线选择所期望的设定值。
在印刷数据编辑画面40a的所显示的变更候选图像可以的情况下,用户将视点与印刷数据编辑画面40a上的作为选择项目的第一印刷指示按钮41a或者第二印刷指示按钮41b对上来进行选择。在将印刷数据更新为所显示的变更候选图像的情况下,选择第一印刷指示按钮41a,在不更新印刷数据的情况下,选择第二印刷指示按钮41b。
若选择了利用第一印刷指示按钮41a进行的更新印刷指示(图4,步骤A15),则视点检测部162将所显示的变更候选图像的更新印刷指示的通知经由通信部14向图像形成装置2发送(图4,步骤A19),结束印刷动作。并且,图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到更新印刷指示的通知(图5,步骤B13),则将在步骤B2中被通知了文件名的印刷数据更新为所通知的变更候选图像的变更候选印刷数据(图5,步骤B16),并且利用印刷部25印刷所通知的变更候选图像的变更候选印刷数据(图5,步骤B17),结束印刷动作。此外,在变更候选印刷数据为一部分的页的情况下,在步骤B17中控制部28作为印刷数据编辑部283发挥功能,生成并印刷全部页的变更候选印刷数据。
若选择了利用第二印刷指示按钮41b进行的无更新印刷指示(图4,步骤A16),则视点检测部162将所显示的变更候选图像的无更新印刷指示的通知经由通信部14向图像形成装置2发送(图4,步骤A20),结束印刷动作。并且,图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到无更新印刷指示的通知(图5,步骤B14),则不对在步骤B2中被通知了文件名的印刷数据进行更新,利用印刷部25印刷所通知的变更候选图像的变更候选印刷数据(图5,步骤B17),结束印刷动作。
用户在想要结束印刷动作的情况下,将视点与印刷数据编辑画面40a上的作为选择项目的结束指示按钮42对上来进行选择。若选择了利用结束指示按钮42进行的结束指示(图4,步骤A17),则视点检测部162将结束指示的通知经由通信部14向图像形成装置2发送(图4,步骤A21),结束印刷动作。并且,图像形成装置2的控制部28若从眼镜型终端1经由通信部26接收到结束指示的通知(图5,步骤B15),则也结束印刷动作。
此外,本实施方式中,构成为,在眼镜型终端中,通过用户将视点在规定的范围内停留规定时间,从而进行将视点对上的选择项目的选择或视点位置的确定,但是,也可以构成为,并用用户眼睛的“眨眼”等动作,来进行将视点对上的选择项目的选择或视点位置的确定。另外,也可以构成为,设置用户进行操作的决定按钮,在决定按钮被操作时进行将视点对上的选择项目的选择或视点位置的确定。并且,也可以构成为,设置加速度传感器等检测用户的规定动作的动作检测部,在检测出规定动作时进行将视点对上的选择项目的选择或视点位置的确定。
如以上说明的那样,根据本实施方式,本发明的操作系统是用户通过戴在头部的眼镜型终端1对主体装置即图像形成装置2进行操作的操作系统,眼镜型终端1包括:视野拍摄部11,其拍摄用户的前方视野的图像;眼球拍摄部12,其拍摄用户的眼球的图像;用户能够看见的画面显示部13;画面生成部161,其生成配置有选择项目的画面并在画面显示部13显示;视点检测部162,其基于由眼球拍摄部12拍摄到的图像,检测出画面显示部13上的用户的视点,接受用户将视点对上的选择项目的选择,并且基于由眼球拍摄部12拍摄到的图像,确定由视野拍摄部11拍摄到的图像上的视点位置;样本数据截取部163,其基于由视点检测部162确定的视点位置,从由视野拍摄部11拍摄到的图像中截取样本数据44;以及通信部14,其将由视点检测部162接受了选择的选择项目及由样本数据截取部163截取的样本数据44向图像形成装置2发送,并且图像形成装置2包括:控制部28,其执行基于从眼镜型终端1接收到的选择项目的动作;样本数据分析部284,其基于从眼镜型终端1接收到的样本数据44,确定要在眼镜型终端1的画面显示部13显示的作为选择项目的设定值候选;以及通信部26,其将设定值候选向眼镜型终端1发送。
根据该构成,利用基于用户的视点截取的样本数据44,确定设定值候选作为用户进行选择的选择项目。因此,即使存在许多能够选择的设定值,通过在眼镜型终端1中对设定值候选进行选择,从而用户也能够简单地进行所期望的操作,能够提高便利性。
并且,本实施方式中,主体装置是对印刷数据进行印刷的图像形成装置2,图像形成装置2的样本数据分析部284确定变更候选字体作为设定值候选,图像形成装置2的控制部28(印刷数据编辑部283)利用作为选择项目从眼镜型终端1接收到的变更候选字体对印刷数据进行编辑并印刷。
根据该构成,通过在眼镜型终端1中对变更候选字体进行选择,从而用户能够简单地对印刷数据进行编辑,能够提高便利性。
并且,本实施方式中,主体装置是对印刷数据进行印刷的图像形成装置2,图像形成装置2的样本数据分析部284确定变更候选颜色作为设定值候选,图像形成装置2的控制部28(印刷数据编辑部283)利用作为选择项目从眼镜型终端1接收到的变更候选颜色对印刷数据进行编辑并印刷。
根据该构成,通过在眼镜型终端1中对变更候选颜色进行选择,从而用户能够简单地对印刷数据进行编辑,能够提高便利性。
此外,本发明不限于上述各实施方式,显然在本发明的技术思想的范围内,能够适当改变各实施方式。另外,上述构成部件的数量、位置、形状等不限于上述实施方式,能够设为对实施本发明适宜的数量、位置、形状等。此外,各图中,对相同构成要素标以相同符号。

Claims (3)

1.一种操作系统,其是用户通过戴在头部的眼镜型终端对主体装置进行操作的操作系统,其特征在于,
所述眼镜型终端包括:
视野拍摄部,其拍摄用户的前方视野的图像;
眼球拍摄部,其拍摄用户的眼球的图像;
用户能够看见的画面显示部;
画面生成部,其生成配置有选择项目的画面并在所述画面显示部显示;
视点检测部,其基于由所述眼球拍摄部拍摄到的图像,检测出所述画面显示部上的用户的视点,接受用户将视点对上的所述选择项目的选择,并且基于由所述眼球拍摄部拍摄到的图像,确定由所述视野拍摄部拍摄到的图像上的视点位置;
样本数据截取部,其基于由所述视点检测部确定的所述视点位置,从由所述视野拍摄部拍摄到的图像中截取样本数据;以及
终端通信部,其将由所述视点检测部接受了选择的所述选择项目及由所述样本数据截取部截取的所述样本数据向所述主体装置发送,
并且,所述主体装置包括:
控制部,其执行基于从所述眼镜型终端接收到的所述选择项目的动作;
样本数据分析部,其基于从所述眼镜型终端接收到的所述样本数据,确定要在所述眼镜型终端的所述画面显示部显示的作为所述选择项目的设定值候选;以及
主体通信部,其将所述设定值候选向所述眼镜型终端发送。
2.如权利要求1所述的操作系统,其特征在于,
所述主体装置是对印刷数据进行印刷的图像形成装置,
所述主体装置的所述样本数据分析部确定变更候选字体作为所述设定值候选,
所述主体装置的控制部利用作为所述选择项目从所述眼镜型终端接收到的所述变更候选字体对所述印刷数据进行编辑并印刷。
3.如权利要求1所述的操作系统,其特征在于,
所述主体装置是对印刷数据进行印刷的图像形成装置,
所述主体装置的所述样本数据分析部确定变更候选颜色作为所述设定值候选,
所述主体装置的控制部利用作为所述选择项目从所述眼镜型终端接收到的所述变更候选颜色对所述印刷数据进行编辑并印刷。
CN201610465325.6A 2015-06-30 2016-06-24 操作系统 Expired - Fee Related CN106331407B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-131513 2015-06-30
JP2015131513A JP6304144B2 (ja) 2015-06-30 2015-06-30 操作システム

Publications (2)

Publication Number Publication Date
CN106331407A CN106331407A (zh) 2017-01-11
CN106331407B true CN106331407B (zh) 2019-02-15

Family

ID=57684062

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610465325.6A Expired - Fee Related CN106331407B (zh) 2015-06-30 2016-06-24 操作系统

Country Status (3)

Country Link
US (1) US9703376B2 (zh)
JP (1) JP6304144B2 (zh)
CN (1) CN106331407B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6241426B2 (ja) * 2015-01-26 2017-12-06 コニカミノルタ株式会社 画像形成システム、画像形成装置、遠隔制御方法および遠隔制御プログラム
JP7383885B2 (ja) * 2019-03-04 2023-11-21 富士フイルムビジネスイノベーション株式会社 情報処理装置及びプログラム
JP6997129B2 (ja) * 2019-03-28 2022-01-17 ファナック株式会社 制御システム

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103813044A (zh) * 2012-11-06 2014-05-21 柯尼卡美能达株式会社 引导信息显示装置
CN104660859A (zh) * 2013-11-21 2015-05-27 柯尼卡美能达株式会社 Ar显示装置、处理内容设定装置以及处理内容设定方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07248872A (ja) * 1994-03-11 1995-09-26 Matsushita Electric Ind Co Ltd 入力装置及び演算入出力装置
JP2004180208A (ja) * 2002-11-29 2004-06-24 Toshiba Corp テレビジョン信号視聴装置
JP5195537B2 (ja) * 2009-03-09 2013-05-08 ブラザー工業株式会社 ヘッドマウントディスプレイ
JP5316556B2 (ja) * 2011-02-02 2013-10-16 ブラザー工業株式会社 情報処理装置、情報処理プログラムおよび情報処理システム
US9096920B1 (en) * 2012-03-22 2015-08-04 Google Inc. User interface method
JP2016529635A (ja) * 2013-08-27 2016-09-23 オークランド ユニサービシズ リミテッド 凝視制御インターフェース方法およびシステム

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103813044A (zh) * 2012-11-06 2014-05-21 柯尼卡美能达株式会社 引导信息显示装置
CN104660859A (zh) * 2013-11-21 2015-05-27 柯尼卡美能达株式会社 Ar显示装置、处理内容设定装置以及处理内容设定方法

Also Published As

Publication number Publication date
JP2017016332A (ja) 2017-01-19
US20170003743A1 (en) 2017-01-05
US9703376B2 (en) 2017-07-11
JP6304144B2 (ja) 2018-04-04
CN106331407A (zh) 2017-01-11

Similar Documents

Publication Publication Date Title
US8332933B2 (en) Processing apparatus with touch panel
JP5138736B2 (ja) 文字入力装置及び文字入力方法
US20160269578A1 (en) Head mounted display apparatus and method for connecting head mounted display apparatus to external device
US9723177B2 (en) Image processing system, image processing apparatus, and image forming apparatus
JP6784116B2 (ja) 情報処理装置、画像形成装置およびプログラム
EP3125105B1 (en) Image forming apparatus and display method of the image forming apparatus
CN106331407B (zh) 操作系统
US10755092B2 (en) Image forming apparatus that gives color respectively different from one another to text area for each of various kinds of languages or selectively deletes text area for each of various kinds of language
CN102447809B (zh) 操作装置、图像形成装置以及操作方法
CN108696662A (zh) 图像形成装置、图像形成系统、存储介质和控制方法
CN104427200B (zh) 信息处理装置和作业设定方法
US8760720B2 (en) Image processing apparatus
JP2010272910A (ja) 制御プログラム及び画像処理装置並びに画像形成装置
JP2011182006A (ja) 色変換装置および画像形成装置
US11200008B2 (en) Image forming apparatus, recording medium, and control method with problem solving guidance
US20180275576A1 (en) Image forming system, image forming apparatus, and recording medium
US20180278793A1 (en) Document reading apparatus and image forming apparatus
JP6500842B2 (ja) 印刷システム
JP2021193780A (ja) 画像読み取り装置、画像読み取り方法、及び画像読み取りプログラム
JP2018077794A (ja) 画像処理装置、及び画像形成装置
JP6988679B2 (ja) 画像形成システム
JP5502053B2 (ja) 画像処理装置
US10725414B2 (en) Image forming apparatus that displays job list
JP6565864B2 (ja) 画像形成システム
US11334299B2 (en) Image forming apparatus and non-transitory computer readable medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190215

Termination date: 20210624