CN104079748B - 作业信息显示装置 - Google Patents

Abstract

作业信息显示装置具有：增强现实显示部，显示在用户看到的现实空间上合成了图像的扩展现实空间；识别部，识别在所述用户看到的现实空间中存在的图像形成装置；信息取得部，取得表示对通过所述识别部识别的图像形成装置输入的作业的执行状况的信息；以及控制部，基于通过所述信息取得部取得的所述信息，使所述增强现实显示部显示以执行所述作业的图像形成装置的输纸路径上的虚拟用纸表示了该作业的执行状况的扩展现实空间。

Description

作业信息显示装置

技术领域

本发明涉及显示图像形成装置中的作业的执行状况的作业信息显示装置。

背景技术

在对与网络连接而由多个用户共用的打印机输入了作业的情况下，该作业的执行完成的定时根据在打印机中积蓄的先行的作业的状况等而成为各种情况。因此，有时为了确认基于自己的作业的印刷物是否已经被印刷而去看排纸托盘。但是，有时还存在在自己的作业之前其他用户的作业正在执行的情况，即使来到排纸托盘自己的印刷物也未被输出。此外，由于看到排纸托盘中堆积的印刷物的内容才知道是否是自己的印刷物，所以导致在他人的印刷物正在印刷的情况下窥视该他人的印刷物。因此，提出了各种将在打印机中的作业的执行状况向用户通知的技术。

例如，公开了以下作业管理装置：在打印机中一体设置或经由网络而设置的UI装置的显示部上，显示对在对象的打印机中正在执行以及正在等待的作业进行一览的作业列表，并受理所选择的作业的取消等（参照专利文献1）。

此外，存在以下技术：若由便携终端拍摄复合机，则在便携终端中显示与该拍摄部分相应的显示信息（参照专利文献2）。例如，若在产生了阻塞时由便携终端拍摄复合机的传输部，则产生阻塞的部分与拍摄图像中的复合机重叠而显示。

现有技术文献

专利文献

专利文献1：（日本）特开2003－125123号公报

专利文献2：（日本）特开2012－156872号公报

在打印机中一体设置或经由网络而设置的UI装置的显示部上显示作业列表的方法的情况下，在办公室存在多台打印机的状况下，不能立刻掌握自己的作业在哪台打印机中执行。此外，在印刷多张的作业与作业之间执行仅印刷一张的自己的作业的情况下，难以准确地掌握执行自己的作业的定时。此外，在排列字符串的作业列表中，不能直观地掌握自己的作业的执行状况。

在专利文献2的技术中，能够直观地识别产生阻塞的部分等，但在多个作业等待执行的情况下，不提供自己的作业何时执行的信息。

发明内容

本发明是为了解决上述的问题而完成的，其目的在于，提供能够容易地确认自己的作业的执行状况的作业信息显示装置。

用于达成该目的的本发明的主旨存在于下面各项发明。

［1］一种作业信息显示装置，其特征在于，具有：

增强现实显示部，显示在用户看到的现实空间上合成了图像的扩展现实空间；

识别部，识别在所述用户看到的现实空间中存在的图像形成装置；

信息取得部，取得表示对通过所述识别部识别的图像形成装置输入的作业的执行状况的信息；以及

控制部，基于通过所述信息取得部取得的所述信息，使所述增强现实显示部显示以执行所述作业的图像形成装置的输纸路径上的虚拟用纸表示了该作业的执行状况的扩展现实空间。

在上述发明中，对用户看到的情景（现实空间）中存在的图像形成装置输入的作业的执行状况被显示为在现实空间内的图像形成装置的输纸路径上合成了虚拟用纸的扩展现实空间。虚拟用纸为与各作业所使用的用纸对应的图形等，与该作业的用纸在当前的输纸路径上的位置重叠而显示。虚拟用纸可以仅显示与佩戴了该作业信息显示装置的用户输入的作业对应的虚拟用纸，也可以包含与其他用户的作业对应的虚拟用纸而显示全部的作业。

［2］如［1］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部以能够对该作业信息显示装置的用户输入的作业的所述虚拟用纸与其他用户输入的作业的所述虚拟用纸进行辨别的方式显示。

在上述发明中，以能够辨别与佩戴了作业信息显示装置的用户输入的作业对应的虚拟用纸和与其他用户输入的作业对应的虚拟用纸的方式显示。能够辨别的方法可为任意。

［3］如［2］所述的作业信息显示装置，其特征在于，

所述控制部使该作业信息显示装置的用户输入的作业的所述虚拟用纸和其他用户输入的作业的所述虚拟用纸的颜色不同。

［4］如［2］所述的作业信息显示装置，其特征在于，

所述控制部使该作业信息显示装置的用户输入的作业的所述虚拟用纸和其他用户输入的作业的所述虚拟用纸的形状不同。

［5］如［1］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部以能够辨别作业的边界的方式显示所述虚拟用纸。

在上述发明中，通过对虚拟用纸附加表示正在作业的最初的用纸或最后的用纸的信息，或使虚拟用纸的颜色或形状在相邻的作业间不同等，从而能够辨别作业的边界。

［6］如［1］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部将与正在等待的作业对应的所述虚拟用纸重叠到该作业所使用的用纸的供纸托盘而显示。

在上述发明中，在存在多个供纸托盘的情况下，与正在等待的作业对应的虚拟用纸与该作业中被指定为供纸源的供纸托盘的位置重叠而显示。

［7］如［6］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部对与所述正在等待的作业对应的所述虚拟用纸附加表示该作业的印刷张数的信息而显示。

在上述发明中，能够容易地识别正在等待的作业中的印刷量。

［8］如［6］所述的作业信息显示装置，其特征在于，

当存在多个正在等待的作业的情况下，所述控制部使所述增强现实显示部将与正在等待的各个作业对应的所述虚拟用纸按照作业的执行顺序排列而显示。

在上述发明中，能够容易地识别与各个虚拟用纸对应的作业的执行顺序。

［9］如［1］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部将与完成了印刷的作业对应的所述虚拟用纸重叠到排纸托盘而显示或在排纸托盘的附近显示。

［10］如［9］所述的作业信息显示装置，其特征在于，

所述控制部将与所述完成了印刷的作业对应的所述虚拟用纸，在从该作业的执行完成起经过规定时间后消去。

［11］如［1］所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部显示虚拟地表示了输纸路径的虚拟输纸路径。

［12］如［1］至［11］的任一项所述的作业信息显示装置，其特征在于，

所述作业信息显示装置为头戴式显示器。

根据本发明所涉及的作业信息显示装置，仅远看图像形成装置，在现实空间的图像形成装置的输纸路径上重叠而显示虚拟地表示了作业的执行状况的虚拟用纸，所以即使从远处（例如，从办公室内的自己的座位）也能够容易地确认作业的执行状况。

附图说明

图1是表示使用本发明的实施方式所涉及的作业信息显示装置的信息系统的结构例的图。

图2是表示佩戴了头戴式显示器装置的用户看到图像形成装置时的显示例的图。

图3是表示图像形成装置的电性概略结构的框图。

图4是表示头戴式显示器装置的电性概略结构的框图。

图5是表示附加了特定标记的图像形成装置的一例的图。

图6是表示使用特定标记识别图像形成装置，并以虚拟用纸显示该图像形成装置中的作业的执行状况的处理的概略的流程图。

图7是表示虚拟用纸显示处理（图6的步骤S104）的细节的流程图。

图8是表示以能够将与最初的用纸以及最后的用纸对应的虚拟用纸与其他虚拟用纸进行辨别的方式显示的例的图。

图9是表示多个作业处于等待处理的状态的情况下的显示例的图。

图10是表示示出等待处理的作业的量（印刷张数）的情况下的显示例的图。

图11是表示显示了对于完成的作业的虚拟用纸的状态的一例的图。

具体实施方式

以下，基于附图说明本发明的实施方式。

图1表示使用本发明的实施方式所涉及的作业信息显示装置的信息系统2的结构。信息系统2将在办公室等中设置的一台或者多台图像形成装置10、PC（个人计算机）4、无线路由器5、以及作为显示图像形成装置10中的作业的执行状况的作业信息显示装置的头戴式显示器（HMD）装置40等与LAN（Local Area Network，局域网）等网络3连接而构成。头戴式显示器装置40通过无线通信与无线路由器5连接，经由无线路由器5与网络3连接。

图像形成装置10是具备光学地读取原稿并将其复制图像在记录纸上印刷的复制功能、将所读取的原稿的图像数据作为文件而保存或通过网络3向外部终端发送的扫描功能、以及将从PC4等通过网络3接收到的印刷数据的图像在记录纸上进行图像形成并印刷输出的打印机功能等的所谓复合机（MFP）。另外，若图像形成装置10是至少具备打印机功能的装置，则也可以没有其他功能。

头戴式显示器装置40具备拍摄用户看到的情景（现实空间）的摄像机部52（参照图4）。头戴式显示器装置40分析由该摄像机部52拍摄到的影像，识别在用户看到的情景中存在的图像形成装置10。此外，与该识别出的图像形成装置10进行通信，取得表示对图像形成装置10输入的作业的执行状况的信息（作业信息）。并且，基于该取得的作业信息，生成表示作业的执行状况的图像，并显示将该图像重叠到与用户看到的情景（现实空间）内的图像形成装置10后的扩展现实空间。

具体而言，将虚拟地表示作业中使用的用纸的虚拟用纸显示在与该作业的执行状况（“等待处理”、“正在处理”、“完成”）对应的输纸路径上的位置上，从而表示该作业的执行状况。例如，若是“等待处理”（正在等待）则在供纸托盘的位置上显示虚拟用纸，若是“正在处理”则在传输路径的途中显示虚拟用纸，若是“完成”则在排纸托盘的位置上显示虚拟用纸。虚拟用纸由图形或字符等表示。

图2表示佩戴了头戴式显示器装置40的用户看到图像形成装置10时的显示状态（扩展现实空间）的一例。头戴式显示器装置40像眼镜那样佩戴在用户的头上而使用。头戴式显示器装置40具备与在佩戴时佩戴者的左右眼前分别配置的眼镜的透镜部分对应的透射部41、维系左右透射部41之间的桥42、以及从左右透射部41的两旁向相同方向延伸而挂在佩戴者的耳朵上的镜腿部43而构成。

头戴式显示器装置40采用了仅将应虚拟地显示的部分的图像重叠到用户看到的实际的情景中的方式（所谓，光透过型）。用户通过透射部41看现实世界。在透射部41上设置能够显示图像的半透明的显示屏幕部44，将任意的图像与现实世界的情景重合从而使用户看见扩展现实空间。即，显示屏幕部44实现显示在用户看到的现实空间上合成了图像的扩展现实空间的AR(Augmented Reality，增强现实)显示部的功能。

图2表示在头戴式显示器装置40的透射部41上的显示屏幕部44上，将虚拟地表示了输纸路径的虚拟输纸路径81和虚拟地表示了用纸的虚拟用纸82的图像，与现实世界的图像形成装置10重合而显示的状态的一例。

图3是表示图像形成装置10的概略结构的框图。图像形成装置10具有统一地控制该图像形成装置10的动作的CPU(Central Processing Unit，中央处理单元)11。ROM(ReadOnly Memory，只读存储器)12、RAM(Random Access Memory，随机存取存储器)13、非易失存储器14、硬盘装置15、自动原稿传输部（ADF：Auto Document Feeder）16、图像读取部17、操作部18、显示部19、网络通信部20、无线通信部21、图像处理部22、打印机部24等通过总线与CPU11连接。

CPU11将OS（Operating System，操作系统）程序作为基础，在此之上，执行中间件或应用程序等。在ROM12中存储了各种程序，CPU11根据这些程序执行各种处理，从而实现图像形成装置10的各功能。

RAM13作为CPU11基于程序执行处理时暂时地存储各种数据的工作存储器或存储图像数据的图像存储器等而使用。

非易失存储器14是即使断开电源存储内容也不损坏的存储器（闪速存储器），用于各种设定信息的保存等。硬盘装置15是大容量非易失的存储装置，除了印刷数据、图像数据等之外还存储各种程序或数据。

图像读取部17实现光学地读取原稿而取得图像数据的功能。图像读取部17例如由对原稿照射光的光源、接受其反射光而将原稿在宽度方向上读取一线量的线影像传感器、将线单位的读取位置向原稿的长度方向依次移动的移动单元、由将来自原稿的反射光导入线影像传感器而使其成像的透镜或平面镜等构成的光学路径、以及将线影像传感器输出的模拟图像信号变换为数字的图像数据的变换部等而构成。

自动原稿传输部16实现将在原稿台上放置的原稿从其最上方的原稿起一张张逐次按顺序抽出并传输，通过图像读取部17的读取位置而排纸到规定的排纸位置的功能。

操作部18和显示部19构成从用户接受作业的输入等操作的操作面板。显示部19由液晶显示器（LCD，Liquid Crystal Display）等构成，实现显示各种操作画面、设定画面等的功能。操作部18具备开始按钮等各种操作开关、以及在显示部19的物理画面上设置的触摸面板。触摸面板检测通过触摸笔或手指等对显示部19的物理画面进行接触操作的坐标位置。

网络通信部20实现通过LAN等网络3与PC4或其他服务器等外部装置进行通信的功能。网络通信部20还具有无线LAN的功能。图像形成装置10通过网络通信部20从PC4等接受作业的输入。无线通信部21实现与头戴式显示器装置40等进行无线通信的功能。

图像处理部22除了图像的缩放、旋转等处理之外，还进行将印刷数据变换为影像数据的光栅处理、以及图像数据的压缩、扩展处理等。

打印机部24实现在用纸上对与图像数据相应的图像进行图像形成的功能。打印机部24具备在用纸上形成图像的图像形成部25、传输用纸的传输部26等而构成。图像形成部25例如具有感光体鼓、带电装置、激光单元、显影装置、转印分离装置、清洁装置、以及定影装置等，通过电子照相处理进行图像形成。传输部26以从收纳了多个用纸的供纸托盘27、手动进纸盘28等抽出用于印刷的用纸，经过图像形成部25排出到排纸托盘29的方式进行传输。

若图像形成装置10从头戴式显示器装置40接收作业信息的取得请求，则CPU11生成表示对该图像形成装置10输入的各作业的执行状况的作业信息。网络通信部20具备经由网络3以及无线路由器5对头戴式显示器装置40发送所生成的作业信息的功能。或者，无线通信部21也可以直接对头戴式显示器装置40发送作业信息。在此，关于等待处理的作业、正在处理的作业、以及从处理完成起未经过规定时间的作业分别生成作业信息并发送至头戴式显示器装置40。在一个作业信息中，包含：该图像形成装置10的装置ID；装置类型；作业ID；作业类别；输入了该作业的用户的用户ID；作业的状态（等待处理、正在处理、完成）；供纸托盘序号；排纸托盘序号；总页数；在等待处理的情况下为处理位次（表示在等待的作业中从开头起第几个的信息）；在正在处理的情况下为当前正在处理的页面的页面序号和用于该页面的印刷的用纸在输纸路径上的位置信息；在完成的情况下为处理完成的时刻等信息。

另外，头戴式显示器装置40按照装置类型预先存储了表示输纸路径的布局、以及供纸托盘或排纸托盘的位置等的布局信息，根据从图像形成装置10取得的作业信息所包含的装置类型的信息，确定与该图像形成装置10对应的布局信息，识别输纸路径、供纸托盘的数目或位置等。

图4表示头戴式显示器装置40的电性概略结构。头戴式显示器装置40将ROM47、RAM48、非易失存储器49、方位传感器部51、摄像机部52、操作部53、前述的显示屏幕部44、无线通信部54、以及图像处理部55等经由总线与作为控制部的CPU46连接而构成。

CPU46按照在ROM47中存储的程序，控制头戴式显示器装置40的动作。此外，CPU46实现作为识别在用户看到的现实空间中存在的图像形成装置的识别部的功能。进而，CPU46实现作为基于通过无线通信部54取得的上述作业信息，使显示屏幕部44显示扩展现实空间的控制部的功能。关于该扩展现实空间，详细地后述。在ROM47中存储了程序或固定数据。RAM48用作在CPU46执行程序时暂时地存储各种数据的工作存储器等。在非易失存储器49中存储各种设定信息。此外，非易失存储器49存储上述布局信息。

方位传感器部51检测头戴式显示器装置40的朝向或姿势以及其变化。方位传感器部51组合多个地磁传感器、以及多个加速度传感器而构成。方位传感器部51检测佩戴了头戴式显示器装置40的用户的姿势或用户朝向的方向或角度（这些与摄像机部52拍摄的方向或朝向一致），或检测头戴式显示器装置40倾斜等的情况下的动作的朝向或速度，并将其检测结果通知给CPU46。CPU46基于来自方位传感器部51的通知，识别佩戴了头戴式显示器装置40的用户的姿势、角度、倾斜等动作的朝向或速度。

摄像机部52拍摄头戴式显示器装置40的前方（佩戴者看到的情景）。更详细地说，拍摄与佩戴者看到前方时的视野大致相同的范围。摄像机部52拍摄动态图像，例如获取每秒30帧的图像。

操作部53为少数的开关等，用于在显示屏幕部44上显示的图像的亮度等的调整。

无线通信部54实现与无线路由器5进行无线通信，经由该无线路由器5以及网络3与图像形成装置10交接各种信息的功能。或者，无线通信部54也可以与图像形成装置10的无线通信部21直接交接各种信息。此外，无线通信部54实现作为从无线路由器5等取得表示对通过CPU46识别的图像形成装置10输入的作业的执行状况的信息（作业信息）的信息取得部的功能。无线通信部54也可以与图像形成装置10进行近距离无线通信。

图像处理部55进行在显示屏幕部44上显示的图像的扩大/缩小、变形等。

接着，说明头戴式显示器装置40的CPU46识别摄像机部52的拍摄图像内的图像形成装置10的方法。

为了在头戴式显示器装置40的显示屏幕部44上与图像形成装置10重叠而显示虚拟用纸82或虚拟输纸路径81等的扩展现实空间，需要在用户看到的情景内确定图像形成装置10的位置。在此，表示使用成为记号的特定标记91（参照图5）识别图像形成装置10的位置的方法。

图5表示对图像形成装置10附加了特定标记91的一例。头戴式显示器装置40的CPU46通过图像分析而检测处于摄像机部52拍摄到的图像内的特定标记91。特定标记91有多个种类，分别以形状、颜色、花纹进行区分。

为了精度高地确定图像形成装置10的位置或朝向，希望对一台图像形成装置10检测出两个以上的特定标记91。头戴式显示器装置40的CPU46通过检测到的特定标记91的大小或检测到的多个特定标记91的位置关系而确定图像形成装置10的位置、距离（大小）、朝向，从而决定用于重合的描绘位置等。

另外，希望特定标记91以在无论从哪个方向看到图像形成装置10都至少看见两个的方式在图像形成装置10的四面设置。除此之外，CPU46可以不进行图像处理而是使用规定的传感器确定图像形成装置10的位置。

此外，在存在多台成为对象的图像形成装置10的情况下，对特定标记91等附加能够唯一确定各个图像形成装置10的辨别信息。例如，使在第1图像形成装置10和第2图像形成装置10中特定标记91的颜色或形状不同，从而能够唯一确定各图像形成装置10，即能够确定图像内的各图像形成装置10的装置ID。

接着，说明头戴式显示器装置40显示作业的执行状况的处理的流程。

图6表示使用前述的特定标记91识别图像形成装置10，并以虚拟用纸显示该图像形成装置10中的作业的执行状况的处理的流程。

头戴式显示器装置40的CPU46通过图像处理而分析摄像机部52正在拍摄的图像，从而检测前述的特定标记91（步骤S101）。在不能检测到特定标记91的情况下（步骤S101；否），重复特定标记91的检测处理。

在已检测到特定标记91的情况下（步骤S101；是），CPU46使用检测到的特定标记91判断是否能够确定图像形成装置10的位置等（步骤S102）。例如，在对一台图像形成装置10能够检测到两个以上特定标记91的情况下判断为能够确定，在对一台图像形成装置10只能检测到一个特定标记91的情况下，判断为不能确定该图像形成装置10的位置等。

在不能通过特定标记91确定图像形成装置10的位置等的情况下（步骤S102；否），返回步骤S101而继续处理。

在CPU46已通过特定标记91确定了一台以上的图像形成装置10的位置等的情况下，即，识别出在用户看到的现实空间中存在的图像形成装置10的情况下（步骤S102；是），无线通信部54从已确定位置的各图像形成装置10取得作业信息（步骤S103）。例如，在用户处于离图像形成装置10比较远的座位的情况下，存在在用户看到的情景（视野）中包含两台以上图像形成装置10的情况，在这样的情况下，无线通信部54从在用户看到的情景中存在的各个图像形成装置10取得作业信息。

在此，头戴式显示器装置40的CPU46基于对特定标记91附加的识别信息（颜色或形状）识别已确定位置等的各图像形成装置10的装置ID，无线通信部54对具有该装置ID的图像形成装置10发送作业信息的取得请求。接收到作业信息的取得请求的图像形成装置10关于对本装置输入的各作业（等待处理的作业、正在处理的作业、从处理完成起未经过规定时间的作业）生成前述的作业信息并发送至头戴式显示器装置40。

从图像形成装置10接收到作业信息的头戴式显示器装置40的CPU46基于该作业信息进行将表示作业的执行状况的虚拟用纸等与用户看到的情景中的对应的图像形成装置10重合而显示的虚拟用纸显示处理（步骤S104）。在该虚拟用纸显示处理中，主要是，CPU46基于通过无线通信部54取得的作业信息，使显示屏幕部44显示以执行作业的图像形成装置10的输纸路径上的虚拟用纸来表示了该作业的执行状况的扩展现实空间。之后，返回步骤S101而继续处理。通过重复处理，进行依次反映现在时刻的作业的执行状况的显示。例如，虚拟用纸在虚拟的输纸路径上移动的情形如动态图像那样被显示。

图7表示虚拟用纸显示处理（图6的步骤S104）的详细的流程。另外，图7表示对于从一台图像形成装置10接收到的作业信息的处理，在对象的图像形成装置10为多台的情况下，对各个图像形成装置10进行图7的处理。

由于还存在从一台图像形成装置10就多个作业接收到作业信息的情况，所以关于从该图像形成装置10接收到的全部作业信息分别进行步骤S201至S216之间的处理。首先，判断关注的作业信息表示的作业（以后，设为关注的作业）是否是本人（佩戴了该头戴式显示器装置40的用户）的作业（步骤S202）。另外，在头戴式显示器装置40中注册佩戴了该头戴式显示器装置40的用户的用户ID，根据是否与从图像形成装置10接收到的作业信息所包含的用户ID一致，从而进行上述的判断。另外，无论在哪种情况下都将虚拟输纸路径81重叠到相应的图像形成装置而显示。

在关注的作业为本人的作业的情况下（步骤S202；是），将虚拟用纸的格式设定为本人用并转移至步骤S205。在关注的作业并非本人的作业的情况下（步骤S202；否），将虚拟用纸的格式设定为他人用并转移至步骤S205。即，CPU46以能够对头戴式显示器装置40的用户输入的作业的虚拟用纸与其他用户输入的作业的虚拟用纸进行辨别的方式显示。

在步骤S205中判断关注的作业的执行状况是否为“完成”。在为“完成”的情况下（步骤S205；是），在与相应的图像形成装置10的该作业所指定的排纸托盘序号对应的排纸托盘29的位置上显示虚拟用纸（步骤S206），结束本处理（返回）。以一个该虚拟用纸表示一个作业。即，CPU46使显示屏幕部44将与完成印刷的作业对应的虚拟用纸与排纸托盘29重叠而显示。

另外，头戴式显示器装置40在开始了显示后经过了一定时间（例如，3秒）时对与“完成”的作业对应的虚拟用纸88的显示（参照图11）进行消去。即，CPU46将与完成了印刷的作业对应的虚拟用纸在从该作业的执行完成起经过规定时间后进行消去。由于图像形成装置10不检测对排纸托盘29排纸的用纸是否被取出，所以不能与对应于虚拟用纸88的用纸从排纸托盘29取出的定时配合而对在排纸托盘29上显示的该虚拟用纸88进行消去。因此，与排纸托盘重叠而显示的虚拟用纸88会在其显示后经过一定时间而消去。另外，也可以代替排纸托盘，而在接近图像形成装置10主体的排纸口处显示虚拟用纸。即，CPU46也可以使显示屏幕部44将与完成了印刷的作业对应的虚拟用纸显示在排纸托盘29的附近。在不能确定排纸目的地的排纸托盘的情况下等有效。图11表示将与“完成”的作业对应的虚拟用纸88显示在排纸口的附近的状态的一例。

在关注的作业的执行状况并非“完成”的情况下（步骤S205；否），判断关注的作业在图像形成装置10中是否为“正在处理”（步骤S207）。若关注的作业并非“正在处理”（步骤S207；否），则该作业为“等待处理”的作业。因此，在与该作业所指定的供纸托盘序号对应的供纸源（供纸托盘27或手动进纸盘28）的位置上显示虚拟用纸（步骤S208），结束本处理（返回）。以一个该虚拟用纸表示一个作业。即，CPU46使显示屏幕部44将与正在等待的作业对应的虚拟用纸与该作业所使用的用纸的供纸托盘重叠而显示。

在关注的作业为“正在处理”的情况下（步骤S207；是），对该作业的全部用纸分别进行步骤S209与步骤S215之间的处理。

首先，在关注的用纸的位置上描绘虚拟用纸（步骤S210）。将关注的用纸的页面序号设为P1，将作业信息表示的正在处理的页面的页面序号设为P2，若P2＞P1，则由于关注的用纸处理完毕，所以在与该作业所指定的排纸托盘序号对应的排纸托盘29的位置上，显示与关注的用纸对应的虚拟用纸。此时，也可以将排纸完毕的用纸的量（张数）以数值或虚拟用纸的大小、堆积的高度等表示。

若P2＝P1，则关注的用纸在图像形成的途中并且处于输纸路径上。因此，从作业信息取得用于该页面的印刷的用纸在输纸路径上的位置信息，在与其对应的位置上显示虚拟用纸。

若P1＞P2，则由于关注的用纸处于“等待处理”的状态，所以在相应的供纸源的位置上，显示与该关注的用纸对应的虚拟用纸。此时，也可以将未处理的页面的量（张数）以数值或虚拟用纸的大小、堆积的高度等表示。

接着，判断关注的用纸是否是该作业中的最初的用纸（步骤S211）。若并非最初的用纸则转移至步骤S213。若为最初的用纸（步骤S211；是），则对与该用纸对应的虚拟用纸附加表示最初的用纸的辨别信息而显示（步骤S212），并转移至步骤S213。例如，在表示虚拟用纸的图形中显示“S”字符，从而辨别显示是最初的用纸的情况。

在步骤S213中，判断关注的用纸是否是该作业中的最后的用纸。若并非最后的用纸则转移至步骤S215。若为最后的用纸（步骤S213；是），则对与该用纸对应的虚拟用纸附加表示最后的用纸的辨别信息而显示（步骤S214），并转移至步骤S215。例如，在表示虚拟用纸的图形中显示“E”字符，从而辨别显示是最后的用纸的情况。

另外，关于正在处理的作业，也可以设为不在排纸托盘、供纸托盘的位置上显示虚拟用纸。此时，若对在输纸路径上显示的虚拟用纸附加如“m/n”（m为该页面的页面序号，n为总页数）那样的显示，则能够表示作业的进行状况。

图8表示将与最初的用纸以及最后的用纸对应的虚拟用纸显示在输纸路径上的情况下的显示例。虚拟输纸路径81虚拟地表示了图像形成装置10的输纸路径。CPU46使显示屏幕部44将虚拟输纸路径81显示在图像形成装置10的输纸路径的位置上。圆型的虚拟用纸83表示他人的作业的虚拟用纸。星型的虚拟用纸84表示本人的作业的虚拟用纸。即，CPU46使头戴式显示器装置40的用户输入的作业的虚拟用纸与其他用户输入的作业的虚拟用纸的形状不同。此外，CPU46也可以使头戴式显示器装置40的用户输入的作业的虚拟用纸与其他用户输入的作业的虚拟用纸的颜色不同。在图8的例中，与他人的第1作业的最后的页面对应的虚拟用纸83a、和与他人的第2作业的最初的页面对应的虚拟用纸83b被显示在虚拟输纸路径81上。由此识别作业的间断。也可以代替对最初和最后的双方进行辨别显示而仅对任一方进行辨别显示。此时也能够辨别作业的间断。此外，也可以通过使在相邻的作业中虚拟用纸的颜色、形状不同等，从而以能够识别作业的间断的方式进行显示。即，CPU46使显示屏幕部44以能够辨别作业的边界的方式显示虚拟用纸。

图9表示多个作业处于“等待处理”的状态的情况下的显示例。在同图中，施以框线的虚拟用纸以作业单位表示用纸。与供纸托盘27的位置重合而显示的虚拟用纸84、85b、85c、85d具备框线，是作业单位的用纸。与在虚拟输纸路径81上显示的“正在处理”的页面对应的虚拟用纸85a没有框线，对应于一张用纸。此外，星型为与本人的作业对应的虚拟用纸84，矩形为与他人的作业对应的虚拟用纸85a、85b、85c、85d。

与“等待处理”的作业对应的虚拟用纸84、85b、85c、85d与供纸托盘27的位置重叠，从右至左按照作业的执行顺序（越先执行的越在右侧）显示。与“等待处理”的作业对应的各虚拟用纸84、85b、85c、85d与对应于该作业所指定的供纸托盘序号的供纸托盘27的位置重合而显示。在图9的例中，与等待顺序为从开头起第二个的作业对应的虚拟用纸85c与不同于“等待处理”的其他作业的虚拟用纸84、85b、85d的供纸托盘27重叠而显示。通过图9那样的显示，佩戴了头戴式显示器装置40的用户一眼就能够确认本人的作业为在“等待处理”的作业中从开头起第三个作业、该作业所使用的供纸托盘为从上起第三个。即，在存在多个正在等待的作业的情况下，CPU46使显示屏幕部44将与正在等待的各作业对应的虚拟用纸按照作业的执行顺序排列而显示。

在图10中，与供纸托盘27重叠而显示的各虚拟用纸86为作业单位，分别以与作业的量（印刷张数）对应的高度（如竖条形图表）显示。此外，对与“等待处理”的作业对应的各虚拟用纸86附加表示该作业的印刷张数的数值。作业的量也可以以条形图表以外的方式来表现。此外，作业的量也可以仅以虚拟用纸的形态（高度等）和数值的任一方而表示。即，CPU46使显示屏幕部44对与正在等待的作业对应的虚拟用纸附加表示该作业的印刷张数的信息而显示。

像这样，通过使用本实施方式所涉及的头戴式显示器装置40，用户即使从远处也能够迅速且容易地确认各图像形成装置10中的作业的执行状况。例如，在办公室的一处并列设置多台图像形成装置10的情况下，若佩戴头戴式显示器装置40而从远处的自己的座位远看该多台图像形成装置10，则与执行自己的作业的图像形成装置10重叠而显示本人用的虚拟用纸。由此，在实际的图像形成装置10上一眼就能够掌握在哪个图像形成装置10中执行自己的作业。由于与实际的图像形成装置10重叠而显示虚拟用纸，所以与以装置ID等显示来通知输出目的地的图像形成装置10的情况相比，能够包含实际的地点而更容易地识别哪个图像形成装置10中输出物被输出。

例如，在用户对打印服务器发送作业，打印服务器将作业分配给多台图像形成装置10中的任一个的情况下，能够如上述那样确定实物的图像形成装置10而明确地识别自己的作业在哪个图像形成装置10中执行。

此外，在自己的作业为“等待处理”的情况下，由于与成为自己的作业所使用的用纸的供纸源的供纸托盘的位置重叠而显示本人用的虚拟用纸，所以能够准确地识别应对哪个供纸托盘补充用纸，从而进行用纸的补充作业。

进而，由于与本人以及他人的“等待处理”的各作业对应的虚拟用纸与供纸托盘重叠而按照执行顺序显示，所以一眼就能够识别要在何时去图像形成装置10处取出自己的作业的输出物。

进而，由于关于正在处理的作业，与各页面对应的虚拟用纸显示在输纸路径上（以通过更新显示从而与实际的输纸路径上的用纸的运动配合而虚拟用纸移动的方式显示），例如在进行大量印刷的他人的作业与作业之间，执行仅进行一张印刷的自己的作业的情况下，关于自己的作业的用纸在输纸路径上移动而处理的情形，能够恰好在该定时通过虚拟用纸的移动显示而确认。由此，能够在自己的作业的一张输出物被排纸时去取出该输出物，能够从排纸托盘容易地取出该一张输出物。

特别是，由于知道作业的间断的信息被附加到虚拟用纸上，所以容易知道作业的间断，在该定时注视图像形成装置10即可，所以减轻注视自己的输出物被排纸而等待的用户的负担。此外，由于知道作业的间断，所以即使在他人的作业连续多个，或自己的作业连续多个的情况下也能够明确地识别各个作业的边界。

此外，由于显示在输纸路径上虚拟用纸依次移动的情形，所以能够直观地识别图像形成装置10正常地动作。反之，在虚拟用纸的移动停止的情况下，通过该显示，能够识别图像形成装置10中产生了异常。

进而，在存在多个图像形成装置10的情况下，通过看虚拟用纸在输纸路径上移动的情形，从而还能够直观地识别各个图像形成装置10的处理速度。从而，仅通过佩戴头戴式显示器装置40而从远处远看图像形成装置10，就能够在一瞬间直观地识别“等待处理”的作业的量的多少、处理速度的高低等，能够容易地进行应将自己的作业输入至哪个图像形成装置10的判断。

以上，根据附图说明了本发明的实施方式，但具体的结构不限于实施方式所示，不脱离本发明的主旨的范围内的变更、追加也包含于本发明。

在实施方式中，作为优选的方式而显示了虚拟输纸路径81，但虚拟输纸路径81也不是必须显示。此外，虚拟用纸的显示方式不限定于实施方式所例示。

在实施方式中，表示了头戴式显示器装置40从图像形成装置10直接或经由无线路由器5取得作业信息的例，但也可以构成为例如从统一管理作业的执行状况的服务器等取得。

作业信息显示装置可以构成为从图像形成装置10取得作业信息而进行虚拟用纸等的显示的头戴式显示器装置40，也可以构成为包含具备发送作业信息的功能的图像形成装置10和头戴式显示器装置40的系统。在构成为系统的情况下的头戴式显示器装置40和图像形成装置10的功能分担可为任意。例如，也可以是以下功能分担：头戴式显示器装置40将由摄像机部52拍摄的图像发送至图像形成装置10，将其接收的图像形成装置10与作业信息对应地生成将虚拟用纸等与图像形成装置10进行对位而显示的图像，并发送至头戴式显示器装置40，头戴式显示器装置40将该接收到的图像显示在显示屏幕部44。

在实施方式中虚拟用纸等通过头戴式显示器装置40显示，但是也可以是例如通过附带摄像机的便携终端等显示。与摄像机拍摄到的图像内的图像形成装置10重合而显示虚拟用纸、虚拟输纸路径即可。

Claims (11)

1.一种作业信息显示装置，其特征在于，具有：

增强现实显示部，显示在用户看到的现实空间上合成了图像的扩展现实空间；

识别部，识别在所述用户看到的现实空间中存在的图像形成装置；

信息取得部，取得表示对通过所述识别部识别的图像形成装置输入的作业的执行状况的信息；以及

控制部，基于通过所述信息取得部取得的所述信息，使所述增强现实显示部显示以执行所述作业的图像形成装置的输纸路径上的虚拟用纸表示了该作业的执行状况的扩展现实空间，

所述控制部使所述增强现实显示部将与正在等待的作业对应的所述虚拟用纸重叠到该作业所使用的用纸的供纸托盘而显示。

2.如权利要求1所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部以能够对关于该作业信息显示装置的用户输入的作业的所述虚拟用纸与关于其他用户输入的作业的所述虚拟用纸进行辨别的方式显示。

3.如权利要求2所述的作业信息显示装置，其特征在于，

所述控制部使关于该作业信息显示装置的用户输入的作业的所述虚拟用纸和关于其他用户输入的作业的所述虚拟用纸的颜色不同。

4.如权利要求2所述的作业信息显示装置，其特征在于，

所述控制部使关于该作业信息显示装置的用户输入的作业的所述虚拟用纸和关于其他用户输入的作业的所述虚拟用纸的形状不同。

5.如权利要求1所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部以能够辨别作业的边界的方式显示所述虚拟用纸。

6.如权利要求1所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部对与所述正在等待的作业对应的所述虚拟用纸附加表示该作业的印刷张数的信息而显示。

7.如权利要求1所述的作业信息显示装置，其特征在于，

当存在多个正在等待的作业的情况下，所述控制部使所述增强现实显示部将与正在等待的各个作业对应的所述虚拟用纸按照作业的执行顺序排列而显示。

8.如权利要求1所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部将与完成了印刷的作业对应的所述虚拟用纸重叠到排纸托盘而显示或在排纸托盘的附近显示。

9.如权利要求8所述的作业信息显示装置，其特征在于，

所述控制部在从所述作业的执行完成起经过规定时间后消去与所述完成了印刷的作业对应的所述虚拟用纸。

10.如权利要求1所述的作业信息显示装置，其特征在于，

所述控制部使所述增强现实显示部显示虚拟地表示了输纸路径的虚拟输纸路径。

11.如权利要求1至10的任一项所述的作业信息显示装置，其特征在于，

所述作业信息显示装置为头戴式显示器。