CN104135589B - 图像处理系统、图像处理装置、以及移动信息终端 - Google Patents

图像处理系统、图像处理装置、以及移动信息终端 Download PDF

Info

Publication number
CN104135589B
CN104135589B CN201410177757.8A CN201410177757A CN104135589B CN 104135589 B CN104135589 B CN 104135589B CN 201410177757 A CN201410177757 A CN 201410177757A CN 104135589 B CN104135589 B CN 104135589B
Authority
CN
China
Prior art keywords
display
image processing
display part
personal digital
digital assistant
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410177757.8A
Other languages
English (en)
Other versions
CN104135589A (zh
Inventor
久保广明
小泽开拓
今泉祥二
南猛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Opto Inc
Original Assignee
Konica Minolta Opto Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Opto Inc filed Critical Konica Minolta Opto Inc
Publication of CN104135589A publication Critical patent/CN104135589A/zh
Application granted granted Critical
Publication of CN104135589B publication Critical patent/CN104135589B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1278—Dedicated interfaces to print systems specifically adapted to adopt a particular infrastructure
    • G06F3/1292—Mobile client, e.g. wireless printing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1204—Improving or facilitating administration, e.g. print management resulting in reduced user or operator actions, e.g. presetting, automatic actions, using hardware token storing data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1253—Configuration of print job parameters, e.g. using UI at the client
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/04—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller
    • G09G2370/042—Exchange of auxiliary data, i.e. other than image data, between monitor and graphics controller for monitor identification
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Abstract

本发明的目的在于在具有有限的尺寸的显示部的图像处理装置中，不使装置大型化，而能够容易实现显示内容的整体面貌与详细的部分的把握。该图像处理系统具备包括第一显示部的图像处理装置与包括第二显示部的移动信息终端，图像处理装置的第一显示部显示超过其显示面积的面积的虚拟显示画面的一部分的区域，移动信息终端取得表示图像处理装置的第一显示部与自身的第二显示部的相对的位置关系的位置关系信息，第二显示部基于位置关系信息，显示与在第一显示部显示的一部分的区域不重复或者重复的虚拟显示画面的其他的一部分的区域。

Description

图像处理系统、图像处理装置、以及移动信息终端
技术领域
本发明涉及图像处理系统、图像处理装置以及移动信息终端，其中图像处理系统能够使打印机(包括网络打印机)、扫描仪、传真、复印机、文件服务器或者使上述装置的各功能复合的复合机等图像处理装置的操作画面产生出扩展现实感并且与移动信息终端协作。
背景技术
近年来，以智能手机、手写面板终端等为主的、能够进行图像等的各种信息的处理的移动信息终端在任何领域均被有效地利用。而且，即使在与打印机(包括网络打印机)、扫描仪、传真、复印机、文件服务器或者使上述装置的各功能复合的复合机等有关的图像处理装置的领域中，上述情况也不例外。
作为该一个例子，在下述的专利文献1中记载有使用手机的液晶面板作为打印机的显示装置的技术。
另外，在下述的专利文献2中记载有利用笔记本PC(Personal Computer个人电脑)作为复印机的远程控制装置，并使笔记本PC显示与复印装置的显示部相同的画面的技术。
专利文献1：日本特开2003-54093号公报
专利文献2：日本特开2000-181298号公报
以往公知有在图像处理装置的显示部设置触摸屏功能，从而在显示画面上进行各种操作的结构。最近，要求增加功能的同时，能够直接、更易懂地操作多功能。
图21(a)以及图21(b)是表示现有的图像处理装置中的显示画面的一个例子的图。在上述附图中，以与将被经常使用的数字键等设为硬件开关键结构的操作部11邻接的方式设置有显示部12。在显示部12显示用于进行操作的画面。
在图21(a)中，用于实现多功能的各种按钮(在附图中，由矩形表示的部分)大量显示在显示部12的画面内。但是，显示部12的显示面板的面积有限，若将用于实现多功能的各种按钮显示布满在一个画面上，则难以观察，在此基础上也难以进行操作。
图21(b)示出了减少显示在显示部12的一个画面上的各种按钮的数量，抑制难以观察的结构。在该情况下，由于各种按钮(在附图中，由矩形表示的部分)的显示数量减少，所以变得容易观察。但是，为了实现各种多功能，而成为如下结构，即在按一个按钮(例如，进行用纸尺寸的选择的按钮)时，紧接着显示有显示与该按钮对应的多个选择项(例如，用纸尺寸B4、A4、B3、A3等)的较低级层级的画面，并且继续按与该选择项对应的按钮。在该情况下，按按钮的次数增加，从而操作的难度较高。因此，很难称为能够直接、更易懂地操作多功能。
另外，图22(a)以及图22(b)是表示现有的图像处理装置中的显示画面的其他的一个例子的图。在上述附图中，示出了与图21的情况相同的操作部11以及显示部12，在显示部12显示有例如通过附属于图像处理装置的扫描仪等读取完毕的、或者从外部的PC等转送完毕的、之后欲进行打印的图像的打印预览数据。由此，在进行实际的打印前，能够确认在打印对象的图像数据中是否存在损坏等。
在图22(a)中，在显示部12示出了打印对象的图像数据的整体。在该情况下，用户掌握打印对象的图像数据的整体面貌，但是对于打印对象的图像数据的详细的部分而言，由于显示部12的显示面积较小，所以无法根据显示部12进行把握。
图22(b)示出了在显示部12放大显示图22(a)的打印对象的图像数据的一部分的情况。在该情况下，放大显示打印对象的图像数据的详细的部分，因此能够确认在打印对象的图像数据是否存在污染等。但是，把握打印对象的图像数据的整体面貌很难。即，图22(a)以及图22(b)的状态为二者择一，从而同时把握打印对象的图像数据的整体面貌与详细的部分较困难。
与上述的图21以及图22有关的问题均由图像处理装置的显示部12的尺寸有限，且较小引起的。当然，若对显示部12的显示面板的面积进行放大，则有助于解决问题。但是，在该情况下，引起图像处理装置的设置面积的增加、显示部的成本增加等其他的问题。
发明内容
本发明是鉴于上述的事情而完成的，其目的在于在具有有限的尺寸的显示部的图像处理装置中，不使装置大型化，而能够容易实现显示内容的整体面貌与详细的部分的把握。
为了实现上述目的，本发明的图像处理系统具有图像处理装置以及能够与上述图像处理装置通信的移动信息终端，上述图像处理系统的特征在于，上述图像处理装置具备第一显示部、存储用于在上述第一显示部显示的画面数据的存储部、以及在上述第一显示部显示表示包含于与上述画面数据对应的虚拟显示画面的第一区域的图像的第一控制部，上述移动信息终端具备第二显示部、以及在上述第二显示部显示表示与表示上述第一显示部和上述第二显示部的相对的位置关系的位置关系信息对应地生成的第二区域的图像的第二控制部。
在上述图像处理系统中，上述位置关系信息在上述移动信息终端被生成，并被发送至上述图像处理装置，上述图像处理装置基于上述虚拟显示画面以及接收的上述位置关系信息生成表示上述第二区域的图像，并发送至上述移动信息终端装置。
在上述的图像处理系统中，也可以构成为，上述移动信息终端还包括拍摄部以及图像处理部，在上述移动信息终端，通过上述拍摄部能够对上述图像处理装置的上述第一显示部以及/或者其附近的图像进行拍摄，上述图像处理部基于上述第一显示部以及/或者其附近的上述图像，通过图像解析确定上述第二显示部的相对于上述第一显示部的相对的位置，生成上述位置关系信息。
另外，也可以构成为，上述移动信息终端包括能够取得来自外部的定位信号的定位信号取得部，在上述移动信息终端，预先取得与上述图像处理装置的上述第一显示部的位置有关的装置位置信息，基于上述装置位置信息与通过上述定位信号取得部取得的上述定位信号，生成上述位置关系信息。
在上述的图像处理系统中，也可以构成为，上述移动信息终端能够与上述图像处理装置通信，在对上述移动信息终端以及上述图像处理装置中的至少一方进行了操作的情况下，检测其操作内容，或者在上述移动信息终端的上述第二显示部的相对于上述图像处理装置的上述第一显示部的相对的位置关系存在变化的情况下，更新上述位置关系信息，上述移动信息终端基于上述操作内容或者更新后的上述位置关系信息与上述图像处理装置通信，并使上述第一显示部以及第二显示部中的至少一方的显示内容变化。
此时，也可以构成为，在上述位置关系的变化中也包括上述移动信息终端的上述第二显示部的长度或者宽度方向的相对于上述图像处理装置的上述第一显示部的长度或者宽度方向的相对的角度的变化，上述移动信息终端基于上述相对的角度的变化与上述图像处理装置通信，并使上述第一显示部以及第二显示部中的至少一方的显示内容变化。
另外，也可以构成为，在上述位置关系的变化中也包括与上述第一显示部的显示画面垂直的垂直方向的上述移动信息终端的上述第二显示部的相对于上述图像处理装置的上述第一显示部的相对的高度的变化，上述移动信息终端基于上述相对的高度的变化与上述图像处理装置通信，并使上述第一显示部以及第二显示部中的至少一方的显示内容变化。
在该情况下，在上述第二显示部的相对于上述第一显示部的相对的高度位置增高的情况下，缩小上述第一显示部以及第二显示部中的至少一方的显示内容的显示倍率，另一方面，在上述第二显示部的相对于上述第一显示部的相对的高度位置降低的情况下，放大上述第一显示部以及第二显示部中的至少一方的显示内容的显示倍率。
在上述任一个图像处理系统中，也可以构成为，上述图像处理装置在上述第一显示部的附近还包括操作部，上述移动信息终端预先取得与上述操作部的位置有关的信息，在上述移动信息终端的上述第二显示部的相对于上述图像处理装置的上述第一显示部的相对的位置关系为上述操作部因上述移动信息终端而隐藏的情况下，上述移动信息终端使上述第二显示部显示模仿了上述操作部的、用于经由通信操作上述图像处理装置的终端画面上操作区域。
另外，也可以构成为，上述图像处理装置在上述第一显示部的画面上能够显示用于操作上述图像处理装置的装置画面上操作区域，上述图像处理装置预先取得与上述装置画面上操作区域的位置有关的信息，上述图像处理装置取得上述位置关系信息，在上述移动信息终端的上述第二显示部的相对于上述图像处理装置的上述第一显示部的相对的位置关系为上述装置画面上操作区域因上述移动信息终端而隐藏的情况下，上述图像处理装置以在上述第一显示部使上述装置画面上操作区域错开，且上述装置画面上操作区域不因上述移动信息终端而隐藏的方式使显示内容变化。
在上述任一个图像处理系统中，也可以构成为，上述第一显示部或者上述第二显示部具有能够进行利用手指或者其他的物体在显示画面上保持接触的状态移动并滑动从而使显示内容滚动的滑动动作的触摸屏功能，根据上述相对的位置关系，使上述滚动的速度变化。
在上述任一个图像处理系统中，也可以构成为，在上述虚拟显示画面至少包括相互不同、能够切换显示的第一虚拟显示画面以及第二虚拟显示画面，在上述图像处理装置中，上述第一显示部能够显示上述第一虚拟显示画面的一部分的区域，在上述移动信息终端中，上述第二显示部能够基于上述位置关系信息，显示与上述一部的区域对应的、上述第二虚拟显示画面的一部分的区域。
本发明的图像处理装置能够与移动信息终端通信，上述图像处理装置的特征在于，具备：第一显示部；存储部，其存储用于在上述第一显示部显示的画面数据；第一控制部，其在上述第一显示部显示表示包含于与上述画面数据对应的虚拟显示画面的第一区域的图像；位置取得部，其取得表示上述第一显示部与上述移动信息终端具有的第二显示部的相对的位置关系的位置关系信息；图像生成部，其生成表示包含于上述虚拟显示画面，并且基于通过上述位置取得部取得的上述位置关系信息的第二区域的图像；以及发送部，其将表示通过上述图像生成部生成的上述第二区域的图像发送至上述移动信息终端。
在上述的图像处理装置中，上述位置取得部接收在上述移动信息终端被生成的上述位置关系信息，上述图像生成部基于上述虚拟显示画面与上述位置取得部接收的上述位置关系信息，生成表示上述第二区域的图像，上述发送部将表示上述图像生成部生成的上述第二区域的图像发送至上述移动信息终端。
本发明的移动信息终端能够与图像处理装置通信，上述移动信息终端的特征在于，具备：第二显示部；位置取得部，其取得表示上述第二显示部与上述图像处理装置具有的第一显示部的相对的位置关系的位置关系信息；以及第二控制部，其在上述第二显示部显示表示包含于上述图像处理装置具有的虚拟显示画面，并以基于上述位置关系信息，与上述第一显示部和上述第二显示部的相对的位置关系对应的方式生成的第二区域的图像。
在上述的移动信息终端中，上述第二控制部将上述位置关系信息发送至上述图像处理装置，并且通过上述图像处理装置接收表示基于上述虚拟显示画面以及上述位置关系信息而被生成的上述第二区域的图像，并在上述第二显示部显示上述图像。
根据本发明，在图像处理装置中，第一显示部能够显示具有超过第一显示部的显示面积的面积的虚拟显示画面的一部分的区域。而且，移动信息终端取得表示图像处理装置的第一显示部与移动信息终端的第二显示部的相对的位置关系的位置关系信息，在移动信息终端，第二显示部能够基于位置关系信息，显示虚拟显示画面的其他的一部分的区域。因此，能够在第二显示部以虚拟显示画面犹如扩大地存在的方式显示仅在第一显示部中无法完全显示的虚拟显示画面的其他的一部分的区域。由此，能够产生出扩展现实感，并且使图像处理装置与移动信息终端协作。其结果，利用扩展现实感，从而能够貌似放大显示部的面积。
另外，移动信息终端的图像处理部基于通过移动信息终端的拍摄部拍摄的图像，通过图像解析确定第二显示部的相对于第一显示部的相对的位置，生成位置关系信息。因此，不用在图像处理装置设置特别的装置，仅通过在移动信息终端设置拍摄部以及图像处理部，能够貌似放大显示部的面积。并且，根据本发明，基于装置位置信息与通过定位信号取得部取得的定位信号，能够生成位置关系信息，因此仅通过预先取得与图像处理装置的第一显示部的位置有关的装置位置信息，能够貌似放大显示部的面积。
另外，在检测出对移动信息终端、图像处理装置的操作、移动信息终端的第二显示部的相对的位置关系的变化时，移动信息终端基于该操作内容、更新的位置关系信息与图像处理装置通信，能够使第一显示部或者第二显示部的显示内容变化。因此，图像处理装置与移动信息终端的协作性进一步提高。此时，例如，基于第一显示部以及第二显示部的相对的角度的变化、相对的高度的变化，使显示内容变化，从而能够提高图像处理装置与移动信息终端的协作性。
另外，根据本发明，在移动信息终端的第二显示部的相对于图像处理装置的第一显示部的相对的位置关系为图像处理装置的操作部因移动信息终端而隐藏的情况下，移动信息终端能够使第二显示部显示模仿了操作部的、用于经由通信操作图像处理装置的终端画面上操作区域。另外，在图像处理装置中，也以通过第一显示部使装置画面上操作区域错开，且装置画面上操作区域不因移动信息终端而隐藏的方式使显示内容变化。因此，即便在图像处理装置的操作部因移动信息终端而隐藏的情况下，也能够通过终端画面上操作区域或者操作画面上操作区域，继续对图像处理装置进行操作。
另外，第一显示部或者第二显示部具有能够进行使其显示内容滚动的滑动动作的触摸屏功能，能够使其滚动的速度变化，因此显示部的操作性提高。
根据本发明，在包括能够切换显示的第一虚拟显示画面以及第二虚拟显示画面的情况下，在图像处理装置中，第一显示部显示第一虚拟显示画面的一部的区域，另一方面，在移动信息终端，第二显示部基于位置关系信息，能够与第一较低级层级显示画面相对地显示第二虚拟显示画面的一部分的区域。因此，在第一虚拟显示画面以及第二虚拟显示画面为连续的一系列的打印预览图像的情况下，能够在移动信息终端容易确认一系列的打印预览图像中的不同位置。
附图说明
图1是表示实施方式1所涉及的图像处理系统的结构例的图。
图2是表示图像处理装置的详细结构的框图。
图3是表示移动信息终端的详细结构的框图。
图4是表示协作远程面板操作的一个例子的图。
图5是表示实施方式1所涉及的图像处理系统中的、能够通过移动信息终端与图像处理装置进行的处理的流程图。
图6是表示协作远程面板操作的其他的一个例子的图。
图7是表示协作远程面板操作的其他的一个例子的图。
图8是对使表示将所有层级收纳在一个画面内的操作画面的虚拟显示画面显示于图像处理装置的显示器以及移动信息终端的显示部的情况进行说明的图。
图9是表示协作远程面板操作的其他的一个例子的图。
图10是表示协作远程面板操作的其他的一个例子的图。
图11是表示协作远程面板操作的其他的一个例子的图。
图12是表示协作远程面板操作的其他的一个例子的图。
图13是表示协作远程面板操作的其他的一个例子的图。
图14是表示实施方式2所涉及的图像处理系统中的、协作远程面板操作的一个例子的图。
图15是表示协作远程面板操作的其他的一个例子的图。
图16是表示实施方式2所涉及的图像处理系统中的、能够通过移动信息终端与图像处理装置进行的处理的流程图。
图17是表示协作远程面板操作的其他的一个例子的图。
图18是表示协作远程面板操作的其他的一个例子的图。
图19是表示图像处理装置的与显示器的显示画面垂直的垂直方向中的、由移动信息终端的显示部的相对的高度的不同而导致的显示内容的不同的图。
图20是表示协作远程面板操作的其他的一个例子的图。
图21是表示现有的图像处理装置中的显示画面的一个例子的图。
图22是表示现有的图像处理装置中的显示画面的其他的一个例子的图。
符号说明
1…图像处理装置；11…操作装置；12…显示器；13…扫描装置；14…打印装置；15…修整装置；16…通信接口；17…文档进纸器；18…供纸装置；20…CPU；21…RAM；22…ROM；23…数据存储部；100a、100b…移动信息终端；101…显示部；102…拍摄部；103…图像处理部；103a…图像解析部；103b…信息显示控制部；103c…信息收发部；103d…面板附近用数据；103e…位置信息处理部；104…网络接口；200…网络；IM1～IM3…虚拟显示画面。
具体实施方式
＜实施方式1＞
本实施方式是能够在图像处理装置的显示部显示虚拟显示画面的一部分的区域，能够在移动信息终端的显示部显示虚拟显示画面的其他的一部分的区域的图像处理系统。
图1是表示本实施方式所涉及的图像处理系统的结构例的图。该图像处理系统具备：智能手机等移动信息终端100a、可以是LAN(Local Area Network局域网)那样的封闭网络或者因特网等开放网络的任一个的作为通信网的网络200、以及打印机(包括网络打印机)、扫描仪、传真机、复印机、文件服务器或者使上述装置的各功能复合的复合机等图像处理装置1。
此外，移动信息终端100a能够经由无线LAN接入点201与网络200连接。而且，移动信息终端100a还能够经由网络200与图像处理装置1通信。但是，本发明并非将网络200、无线LAN接入点201设为必须的结构，例如，移动信息终端100a也能够通过无线或者有线的方式与图像处理装置1直接通信(也可以为所谓的对等网络连接)。
图2是表示图像处理装置1的详细结构的框图。图像处理装置1具有：作为操作部的操作装置11、作为显示部的显示器(显示装置)12、供图像读取用的扫描装置13、供图像形成用的打印装置14、对印刷物进行装订、打孔等后处理的修整装置15、用于与外部进行通信的通信接口16、文档进纸器17、供纸装置18、用于对各部的动作进行控制的CPU(CentralProcessing Unit中央处理器)20、用于临时存储程序、数据的RAM(Random Access Memory随机存储器)21、存储控制程序等的ROM(Read Only Memory只读存储器)22以及数据存储部23。
在该图像处理装置1中，也可以进行如下设定，即在用户使用时，若不进行基于在数据存储部23预先登记的用户信息的认证，则无法使用。
操作装置11具有：用于输入数字、文字、以及符号等的多个硬件开关键、用于识别被按下的键的传感器以及用于将表示已识别的键的信号发送至CPU20的发送电路等。
显示器12由液晶显示器、有机EL(ElectroLuminescence电致发光)显示器等构成，并且具有触摸屏(触摸面板)功能。而且，显示器12显示用于对用户给予消息或者指示的画面、用于供用户输入设定内容以及处理内容的画面以及表示由图像处理装置1形成的图像以及处理的结果的画面等。显示器12具有触摸屏功能，因此具备对用户利用手指触碰的画面上的位置进行检测，并将表示检测结果的信号发送至CPU20的功能。
此外，在网络200也可以进一步连接有对图像处理装置1指示打印指令、扫描指令等的PC等的机器(未图示)，在上述机器安装有用于对图像处理装置1给予各种各样的指令的应用程序以及驱动器。而且，用户也能够使用上述机器，远程操作图像处理装置1(例如能够作为网络打印机使用)。
扫描装置13从原稿光电读取照片、文字、画等图像信息并取得图像数据。被取得的图像数据(浓度数据)在扫描装置13内的未图示的图像处理部转换成数字数据，在实施公知的各种图像处理后，输送至打印装置14、通信接口16。而且，该图像数据供图像的打印、数据的发送用，或者为了之后利用而储存在数据存储部23内。
打印装置14将通过扫描装置13取得的图像数据、经由通信接口16从外部接收的图像数据或者储存于数据存储部23的图像打印在从供纸装置18供给的用纸或者胶片等记录片。供纸装置18设置于图像处理装置1的下部，用于将适于打印对象的图像的记录片供给至打印装置14。
通过打印装置14打印有图像的记录片、即印刷物被导向修整装置15，在修整装置15中，根据由用户预先设定的模式，进行打孔处理、装订处理等。然后，排出至修整装置15的托盘。
通信接口16包括用于与外部进行通信的信号的发送部以及接收部，具体而言，由用于与移动信息终端100a、外部的PC等机器等进行通信的、无线通信装置、NIC(NetworkInterface Card网络接口卡)、调制解调器或者TA(Terminal Adapter终端适配器)等构成。
在数据存储部23包括作为大容量存储介质的硬盘23H、用于与作为可装卸的存储介质的存储卡91交换信息的读卡机23R。读卡机23R从CF卡(注册商标)、闪存等存储卡91读取数据或者将数据写入存储卡91。存储卡91主要用于不经由网络200进行未图示的与外部的PC的数据的交换或者用于硬盘23H的数据的备份。
在硬盘23H保存有通过扫描装置13读取的图像数据、经由通信接口16从外部接收的图像数据等。另外，硬盘23H的数据也能够经由网络200从未图示的外部的PC、其他的图像处理装置参照。
CPU20读取存储于ROM22的程序或者加载在RAM21上的程序、数据，进行上述的程序的执行、数据的处理，从而对图像处理装置1的整体进行控制。
图3是表示移动信息终端100a的详细结构的框图。移动信息终端100a由液晶显示器、有机EL显示器等构成，并包括具有触摸屏功能的显示部101、由CMOS(ComplementaryMetal Oxide Semiconductor互补金属氧化物半导体)图像传感器照相机、CCD(ChargeCoupled Device电荷耦合装置)图像传感器照相机等构成的拍摄部102、对在显示部101应该显示的图像以及通过拍摄部102拍摄的图像进行图像处理的图像处理部103、以及作为用于与网络200连接的接口的网络接口104。此外，在图3中，为了简化说明，省略配置于移动信息终端100a与网络200之间的无线LAN接入点201的显示。
此处，图像处理部103具有：图像解析部103a、信息显示控制部103b、信息收发部103c、面板附近用数据103d以及位置信息处理部103e。对上述各部的详细后述。
在本实施方式所涉及的图像处理系统中，能够实现能够利用移动信息终端100a作为图像处理装置1的远程控制装置的、所谓的远程面板操作的功能。但是，在该远程面板操作中并非仅包括如下功能，即单纯地在移动信息终端100a的显示部101显示与图像处理装置1的显示器12完全相同的显示画面，移动信息终端100a的显示部101中的操作优先于图像读取装置1的显示器12中的操作的、单独远程面板操作。
在本实施方式中的远程面板操作中，除了上述的单独远程面板操作之外，还包括能够使图像处理装置1与移动信息终端100a协作的协作远程面板操作的功能。以下对该协作远程面板操作的功能进行详细的说明。此外，对于协作远程面板操作以及单独远程面板操作的选择而言，只要用户对移动信息终端100a的显示部101或者图像处理装置1的显示器12或者操作装置11进行操作，从而能够选择即可。
在本实施方式所涉及的协作远程面板操作中，用户使移动信息终端100a靠近图像处理装置1的显示器12附近，从而显示器12显示具有超过显示器12的显示面积的面积的虚拟显示画面的一部分的区域，另一方面，移动信息终端100a的显示部101取得表示显示器12与自身的显示部101的相对的位置关系的位置关系信息(例如坐标的信息等)，从而在显示部101基于位置关系信息，显示与显示器12所示的一部分的区域不重复或者重复的虚拟显示画面的其他的一部分的区域。
图4是表示该协作远程面板操作的一个例子的图。在该附图中，示出了图像处理装置1的显示器12显示具有超过显示器12的显示面积的面积的虚拟显示画面IM1的一部分的区域作为显示画面SB1的状态。另外，在移动信息终端100a的显示部101显示与显示器12所示的显示画面SB1不重复的、虚拟显示画面IM1的其他的一部分的区域作为显示画面SA1。此外，在移动信息终端100a的显示部101也可以根据显示器12与显示部101的相对的位置关系，显示与显示器12所示的显示画面SB1局部或者全部重复的虚拟显示画面IM1的其他的一部分的区域作为显示画面SA1。
此外，该例中的虚拟显示画面IM1是用于实现多功能的各种按钮(在附图中，为由矩形表示的部分)大量配置在画面内的虚拟显示画面。而且，例如，用户触摸移动信息终端100a的显示部101上的显示画面SA1内的按钮BT，从而例如如图4的下段所示，能够在显示器12显示与显示画面SB1不同的内容的显示画面SB1a。
当然，用户通过触摸在图像处理装置1的显示器12显示的其他的按钮而非移动信息终端100a的显示部101上的显示画面SA1的按钮，也能够进行其他的动作。在该情况下，用户为了使图像处理装置1进行所希望的功能，可以对图像处理装置1的显示器12以及操作装置11进行操作，可以对移动信息终端100a的显示部101的显示画面进行操作，两者都可。即，对于与功能有关的受理顺序而言，在显示器12以及操作装置11与移动信息终端100a的显示部101之间不存在优劣。
如上，在图像处理装置1中，若显示器12能够显示具有超过显示器12的显示面积的面积的虚拟显示画面IM1的一部分的区域，移动信息终端100a取得表示显示器12与显示部101的相对的位置关系的位置关系信息，并在移动信息终端100a中由显示部101基于位置关系信息，能够显示与通过显示器12显示的一部分的区域不重复或者重复的虚拟显示画面IM1的其他的一部分的区域，则能够在显示部101以虚拟显示画面IM1犹如扩大地存在的方式显示仅在显示器12中无法完全显示的虚拟显示画面IM1的其他的一部分的区域。由此，能够产生出扩展现实感，并且使图像处理装置1与移动信息终端100a协作。其结果，能够提供通过利用扩展现实感从而能够貌似放大显示部的面积的图像处理系统。而且，例如通过使移动信息终端100a在虚拟显示画面IM1上移动，用户能够对各种操作功能进行检索，另外，与该功能有关的操作不论在图像处理装置1或者移动信息终端100a中均能够进行。
此处，对表示显示器12与移动信息终端100a的显示部101的相对的位置关系的位置关系信息的取得进行说明。
在移动信息终端100a预先安装有用于实现协作远程面板操作的应用软件。若用户起动该应用软件，则拍摄部102自动地开始拍摄，从而实时地拍摄图像处理装置1的显示器12以及/或者其附近的样子。此外，该实时的拍摄内容未被显示于移动信息终端100a的显示部101，相反，在移动信息终端100a的显示部101显示上述的虚拟显示画面IM1的其他的一部分的区域作为显示画面SA1。
此时，在移动信息终端100a的图像处理部103，图像解析部103a基于通过拍摄部102拍摄的显示器12以及/或者其附近的图像，通过图像解析确定移动信息终端100a的显示部101的相对于显示器12的相对的位置，生成位置关系信息。
在生成位置关系信息时，图像解析部103a使用面板附近用数据103d进行公知的图像解析，从而确定移动信息终端100a的显示部101的相对于显示器12的相对的位置关系。此外，在面板附近用数据103d中包括与显示器12、显示器12的周边的操作装置11、扫描装置13等的形状、颜色、特征点等有关的图像解析用的各种的公知的数据。
如上，若图像处理部103基于通过拍摄部102拍摄的显示器12以及/或者其附近的图像，通过图像解析确定显示部101的相对于显示器12的相对的位置，生成位置关系信息，则不用在图像处理装置1设置特别的装置，仅通过在移动信息终端100a设置拍摄部102以及图像处理部103，就能够提供能够貌似放大显示部的面积的图像处理系统。
另外，关于位置关系信息的取得，也可以在上述的图像解析的基础上，或者取而代之而利用在外部被定位而获得的位置信息信号。即，在移动信息终端100a的图像处理部103设置能够从外部取得位置信息信号，并将该位置信息信号用于各种各样的用途的定位信号取得部。此外，上述位置信息信号例如通过利用图像处理装置1的多处设置的无线通信部与移动信息终端100建立通信，从而作为表示移动信息终端100相对于图像形成处理装置1的方向、距离、高度等的信号而被取得。而且，在进行协作远程面板操作前，例如将移动信息终端100载置在显示器12的中央部进行规定的登记动作，从而预先取得与显示器12的位置有关的装置位置信息并将该装置位置信息存储在上述定位信号取得部内。然后，上述定位信号取得部也可以基于该装置位置信息与实时取得的位置信息信号，生成位置关系信息。
如上，移动信息终端100a包括能够取得上述位置信息信号等的、来自外部的定位信号的上述定位信号取得部，在移动信息终端100a预先取得与图像处理装置1的显示器12的位置有关的装置位置信息，并基于装置位置信息与上述位置信息信号，生成位置关系信息。由此，仅通过移动信息终端100a在上述定位信号取得部预先取得与显示器12的位置有关的装置位置信息，就能够提供能够貌似放大显示部的面积的图像处理系统。
此外，在使用图像解析与定位信号双方生成位置关系信息的情况下，只要根据基于上述定位信号取得部中的位置信息信号的定位精度，以通过图像解析获得的位置关系信息为基础，考虑位置信息信号的结果对位置关系信息进行修正，或者相反，以通过位置信息信号获得的位置关系信息为基础，考虑图像解析的结果对位置关系信息进行修正即可。
如上获得的位置关系信息被输送至图像处理部103的信息显示控制部103b。信息显示控制部103b例如预先存储虚拟显示画面IM1的整个画面数据，基于图像解析部103a、来自上述定位信号取得部等的位置关系信息，使虚拟显示画面IM1中的适当的部分，即以虚拟显示画面IM1犹如实际扩大地存在的方式，与显示器12的显示画面SB1的显示内容对应的、对应于显示器12与显示部101的相对的位置关系的显示画面SA1显示于显示部101。
此外，此处，信息显示控制部103b预先取得虚拟显示画面IM1的整个画面数据，但不局限于此，例如也可以构成为通过通信实时地从图像处理装置1取得虚拟显示画面IM1中的必要的数据或者整个画面部分的数据。在该情况下，图像处理部103的信息收发部103c管理信息的接收，将已取得的信息交接给信息显示控制部103b。另外，在信息显示控制部103b预先取得虚拟显示画面IM1的整个画面数据的情况下，只要经由信息收发部103c通过通信向图像处理装置1发送应该显示的虚拟显示画面IM1的一部分的数据或者整个画面的数据即可。
图5是表示虚拟显示画面为操作画面的、本实施方式所涉及的图像处理系统中的、能够通过移动信息终端100a或者100b与图像处理装置1进行的处理的流程图。
首先，在移动信息终端100a或者100b侧，由用户起动被预先安装的用于实现协作远程面板操作的应用软件。然后，经由该应用软件，指示远程面板操作的开始(步骤S0)。
接下来，判断是否选择了协作远程面板操作以及单独远程面板操作的任一个(步骤S1)。在选择了单独远程面板操作的情况下，移动信息终端100a或者100b对图像处理装置1要求显示器12的显示图像(步骤S2)。图像处理装置1若接受来自移动信息终端装置100a或者100b的要求，则发送显示器12的显示图像(步骤S3)。然后，移动信息终端100a或者100b若接收来自图像处理装置1的显示图像，则使已接收的显示图像显示于显示部101(步骤S4)。
由此，若单纯地在移动信息终端100a或者100b的显示部101显示与图像处理装置1的显示器12完全相同的显示画面，则移动信息终端100a或者100b的显示部101中的操作优先于图像读取装置1的显示器12中的操作(步骤S5)。然后，判断是否指示单独远程面板操作的结束(步骤S6)，在未指示结束的情况下，返回步骤S2，在指示了结束的情况下，远程面板操作结束(步骤S25)。
另一方面，在选择了协作远程面板操作的情况下，移动信息终端100a或者100b判断是否能够开始与图像处理装置1的通信(步骤S7)。在无法开始的情况下返回步骤S7，待机直至能够开始。在能够开始的情况下，通过位置信息处理部103e取得位置信息信号(步骤S8)。然后，拍摄部102自动地开始拍摄，从而实时地拍摄图像处理装置1的显示器12以及/或者其附近的样子(步骤S9)。
接下来，图像解析部103a基于通过拍摄部102拍摄的、显示器12以及/或者其附近的图像，判断是否识别到显示器12以及/或者其附近的形状(步骤S10)。在无法识别上述的形状的情况下，返回步骤S8，再次进行基于位置信息处理部103e的位置信息信号的取得以及基于拍摄部102的拍摄。
在识别到显示器12以及/或者其附近的形状的情况下，在图像解析部103a，通过使用了面板附近用数据103d的公知的图像解析确定移动信息终端100a或者100b的显示部101的相对于显示器12的相对的位置，生成位置关系信息。具体而言，计算出移动信息终端100a的显示部101以及显示器12之间的相对距离、方向、坐标等(步骤S11)。然后，移动信息终端100a或者100b将在步骤S11中计算出的相对距离、方向、坐标等与该显示部101的画面尺寸一同发送至图像处理装置1(步骤S12)。
图像处理装置1基于被从移动信息终端100a或者100b发送的信息，判断移动信息终端100a或者100b的配置位置，并且识别该显示部101的画面尺寸。由此，图像处理装置1计算出虚拟显示画面IM1或者IM2的最大边的长度(步骤S13)，决定显示于移动信息终端100a或者100b的显示部101的虚拟显示画面IM1或者IM2的一部分的画面尺寸，从而生成显示于显示部101的图像(一部分区域图像)(步骤S14)。然后，图像处理装置1发送在步骤S14中对虚拟显示画面IM1或者IM2的一部分进行截取而生成的图像(一部分区域图像)(步骤S15)。因此，在移动信息终端100a或者100b中，接收该一部分区域图像，并显示于显示器101(步骤S16)。
然后，在移动信息终端100a或者100b移动的情况下，判断其相对坐标是否计算完毕(步骤S17)，若未计算完毕，则返回步骤S17，等待计算，若计算完毕，则在显示部101生成在移动信息终端100a或者100b的显示部101应该显示的虚拟显示画面IM1或者IM2中的一部分(步骤S18)。
然后，判断在移动信息终端100a或者100b是否存在拖动操作(步骤S19)，在存在拖动操作的情况下，计算出基于拖动的移动后的移动信息终端100a的相对坐标(步骤S20)。另一方面，在不存在拖动操作的情况下，判断是否存在点击动作(包括双击动作)(步骤S21)，在存在点击动作的情况下，与此对应，在图像处理装置1中进行改变显示位置、显示图像的内容的处理(步骤S22)，接受使装置画面上操作区域AR的位置错开等的功能处理(步骤S23)。
然后，判断是否指示了协作远程面板操作的结束(步骤S24)，在未指示结束的情况下，返回步骤S16，在指示了结束的情况下，远程面板操作结束(步骤S25)。
图6是表示该协作远程面板操作的一个例子的图。图6(a)示出了对于移动信息终端100a不在显示部101上操作而是用户移动的情况，即移动信息终端100a的显示部101的相对于图像处理装置1的显示器12的相对的位置关系存在变化的情况(在步骤S19以及步骤21中均为否)。在该情况下，来自图像解析部103a以及/或者位置信息处理部103e的位置关系信息被更新成新的信息，移动信息终端100a基于该更新后的位置关系信息使显示部101的显示画面SA1变化。具体而言，在显示部101显示新的移动信息终端100a的位置中的虚拟显示画面IM1中的适当的部分。
另外，图6(b)示出了对于移动信息终端100a利用手指在显示部101上触碰并保持拖动的状态下用户移动的情况，即对移动信息终端100a进行操作，并且移动信息终端100a的显示部101的相对于图像处理装置1的显示器12的相对的位置关系存在变化的情况(在步骤S19中为是)。
在该情况下，该操作内容(拖动)在移动信息终端100a中被检测出，并且位置关系信息被更新。在移动信息终端100a中继续进行拖动，因此移动信息终端100a不使显示部101的显示画面SA1变化。另一方面，对于图像处理装置1的显示器12的显示画面SB1而言，伴随着保持拖动的状态的移动信息终端100a的移动，其显示内容变化。即，移动信息终端100a基于操作内容(拖动)与更新后的位置关系信息，与图像处理装置1通信，使图像处理装置1中的显示器12的显示内容变化。具体而言，在显示器12显示新的移动信息终端100a的位置中的虚拟显示画面IM1中的适当的部分。
另外，虽未图示，但在不使移动信息终端100a的位置移动，而是用户使手指在显示部101上滑动并使显示画面SA1的内容移动(滑动)的情况下，即在对移动信息终端100a进行了操作的情况下，移动信息终端100a基于该操作内容(滑动)使自身的显示部101的显示内容变化，并且与图像处理装置1通信，从而也能够使图像处理装置1中的显示器12的显示内容变化。具体而言，使虚拟显示画面IM1移动与显示内容因滑动动作而在显示部101上移动的部分相同的量，并使虚拟显示画面IM1显示于显示器12。
相反，虽也未图示，但在不使移动信息终端100a的位置移动，而是用户使手指在显示器12上滑动并使显示画面SB1的内容移动(滑动)的情况下，即在对图像处理装置1进行了操作的情况下，图像处理装置1基于该操作内容(滑动)使自身的显示器12的显示内容变化，并且与移动信息终端100a通信，从而也能够使移动信息终端100a中的显示部101的显示内容变化。具体而言，使虚拟显示画面IM1移动与显示内容因滑动动作而在显示器12上移动的部分相同的量，并使虚拟显示画面IM1显示于显示部101。
另外，例如，在不使移动信息终端100a的位置移动，而是用户进行在显示部101上对按钮以外的位置进行双击的(使手指迅速触摸两次的)动作的情况下(在步骤S21中为是)，即在对移动信息终端100a进行了操作的情况下，移动信息终端100a基于该操作内容(双击)与图像处理装置1通信，从而也可以在图像处理装置1中，使显示内容居中(显示虚拟显示画面IM1的中央部分)或者在显示器12显示与移动信息终端100a的显示部101相同的内容。
图7是表示协作远程面板操作的其他的一个例子的图。在图7中，代替智能手机等移动信息终端100a，示出了显示画面比移动信息终端100a更大的手写面板终端的移动信息终端100b。该移动信息终端100b也具有与图3相同的结构。
作为手写面板终端的移动信息终端100b也能够与智能手机等移动信息终端100a的情况相同地进行协作远程面板操作。但是，考虑其尺寸较大，因此导致图像处理装置1的操作装置11的物理键存在的操作区域(例如在图7的上段由虚线显示的区域11a)因移动信息终端100b而隐藏。
因此，如图7的中段或者下段所示，在移动信息终端100b的显示部101的相对于显示器12的相对的位置关系为操作装置11因移动信息终端100b而隐藏的情况下，在显示部101的显示画面SA1显示模仿了操作装置11的终端画面上操作区域11b。而且，用户在终端画面上操作区域11b上进行操作，从而经由通信操作图像处理装置1。
图7的中段与下段的不同在于终端画面上操作区域11b的显示画面SA1内的显示位置。在显示画面SA1内，在其他的按钮等与终端画面上操作区域11b被重复显示而难以观察的情况下，如图7的下段所示，只要使终端画面上操作区域11b朝显示画面SA1的端部自动地移动，从而容易观察即可。
此外，移动信息终端100b预先取得与操作装置11的位置有关的信息，例如存储于面板附近用数据103d内，在信息显示控制部103b，能够进行移动信息终端100b的显示部101的相对于显示器12的相对的位置关系是否为操作装置11因移动信息终端100b而隐藏的判断。具体而言，比较与操作装置11的位置有关的坐标等的信息和移动信息终端100b的显示部101的坐标等的信息，从而进行该判断。
由此，在移动信息终端100b的显示部101的相对于显示器12的相对的位置关系为图像处理装置1的操作装置11因移动信息终端100b而隐藏的情况下，若移动信息终端100b使显示部101显示模仿了操作装置11的、用于经由通信操作图像处理装置1的终端画面上操作区域11b，则即便在操作装置11因移动信息终端100b而隐藏的情况下，通过显示于移动信息终端100b的显示部101的终端画面上操作区域11b，也能够继续进行图像处理装置1的操作。
此外，在图7中，虽使用作为显示尺寸较大的手写面板终端的移动信息终端100b进行了说明，但在使用智能手机等移动信息终端100a的情况下，也能够产生相同的问题。因此，在移动信息终端100a的情况下，也可以构成为与上述相同，使显示部101的显示画面显示模仿了操作装置11的、终端画面上操作区域11b。
在上述情况下，采取用于实现多功能的各种按钮大量配置在画面内的、通常表示操作画面的虚拟显示画面IM1为例。但是，在发明所要解决的课题一栏中，如在图21(b)中说明的那样，在按一个按钮时，紧接着显示有显示与该按钮对应的多个选择项的较低级层级的画面，并且继续按与该选择项对应的按钮的结构中，存在不导致按按钮的次数直接减少的情况。
因此，作为虚拟显示画面，也可以采用较低级层级、较高级层级均全部收纳在一个画面内的画面。将上述的所有层级收纳在一个画面内的操作画面在现有的图像处理装置中实施较困难，但若如本发明那样为能够貌似放大显示部的结构，则能够进行实施。
图8是对使表示将上述的所有层级收纳在一个画面内的操作画面的虚拟显示画面IM2显示于显示器12以及移动信息终端100a的显示部101的情况进行说明的图。图8(a)是表示使移动信息终端100a靠近图像处理装置1的显示器12的周边的样子，图8(b)是表示虚拟显示画面IM2的结构。
在图8(a)中，示出了图像处理装置1的显示器12显示具有超过显示器12的显示面积的面积的虚拟显示画面IM2的一部分的区域作为显示画面SB2的状态。另外，在图8(a)中虽未图示，但在移动信息终端100a的显示部101显示有与显示器12所示的显示画面SB2不重复、局部或者全部重复的虚拟显示画面IM2的其他的一部分的区域。
而且，如图8(b)所示，在该虚拟显示画面IM2中，表示用于实现多功能的各种功能的项目CT(在附图中，由正方形表示的部分)大量水平地并列在中央部分，与表示该各种功能的项目对应的选择项的项目IT大量隔着中央部分上下配置为垂直列状。
在该图8的情况下，也与图4至图7的情况相同地，使图像处理装置1与移动信息终端100a协作，能够实现基于移动信息终端100a的移动的虚拟显示画面IM2内的项目检索、基于对任一个显示画面的操作的显示内容的连动等的各种功能。
图9是表示协作远程面板操作的其他的一个例子的图。图9(a)是表示使相对于图像处理装置1的显示器12的长度方向的、移动信息终端100a的显示部101的长度方向稍稍偏移，但朝向大致相同的方向，用户使移动信息终端100a靠近图像处理装置1的显示器12附近的状态的图。
由此，显示器12显示具有超过显示器12的显示面积的面积的虚拟显示画面IM2的一部分的区域作为显示画面SB2，另一方面，移动信息终端100a的显示部101取得表示显示器12与自身的显示部101的相对的位置关系的位置关系信息，基于位置关系信息，使显示部101显示与显示器12所示的一部分的区域局部重复的虚拟显示画面的其他的一部分的区域作为显示画面SA2。
此外，在显示画面SB2示出了表示各种功能的项目CT、与表示该各种功能的项目对应的选择项的项目IT的上段的一部分，在显示画面SA2显示下段的选择项的项目IT作为纵向的显示形态ITa。
另一方面，与图9(a)的情况相比，图9(b)是表示使相对于图像处理装置1的显示器12的长度方向的、移动信息终端100a的显示部101的长度方向具有相对的角度的变化，即以显示部101的长度方向相对于显示器12的长度方向成为大致垂直的方式配置移动信息终端100a的状态的图。
在该图9(b)中，在显示画面SB2同样地示出了表示各种功能的项目CT、与表示该各种功能的项目对应的选择项的项目IT的上段的一部分，但是与图9(a)的情况相比，选择项的项目IT以能够显示更多的方式上下略微被压缩而被显示。而且，在显示画面SA2显示下段的选择项的项目IT作为相同地略微被压缩的显示形态ITb。
即，这意味着在移动信息终端100a的显示部101的相对于图像处理装置1的显示器12的、位置关系的变化中包括显示部101的长度方向的相对于显示器12的长度方向的相对的角度的变化，基于该相对的角度的变化，移动信息终端100a与图像处理装置1通信，使显示器12的显示内容变化以及/或者使显示部101的显示内容变化。
这样一来，例如，如图9(b)那样，在以显示部101的长度方向相对于显示器12的长度方向成为大致垂直的方式配置移动信息终端100a的情况下，考虑到用户有欲把握选择项的项目IT的全部内容的意图，能够显示为压缩了尽可能多的选择项的项目IT的显示形态ITb，另外，如图9(a)那样，在以显示部101的长度方向相对于显示器12的长度方向成为大致相同方向的方式配置移动信息终端100a的情况下，考虑到用户没有上述的意图，能够显示选择项的项目IT作为与通常相同的纵向的显示形态ITa(利用文字等显示项目IT的内容，容易观察)。因此，图像处理装置1与移动信息终端100a的协作性也基于显示器12的长度方向与显示部101的长度方向的相对的角度的变化进一步提高。
此外，上述的“长度”方向也可以换用为“宽度”方向。
图10是表示协作远程面板操作的其他的一个例子的图。在图10(a)中示出了图像处理装置1的显示器12显示具有超过显示器12的显示面积的面积的虚拟显示画面IM2的一部分的区域作为显示画面SB2的状态。另外，在移动信息终端100a的显示部101显示有与显示器12所示的显示画面SB2不重复的虚拟显示画面IM2的其他的一部分的区域作为显示画面SA2。此外，在移动信息终端100a的显示部101中也可以根据显示器12与显示部101的相对的位置关系，显示有与显示器12所示的显示画面SB2局部或者全部重复的虚拟显示画面IM2的其他的一部分的区域作为显示画面SA2。
在图10(b)中，示出了在使移动信息终端100a的位置移动而发现所希望的选择项的项目IT后，用户进行了在显示部101上对该选择项的项目IT进行双击的(在图10(b)中，将双击作为附图标记CR而表示)动作的情况。此时，移动信息终端100a基于该操作内容(双击)与图像处理装置1通信，在图像处理装置1中，作为显示器12的显示画面SB2，显示与移动信息终端100a的显示部101大致相同的内容。即，使通过显示部101选择的内容(所希望的选择项的项目IT)在显示器12的显示画面SB2居中。
或者，也可以在用户在显示部101上对选择项的项目IT进行双击后，维持点击状态不变地使移动信息终端100a在图像处理装置1的显示器12上移动，然后使手指离开解除点击状态，从而作为显示器12的显示画面SB2，显示与移动信息终端100a的显示部101大致相同的内容。表示该状态的是图10(c)。在该情况下，能够使通过显示部101选择的内容(所希望的选择项的项目IT)在显示器12的显示画面SB2居中。
图11是表示协作远程面板操作的其他的一个例子的图。显示器12以及显示部101如上述那样包含触摸屏功能(其中，仅显示器12以及显示部101中的任意一方具有触摸屏功能，另一方不排除不具有触摸屏功能的情况)。在该触摸屏功能中包括利用手指或者其他的物体(记录笔等)在显示画面上保持接触的状态移动并滑动从而使显示内容滚动的滑动动作。
此处，也可以根据显示器12以及显示部101的相对的位置关系使显示器12以及显示部101中的由滑动动作进行的滚动的速度变化。图11是对该情况进行说明的图。
在图11(a)中，图示了使移动信息终端100a的显示部101的位置与显示器12的下侧邻接而配置的情况。另外，在图11(b)中，图示了不使移动信息终端100a靠近显示器12的附近，不进行协作远程操作的情况，或者将移动信息终端100a配置于远离显示器12的附近的位置的情况(移动信息终端100a过于远离显示器12，因此很难称为显示器12的显示区域被直接扩展的情况)。
在图11(a)的情况下，显示区域沿移动信息终端100a的配置方向如由箭头L1的长度表示的那样被貌似扩展。另一方面，在图11(b)的情况下，成为显示器12单独的显示区域，因此该上下方向的显示区域如利用箭头L2的长度表示的那样比箭头L1的长度短。
通常，在滑动动作中，需要与可滚动的范围的界限对应地对画面的移动距离加以限制。与此对应，例如在显示区域较窄的情况下，为了容易到达可滚动的范围的界限，能够考虑将滚动的速度设定为快速，另一方面，在显示区域较大的情况下，容易很快地到达可滚动的范围的界限，因此能够考虑将滚动的速度设定为缓慢。
因此，如图11(a)的情况那样，在显示区域沿移动信息终端100a的配置方向被貌似扩展的情况下，能够考虑抑制上下方向的滚动的速度。这样，各选择项的项目IT缓慢地被显示，从而操作性提高。另一方面，如图11(b)的情况那样，在显示器12的显示区域未被扩展的情况下，能够将上下方向的滚动的速度设定为快速，从而能够迅速地识别可滚动的范围的界限。
如上，显示器12以及/或者显示部101具有能够利用手指或者其他的物体在显示画面上保持接触的状态移动并且滑动从而使显示内容滚动的滑动动作的触摸屏功能，若显示器12以及/或者显示部101根据两者的相对的位置关系，使滚动的速度变化，则显示部的操作性提高。
此外，与上述情况相反，在显示器12的显示区域被貌似扩展的情况下，在使上下方向的滚动的速度增大而不被扩展的情况下，也可以将上下方向的滚动的速度设定为缓慢。在该情况下，在显示器12的显示区域被貌似扩展的情况下，基于如下设计思想，即能够同时阅览的各选择项的项目IT的个数增加，因此即使使滚动的速度加快也不存在问题。
如上即便在任一的情况下，在显示器12的显示区域被疑似扩展的情况与未被疑似扩展的情况下，使滚动的速度产生差，从而能够提高显示部的操作性。
图12是表示协作远程面板操作的其他的一个例子的图。在图12中，示出了图像处理装置1的显示器12的一部分因移动信息终端100a而隐藏的情况。而且，在该隐藏的显示器12的一部分中本来显示有用于操作图像处理装置1的装置画面上操作区域AR。
因此，在移动信息终端100a的显示部101的相对于显示器12的相对的位置关系为装置画面上操作区域AR因移动信息终端100a而隐藏的情况下，图像处理装置1以在显示器12使装置画面上操作区域AR错开，且装置画面上操作区域AR不因移动信息终端100a而隐藏的方式使显示内容变化。
此外，在该处理时，图像处理装置1预先取得与装置画面上操作区域AR的位置有关的坐标等的信息，并且为了识别移动信息终端100a的位置，通过通信从移动信息终端100a也取得表示显示器12与移动信息终端100a的显示部101的相对的位置关系的位置关系信息。而且，图像处理装置1进行移动信息终端100a的显示部101的相对于显示器12的相对的位置关系是否为装置画面上操作区域AR因移动信息终端100a而隐藏的判断。具体而言，比较与装置画面上操作区域AR的位置有关的坐标等的信息和移动信息终端100a的显示部101的坐标等的信息，从而能够进行该判断。
由此，在移动信息终端100a的显示部101的相对于显示器12的相对的位置关系为图像处理装置1的装置画面上操作区域AR因移动信息终端100a而隐藏的情况下，图像处理装置1以在显示器12使装置画面上操作区域AR错开，且装置画面上操作区域AR不因移动信息终端100a而隐藏的方式如图12所示使显示内容变化。
如上，在移动信息终端100a的显示部101的相对于图像处理装置1的显示器12的相对的位置关系为装置画面上操作区域AR因移动信息终端100a而隐藏的情况下，若图像处理装置1以在显示器12使装置画面上操作区域AR错开，且装置画面上操作区域AR不因移动信息终端100a而隐藏的方式使显示内容变化，则即便在图像处理装置1的装置画面上操作区域AR因移动信息终端100a而隐藏的情况下，装置画面上操作区域AR被错开并被更新显示，因此也能够继续进行图像处理装置1的操作。
图13是表示协作远程面板操作的其他的一个例子的图。在图13中，与图7的情况相同，代替智能手机等移动信息终端100a，示出了显示画面比移动信息终端100a更大的手写面板终端的移动信息终端100b，并示出了图像处理装置1的操作装置11的操作区域因移动信息终端100b而隐藏的情况。
在该情况下，也与图7的情况相同地在显示部101的显示画面SA2显示模仿了操作装置11的、终端画面上操作区域11b，用户操作终端画面上操作区域11b，从而只要能够经由通信操作图像处理装置1即可。
＜实施方式2＞
本实施方式是实施方式1所涉及的图像处理系统的变形例，并对虚拟显示画面不是操作画面，而是例如通过附属于图像处理装置1的扫描装置13中读取完毕的、或者从外部的PC等转送完毕的、之后欲进行打印的图像的打印预览数据的情况进行说明。
图14是表示该协作远程面板操作的一个例子的图。图14(a)以及图14(b)分别与图6(a)以及图6(b)对应，并示出了移动信息终端100a的移动以及保持在显示部101上拖动的状态的移动信息终端100a的移动。而且，该效果也与图6(a)以及图6(b)的各情况相同。
另外，图15是表示该协作远程面板操作的其他的一个例子的图。在图15中，示出了图像处理装置1的显示器12显示具有超过显示器12的显示面积的面积的纵向跨度L31以及横向跨度L32的虚拟显示画面IM3的一部分的区域作为显示画面SB3的状态。另外，在移动信息终端100a的显示部101中，显示与显示器12所示的显示画面SB3不重复的、虚拟显示画面IM3的其他的一部分的区域作为显示画面SA3。此外，在移动信息终端100a的显示部101中，也可以根据显示器12与显示部101的相对的位置关系，显示与显示器12所示的显示画面SB3局部或者全部重复的、虚拟显示画面IM3的其他的一部分的区域作为显示画面SA3。
此外，该例中的虚拟显示画面IM3是通过扫描装置13读取完毕的、或者从外部的PC等转送完毕的、之后欲进行打印的图像的打印预览数据，且是设定为与打印尺寸等倍的形状的虚拟显示画面。移动信息终端100a通过通信从图像处理装置1预先取得该打印预览数据。此处，信息显示控制部103b预先取得虚拟显示画面IM3的整个画面数据，但不局限于此，也可以构成为例如通过通信实时地从图像处理装置1取得虚拟显示画面IM3中的必要的数据或者整个画面部分的数据。在该情况下，图像处理部103的信息收发部103c管理信息的接收，并将已取得的信息交接给信息显示控制部103b。
而且，例如，用户对移动信息终端100a的显示部101上的显示画面SA3内的一部分进行双击，从而例如如图15的下段所示，也能够在显示器12使显示画面SA3的显示部分居中。
如上，在图像处理装置1中，若显示器12能够显示具有超过显示器12的显示面积的面积的虚拟显示画面IM3的一部分的区域，移动信息终端100a取得表示显示器12与显示部101的相对的位置关系的位置关系信息，在移动信息终端100a中，显示部101基于位置关系信息，能够显示与在显示器12中显示的一部分的区域不重复或者重复的虚拟显示画面IM3的其他的一部分的区域，则能够在显示部101以虚拟显示画面IM3犹如扩大地存在的方式显示仅在显示器12中无法完全显示的虚拟显示画面IM3的其他的一部分的区域。由此，能够产生出扩展现实感，并且使图像处理装置1与移动信息终端100a协作。其结果，利用扩展现实感，从而能够提供能够貌似放大显示部的面积的图像处理系统。而且，例如通过使移动信息终端100a在虚拟显示画面IM3上移动，用户能够在打印预览数据图像上观察细部，与此同时，也能够确认与纵向跨度L31以及横向跨度L32的实际的打印尺寸等倍的整体图像。此外，表示显示器12与移动信息终端100a的显示部101的相对的位置关系的位置关系信息的取得与实施方式1的情况相同。
在打印预览时，也可以采用根据与显示器12的显示画面垂直的垂直方向的、移动信息终端100a的显示部101的相对于图像处理装置的显示器12的相对的高度的变化，使显示器12以及/或者移动信息终端100a的显示部101的显示内容变化的结构。即，在该情况下，根据用户的视线方向中的移动信息终端100a的配置位置，切换移动信息终端100a的显示倍率，从而能够使相对于显示器12的视场角变得等价。
图16是表示虚拟显示画面为打印预览画面的、本实施方式所涉及的图像处理系统中的、能够通过移动信息终端100a与图像处理装置1进行的处理的流程图。
该流程图中的、步骤S0～S18是与实施方式1所涉及的图5的流程图相同的处理，因此省略其说明。在步骤S18后，判断用户是否指示打印预览(步骤S26)。在用户指示了打印预览的情况下，取得其打印尺寸，另外，计算出显示器12中的显示尺寸(步骤S27)。另一方面，在用户未指示打印预览的情况下，跳过步骤S27。
而且，在移动信息终端100a移动的情况下，判断移动信息终端100a的相对坐标是否计算完毕(步骤S28)，若未计算完毕，则返回步骤S28，等待计算，若计算完毕，则取得移动信息终端100a的、距离显示器12的相对的高度的信息，并对其显示倍率进行计算(步骤S29)。然后，在显示部101生成·显示应该在显示部101显示的虚拟显示画面IM3中的一部分(步骤S30)。
然后，处理移至与实施方式1所涉及的图5的流程图步骤相同的步骤S19，从而能够进行以下的各步骤S19～S25。其他的方面与实施方式1所涉及的图像处理系统相同，因此省略说明。
图17～图19表示该情况的图，图17以及图18是表示协作远程面板操作的其他的一个例子的图，图19是表示图像处理装置的与显示器12的显示画面垂直的垂直方向中的、由移动信息终端100a的显示部101的相对的高度的不同而导致的显示内容的不同的图。此外，图19(a)与图17对应，图19(b)与图18对应。
图17(a)示出了在用户的视角SP与显示器12的显示画面之间的垂直距离d的一半d/2的位置的高度处配置移动信息终端100a后的虚拟显示画面IM3的显示器12以及移动信息终端100a的显示部101的显示方式。另外，图17(b)是去掉虚拟显示画面IM3的显示，仅表示显示器12以及移动信息终端100a的显示部101的显示方式的图。
另一方面，图18(a)示出了在与显示器12大致相同的高度水平处配置移动信息终端100a后的、虚拟显示画面IM3的显示器12以及移动信息终端100a的显示部101的显示方式。另外，图18(b)是去掉虚拟显示画面IM3的显示，仅表示显示器12以及移动信息终端100a的显示部101的显示方式的图。
如图17以及图19(a)所示，在从显示器12观察移动信息终端100a的高度方向的配置位置较高的情况下，若放大显示部101中的显示画面SA3的显示区域(缩小显示倍率)，则能够使相对于显示器12进而虚拟显示画面IM3的视场角变得等价。另一方面，相反，如图18以及图19(b)所示，在移动信息终端100a的高度方向的配置位置为与显示器12的显示画面大致相同的高度水平的情况下，若缩小显示部101中的显示画面SA3的显示区域(放大显示倍率)，则能够使相对于显示器12进而虚拟显示画面IM3的视场角变得等价。
即，在显示器12与显示部101的位置关系的变化中也包括与显示器12的显示画面垂直的垂直方向的显示部101的相对于显示器12的相对的高度的变化，移动信息终端100a基于该相对的高度的变化，使显示部101的显示内容变化，从而图像处理装置1与移动信息终端100a的协作性也基于显示器12与显示部101的相对的高度的变化进一步提高。
此外，此处，虽表示移动信息终端100a基于相对的高度的变化而使显示部101的显示内容变化的情况，但也可以采用移动信息终端100a与图像处理装置1通信，从而使图像处理装置1中的显示器12的显示内容变化的结构。在该情况下，例如将显示部101中的显示画面SA3的显示倍率设为恒定，从而显示器12中的虚拟显示画面IM3的显示倍率进行增减。
此外，通过基于测距传感器等的高度位置的测定、图像处理部103的图像解析部103a的图像解析等，并根据拍摄部102的拍摄图像的显示器12以及/或者其附近的规模尺寸的辨别也能够容易取得相对的高度的信息。
图20是表示协作远程面板操作的其他的一个例子的图。在进行打印预览时，存在欲通过图像处理装置1的显示器12依次切换显示多个一系列的预览图像(例如仅将打印图像中的一部分设为颜色不一样的一系列的类似图像等)的情况。在上述的情况下，也能够利用协作远程面板操作。
即，在图像处理装置1的显示器12预先显示一系列的打印预览图像中的第N个(N：整数)的图像，使移动信息终端100a配置在显示器12上，能够使移动信息终端100a的显示部101显示打印预览图像中的第N个以外的图像，确认其不同。
图20(a)示出了例如使显示器12以及显示部101双方显示一系列的打印预览图像中的第N个图像的情况。在该图20(a)中，在显示部101示出了其显示内容作为显示画面SA3a。
图20(b)示出了例如在显示器12保持显示一系列的打印预览图像中的第N个图像的状态，在显示部101显示一系列的打印预览图像中的第N-1个图像的情况。在该图20(b)中，在显示部101示出了其显示内容作为变更了显示画面SA3a的一部分的显示内容的显示画面SA3b。
另外，图20(c)示出了例如在显示器12保持显示一系列的打印预览图像中的第N个图像的状态，在显示部101中显示一系列的打印预览图像中的第N+1个图像的情况。在该图20(c)中，在显示部101中示出了其显示内容作为变更显示画面SA3a的一部分的显示内容的显示画面SA3c。
即，此处，在虚拟显示画面中包括第N-1个、第N个以及第N+1个打印预览图像等的相互不同的能够切换显示的多个虚拟显示画面，图像处理装置1的显示器12显示多个虚拟显示画面的一个(例如第N个打印预览图像)的一部分的区域，移动信息终端100a的显示部101能够基于显示器12与显示部101之间的位置关系信息，显示与上述的一部分的区域不对应(为显示器12的显示区域外的部分)，或者对应的(为显示器12的显示区域内的部分)、多个虚拟显示画面的其他的一个(例如第N+1个打印预览图像)的一部分的区域。
这样一来，在多个虚拟显示画面为连续的一系列的打印预览图像的情况下，能够在移动信息终端100a容易确认一系列的打印预览图像中的不同位置。
＜其他＞
在上述情况下，虽对图像处理系统、图像处理装置以及作为移动信息终端的实施方式进行了说明，但本发明不限定于上述情况。

Claims (16)

1.一种图像处理系统，其具有图像处理装置以及能够与所述图像处理装置通信的移动信息终端，所述图像处理系统的特征在于，
所述图像处理装置具备第一显示部、存储用于在所述第一显示部显示的画面数据的存储部、以及在所述第一显示部显示表示第一区域的图像的第一控制部，所述第一区域是与所述画面数据对应的虚拟显示画面的一部分的区域，
所述移动信息终端具备第二显示部以及第二控制部，所述第二控制部在所述第二显示部显示与表示所述第一显示部和所述第二显示部的相对位置关系的位置关系信息对应生成的、表示第二区域的图像，所述第二区域是与所述虚拟显示画面的所述第一区域至少一部分不重复的一部分的区域，
所述虚拟显示画面具有超过所述第一显示部的显示面积的面积。
2.根据权利要求1所述的图像处理系统，其特征在于，
所述位置关系信息在所述移动信息终端被生成，并被发送至所述图像处理装置，
所述图像处理装置基于所述虚拟显示画面以及接收的所述位置关系信息生成表示所述第二区域的图像，并发送至所述移动信息终端装置。
3.根据权利要求1或2所述的图像处理系统，其特征在于，
所述移动信息终端还包括拍摄部以及图像处理部，
在所述移动信息终端中，
通过所述拍摄部能够对所述图像处理装置的所述第一显示部以及/或者其附近的图像进行拍摄，
所述图像处理部基于所述第一显示部以及/或者其附近的所述图像，通过图像解析确定所述第二显示部相对于所述第一显示部的相对位置，生成所述位置关系信息。
4.根据权利要求1或2所述的图像处理系统，其特征在于，
所述移动信息终端包括能够取得来自外部的定位信号的定位信号取得部，
在所述移动信息终端中，
预先取得与所述图像处理装置的所述第一显示部的位置有关的装置位置信息，
基于所述装置位置信息与通过所述定位信号取得部取得的所述定位信号，生成所述位置关系信息。
5.根据权利要求1或2所述的图像处理系统，其特征在于，
所述移动信息终端能够与所述图像处理装置通信，
在对所述移动信息终端以及所述图像处理装置中的至少一方进行了操作的情况下，检测其操作内容，或者在所述移动信息终端的所述第二显示部相对于所述图像处理装置的所述第一显示部的相对位置关系发生了变化的情况下，更新所述位置关系信息，
所述移动信息终端基于所述操作内容或者更新后的所述位置关系信息与所述图像处理装置通信，并使所述第一显示部以及第二显示部中的至少一方的显示内容变化。
6.根据权利要求5所述的图像处理系统，其特征在于，
在所述位置关系的变化中也包括所述移动信息终端的所述第二显示部的长度方向或者宽度方向相对于所述图像处理装置的所述第一显示部的长度方向或者宽度方向的相对角度的变化，
所述移动信息终端基于所述相对角度的变化与所述图像处理装置通信，并使所述第一显示部以及第二显示部中的至少一方的显示内容变化。
7.根据权利要求5所述的图像处理系统，其特征在于，
在所述位置关系的变化中也包括与所述第一显示部的显示画面垂直的垂直方向上的所述移动信息终端的所述第二显示部相对于所述图像处理装置的所述第一显示部的相对高度的变化，
所述移动信息终端基于所述相对高度的变化与所述图像处理装置通信，并使所述第一显示部以及第二显示部中的至少一方的显示内容变化。
8.根据权利要求7所述的图像处理系统，其特征在于，
在所述第二显示部相对于所述第一显示部的相对高度位置增高的情况下，缩小所述第一显示部以及第二显示部中的至少一方的显示内容的显示倍率，
而在所述第二显示部相对于所述第一显示部的相对高度位置降低的情况下，放大所述第一显示部以及第二显示部中的至少一方的显示内容的显示倍率。
9.根据权利要求1或2所述的图像处理系统，其特征在于，
所述图像处理装置在所述第一显示部的附近还包括操作部，
所述移动信息终端预先取得与所述操作部的位置有关的信息，
在所述移动信息终端的所述第二显示部相对于所述图像处理装置的所述第一显示部的相对位置关系为所述操作部被所述移动信息终端隐藏的情况下，
所述移动信息终端使所述第二显示部显示模仿了所述操作部的、用于经由通信操作所述图像处理装置的终端画面上操作区域。
10.根据权利要求1或2所述的图像处理系统，其特征在于，
所述图像处理装置在所述第一显示部的画面上能够显示用于操作所述图像处理装置的装置画面上操作区域，
所述图像处理装置预先取得与所述装置画面上操作区域的位置有关的信息，
所述图像处理装置取得所述位置关系信息，
在所述移动信息终端的所述第二显示部相对于所述图像处理装置的所述第一显示部的相对位置关系为所述装置画面上操作区域被所述移动信息终端隐藏的情况下，
所述图像处理装置以在所述第一显示部使所述装置画面上操作区域错开，从而所述装置画面上操作区域不被所述移动信息终端隐藏的方式使显示内容变化。
11.根据权利要求1或2所述的图像处理系统，其特征在于，
所述第一显示部或者所述第二显示部具有能够进行利用手指或者其他的物体在显示画面上保持接触的状态移动并滑动从而使显示内容滚动的滑动动作的触摸屏功能，并且根据所述相对位置关系，使所述滚动的速度变化。
12.根据权利要求1或2所述的图像处理系统，其特征在于，
在所述虚拟显示画面至少包括相互不同的、能够切换显示的第一虚拟显示画面以及第二虚拟显示画面，
在所述图像处理装置中，所述第一显示部能够显示所述第一虚拟显示画面的一部分的区域，
在所述移动信息终端中，所述第二显示部能够基于所述位置关系信息，显示与所述一部分的区域对应的、所述第二虚拟显示画面的一部分的区域。
13.一种图像处理装置，其能够与移动信息终端通信，
所述图像处理装置的特征在于，具备：
第一显示部；
存储部，其存储用于在所述第一显示部显示的画面数据；
第一控制部，其在所述第一显示部显示表示第一区域的图像，所述第一区域是与所述画面数据对应的虚拟显示画面的一部分的区域；
位置取得部，其取得表示所述第一显示部与所述移动信息终端具有的第二显示部的相对位置关系的位置关系信息；
图像生成部，其生成包含于所述虚拟显示画面并且基于通过所述位置取得部取得的所述位置关系信息的、表示第二区域的图像，所述第二区域是与所述虚拟显示画面的所述第一区域至少一部分不重复的一部分的区域；以及
发送部，其将表示通过所述图像生成部生成的所述第二区域的图像发送至所述移动信息终端，
所述虚拟显示画面具有超过所述第一显示部的显示面积的面积。
14.根据权利要求13所述的图像处理装置，其特征在于，
所述位置取得部接收在所述移动信息终端被生成的所述位置关系信息，
所述图像生成部基于所述虚拟显示画面与所述位置取得部接收的所述位置关系信息，生成表示所述第二区域的图像，
所述发送部将表示所述图像生成部生成的所述第二区域的图像发送至所述移动信息终端。
15.一种移动信息终端，其能够与图像处理装置通信，
所述移动信息终端的特征在于，具备：
第二显示部；
位置取得部，其取得表示所述第二显示部与所述图像处理装置具有的第一显示部的相对位置关系的位置关系信息；以及
第二控制部，其在所述第二显示部显示包含于所述图像处理装置具有的虚拟显示画面的、表示第二区域的图像，所述第二区域是与所述虚拟显示画面中的显示于所述第一显示部的一部分的区域至少一部分不重复的一部分的区域，所述图像是基于所述位置关系信息，以与所述第一显示部和所述第二显示部的相对位置关系对应的方式生成的，
所述虚拟显示画面具有超过所述第一显示部的显示面积的面积。
16.根据权利要求15所述的移动信息终端，其特征在于，
所述第二控制部将所述位置关系信息发送至所述图像处理装置，并且通过所述图像处理装置接收表示基于所述虚拟显示画面以及所述位置关系信息而被生成的所述第二区域的图像，并在所述第二显示部显示该图像。
CN201410177757.8A 2013-04-30 2014-04-29 图像处理系统、图像处理装置、以及移动信息终端 Active CN104135589B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2013095484A JP5854237B2 (ja) 2013-04-30 2013-04-30 画像処理システム、画像処理装置、携帯情報端末およびプログラム
JP2013-095484 2013-04-30

Publications (2)

Publication Number Publication Date
CN104135589A CN104135589A (zh) 2014-11-05
CN104135589B true CN104135589B (zh) 2018-04-06

Family

ID=50841557

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410177757.8A Active CN104135589B (zh) 2013-04-30 2014-04-29 图像处理系统、图像处理装置、以及移动信息终端

Country Status (4)

Country Link
US (1) US9323494B2 (zh)
EP (1) EP2799978B1 (zh)
JP (1) JP5854237B2 (zh)
CN (1) CN104135589B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104093061B (zh) * 2014-07-18 2020-06-02 北京智谷睿拓技术服务有限公司 内容分享方法和装置
US9880799B1 (en) * 2014-08-26 2018-01-30 Sprint Communications Company L.P. Extendable display screens of electronic devices
CN104834448B (zh) * 2015-05-27 2018-12-14 联想(北京)有限公司 一种控制方法及电子设备
JP2017058748A (ja) 2015-09-14 2017-03-23 セイコーエプソン株式会社 機器の機能実行方法、機器およびプログラム
JP2019018484A (ja) * 2017-07-19 2019-02-07 東芝テック株式会社 プリンタおよびプログラム
JP7013808B2 (ja) * 2017-11-15 2022-02-01 富士フイルムビジネスイノベーション株式会社 情報処理装置およびプログラム
US11574429B1 (en) * 2019-04-30 2023-02-07 Splunk Inc. Automated generation of display layouts

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102725726A (zh) * 2009-11-09 2012-10-10 高通股份有限公司 多屏幕图像显示

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5986622A (en) * 1996-05-24 1999-11-16 Lucent Technologies Inc. Panel display of multiple display units for multiple signal sources
SE511516C2 (sv) * 1997-12-23 1999-10-11 Ericsson Telefon Ab L M Handburen displayenhet och metod att visa skärmbilder
JP2000181298A (ja) 1998-12-10 2000-06-30 Canon Inc リモート操作付き複写装置
JP2003054093A (ja) 2001-08-16 2003-02-26 Fuji Photo Film Co Ltd プリンタ
BRPI0417656A (pt) 2003-12-19 2007-04-03 Speechgear Inc método, meio legìvel por computador, e, sistema
JP2007264992A (ja) * 2006-03-28 2007-10-11 Konica Minolta Holdings Inc 文書検索装置、文書検索方法、および文書検索プログラム
WO2009143294A2 (en) * 2008-05-20 2009-11-26 Citrix Systems, Inc. Methods and systems for using external display devices with a mobile computing device
JP2010193079A (ja) * 2009-02-17 2010-09-02 Shueisha Inc 画像観賞方法
JP4706985B2 (ja) 2009-03-04 2011-06-22 コニカミノルタビジネステクノロジーズ株式会社 コンテンツ表示装置
US20100269038A1 (en) 2009-04-17 2010-10-21 Sony Ericsson Mobile Communications Ab Variable Rate Scrolling
DE102009043641A1 (de) * 2009-09-09 2011-03-10 Sureinstinct Gmbh I.G. Verfahren zum Anzeigen von ein Objekt betreffende Informationen
JP5351006B2 (ja) * 2009-12-24 2013-11-27 京セラ株式会社 携帯端末及び表示制御プログラム
US8730269B2 (en) * 2010-05-14 2014-05-20 Citrix Systems, Inc. Interpreting a gesture-based instruction to selectively display a frame of an application user interface on a mobile computing device
JP5682815B2 (ja) 2011-01-27 2015-03-11 コニカミノルタ株式会社 情報処理装置、画像形成装置、およびプログラム
JP5685464B2 (ja) * 2011-03-25 2015-03-18 京セラ株式会社 撮影装置、制御方法および仮想情報表示プログラム
JP5532018B2 (ja) 2011-06-27 2014-06-25 コニカミノルタ株式会社 端末装置、プログラムおよびリモート操作システム
US9268406B2 (en) * 2011-09-30 2016-02-23 Microsoft Technology Licensing, Llc Virtual spectator experience with a personal audio/visual apparatus
US20130219303A1 (en) * 2012-02-21 2013-08-22 Research In Motion Tat Ab Method, apparatus, and system for providing a shared user interface
US20140313103A1 (en) * 2013-04-19 2014-10-23 Qualcomm Incorporated Coordinating a display function between a plurality of proximate client devices

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102725726A (zh) * 2009-11-09 2012-10-10 高通股份有限公司 多屏幕图像显示

Also Published As

Publication number Publication date
US9323494B2 (en) 2016-04-26
EP2799978B1 (en) 2019-05-22
EP2799978A1 (en) 2014-11-05
US20140320912A1 (en) 2014-10-30
JP5854237B2 (ja) 2016-02-09
CN104135589A (zh) 2014-11-05
JP2014215961A (ja) 2014-11-17

Similar Documents

Publication Publication Date Title
CN104135589B (zh) 图像处理系统、图像处理装置、以及移动信息终端
CN1116656C (zh) 图象处理装置及方法
JP4904223B2 (ja) 画像処理装置及び画像処理方法
US9141317B2 (en) Image forming apparatus
CN1838725B (zh) 记录数据记录装置和记录数据记录方法
CN104583928B (zh) 信息处理装置、信息处理方法以及相关程序
CN104243744B (zh) 输出设定装置以及输出设定方法
JP2011138315A (ja) 画像出力装置、システム、方法およびプログラム
JP2018120598A (ja) 情報処理装置、情報処理システム、その制御方法及びプログラム
CN102665021A (zh) 印刷设定装置、图像形成装置以及印刷设定方法
JP2010114840A (ja) 画像形成装置及び保存画像の確認システム
CN105763756B (zh) 操作显示装置
JP2005346353A (ja) 画像表示制御テーブル、画像の天地制御方法及び画像の天地制御プログラム
CN103002179A (zh) 图像形成系统、图像形成装置及其动作设定方法
CN110032325A (zh) 信息处理装置、信息处理装置的控制方法以及记录介质
JP5757279B2 (ja) 遊戯用撮影装置、遊戯用撮影方法及びコンピュータプログラム
JP2010198257A (ja) 画像処理装置、プログラムおよびファイル作成方法
US8370739B2 (en) Combining multiple images from different display areas using a plurality of reference positions
JP2012080316A (ja) 画像合成装置及び画像合成プログラム
CN109327636A (zh) 图像处理装置
CN107707781A (zh) 图像形成设备和图像形成方法
JP4683322B2 (ja) 画像表示制御装置及び画像表示制御プログラム
JP2009055272A (ja) 画像処理装置、画像処理方法、および、画像処理プログラム
JP6102178B2 (ja) サムネイル表示装置、サムネイルの表示方法、およびコンピュータプログラム
JP6853699B2 (ja) 注文管理システム及び注文管理方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant