CN103973935A - 图像处理装置以及方法、信息处理终端以及方法 - Google Patents

Abstract

提供一种图像处理装置以及方法、信息处理终端以及方法。在信息处理终端与云服务器处于连接状态时将该连接状态移交给图像处理装置，从信息处理终端进行图像处理装置的远距离操作，由此可使图像处理装置与云服务器相互协作来执行作业。信息处理终端(3)具备：服务器连接部(30)，基于操作部(16)检测的操作连接到云服务器(4)，从云服务器获取作业的操作画面并显示在显示部(15)上；以及远程画面控制部(31)，在处于通过服务器连接部(30)与云服务器(4)连接的连接状态时，将对云服务器(4)的连接信息发送到图像处理装置(2)，从图像处理装置(2)获取与作业的操作画面对应的远程画面并显示在显示部(15)上，并且随着检测到对该远程画面的操作，对图像处理装置(2)发送操作信息。

Description

图像处理装置以及方法、信息处理终端以及方法

技术领域

本发明涉及一种图像处理装置、信息处理终端、图像处理方法以及信息处理方法，特别是涉及一种用于使用图像处理装置和信息处理终端来利用由云（cloud）服务器提供的云服务的技术。

背景技术

具备打印功能、扫描功能的被称为MFP(Multi-FunctionPeripherals：多功能外围设备)等的图像处理装置一般是连接到网络来使用的。已知在这种图像处理装置中能够经由网络通过远距离操作来对例如显示在操作面板上的操作画面进行编辑的技术(例如专利文献1)。在该现有技术中，通过从图像处理装置对连接到网络的个人计算机(PC)输出Web页等画面信息，在个人计算机中还能够显示该画面信息所包含的内容。

专利文献1：日本特开2009-130493号公报

发明内容

发明要解决的问题

另一方面，近年来平板终端、智能手机等信息处理终端的普及显著。这种信息处理终端具有连接到LAN(Local Area Network：局域网)、WAN(Wide Area Network：广域网)或公共电话网等网络的功能。另外，近年来正在普及经由因特网等提供各种云服务的云服务器。云服务器通过执行各种作业来提供云服务。作为由云服务器执行的作业，例如有保存经由网络接收的数据的作业、将所保存的数据发送到其它所指定的装置的作业、将经由网络接收的数据变换为其它数据格式来输出的作业、将文本数据翻译成其它语言来输出的作业等。因此，用户只要在能够连接到因特网等的环境下，就通过使用信息处理终端连接到云服务器，在任何时候任何地方都能够通过使云服务器执行作业来利用由云服务器提供的云服务。

然而，在用户使用信息处理终端连接到云服务器并利用例如由许多页构成的文本数据的翻译服务等的情况下，有时从对云服务器指示翻译作业的执行之后到完成为止需要长时间(例如几十分钟以上)。在这种情况下，以往，直到由云服务器完成翻译作业为止信息处理终端必须使连接到云服务器的状态持续，信息处理终端的便利性降低。

另外，在云服务器中翻译作业的执行完成之后，在想要将该翻译后的数据印刷输出的情况下，用户需要通过对图像处理装置的操作面板直接进行操作来从图像处理装置重新登录到云服务器，进行从保存在云服务器中的各种数据中指定作为印刷输出的对象的翻译后的数据的操作、下载的操作，存在操作性差的问题。另外，印刷输出时的详细的设定操作必须在下载后另外进行，因此在这一点上操作性也差。

因此，本发明为了解决上述问题，其目的在于提供一种如下图像处理装置、信息处理终端、图像处理方法以及信息处理方法：在信息处理终端与云服务器直接进行通信的连接状态时，将该连接状态移交给图像处理装置，从信息处理终端进行图像处理装置的远距离操作，由此图像处理装置与云服务器能够相互协作来执行作业。

用于解决问题的方案

为了达到上述目的，发明1所涉及的发明是一种图像处理装置，能够与信息处理终端及云服务器进行通信，该图像处理装置的特征在于，具备：通信控制单元，与所述信息处理终端进行通信；服务器连接单元，基于由所述通信控制单元从处于与所述云服务器的连接状态的所述信息处理终端接收的连接信息，连接到所述云服务器，从所述云服务器获取与在所述信息处理终端中显示的作业的操作画面相同的操作画面；远程画面生成单元，基于由所述服务器连接单元从所述云服务器获取的操作画面，生成用于在所述信息处理终端中进行该图像处理装置的远程操作的远程画面，并经由所述通信控制单元发送到所述信息处理终端；以及作业控制单元，在由所述通信控制单元接收的操作信息是对于所述远程画面的作业的执行指示的情况下，与所述云服务器协作来执行作业。

发明2所涉及的发明的特征在于，在发明1所记载的图像处理装置中，所述通信控制单元在检测到能够进行近距离无线通信的所述信息处理终端的情况下、或者在从所述信息处理终端接收到所述远程画面的请求的情况下，与所述信息处理终端进行通信来获取所述连接信息。

发明3所涉及的发明的特征在于，在发明1或2所记载的图像处理装置中，所述远程画面生成单元在由所述通信控制单元接收的操作信息是对于所述作业控制单元的作业的设定操作的情况下，基于反映了该作业的设定操作的作业的详细设定画面生成远程画面，并发送到所述信息处理终端。

发明4所涉及的发明的特征在于，在发明1～3中的任一个所记载的图像处理装置中，随着所述服务器连接单元从所述云服务器获取到与在所述信息处理终端中显示的作业的操作画面相同的操作画面，所述通信控制单元对所述信息处理终端发送切断与所述云服务器的连接状态的指示。

发明5所涉及的发明的特征在于，在发明1～4中的任一个所记载的图像处理装置中，随着所述作业控制单元与所述云服务器协作来开始执行作业，所述通信控制单元切断与所述信息处理终端的通信状态。

发明6所涉及的发明的特征在于，在发明5所记载的图像处理装置中，所述通信控制单元在切断与所述信息处理终端的通信状态之后，随着由所述远程画面生成单元更新所述远程画面，再次建立与所述信息处理终端的通信状态，将由所述远程画面生成单元更新后的所述远程画面发送到所述信息处理终端。

发明7所涉及的发明的特征在于，在发明6所记载的图像处理装置中，在由所述服务器连接单元从所述云服务器新获取的操作画面是请求由所述信息处理终端的用户进行的操作的画面的情况下，所述远程画面生成单元基于该操作画面更新所述远程画面。

发明8所涉及的发明的特征在于，在发明1～7中的任一个所记载的图像处理装置中，还具备工作流程搜索单元，该工作流程搜索单元对登记有与关键词相关联地依次执行多个作业的工作流程的数据库进行搜索，在由所述通信控制单元接收到关键词的情况下，所述工作流程搜索单元搜索所述数据库来提取与该关键词对应的工作流程，随着由所述工作流程搜索单元提取出工作流程，所述远程画面生成单元生成用于显示该工作流程所包含的多个作业的远程画面并发送到所述信息处理终端，在由所述通信控制单元接收的操作信息是在所述远程画面中显示的所述工作流程的执行指示的情况下，所述作业控制单元与所述云服务器协作来依次执行所述工作流程所包含的多个作业。

发明9所涉及的发明是一种信息处理终端，能够与图像处理装置及云服务器进行通信，该信息处理终端的特征在于，具备：显示单元，显示各种信息；操作单元，检测由用户进行的各种操作；服务器连接单元，基于由所述操作单元检测到的操作，连接到所述云服务器，从所述云服务器获取作业的操作画面并显示在所述显示单元上；以及远程画面控制单元，在处于通过所述服务器连接单元与所述云服务器连接的连接状态时，将对于所述云服务器的连接信息发送到所述图像处理装置，从所述图像处理装置获取与所述作业的操作画面对应的远程画面来将显示在所述显示单元上的画面切换为该远程画面，并且随着检测到对于该远程画面的操作，对所述图像处理装置发送操作信息。

发明10所涉及的发明的特征在于，在发明9所记载的信息处理终端中，所述远程画面控制单元在所述服务器连接单元连接到所述云服务器的状态下，当检测到能够进行近距离无线通信的所述图像处理装置时、或所述操作单元检测到由用户进行的远程画面的请求操作时，与所述图像处理装置进行通信来发送所述连接信息。

发明11所涉及的发明的特征在于，在发明9或10所记载的信息处理终端中，所述服务器连接单元基于由所述远程画面控制单元从所述图像处理装置接收的指示，切断与所述云服务器的连接状态。

发明12所涉及的发明的特征在于，在发明9～11中的任一个所记载的信息处理终端中，所述远程画面控制单元在对所述图像处理装置发送操作信息之后，切断与所述图像处理装置的通信状态。

发明13所涉及的发明的特征在于，在发明12所记载的信息处理终端中，所述远程画面控制单元在切断与所述图像处理装置的通信状态之后，基于来自所述图像处理装置的请求再次建立与所述图像处理装置的通信状态，从所述图像处理装置获取更新后的所述远程画面并显示在所述显示单元上。

发明14所涉及的发明的特征在于，在发明9～13中的任一个所记载的信息处理终端中，在所述服务器连接单元从所述云服务器接收到规定的关键词的情况下，所述远程画面控制单元通过将该关键词发送到所述图像处理装置，来向所述图像处理装置询问是否能够执行与该关键词对应地依次执行多个作业的工作流程。

发明15所涉及的发明是一种图像处理方法，在能够与信息处理终端及云服务器进行通信的图像处理装置中执行，该图像处理方法的特征在于，具备：步骤(a)，与所述信息处理终端进行通信；步骤(b)，基于通过所述步骤(a)从处于与所述云服务器的连接状态的所述信息处理终端接收的连接信息，连接到所述云服务器，从所述云服务器获取与在所述信息处理终端中显示的作业的操作画面相同的操作画面；步骤(c)，基于通过所述步骤(b)从所述云服务器获取的操作画面，生成用于在所述信息处理终端中进行所述图像处理装置的远程操作的远程画面，并发送到所述信息处理终端；以及步骤(d)，在通过所述步骤(a)接收的操作信息是对于所述远程画面的作业的执行指示的情况下，与所述云服务器协作来执行作业。

发明16所涉及的发明的特征在于，在发明15所记载的图像处理方法中，在所述步骤(a)中，在检测到能够进行近距离无线通信的所述信息处理终端的情况下、或者在从所述信息处理终端接收到所述远程画面的请求的情况下，与所述信息处理终端进行通信来获取所述连接信息。

发明17所涉及的发明的特征在于，在发明15或16所记载的图像处理方法中，在所述步骤(c)中，在通过所述步骤(a)接收的操作信息是在所述步骤(d)中执行作业时的作业的设定操作的情况下，基于反映了该作业的设定操作的作业的详细设定画面生成远程画面，并发送到所述信息处理终端。

发明18所涉及的发明的特征在于，在发明15～17中的任一个所记载的图像处理方法中，在所述步骤(a)中，随着通过所述步骤(b)从所述云服务器获取到与在所述信息处理终端中显示的作业的操作画面相同的操作画面，对所述信息处理终端发送切断与所述云服务器的连接状态的指示。

发明19所涉及的发明的特征在于，在发明15～18中的任一个所记载的图像处理方法中，在所述步骤(a)中，随着通过所述步骤(d)开始执行与所述云服务器协作的作业，切断与所述信息处理终端的通信状态。

发明20所涉及的发明的特征在于，在发明19所记载的图像处理方法中，在所述步骤(a)中，在切断与所述信息处理终端的通信状态之后，随着通过所述步骤(c)更新所述远程画面，再次建立与所述信息处理终端的通信状态，将通过所述步骤(c)更新后的所述远程画面发送到所述信息处理终端。

发明21所涉及的发明的特征在于，在发明20所记载的图像处理方法中，在所述步骤(c)中，在通过所述步骤(b)从所述云服务器新获取的操作画面是请求由所述信息处理终端的用户进行的操作的画面的情况下，基于该操作画面更新所述远程画面。

发明22所涉及的发明的特征在于，在发明15～21中的任一个所记载的图像处理方法中，还具备步骤(e)，在该步骤(e)中，对登记有与关键词相关联地依次执行多个作业的工作流程的数据库进行搜索，在所述步骤(e)中，在通过所述步骤(a)接收到关键词的情况下，搜索所述数据库来提取与该关键词对应的工作流程，在所述步骤(c)中，随着通过所述步骤(e)提取出工作流程，生成用于显示该工作流程所包含的多个作业的远程画面并发送到所述信息处理终端，在所述步骤(d)中，在通过所述步骤(a)接收的操作信息是在所述远程画面中显示的所述工作流程的执行指示的情况下，与所述云服务器协作来依次执行所述工作流程所包含的多个作业。

发明23所涉及的发明是一种信息处理方法，在能够与图像处理装置及云服务器进行通信的信息处理终端中执行，该信息处理方法的特征在于，具备：步骤(a)，检测由用户进行的各种操作；步骤(b)，基于通过所述步骤(a)检测到的操作，连接到所述云服务器，从所述云服务器获取作业的操作画面并显示在规定的显示单元上；以及步骤(c)，在处于通过所述步骤(b)与所述云服务器连接的连接状态时，将对于所述云服务器的连接信息发送到所述图像处理装置，从所述图像处理装置获取与所述作业的操作画面对应的远程画面，将显示在所述显示单元上的画面切换为该远程画面，并且随着检测到对于该远程画面的操作，对所述图像处理装置发送操作信息。

发明24所涉及的发明的特征在于，在发明23所记载的信息处理方法中，在所述步骤(c)中，在通过所述步骤(b)与所述云服务器连接的状态下，当检测到能够进行近距离无线通信的所述图像处理装置时、或通过所述步骤(a)检测到由用户进行的远程画面的请求操作时，与所述图像处理装置进行通信来发送所述连接信息。

发明25所涉及的发明的特征在于，在发明23或24所记载的信息处理方法中，在所述步骤(b)中，基于通过所述步骤(c)从所述图像处理装置接收的指示，切断与所述云服务器的连接状态。

发明26所涉及的发明的特征在于，在发明23～25中的任一个所记载的信息处理方法中，在所述步骤(c)中，在对所述图像处理装置发送操作信息之后，切断与所述图像处理装置的通信状态。

发明27所涉及的发明的特征在于，在发明26所记载的信息处理方法中，在所述步骤(c)中，在切断与所述图像处理装置的通信状态之后，基于来自所述图像处理装置的请求再次建立与所述图像处理装置的通信状态，从所述图像处理装置获取更新后的所述远程画面并显示在所述显示单元上。

发明28所涉及的发明的特征在于，在发明23～27中的任一个所记载的信息处理方法中，在所述步骤(c)中，在通过所述步骤(b)从所述云服务器接收到规定的关键词的情况下，通过将该关键词发送到所述图像处理装置，来向所述图像处理装置询问是否能够执行与该关键词对应地依次执行多个作业的工作流程。

发明的效果

根据本发明，在信息处理终端与云服务器直接进行通信的连接状态时，能够将该连接状态简单地移交给图像处理装置，并且在将连接状态移交给图像处理装置之后，从信息处理终端进行图像处理装置的远距离操作，由此能够使图像处理装置与云服务器相互协作来执行作业。

附图说明

图1是表示图像处理系统的一个结构例的概念图。

图2是表示信息处理终端的硬件结构和功能结构的一例的图。

图3是表示信息处理终端从云服务器获取并显示的操作画面的一例的图。

图4是表示基于信息处理终端从图像处理装置获取的远程画面显示的操作画面的一例的图。

图5是表示图像处理装置的硬件结构和功能结构的一例的图。

图6是表示图像处理系统中的动作时序的概要的图。

图7是表示信息处理终端的具体的处理过程的一例的流程图。

图8是表示服务器连接移交处理的详细的处理过程的一例的流程图。

图9是表示远程画面处理的详细的处理过程的一例的流程图。

图10是表示图像处理装置的具体的处理过程的一例的流程图。

图11是表示服务器连接处理的详细的处理过程的一例的流程图。

图12是表示远程画面更新处理的详细的处理过程的一例的流程图。

图13是表示第2实施方式中的信息处理终端的硬件结构和功能结构的一例的图。

图14是表示第2实施方式中的图像处理装置的硬件结构和功能结构的一例的图。

图15是表示工作流程登记数据库的数据结构的一例的图。

图16是表示第2实施方式的图像处理系统中的动作时序的概要的图。

图17是表示第2实施方式中的信息处理终端的具体的处理过程的一例的流程图。

图18是表示第2实施方式中的图像处理装置的具体的处理过程的一例的流程图。

（附图标记说明）

1：图像处理系统；2：图像处理装置；3：信息处理终端；4：云服务器；5：网络；15：显示部(显示单元)；16：操作部(操作单元)；30：服务器连接部(服务器连接单元)；31：远程画面控制部(远程画面控制单元)；61：终端控制部；62：通信控制部(通信控制单元)；63：远程画面生成部(远程画面生成单元)；64：服务器连接部(服务器连接单元)；65：作业控制部(作业控制单元)；67：工作流程搜索部(工作流程搜索单元)；68：工作流程搜索数据库。

具体实施方式

下面，参照附图来详细说明与本发明有关的优选实施方式。此外，对下面说明的实施方式中相互共同的构件附加同一符号，并省略对它们的重复说明。

(第1实施方式)

图1是表示本实施方式中的图像处理系统1的一个结构例的概念图。图像处理系统1具备由MFP等构成的图像处理装置2以及用户平时携带使用的信息处理终端3来构成。在该图像处理系统1中，图像处理装置2和信息处理终端3分别能够经由网络5访问提供云服务的云服务器4。网络5是包括LAN、WAN、公共电话网、因特网等的网络。

图像处理装置2除了具备经由网络5进行数据通信的功能以外，还具备复印功能、扫描功能、打印功能以及BOX功能等多个功能，执行由用户指定的各种作业。扫描功能是对设置于图像处理装置2的装置主体上部的扫描仪部6进行驱动来进行原稿的读取动作并生成图像数据的功能。打印功能是对设置于图像处理装置2的装置主体中央部的打印机部7进行驱动来进行印刷输出的功能。复印功能是扫描功能和打印功能连续地动作来进行原稿的复制输出的功能。BOX功能是在后述的存储区域(BOX)中存储各种数据的功能，例如存储利用扫描功能读取的图像数据或存储经由网络5接收的数据。这些扫描功能、打印功能以及BOX功能还能够与经由网络5进行的数据通信功能连动。例如在扫描的情况下，能够利用数据通信功能将读取原稿来生成的图像数据发送到外部。另外，在打印功能的情况下，能够基于利用数据通信功能从外部获取的图像数据进行印刷输出。这种图像处理装置2例如设置于办公室、便利商店等店铺。

另外，图像处理装置2在装置主体的正面侧具备作为用户对图像处理装置2进行操作时的用户接口的操作面板8。图像处理装置2例如基于对该操作面板8进行的用户的指示操作使上述的多个功能中的至少一个功能动作，执行由用户指定的作业。

并且，图像处理装置2具备通过NFC(Near FieldCommunication：近场通信)等在与处于规定距离的范围内的特定设备之间进行近距离无线通信的功能。利用该近距离无线通信功能，图像处理装置2能够在与想要使用图像处理装置2的用户所持的信息处理终端3之间进行1对1的通信。但是，图像处理装置2与信息处理终端3进行的通信不限于近距离无线通信，也可以经由无线LAN等网络5进行。

另一方面，信息处理终端3是例如由平板终端、智能手机等构成的可移动型信息处理终端，是由一个用户占用的装置。该信息处理终端3具有经由网络5与其它机器进行数据通信的功能以及通过NFC等在与处于规定距离的范围内的特定设备之间进行1对1的近距离无线通信的功能这两种基于无线的通信功能。信息处理终端3中能够安装各种应用程序。例如，如果预先在该信息处理终端3中安装了用于利用由云服务器4提供的云服务的服务器连接应用程序，则用户通过启动该应用来在任何时候任何地方都能够使用信息处理终端3来利用由云服务器4提供的云服务。

另外，信息处理终端3通过在与图像处理装置2之间进行例如基于近距离无线通信的通信，作为图像处理装置2的远程面板发挥功能。信息处理终端3在作为远程面板发挥功能时，从图像处理装置2获取显示在图像处理装置2的操作面板8上的显示画面，将该显示画面显示在显示部15上。然后，当用户进行了对于该显示画面的指示操作时，信息处理终端3将该指示操作发送到图像处理装置2。因而，用户无需对图像处理装置2的操作面板8直接进行操作，而能够使用信息处理终端3进行对于图像处理装置2的远距离操作。

此外，信息处理终端3也可以通过经由网络5与图像处理装置2进行通信来作为图像处理装置2的远程面板发挥功能。另外，信息处理终端3不限于平板终端、智能手机等可移动型终端，例如也可以由个人计算机(PC)等构成。

云服务器4是例如设置于因特网上的服务器，经由因特网提供各种云服务。在本实施方式中，作为其一例，例示云服务器4是提供将经由网络5输入的特定语言的文本数据翻译成其它语言的翻译服务的服务器的情况。该云服务器4能够经由网络5与信息处理终端3及图像处理装置2分别进行通信，基于从信息处理终端3和图像处理装置2分别输入的指示执行翻译文本数据的翻译作业。

一般来说，这种云服务器4在因特网上设置有许多个，每个服务器所提供的云服务不同，但是在图1中仅例示了其中1台。此外，作为由其它云服务器4提供的云服务，例如有如下服务等：针对每个登记用户制作账户（account）并对该账户设定专用的数据存储区域，登记用户经由网络5访问该数据存储区域，由此在任何时候任何地方都能够上传（upload）数据或下载数据。

在如上所述那样构成的图像处理系统1中，通常，用户使用自身所持的信息处理终端3建立与云服务器4的连接状态C1，利用由该云服务器4提供的云服务。在用户使用信息处理终端3利用由云服务器4提供的翻译服务时，例如还存在如下情况：成为翻译对象的数据量庞大，直到云服务器4中的翻译作业结束为止需要长时间。为此构成为，信息处理终端3将与云服务器4的连接状态移交给图像处理装置2，使图像处理装置2再现出到此为止对云服务器4进行的操作状态，并且能够使图像处理装置2与云服务器4相互协作来执行此后的处理。即，在信息处理终端3与云服务器4建立了连接状态C1时，信息处理终端3在与图像处理装置2之间进行基于近距离无线通信等的通信C2，由此建立图像处理装置2与云服务器4的连接状态C3，之后通过从信息处理终端3对图像处理装置2适当地进行远距离操作，使图像处理装置2与云服务器4协作来执行作业。下面，详细说明构成这种图像处理系统1的信息处理终端3和图像处理装置2。

首先说明信息处理终端3。图2是表示信息处理终端3的硬件结构和功能结构的一例的图。如图2所示，信息处理终端3具备作为其硬件结构的控制部10、网络接口13、近距离无线通信接口14、显示部15、操作部16以及存储部17。此外，除此以外，在信息处理终端3例如是智能手机等的情况下，设置有用于通话的麦克风、扬声器等。

控制部10具备省略图示的CPU和存储器，通过由CPU执行各种程序来总括控制上述各部分的动作。网络接口13用于控制部10经由网络5进行数据通信。近距离无线通信接口14用于控制部10例如在与图像处理装置2之间进行近距离无线通信。该近距离无线通信接口14例如具有自动检测处于能够进行近距离无线通信的规定距离的范围内的图像处理装置2并将其通知给控制部10的功能。显示部15例如由彩色液晶显示器等构成，对信息处理终端3的用户显示各种信息。操作部16例如由配置于显示部15的显示画面上的能够进行多点触摸（multi touch）操作的触摸面板传感器等构成，受理由信息处理终端3的用户进行的操作输入。存储部17是由固态驱动器(SSD)等构成的非易失性存储单元。该存储部17中作为由控制部10的CPU执行的程序而预先安装有用于利用由云服务器4提供的云服务的服务器连接应用程序21以及用于使信息处理终端3作为图像处理装置2的远程面板发挥功能的远程控制程序22。此外，服务器连接应用程序21也可以是一般的用于浏览Web页等的单纯的浏览器软件。另外，除此之外，存储部17中还存储信息处理终端3的操作系统、各种程序、数据等，但是省略图示它们。

控制部10基于用户的指示操作从存储部17读出服务器连接应用程序21来启动，由此作为服务器连接部30发挥功能。该服务器连接部30基于由操作部16检测的用户的操作经由网络5连接到云服务器4，从云服务器4获取作业的操作画面来显示在显示部15上。另外，服务器连接部30在由操作部16检测到对于从云服务器4获取的操作画面的操作时，将基于该操作的操作信息发送到云服务器4。由此，能够更新从云服务器4获取的操作画面，并且还能够对云服务器4指示作业的执行。

图3是表示通过服务器连接部30显示在信息处理终端3的显示部15上的操作画面M1的一例的图。图3的操作画面M1成为对用户询问是否执行翻译作业的画面。在显示了这种操作画面M1时，用户通过对“是”按钮进行操作来能够对云服务器4指示翻译作业的执行。

另外，随着信息处理终端3被接通电源，控制部10从存储部17读出远程控制程序22来启动，如图2所示那样作为远程画面控制部31发挥功能。远程画面控制部31通过进行与图像处理装置2的通信来与图像处理装置2协作，使信息处理终端3作为图像处理装置2的远程面板发挥功能。该远程画面控制部31常驻在控制部10，监视服务器连接部30是否启动并建立了与云服务器4的连接状态。然后，在处于通过服务器连接部30与云服务器4连接的连接状态时，远程画面控制部31在规定的定时将对于云服务器4的连接信息发送到图像处理装置2来使图像处理装置2连接到云服务器4，使图像处理装置2获取与由服务器连接部30从云服务器4获取到的操作画面相同的操作画面。

在服务器连接部30与云服务器4连接的状态下由远程画面控制部31发送与云服务器4的连接信息的定时例如是近距离无线通信接口14检测到能够进行近距离无线通信的图像处理装置2的定时、或操作部16检测到由用户进行的远程画面的请求操作的定时。因而，在信息处理终端3使服务器连接部30启动来将从云服务器4提供的操作画面显示在显示部15上的状态下，当用户使该信息处理终端3接近图像处理装置2时，连接信息被发送到图像处理装置2。另外，用户即使不进行使信息处理终端3接近图像处理装置2的操作，例如当通过对信息处理终端3进行操作来对图像处理装置2请求了远程画面时，连接信息也经由网络5被发送到图像处理装置2。因而，在本实施方式中，使信息处理终端3接近图像处理装置2的操作、以及通过对信息处理终端3进行操作来进行的请求远程画面的操作成为用于使图像处理装置2与云服务器4相互协作动作的协作指示操作。

另外，从远程画面控制部31向图像处理装置2发送的连接信息中包含服务器连接部30所连接的云服务器4的地址(URL)，并且包含启动服务器连接部30之后到此为止用户所输入的所有信息。例如在用户为了登录（login）云服务器4而输入了用户ID、密码等识别信息的情况下，该识别信息包含在连接信息中。另外，在用户登录到云服务器4之后到显示当前的操作画面为止进行了各种操作的情况下，与这些操作有关的履历信息包含在连接信息中。因而，远程画面控制部31通过发送连接信息，能够使图像处理装置2再现与服务器连接部30访问云服务器4的状态相同的访问状态。

之后，远程画面控制部31当从图像处理装置2获取到对应于与服务器连接部30从云服务器4获取的操作画面相同的操作画面的远程画面时，将该远程画面显示在显示部15上。由此，显示在显示部15上的显示画面被切换为通过图像处理装置2从云服务器4获取的操作画面。然后，在画面切换之后，当由操作部16检测到对于从图像处理装置2获取的操作画面的操作时，远程画面控制部31将基于该操作的操作信息发送到图像处理装置2。由此，能够更新从图像处理装置2获取的操作画面，并且还能够对图像处理装置2指示作业的执行。

图4是表示通过远程画面控制部31显示在信息处理终端3的显示部15上的操作画面M2的一例的图。图4的操作画面M2成为对用户询问是否执行翻译作业的画面。即，远程画面控制部31通过如上所述那样发送操作信息来使图像处理装置2从云服务器4获取与服务器连接部30所获取的操作画面相同的操作画面。因此，远程画面控制部31基于从图像处理装置2获取的远程画面显示在显示部15上的操作画面M2成为与服务器连接部30从云服务器4获取的操作画面M1(参照图3)大致相同的画面。在显示了这种操作画面M2时，如果由用户对“是”按钮进行了操作，则远程画面控制部31将操作信息发送到图像处理装置2，图像处理装置2向云服务器4指示翻译作业的执行。

接着说明图像处理装置2。图5是表示图像处理装置2的硬件结构和功能结构的一例的图。如图5所示，图像处理装置2中，作为其硬件结构，除了上述的扫描仪部6、打印机部7以及操作面板8以外，还具备控制部50、近距离无线通信接口51、网络接口52以及存储部53。

控制部50具备未图示的CPU、存储器，通过由CPU执行规定的程序来总括控制各部分的动作。近距离无线通信接口51用于控制部50在与信息处理终端3之间进行近距离无线通信。该近距离无线通信接口51例如具有自动检测处于能够进行近距离无线通信的规定距离的范围内的信息处理终端3并将其通知给控制部10的功能。网络接口52用于控制部50经由网络5进行数据通信。存储部53是由硬盘驱动器(HDD)或固态驱动器(SSD)等构成的非易失性存储单元。该存储部53中设置有各种BOX66，该各种BOX66是用于保存扫描仪部6读取原稿来生成的图像数据、经由网络接口52接收到的数据等的存储区域。另外，除此以外，存储部53中还预先保存由控制部50的CPU执行的程序等。

控制部50通过由CPU执行规定的程序，作为终端控制部61、服务器连接部64以及作业控制部65发挥功能。

终端控制部61是与信息处理终端3的远程画面控制部31进行通信并使信息处理终端3的显示部15显示远程画面的处理部。该终端控制部61具备：例如经由近距离无线通信接口51进行与信息处理终端3的通信的通信控制部62；以及生成用于使信息处理终端3显示的远程画面来经由通信控制部62发送到信息处理终端3的远程画面生成部63。

服务器连接部64经由网络接口52与云服务器4进行连接。在通信控制部62从处于与云服务器4的连接状态的信息处理终端3接收到连接信息的情况下，该服务器连接部64基于该连接信息连接到云服务器4，建立与信息处理终端3的访问状态相同的访问状态。而且，从云服务器4获取与在信息处理终端3中显示的作业的操作画面相同的操作画面，将该操作画面输出到远程画面生成部63。

作业控制部65通过控制扫描仪部6、打印机部7以及存储部53来控制在图像处理装置2中执行的作业。该作业控制部65能够与服务器连接部64进行协作动作，例如当服务器连接部64从云服务器4接收到已翻译的数据时，能够将该已翻译的数据保存到BOX66中，或者通过输出到打印机部7来能够进行印刷输出。另外，通过将由扫描仪部6读取原稿所得的数据作为翻译对象输出到服务器连接部64，还能够上传到云服务器4。

当服务器连接部64从云服务器4获取到操作画面时，远程画面生成部63通过将该操作画面例如变换为位图图像等来生成远程画面，将该远程画面发送到信息处理终端3。之后，在通过通信控制部62接收到对于远程画面的操作信息的情况下，远程画面生成部63执行基于该操作信息的处理。例如在该操作信息是对于云服务器4的操作信息的情况下，将该操作信息输出到服务器连接部64。由此，对于远程画面的操作信息被发送到云服务器4。

另外，在操作信息是对于作业控制部65的作业的设定操作(例如印刷输出时的印刷设定、原稿读取时的读取设定等)的情况下，远程画面生成部63例如从操作面板8获取反映了该作业的设定操作的作业详细设定画面，基于该作业详细设定画面生成远程画面。远程画面生成部63通过将该远程画面发送到信息处理终端3，使用户确认反映了作业的设定操作的作业详细设定画面。

另外，远程画面生成部63在通过服务器连接部64从云服务器4获取到第2次以后的新的操作画面的情况下，判别该操作画面是否为请求由信息处理终端3的用户进行的操作的画面，如果是请求由用户进行的操作的画面，则基于该操作画面更新远程画面。但是，在从云服务器4新获取的操作画面是例如只是表示翻译作业的执行状况的单纯的确认画面而不是请求由用户进行的操作的画面的情况下，不生成基于该操作画面的远程画面。在该情况下，远程画面不被发送到信息处理终端3，在信息处理终端3中显示的远程画面也不被更新。因此，使用信息处理终端3的用户不需要每次确认不需要操作的画面，无需介意作业的进展等而能够完成业务。

如上所述，当图像处理装置2基于从信息处理终端3输入的连接信息来与信息处理终端3所连接的云服务器4建立了相同的连接状态时，信息处理终端3无需使与云服务器4直接连接的状态持续。因此，随着服务器连接部64从云服务器4获取与在信息处理终端3中显示的作业的操作画面相同的操作画面，通信控制部62对信息处理终端3发送切断与云服务器4的连接状态的指示。由此，信息处理终端3的服务器连接部30切断与云服务器4的连接状态。而且此后，信息处理终端3使图像处理装置2与云服务器4协作来执行作业。

图6是表示本实施方式的图像处理系统1中的动作时序（sequence）的概要的图。如图6所示，首先，信息处理终端3与云服务器4成为连接状态(工序（process）P1)。在该状态下，当用户进行了对于信息处理终端3的操作时，与该操作对应的操作信息被发送到云服务器4(工序P2)，从云服务器4向信息处理终端3发送操作画面(工序P3)。之后，当用户进行了协作指示操作时(工序P4)，从信息处理终端3向图像处理装置2发送连接信息(工序P5)。图像处理装置2基于该连接信息在与云服务器4之间建立连接状态(工序P6)。此时建立的连接状态是与信息处理终端3在与云服务器4之间建立的连接状态相同的状态。在建立了该连接状态时，图像处理装置2从云服务器4获取与在信息处理终端3中显示的操作画面相同的操作画面(工序P7)，生成远程画面并发送到信息处理终端3(工序P8)。由此，信息处理终端3中显示的画面被切换为远程画面。然后，信息处理终端3按照从图像处理装置2接收的切断指示，切断与云服务器4的连接状态(工序P9)。之后，当用户进行了对于远程画面的操作时，与该操作对应的操作信息被发送到图像处理装置2(工序P10)。如果此处发送的操作信息是对云服务器4指示翻译作业的执行的信息，则该操作信息从图像处理装置2被发送到云服务器4，图像处理装置2与云服务器4相互协作来开始执行作业(工序P11)。在开始执行作业之后，即使假设用户将信息处理终端3带入无法连接到云服务器4的电波环境下，图像处理装置2与云服务器4也相互协作来继续执行作业。因此，用户在指示作业的执行之后无需等到该作业的执行完成，还能够携带信息处理终端3来外出。

另外，在该动作时序中，在信息处理终端3与图像处理装置2的通信开始之后，也可以不使该通信状态持续，而是每次如工序P5、P8、P10所示那样在信息处理终端3与图像处理装置2之间进行通信的定时建立通信状态。

接着，说明为了实现如上所述的动作时序而由信息处理终端3和图像处理装置2分别进行的具体处理过程。

首先，图7至图9是表示信息处理终端3的具体处理过程的一例的流程图。该处理是主要由信息处理终端3的远程画面控制部31进行的处理。当远程画面控制部31开始了该处理时，在控制部10中服务器连接部30启动，直到进行向云服务器4的登录为止进行待机(步骤S10)。在通过服务器连接部30进行了向云服务器4的登录时(步骤S10中“是”)，远程画面控制部31判断是否检测到能够进行近距离无线通信的图像处理装置2(步骤S11)。在此，在检测到能够进行近距离无线通信的图像处理装置2的情况下(步骤S11中“是”)，进入步骤S15。另外，在没有检测到能够进行近距离无线通信的图像处理装置2的情况下(步骤S11中“否”)，远程画面控制部31进一步判断是否进行了由用户进行的远程画面的请求操作(步骤S12)，如果没有进行远程画面的请求操作，则返回到步骤S11。在进行了远程画面的请求操作的情况下(步骤S12中“是”)，远程画面控制部31搜索能够通信的图像处理装置2(步骤S13)。在此，例如搜索在能够经由近距离无线通信接口14进行通信的范围内是否存在图像处理装置2，并且搜索是否存在能够经由网络接口13进行通信的图像处理装置2。其结果，如果提取出能够通信的图像处理装置2(步骤S14中“是”)，则进入步骤S15，如果未提取出(步骤S14中“否”)，则返回到步骤S11。此外，如果用户没有从办公室外出，则会搜索出连接到网络5的图像处理装置2，因此在步骤S14中大致成为“是”。

在步骤S11或S14中未被判断为“是”时，反复执行上述步骤S11～S14的处理。在此期间，服务器连接部30继续进行如下处理：基于由用户进行的操作将操作信息发送到云服务器4，并且接收从云服务器4发送的操作画面并显示在显示部15上。

当进入了步骤S15时，远程画面控制部31执行服务器连接移交处理。该服务器连接移交处理(步骤S15)是将与云服务器4的连接状态移交给图像处理装置2的处理。图8是表示该服务器连接移交处理(步骤S15)的详细处理过程的一例的流程图。远程画面控制部31在开始了该处理时，首先对图像处理装置2请求远程画面，由此开始与图像处理装置2的通信(步骤S20)。然后，当建立了与图像处理装置2的通信状态时(步骤S21中“是”)，远程画面控制部31从服务器连接部30获取连接信息(步骤S22)，将该连接信息发送到图像处理装置2(步骤S23)。之后，远程画面控制部31进行待机直到从图像处理装置2获取到远程画面为止(步骤S24)，当获取到远程画面时(步骤S24中“是”)，将该远程画面显示在显示部15上。由此，显示在显示部15上的画面从由服务器连接部30从云服务器4获取的操作画面被切换为由远程画面控制部31从图像处理装置2获取的远程画面的操作画面(步骤S25)。

远程画面控制部31在将显示画面切换为远程画面之后，判断是否从图像处理装置2接收到切断与云服务器4的连接的指示(步骤S26)，如果接收到切断指示(步骤S26中“是”)，则向服务器连接部30送出指令，切断与云服务器4的连接(步骤S27)。此时，也可以结束服务器连接部30的启动。由此，能够防止在信息处理终端3与云服务器4之间产生无用的通信量。特别是在信息处理终端3为平板终端、智能手机等可移动型信息处理终端的情况下，由于此后不需要在与云服务器4之间进行无用的通信，因此还能够谋求降低消耗电力。

进一步地，远程画面控制部31判断是否暂时切断与图像处理装置2的通信状态(步骤S28)。该判断是基于例如在与图像处理装置2的通信开始时等由用户预先选择的设定状态进行判断。即，如果用户选择了每次在需要图像处理装置2与信息处理终端3的通信的定时建立通信状态、且切断的设定，则成为“是”。其结果，在切断通信状态的情况下(步骤S28中“是”)，切断与图像处理装置2的通信状态(步骤S29)。由此，直到在信息处理终端3与图像处理装置2之间产生下一次的通信为止，通信状态暂时被切断。通过以上内容，服务器连接移交处理(步骤S15)结束。

返回到图7，接着远程画面控制部31执行远程画面处理(步骤S16)。该远程画面处理(步骤S16)是在检测到对于远程画面的用户的操作的情况下将该操作信息发送到图像处理装置2、或者在从图像处理装置2接收到新更新的远程画面的情况下显示该远程画面的处理。图9是表示该远程画面处理(步骤S16)的详细处理过程的一例的流程图。远程画面控制部31在开始了该处理时判断是否检测到对于远程画面的用户的操作(步骤S30)。在没有检测到用户的操作的情况下(步骤S30中“否”)，进入步骤S36。与此相对，在检测到用户的操作的情况下(步骤S30中“是”)，远程画面控制部31判断与图像处理装置2的通信状态是否处于被切断的状态(步骤S31)，如果处于被切断的状态，则通过对图像处理装置2发送通信请求来再次建立与图像处理装置2的通信状态(步骤S32)。然后，将基于用户的操作的操作信息发送到图像处理装置2(步骤S33)。例如在由用户进行的操作是对于云服务器4的作业的执行指示操作的情况下，此时发送的操作信息从图像处理装置2被进一步发送到云服务器4，由此在云服务器4中开始执行作业。在该情况下，云服务器4一边向图像处理装置2通知作业的进展状况等，一边与图像处理装置2协作来执行作业。而且，在远程画面控制部31发送了操作信息之后，远程画面控制部31与上述的步骤S28同样地判断是否暂时切断与图像处理装置2的通信状态(步骤S34)。然后，在切断通信状态的情况下(步骤S34中“是”)，切断与图像处理装置2的通信状态(步骤S35)。

接着，远程画面控制部31判断是否从图像处理装置2接收到通信请求(步骤S36)，如果接收到通信请求，则再次建立与图像处理装置2的通信状态(步骤S37)。接着，远程画面控制部31判断是否从图像处理装置2获取到新的远程画面(步骤S38)，在获取到新的远程画面的情况下(步骤S38中“是”)，基于该远程画面更新显示部15的显示画面(步骤S39)。之后，远程画面控制部31与上述同样地判断是否暂时切断与图像处理装置2的通信状态(步骤S40)，在切断的情况下(步骤S40中“是”)，切断与图像处理装置2的通信状态(步骤S41)。通过以上内容，远程画面处理(步骤S16)结束。

返回到图7，直到图像处理装置2与云服务器4协作来执行的作业结束为止，远程画面控制部31反复执行(步骤S17)远程画面处理(步骤S16)。然后，如果作业的执行结束(步骤S17中“是”)，则远程画面控制部31结束远程画面的显示，并且进行对于图像处理装置2的服务器连接移交结束处理(步骤S18)，结束所有处理。

接着，图10至图12是表示图像处理装置2的具体处理过程的一例的流程图。该处理是主要由图像处理装置2的终端控制部61(通信控制部62和远程画面生成部63)进行的处理。终端控制部61在开始了该处理时，判断是否检测到能够进行近距离无线通信的信息处理终端3(步骤S50)。在此，在检测到能够进行近距离无线通信的信息处理终端3的情况下(步骤S50中“是”)，进入步骤S52。另外，在没有检测到能够进行近距离无线通信的信息处理终端3的情况下(步骤S50中“否”)，终端控制部61进一步判断是否从信息处理终端3接收到远程画面的请求(步骤S51)，如果没有接收到远程画面的请求，则返回到步骤S50。与此相对，如果接收到远程画面的请求(步骤S51中“是”)，则进入步骤S52。

当进入了步骤S52时，终端控制部61开始与信息处理终端3的通信(步骤S52)，执行服务器连接处理(步骤S53)。服务器连接处理(步骤S53)是基于从信息处理终端3接收的连接信息连接到云服务器4、并获取与信息处理终端3从云服务器4获取到的操作画面相同的操作画面的处理。

图11是表示该服务器连接处理(步骤S53)的详细处理过程的一例的流程图。终端控制部61在开始了该处理时，首先，进行待机直到从信息处理终端3接收到连接信息为止(步骤S60)。然后，当接收到连接信息时(步骤S60中“是”)，终端控制部61进行服务器连接处理(步骤S61)。在该服务器连接处理中，将从信息处理终端3接收到的连接信息输出到服务器连接部64来委托向云服务器4的连接。由此，服务器连接部64基于连接信息连接到由信息处理终端3所连接的云服务器4，再现与信息处理终端3的连接状态相同的连接状态。终端控制部61进行待机直到通过服务器连接部64再现与信息处理终端3的连接状态相同的连接状态为止(步骤S62)。然后，当再现了相同的连接状态时(步骤S62中“是”)，终端控制部61基于服务器连接部64从云服务器4获取到的操作画面生成远程画面(步骤S63)，将该远程画面发送到信息处理终端3(步骤S64)。

接着，终端控制部61对信息处理终端3发送与云服务器4的连接切断指示(步骤S65)。由此，信息处理终端3切断与云服务器4的连接状态。然后，终端控制部61判断是否暂时切断与信息处理终端3的通信状态(步骤S66)。该判断是基于例如在与图像处理装置2的通信开始时等由信息处理终端3的用户预先选择的设定状态进行判断。即，预先获取与信息处理终端3的用户所选择的设定状态有关的信息，基于该信息进行判断。其结果，在切断通信状态的情况下(步骤S66中“是”)，切断与图像处理装置2的通信状态(步骤S67)。由此，直到在信息处理终端3与图像处理装置2之间产生下一次的通信为止，通信状态暂时被切断。通过以上内容，服务器连接处理(步骤S53)结束。

返回到图10，接着终端控制部61执行远程画面更新处理(步骤S54)。该远程画面更新处理(步骤S54)是更新向信息处理终端3发送的远程画面的处理。图12是表示该远程画面更新处理(步骤S54)的详细处理过程的一例的流程图。终端控制部61在开始了该处理时，判断是否从信息处理终端3接收到通信请求(步骤S70)。在接收到通信请求的情况下(步骤S70中“是”)，终端控制部61再次建立与信息处理终端3的通信状态(步骤S71)。

接着，终端控制部61判断是否从信息处理终端3接收到操作信息(步骤S72)。在没有接收到操作信息的情况下(步骤S72中“否”)，进入步骤S79。另外，在接收到操作信息的情况下(步骤S72中“是”)，终端控制部61判断该操作信息是否为对于云服务器4的操作(步骤S73)。然后，在是对于云服务器4的操作的情况下(步骤S73中“是”)，终端控制部61将该操作信息发送到云服务器4(步骤S74)。例如在由用户进行的操作是对于云服务器4的作业的执行指示操作的情况下，通过将该操作信息发送到云服务器4来在云服务器4中开始执行作业。在该情况下，云服务器4一边与图像处理装置2协作一边执行作业。

与此相对，在不是对于云服务器4的操作的情况下(步骤S73中“否”)，终端控制部61判断是否为对于作业控制部65的作业的设定操作(步骤S75)。其结果，在是对于作业控制部65的作业的设定操作的情况下(步骤S75中“是”)，终端控制部61获取反映了该设定操作的作业的详细设定画面(步骤S76)，基于该画面生成远程画面(步骤S77)。在此生成的远程画面包含能够对图像处理装置2的扫描仪部6、打印机部7等进行设定的所有详细的设定项目，成为与显示在操作面板8上的操作画面等同的画面。

进而，在也不是对于作业控制部65的作业的设定操作的情况下(步骤S75中“否”)，终端控制部61执行与该操作相应的处理(步骤S78)。例如在信息处理终端3的用户指示了执行用于读取在云服务器4中成为翻译作业的执行对象的原稿的扫描作业的情况下，终端控制部61基于该操作向作业控制部65委托扫描作业的执行。之后，作业控制部65将由扫描仪部6生成的图像数据经由服务器连接部64发送到云服务器4，由此在云服务器4中开始翻译作业。

接着，终端控制部61判断服务器连接部64是否从云服务器4获取到新的操作画面(步骤S79)。然后，在获取到新的操作画面的情况下(步骤S79中“是”)，终端控制部61判定该操作画面是否为需要由用户进行的操作的画面(步骤S80)，如果是需要由用户进行的操作的画面，则基于该新的操作画面生成远程画面(步骤S81)。此外，如果是不需要由用户进行的操作的画面，则不生成基于该操作画面的远程画面。

接着，终端控制部61判断在步骤S77或S81中是否生成了应发送到信息处理终端3的远程画面(步骤S82)。在生成了远程画面的情况下(步骤S82中“是”)，终端控制部61判断与信息处理终端3的通信状态是否处于被切断的状态(步骤S83)，如果处于被切断的状态则再次建立与图像处理装置2的通信状态。然后，将在步骤S77或S81中生成的远程画面发送到信息处理终端3(步骤S85)。此外，在没有生成远程画面的情况下，不进行步骤S83～S85的处理。之后，终端控制部61与上述步骤S66同样地判断是否暂时切断与信息处理终端3的通信状态(步骤S86)，在切断通信状态的情况下(步骤S86中“是”)，切断与图像处理装置2的通信状态(步骤S87)。通过以上内容，远程画面更新处理(步骤S54)结束。

返回到图10，接着终端控制部61反复执行远程画面更新处理(步骤S54)，直到图像处理装置2与云服务器4协作来执行的作业结束为止(步骤S55)。然后，如果作业的执行结束(步骤S17中“是”)，则终端控制部61进行用于切断与云服务器4的连接的连接结束处理(步骤S56)，结束所有处理。

本实施方式的图像处理系统1在信息处理终端3和图像处理装置2中分别进行如上所述的处理，由此在信息处理终端3与云服务器4直接进行通信的连接状态时，将该连接状态移交给图像处理装置2来能够转变为图像处理装置2与云服务器4直接进行通信的状态。此时，从信息处理终端3对图像处理装置2自动发送为了登录到云服务器4所需的连接信息，因此用户无需再次通过手动操作来输入在将信息处理终端3连接到云服务器4时输入的用户ID、密码等识别信息，因此便利性良好。

而且，在将与云服务器4的连接状态移交给图像处理装置2之后，用户进行对于显示在信息处理终端3上的远程画面的操作，由此能够使图像处理装置2与云服务器4相互协作来执行作业。此时，例如在用户想要使云服务器4自动翻译由扫描仪部6读取的原稿的情况下，或者想要通过打印机部7印刷输出由云服务器4自动翻译的数据的情况下，能够对与通常显示在图像处理装置2的操作面板8上的操作画面等同的远程画面进行作业的详细设定操作，因此无需直接操作操作面板8，而能够通过远距离操作使期望的详细的设定反映到图像处理装置2。例如在想要通过打印机部7印刷输出由云服务器4自动翻译的数据的情况下，还能够将该印刷预览画面等作为远程画面进行确认。

另外，在信息处理终端3中，不显示不需要由用户进行的操作的远程画面，因此对于用户来说使用方便。但是，图像处理装置2在一边与云服务器4协作一边执行的作业完成时，也可以生成用于向用户通知作业的执行完成的远程画面并发送到信息处理终端3。

然后，在通过图像处理装置2与云服务器4相互协作来开始执行作业之后，即使假设用户在携带信息处理终端3的状态下移动到无法与云服务器4直接通信的环境下的情况下，该作业也不被中断，正常地完成执行。因此，即使直到完成作业的执行为止需要长时间的情况下，用户也不用介意它，能够自由地移动。

如上所述，根据本实施方式的图像处理系统1，在用户对信息处理终端3进行操作来连接到云服务器4并想要与云服务器4进行通信来执行作业时的操作性显著提高。

(第2实施方式)

接着说明本发明的第2实施方式。本实施方式中的图像处理装置2构成为基于定义了以预先确定的顺序执行多个作业的工作流程（workflow），能够连续且自动地执行这些多个作业。而且，例示如下方式：在用户将信息处理终端3连接到云服务器4的状态下例如从云服务器4下载特定的文件时，向用户提示适于该文件的处理的工作流程，在用户指示了执行该提示的工作流程的情况下，图像处理装置2与云服务器4能够一边相互协作一边进行基于工作流程的作业的执行。此外，在本实施方式中，图像处理系统1的整体结构也与第1实施方式相同。下面，说明本实施方式的图像处理系统1与上述的第1实施方式的不同之处。

图13是表示本实施方式中的信息处理终端3的硬件结构和功能结构的一例的图。图13所示的信息处理终端3与图2所示的信息处理终端的不同点在于，在存储部17中预先存储有关键词登记信息23。该关键词登记信息23是至少登记了一个与能够在图像处理装置2中执行的工作流程对应的关键词的信息。例如在图像处理装置2能够执行适于机密文档的处理的工作流程的情况下，在关键词登记信息23中登记“机密”这样的关键词。

而且，本实施方式的信息处理终端3在处于通过服务器连接部30连接到云服务器4的状态时，当该服务器连接部30从云服务器4接收到操作画面、其它信息时，远程画面控制部31分析该操作画面、接收信息。而且，在操作画面、接收信息中包含关键词登记信息23的登记关键词的情况下，远程画面控制部31通过将该关键词发送到图像处理装置2来对图像处理装置2询问是否能够执行与该关键词对应地依次执行多个作业的工作流程。然后，当从图像处理装置2作为远程画面获取到对于询问的结果时，远程画面控制部31将该远程画面显示在显示部15上。

图14是表示本实施方式中的图像处理装置2的硬件结构和功能结构的一例的图。图14所示的图像处理装置2与图5所示的图像处理装置的不同点在于，在存储部53中存储有工作流程登记数据库68、以及在终端控制部61中工作流程搜索部67还发挥功能这两点。

图15是表示工作流程登记数据库68的数据结构的一例的图。在工作流程登记数据库68中如图15所示那样登记有多个工作流程数据68a、68b、68c、68d。这些工作流程数据68a、68b、68c、68d是定义各个工作流程的数据，成为关键词与在该工作流程中依次执行的多个作业相互关联而成的数据。例如，工作流程数据68a是与关键词“机密”对应的工作流程，作为在该工作流程中依次执行的多个作业，登记有四个作业。也就是说，在与关键词“机密”对应的工作流程中，第一个中定义了对该文件所包含的所有页附加例如“Confidential”等水印的作业，第二个中定义了对该文件中设定的密码进行设定变更为规定的安全级别以上的密码的作业。并且，第三个中定义了将该文件保存到机密文件用的BOX66的作业，第四个中定义了例如通过电子邮件等向用户通知该保存BOX66和设定变更后的新密码的作业。因而，当在图像处理装置2中执行与关键词“机密”对应的工作流程时，依次执行这些作业。

工作流程搜索部67在从信息处理终端3接收到关键词时，通过对工作流程登记数据库68进行搜索来提取与所接收到的关键词对应的工作流程。然后，当通过工作流程搜索部67提取了工作流程时，远程画面生成部63生成用于显示该工作流程所包含的多个作业的远程画面并发送到信息处理终端3。该远程画面在信息处理终端3中被显示。因此，信息处理终端3的用户即使在不知道想要从云服务器4下载的文件是机密文件的情况下，也能够掌握该文件是机密文件这一情况，并且能够掌握存在应该对该文件执行的工作流程这一情况。而且，当用户对显示在信息处理终端3上的远程画面指定工作流程来进行作业的协作指示操作时，与第1实施方式同样地图像处理装置2与云服务器4协作来执行作业，在图像处理装置2中执行基于由用户指定的工作流程的处理。

此外，工作流程并不限定于仅由图像处理装置2中执行的作业构成，也可以是包括由云服务器4执行的作业的工作流程。在该情况下，当图像处理装置2与云服务器4协作来开始执行作业时，在图像处理装置2和云服务器4中分别执行基于由用户指定的工作流程的处理。

图16是表示本实施方式的图像处理系统1中的动作时序的概要的图。如图16所示，首先，信息处理终端3与云服务器4成为连接状态(工序P20)。在该状态下，当用户进行对于信息处理终端3的操作时，与该操作对应的操作信息被发送到云服务器4(工序P21)，从云服务器4向信息处理终端3发送操作画面(工序P22)。该操作画面中包含各种信息，还有时包含如上所述的关键词。信息处理终端3在从云服务器4获取到操作画面时，分析该操作画面。

然后，当检测到与关键词登记信息23的登记关键词一致的关键词时(工序P23)，信息处理终端3附上该关键词来对图像处理装置2发送工作流程的搜索委托(工序P24)。图像处理装置2基于该搜索委托搜索工作流程登记数据库68，提取与关键词对应的工作流程(工序P25)。在该工序P25中，还有时提取与关键词对应的多个工作流程。另外，还有时未能提取出与关键词对应的工作流程。然后，图像处理装置2在提取出与关键词对应的工作流程的情况下，将该搜索结果作为远程画面发送到信息处理终端3(工序P26)。

信息处理终端3在获取到作为图像处理装置2中的搜索结果的远程画面时，将其进行显示。然后，当由用户指定一个工作流程来进行了作业的协作指示操作时(工序P27)，信息处理终端3对图像处理装置2发送用于连接到云服务器4的连接信息(工序P28)。图像处理装置2基于该连接信息在与云服务器4之间建立连接状态(工序P29)。此时建立的连接状态是与信息处理终端3在与云服务器4之间建立的连接状态相同的状态。当建立了该连接状态时，图像处理装置2从云服务器4获取与信息处理终端3中显示的操作画面相同的操作画面(工序P30)，生成远程画面并发送到信息处理终端3(工序P31)。该远程画面在信息处理终端3中被显示。然后，信息处理终端3按照从图像处理装置2接收的切断指示，切断与云服务器4的连接状态(工序P32)。之后，当用户进行了对于远程画面的操作时，与该操作对应的操作信息被发送到图像处理装置2(工序P33)。如果此处发送的操作信息是对图像处理装置2或云服务器4指示基于工作流程的作业的执行开始的信息，则基于该操作信息而图像处理装置2与云服务器4相互协作来开始执行作业(工序P11)。

接着，说明在本实施方式中由信息处理终端3和图像处理装置2分别进行的具体处理过程。

图17是表示第2实施方式中的信息处理终端3的具体处理过程的一例的流程图。该处理是主要由信息处理终端3的远程画面控制部31进行的处理。远程画面控制部31在开始了该处理时，在控制部10中服务器连接部30启动，直到进行向云服务器4的登录为止进行待机(步骤S110)。当通过服务器连接部30进行了向云服务器4的登录时(步骤S110中“是”)，远程画面控制部31判断是否检测到能够进行近距离无线通信的图像处理装置2(步骤S111)。在此，在检测到能够进行近距离无线通信的图像处理装置2的情况下(步骤S111中“是”)，进入步骤S119。

另外，在没有检测到能够进行近距离无线通信的图像处理装置2的情况下(步骤S111中“否”)，远程画面控制部31判断服务器连接部30从云服务器4获取的操作画面等中是否包含与关键词登记信息23的登记关键词一致的关键词(步骤S112)。在没有接收到与登记关键词一致的关键词的情况下(步骤S112中“否”)，返回到步骤S111。

与此相对，在接收到与登记关键词一致的关键词的情况下(步骤S112中“是”)，远程画面控制部31搜索能够通信的图像处理装置2(步骤S113)。在此，例如搜索在能够经由近距离无线通信接口14进行通信的范围内是否存在图像处理装置2，并且搜索是否存在能够经由网络接口13进行通信的图像处理装置2。其结果，在提取出能够通信的图像处理装置2的情况下(步骤S114中“是”)，远程画面控制部31对该图像处理装置2发送与关键词对应的工作流程的搜索委托(步骤S115)。之后，远程画面控制部31在从图像处理装置2获取到搜索结果的远程画面时(步骤S116中“是”)，将该远程画面显示在显示部15上。然后，当由用户指定一个工作流程并进行了协作指示操作时(步骤S118中“是”)，进入步骤S119。此外，在没有提取出能够通信的图像处理装置2的情况(步骤S114中“否”)、在发送工作流程的搜索委托之后没有从图像处理装置2接收到远程画面的情况(步骤S116中“否”)、以及未进行由用户进行的协作指示操作的情况下(步骤S118中“否”)，返回到步骤S111。

当进入到步骤S119时，之后进行与第1实施方式相同的处理。即，步骤S119～S122与图7所示的步骤S15～S18相同。因而，在用户指定一个工作流程并进行了协作指示操作的情况下，之后将信息处理终端3与云服务器4的连接状态移交给图像处理装置2，使图像处理装置2与云服务器4一边相互协作一边依次执行由用户指定的工作流程所包含的多个作业。

接着，图18是表示第2实施方式中的图像处理装置2的具体处理过程的一例的流程图。该处理是主要由图像处理装置2的终端控制部61(通信控制部62和远程画面生成部63)进行的处理。终端控制部61在开始了该处理时，判断是否检测到能够进行近距离无线通信的信息处理终端3(步骤S130)。在此，在检测到能够进行近距离无线通信的信息处理终端3的情况下(步骤S130中“是”)，进入步骤S136。另外，在没有检测到能够进行近距离无线通信的信息处理终端3的情况下(步骤S130中“否”)，终端控制部61进一步判断是否从信息处理终端3接收到工作流程的搜索委托(步骤S131)，如果没有接收到搜索委托则返回到步骤S130。

与此相对，在接收到工作流程的搜索委托的情况下(步骤S131中“是”)，终端控制部61基于附在该搜索委托中的关键词搜索工作流程登记数据库68(步骤S132)。然后，当提取出了与关键词对应的工作流程时，终端控制部61生成表示该搜索结果的远程画面(步骤S133)，将远程画面发送到信息处理终端3(步骤S134)。之后，当从信息处理终端3接收到指定了一个工作流程的协作指示操作信息时(步骤S135中“是”)，进入步骤S136。此外，在没有接收到协作指示操作信息的情况下，返回到步骤S130。

当进入到步骤S136时，之后进行与第1实施方式相同的处理。即，步骤S136～S140与图10所示的步骤S52～S56相同。因而，在用户指定一个工作流程并进行了协作指示操作的情况下，之后，由图像处理装置2接替信息处理终端3与云服务器4的连接状态，一边与云服务器4协作一边依次执行由用户指定的工作流程所包含的多个作业。

本实施方式的图像处理系统1通过在信息处理终端3和图像处理装置2中分别进行如上所述的处理，当在信息处理终端3与云服务器4相互连接的状态下用户想要执行特定的处理时，自动地向用户通知能够在图像处理装置2中执行适于该处理的工作流程。因此，用户即使不知道这种工作流程的存在，当指定了所通知的工作流程时，之后，也能够将信息处理终端3与云服务器4的连接状态移交给图像处理装置2来使图像处理装置2与云服务器4相互协作，并且能够依次执行工作流程中定义的多个作业。另外，即使在用户知道工作流程的存在的情况下，也不需要通过手动操作来找出并指定适于用户想要执行的特定的处理的工作流程。因而，根据本实施方式的图像处理系统1，具有如下优点：在将信息处理终端3与云服务器4连接的状态下用户指定依次执行多个作业的工作流程来执行该工作流程时的操作变得简单。其它方面与第1实施方式相同。

(变形例)

以上说明了与本发明有关的优选实施方式，但是本发明并不限于上述内容，能够应用各种变形例。下面，说明几个变形例。

例如在上述实施方式中例示了图像处理装置2是由具备扫描功能、打印功能以及BOX功能等多个功能的MFP等构成的装置的情况。但是，本发明中的图像处理装置并不一定限于如MFP等那样的具备多个功能的装置。

另外，在上述第2实施方式中例示了当信息处理终端3从云服务器4接收到关键词时向图像处理装置2询问与该关键词对应的工作流程的情况，但是，也可以例如基于云服务器4向信息处理终端3发送的关键词，搜索能够执行与该关键词对应的工作流程的图像处理装置2。在用户正在外出等的情况下，有时想要使用设置于最近的便利商店等的图像处理装置2来执行基于特定的工作流程的一系列作业，因此，如果基于云服务器4从信息处理终端3接收的位置信息和关键词搜索对用户来说最近的图像处理装置2并将其设置场所通知给用户，则便利性会更高。

Claims (28)

1.一种图像处理装置，能够与信息处理终端及云服务器进行通信，该图像处理装置的特征在于，具备：

通信控制单元，与所述信息处理终端进行通信；

服务器连接单元，基于由所述通信控制单元从处于与所述云服务器的连接状态的所述信息处理终端接收的连接信息，连接到所述云服务器，从所述云服务器获取与在所述信息处理终端中显示的作业的操作画面相同的操作画面；

远程画面生成单元，基于由所述服务器连接单元从所述云服务器获取的操作画面，生成用于在所述信息处理终端中进行该图像处理装置的远程操作的远程画面，并经由所述通信控制单元发送到所述信息处理终端；以及

作业控制单元，在由所述通信控制单元接收的操作信息是对于所述远程画面的作业的执行指示的情况下，与所述云服务器协作来执行作业。

2.根据权利要求1所述的图像处理装置，其特征在于，

所述通信控制单元在检测到能够进行近距离无线通信的所述信息处理终端的情况下、或者在从所述信息处理终端接收到所述远程画面的请求的情况下，与所述信息处理终端进行通信来获取所述连接信息。

3.根据权利要求1或2所述的图像处理装置，其特征在于，

所述远程画面生成单元在由所述通信控制单元接收的操作信息是对于所述作业控制单元的作业的设定操作的情况下，基于反映了该作业的设定操作的作业的详细设定画面而生成远程画面，并发送到所述信息处理终端。

4.根据权利要求1～3中的任一项所述的图像处理装置，其特征在于，

随着所述服务器连接单元从所述云服务器获取到与在所述信息处理终端中显示的作业的操作画面相同的操作画面，所述通信控制单元对所述信息处理终端发送切断与所述云服务器的连接状态的指示。

5.根据权利要求1～4中的任一项所述的图像处理装置，其特征在于，

随着所述作业控制单元与所述云服务器协作来开始执行作业，所述通信控制单元切断与所述信息处理终端的通信状态。

6.根据权利要求5所述的图像处理装置，其特征在于，

所述通信控制单元在切断与所述信息处理终端的通信状态之后，随着由所述远程画面生成单元更新所述远程画面，再次建立与所述信息处理终端的通信状态，将由所述远程画面生成单元更新后的所述远程画面发送到所述信息处理终端。

7.根据权利要求6所述的图像处理装置，其特征在于，

在由所述服务器连接单元从所述云服务器新获取的操作画面是请求基于所述信息处理终端的用户的操作的画面的情况下，所述远程画面生成单元基于该操作画面更新所述远程画面。

8.根据权利要求1～7中的任一项所述的图像处理装置，其特征在于，

还具备工作流程搜索单元，该工作流程搜索单元对登记有与关键词相关联地依次执行多个作业的工作流程的数据库进行搜索，

在由所述通信控制单元接收到关键词的情况下，所述工作流程搜索单元搜索所述数据库来提取与该关键词对应的工作流程，

随着由所述工作流程搜索单元提取出工作流程，所述远程画面生成单元生成用于显示该工作流程所包含的多个作业的远程画面并发送到所述信息处理终端，

在由所述通信控制单元接收的操作信息是在所述远程画面中显示的所述工作流程的执行指示的情况下，所述作业控制单元与所述云服务器协作来依次执行所述工作流程所包含的多个作业。

9.一种信息处理终端，能够与图像处理装置及云服务器进行通信，该信息处理终端的特征在于，具备：

显示单元，显示各种信息；

操作单元，检测由用户进行的各种操作；

服务器连接单元，基于由所述操作单元检测到的操作，连接到所述云服务器，从所述云服务器获取作业的操作画面并显示于所述显示单元；以及

远程画面控制单元，在处于通过所述服务器连接单元与所述云服务器连接的连接状态时，将对于所述云服务器的连接信息发送到所述图像处理装置，从所述图像处理装置获取与所述作业的操作画面对应的远程画面来将显示于所述显示单元的画面切换为该远程画面，并且随着检测到对于该远程画面的操作，对所述图像处理装置发送操作信息。

10.根据权利要求9所述的信息处理终端，其特征在于，

所述远程画面控制单元在所述服务器连接单元连接到所述云服务器的状态下，当检测到能够进行近距离无线通信的所述图像处理装置时、或所述操作单元检测到由用户进行的远程画面的请求操作时，与所述图像处理装置进行通信来发送所述连接信息。

11.根据权利要求9或10所述的信息处理终端，其特征在于，

所述服务器连接单元基于由所述远程画面控制单元从所述图像处理装置接收的指示，切断与所述云服务器的连接状态。

12.根据权利要求9～11中的任一项所述的信息处理终端，其特征在于，

所述远程画面控制单元在对所述图像处理装置发送操作信息之后，切断与所述图像处理装置的通信状态。

13.根据权利要求12所述的信息处理终端，其特征在于，

所述远程画面控制单元在切断与所述图像处理装置的通信状态之后，基于来自所述图像处理装置的请求再次建立与所述图像处理装置的通信状态，从所述图像处理装置获取更新后的所述远程画面并显示于所述显示单元。

14.根据权利要求9～13中的任一项所述的信息处理终端，其特征在于，

在所述服务器连接单元从所述云服务器接收到规定的关键词的情况下，所述远程画面控制单元通过将该关键词发送到所述图像处理装置，来向所述图像处理装置询问是否能够执行与该关键词对应地依次执行多个作业的工作流程。

15.一种图像处理方法，在能够与信息处理终端及云服务器进行通信的图像处理装置中执行，该图像处理方法的特征在于，具备：

步骤(a)，与所述信息处理终端进行通信；

步骤(b)，基于通过所述步骤(a)从处于与所述云服务器的连接状态的所述信息处理终端接收的连接信息，连接到所述云服务器，从所述云服务器获取与在所述信息处理终端中显示的作业的操作画面相同的操作画面；

步骤(c)，基于通过所述步骤(b)从所述云服务器获取的操作画面，生成用于在所述信息处理终端中进行所述图像处理装置的远程操作的远程画面，并发送到所述信息处理终端；以及

步骤(d)，在通过所述步骤(a)接收的操作信息是对于所述远程画面的作业的执行指示的情况下，与所述云服务器协作来执行作业。

16.根据权利要求15所述的图像处理方法，其特征在于，

在所述步骤(a)中，在检测到能够进行近距离无线通信的所述信息处理终端的情况下、或者在从所述信息处理终端接收到所述远程画面的请求的情况下，与所述信息处理终端进行通信来获取所述连接信息。

17.根据权利要求15或16所述的图像处理方法，其特征在于，

在所述步骤(c)中，在通过所述步骤(a)接收的操作信息是在所述步骤(d)中执行作业时的作业的设定操作的情况下，基于反映了该作业的设定操作的作业的详细设定画面而生成远程画面，并发送到所述信息处理终端。

18.根据权利要求15～17中的任一项所述的图像处理方法，其特征在于，

在所述步骤(a)中，随着通过所述步骤(b)从所述云服务器获取到与在所述信息处理终端中显示的作业的操作画面相同的操作画面，对所述信息处理终端发送切断与所述云服务器的连接状态的指示。

19.根据权利要求15～18中的任一项所述的图像处理方法，其特征在于，

在所述步骤(a)中，随着通过所述步骤(d)开始执行与所述云服务器协作的作业，切断与所述信息处理终端的通信状态。

20.根据权利要求19所述的图像处理方法，其特征在于，

在所述步骤(a)中，在切断与所述信息处理终端的通信状态之后，随着通过所述步骤(c)更新所述远程画面，再次建立与所述信息处理终端的通信状态，将通过所述步骤(c)更新后的所述远程画面发送到所述信息处理终端。

21.根据权利要求20所述的图像处理方法，其特征在于，

在所述步骤(c)中，在通过所述步骤(b)从所述云服务器新获取的操作画面是请求基于所述信息处理终端的用户的操作的画面的情况下，基于该操作画面更新所述远程画面。

22.根据权利要求15～21中的任一项所述的图像处理方法，其特征在于，

还具备步骤(e)，在该步骤(e)中，对登记有与关键词相关联地依次执行多个作业的工作流程的数据库进行搜索，

在所述步骤(e)中，在通过所述步骤(a)接收到关键词的情况下，搜索所述数据库来提取与该关键词对应的工作流程，

在所述步骤(c)中，随着通过所述步骤(e)提取出工作流程，生成用于显示该工作流程所包含的多个作业的远程画面并发送到所述信息处理终端，

在所述步骤(d)中，在通过所述步骤(a)接收的操作信息是在所述远程画面中显示的所述工作流程的执行指示的情况下，与所述云服务器协作来依次执行所述工作流程所包含的多个作业。

23.一种信息处理方法，在能够与图像处理装置及云服务器进行通信的信息处理终端中执行，该信息处理方法的特征在于，具备：

步骤(a)，检测由用户进行的各种操作；

步骤(b)，基于通过所述步骤(a)检测到的操作，连接到所述云服务器，从所述云服务器获取作业的操作画面并显示于规定的显示单元；以及

步骤(c)，在处于通过所述步骤(b)与所述云服务器连接的连接状态时，将对于所述云服务器的连接信息发送到所述图像处理装置，从所述图像处理装置获取与所述作业的操作画面对应的远程画面，将显示于所述显示单元的画面切换为该远程画面，并且随着检测到对于该远程画面的操作，对所述图像处理装置发送操作信息。

24.根据权利要求23所述的信息处理方法，其特征在于，

在所述步骤(c)中，在通过所述步骤(b)与所述云服务器连接的状态下，当检测到能够进行近距离无线通信的所述图像处理装置时、或通过所述步骤(a)检测到由用户进行的远程画面的请求操作时，与所述图像处理装置进行通信来发送所述连接信息。

25.根据权利要求23或24所述的信息处理方法，其特征在于，

在所述步骤(b)中，基于通过所述步骤(c)从所述图像处理装置接收的指示，切断与所述云服务器的连接状态。

26.根据权利要求23～25中的任一项所述的信息处理方法，其特征在于，

在所述步骤(c)中，在对所述图像处理装置发送操作信息之后，切断与所述图像处理装置的通信状态。

27.根据权利要求26所述的信息处理方法，其特征在于，

在所述步骤(c)中，在切断与所述图像处理装置的通信状态之后，基于来自所述图像处理装置的请求再次建立与所述图像处理装置的通信状态，从所述图像处理装置获取更新后的所述远程画面并显示于所述显示单元。

28.根据权利要求23～27中的任一项所述的信息处理方法，其特征在于，

在所述步骤(c)中，在通过所述步骤(b)从所述云服务器接收到规定的关键词的情况下，通过将该关键词发送到所述图像处理装置，来向所述图像处理装置询问是否能够执行与该关键词对应地依次执行多个作业的工作流程。