CN107391061B - 信息处理装置及信息处理方法 - Google Patents

Abstract

本发明公开了一种信息处理装置及信息处理方法，所述信息处理装置具有控制单元，所述控制单元在拍摄到一个装置的情况下，控制所述一个装置所具有的功能的显示，在拍摄到多个装置的情况下，控制利用所述多个装置所具有的功能的协同功能的显示。

Description

信息处理装置及信息处理方法

技术领域

本发明涉及一种信息处理装置及信息处理方法。

背景技术

在日本专利特许第5737906号中，公开了一种在可装卸于装置主体且可与装置主体无线通信的操作面板上显示表示操作指南的图像的技术。

在日本专利文献特开2014-10769号公报中，公开了一种中继装置，在客户装置与提供服务的服务提供装置之间进行数据的中继。

在日本专利文献特开2014-48672号公报中，公开了一种便携终端，生成在通过拍摄单元拍摄到的拍摄图像上重叠有包含图像形成装置的状态信息的附加信息的增强现实图像。

在日本专利文献特开2014-238786号公报中，公开了一种在与多个云服务器进行通信的通信系统中，将用户进行的各云服务器的利用状况显示于该用户登录时操作的装置的显示器的技术。

但是，关于图像形成装置等装置的利用环境，通常假设了多个用户利用一个装置这样的利用环境。与之相对，下文中，假设多个用户利用多个装置这样的利用环境。另外，假设从装置去除触摸面板等用户接口、或者在用户的目的地等暂时利用装置这样的场面。在这种利用环境下，有时用户不能简单地了解通过装置可执行哪一个功能。

发明内容

本发明的目的在于提供一种可利用装置执行的功能的信息。

根据本发明的第一方面，提供一种信息处理装置，其中，所述信息处理装置具有控制单元，所述控制单元在拍摄到一个装置的情况下，控制所述一个装置所具有的功能的显示，在拍摄到多个装置的情况下，控制利用所述多个装置所具有的功能的协同功能的显示。

根据本发明的第二方面，提供根据第一方面的信息处理装置，其特征在于，所述多个装置包含第一装置和第二装置，在拍摄到所述第一装置后且在未被赋予所述第一装置所具有的功能的执行指示的期间拍摄到所述第二装置的情况下，所述控制单元控制利用所述第一装置和所述第二装置所具有的功能的所述协同功能的显示。

根据本发明的第三方面，提供根据第一方面的信息处理装置，其特征在于，在预先设定的时间内拍摄到所述多个装置的情况下，所述控制单元控制所述协同功能的显示。

根据本发明的第四方面，提供根据第一方面的信息处理装置，其特征在于，所述多个装置包含第一装置和第二装置，在从拍摄到所述第一装置的时间点起的预先设定的时间内拍摄到所述第二装置的情况下，所述控制单元控制利用所述第一装置和所述第二装置所具有的功能的所述协同功能的显示。

根据本发明的第五方面，提供根据第一至第四方面的信息处理装置，其特征在于，在拍摄到所述多个装置的情况下，所述控制单元控制所述多个装置中包含的各装置所具有的功能的显示，同时控制所述协同功能的显示。

根据本发明的第六方面，提供根据第一至第四方面中任一方面的信息处理装置，其特征在于，在拍摄到所述多个装置的情况下，在由用户赋予了单独利用功能的显示指示时，所述控制单元控制所述多个装置中包含的各装置所具有的功能的显示，在由用户赋予了所述协同功能的显示指示时，所述控制单元控制所述协同功能的显示。

根据本发明的第七方面，提供根据第一至第六方面中任一方面的信息处理装置，其特征在于，在拍摄到所述一个装置的一部分的情况下，所述控制单元控制被分配给所述一部分的功能的显示。

根据本发明的第八方面，提供根据第一至第六方面中任一方面的信息处理装置，其特征在于，在控制所述协同功能的显示的情况下，在拍摄到所述多个装置中包含的装置的一部分时，所述控制单元控制利用被分配给所述一部分的功能的所述协同功能的显示。

根据本发明的第九方面，提供根据第一至第六方面中任一方面的信息处理装置，其特征在于，在拍摄到所述一个装置的整体的情况下，所述控制单元控制所述一个装置所具有的一或多个功能的显示，在拍摄到所述一个装置的一部分的情况下，所述控制单元控制被分配给所述一部分的功能的显示。

根据本发明的第十方面，提供了根据第一至第九方面中任一方面的信息处理装置，其特征在于，在拍摄到所述多个装置的情况下，在显示单元显示与所述多个装置相关的多个图像，所述控制单元根据所述显示单元上的所述多个图像的显示位置，改变所述协同功能，控制所述协同功能的显示。

根据本发明的第十一方面，提供根据第十方面的信息处理装置，其特征在于，所述控制单元控制以与显示于所述显示单元的所述多个图像中显示于预先设定的区域的图像相关的装置为起点的所述协同功能的显示。

根据本发明的第十二方面，提供根据第十一方面的信息处理装置，其特征在于，在所述预先设定的区域显示有与装置的一部分相关的图像的情况下，所述控制单元控制以分配给与所述一部分相关的图像的功能为起点的所述协同功能的显示。

根据本发明的第十三方面，提供根据第十一或第十二方面的信息处理装置，其特征在于，所述控制单元控制用于使所述预先设定的区域显示与拍摄到的装置相关的图像的编辑画面的显示。

根据本发明的第十四方面，提供根据第十至第十三方面中任一方面的信息处理装置，其特征在于，根据与所述多个装置相关的所述多个图像的显示位置，变更在所述协同功能中被利用的各装置的利用顺序。

根据本发明的第十五方面，提供根据第十至第十三方面中任一方面的信息处理装置，其特征在于，根据与所述多个装置相关的所述多个图像的显示位置，变更在所述协同功能中被利用的各装置之间移动的数据的移动顺序。

根据本发明的第十六方面，提供根据第一至第九方面中任一方面的信息处理装置，其特征在于，在拍摄到所述多个装置的情况下，根据所述多个装置与进行拍摄的拍摄装置之间的位置关系，变更被用作所述协同功能的起点的装置。

根据本发明的第十七方面，提供根据第十六方面的信息处理装置，其特征在于，越是设置于距所述拍摄装置近的位置的装置，越是被优先用作所述协同功能的起点装置。

根据本发明的第十八方面，提供根据第十六方面的信息处理装置，其特征在于，越是与显示于距设定在显示图像的显示画面上的基准位置近的位置的图像相关的装置，越是被优先用作所述协同功能的起点装置。

根据本发明的第十九方面，提供根据第十六至第十八方面中任一方面的信息处理装置，其特征在于，基于与所述多个装置中包含的各装置相关的外观图像彼此的缺损关系，判定所述位置关系。

根据本发明的第二十方面，提供根据第十六至第十九方面中任一方面的信息处理装置，其特征在于，所述控制单元使利用所述起点装置所具有的功能的所述协同功能优先显示于显示单元。

根据本发明的第二十一方面，提供根据第十六至第二十方面中任一方面的信息处理装置，其特征在于，所述控制单元使与距所述拍摄装置近的位置的顺序对应的信息与所述多个装置中包含的各装置相关联而显示于显示单元。

根据本发明的第二十二方面，提供根据第一方面的信息处理装置，其特征在于，在拍摄到所述多个装置的情况下，所述控制单元根据与所述多个装置相关的多个图像的显示位置，控制所述多个装置中包含的各装置所具有的功能的显示或利用所述多个装置所具有的功能的协同功能的显示。

根据本发明的第二十三方面，提供根据第一至第二十二方面中任一方面的信息处理装置，其特征在于，在与拍摄到的装置相关的外观图像不满足预先设定的区域基准的情况下，该装置不会被识别为利用目标的装置。

根据本发明的第二十四方面，提供根据第二十三方面的信息处理装置，其特征在于，在所述外观图像因障碍物而缺损的情况下，所述外观图像不满足所述区域基准。

根据本发明的第二十五方面，提供根据第一至第二十二方面中任一方面的信息处理装置，其特征在于，在控制所述协同功能的显示的情况下，在与拍摄到的装置相关的外观图像仅表示该装置的一部分的情况下，分配给与所述一部分相关的图像的功能在所述协同功能中被利用。

根据本发明的第二十六方面，提供根据第一至第二十五方面中任一方面的信息处理装置，其特征在于，还具有识别单元，其基于由拍摄单元的拍摄所得到的装置的图像，识别由所述拍摄单元拍摄到的装置，在由所述识别单元识别到所述一个装置的情况下，所述控制单元控制所述一个装置所具有的功能的显示，在由所述识别单元识别到所述多个装置的情况下，所述控制单元控制利用所述多个装置所具有的功能的所述协同功能的显示。

根据本发明的第二十七方面，提供一种信息处理方法，其特征在于，在拍摄到一个装置的情况下，控制所述一个装置所具有的功能的显示，在拍摄到多个装置的情况下，控制利用所述多个装置所具有的功能的协同功能的显示。

根据所述第一、第五、第六、第七、或第二十七方面，提供了一种可利用装置执行的功能的信息。

根据所述第二方面，提供了一种与第一装置所具有的功能的执行指示的时机对应的功能的信息。

根据所述第三或第四方面，提供了一种与多个装置的拍摄时机对应的功能的信息。

根据所述第七或第八方面，提供了一种可利用装置的一部分执行的功能的信息。

根据所述第九方面，提供了一种与拍摄目标对应的功能的信息。

根据所述第十、第十一、或第十二方面，可根据装置的显示位置改变协同功能。

根据所述第十三方面，可通过简单的操作改变协同功能。

根据所述第十四方面，可根据装置的显示位置改变装置的利用顺序。

根据所述第十五方面，可根据装置的显示位置改变数据的移动顺序。

根据所述第十六、第十七、第十八、第十九、第二十、或第二十一方面，可根据与拍摄装置的位置关系改变协同功能。

根据所述第二十二方面，可通过简单的操作切换功能的显示控制。

根据所述第二十三或第二十四方面，可将假定为不需要的装置从利用目标的装置除外。

根据所述第二十五方面，即使在与装置相关的外观图像缺损的情况下，也能够提供协同功能的信息。

根据所述第二十六方面，提供了一种可利用识别的装置执行的功能的信息。

附图说明

图1是表示本发明实施方式的图像形成系统的框图；

图2是表示本实施方式的图像形成装置的框图；

图3是表示本实施方式的服务器的框图；

图4是表示本实施方式的终端装置的框图；

图5是表示图像形成装置的外观的示意图；

图6是表示装置功能管理表的一例的图；

图7是表示协同功能管理表的一例的图；

图8是表示被单独利用的装置的图；

图9是表示功能显示画面的一例的图；

图10是表示功能显示画面的一例的图；

图11是表示协同目标的装置的图；

图12是表示功能显示画面的一例的图；

图13是表示装置显示画面的一例的图；

图14是表示装置显示画面的一例的图；

图15是表示变形例1的装置显示画面的一例的图；

图16是表示变形例1的功能显示画面的一例的图；

图17是表示变形例1的装置显示画面的一例的图；

图18是表示变形例1的功能显示画面的一例的图；

图19是表示变形例1的装置显示画面的一例的图；

图20是表示变形例2的装置显示画面的一例的图；

图21是表示变形例2的装置显示画面的一例的图；

图22是表示变形例3的装置显示画面的一例的图；

图23是表示变形例4的装置显示画面的一例的图；

图24是表示变形例4的装置显示画面的一例的图；

图25是表示变形例5的装置功能管理表的一例的图；

图26是表示变形例5的协同功能管理表的一例的图；

图27是表示变形例5的装置显示画面的一例的图；

图28是表示变形例5的装置显示画面的一例的图；

图29是表示变形例6的装置显示画面的一例的图；

图30是表示变形例6的装置显示画面的一例的图；

图31是表示变形例7的装置显示画面的一例的图；

图32是表示变形例7的装置显示画面的一例的图；以及

图33是表示图像形成系统中的连接处理的时序图。

具体实施方式

参照图1，对作为本发明实施方式的信息处理系统的图像形成系统进行说明。图1表示本实施方式的图像形成系统的一例。

本实施方式的图像形成系统包含多个装置(例如装置10、12)、作为外部装置的一例的服务器14、作为信息处理装置的一例的终端装置16。装置10、12、服务器14及终端装置16具备经由网络等通信路径N进行相互通信的功能。当然，装置10、12、服务器14及终端装置16也可以分别经由不同的通信路径与其它装置进行通信。图1所示的例子中，图像形成系统中包含两个装置(装置10、12)，但图像形成系统中也可以包含三个以上的装置。另外，图像形成系统也可以包含多个服务器14或多个终端装置16。

装置10、12是具有特定功能的装置，例如，是具备图像形成功能的图像形成装置、个人计算机(PC)、投影仪、液晶显示器或投影仪等显示装置、电话机、钟表、监控摄像头等装置。另外，装置10、12具有在其与其它装置之间收发数据的功能。本实施方式中，装置10作为一例是图像形成装置。图像形成装置(装置10)例如是具有扫描功能、打印功能、复印功能及传真功能中至少一个功能的装置。

服务器14是管理各装置所具有的功能的装置。例如，服务器14管理利用各装置所具有的功能和多个装置所具有的功能的协同功能。另外，服务器14具有在其与其它装置之间收发数据的功能。

服务器14也可以为每个用户进行可由用户利用的功能的管理。可由用户利用的功能例如是对用户无偿提供的功能、对用户有偿提供并由用户购买的功能等。服务器14也可以为每个用户进行表示用户可利用的功能的可利用功能信息(例如功能购买历史信息)的管理。当然，因为还有可免费利用的功能、追加更新功能、由管理者特别管理的功能等，所以服务器14也可以不一律地根据购买与否对功能进行管理。功能的购买处理例如由服务器14进行。当然，也可以通过其它装置进行购买处理。

终端装置16是个人计算机(PC)、平板PC、智能手机、手机等装置，具有在其与其它装置之间收发数据的功能。终端装置16例如在利用装置时作为用户接口部(UI部)起作用。

在本实施方式的图像形成系统中，例如在识别出一个装置的情况下，控制该装置所具有的功能的显示，在识别出多个装置的情况下，控制利用该多个装置所具有的功能的协同功能的显示。例如，在拍摄到一个装置的情况下，控制该装置所具有的功能的显示，在拍摄到多个装置的情况下，控制利用该多个装置所具有的功能的协同功能的显示。

以下，对本实施方式的图像形成系统中包含的各装置详细地进行说明。

参照图2详细说明作为图像形成装置的装置10的结构。以下，将装置10称作图像形成装置10。在图2中，示出图像形成装置10的结构。

通信部18是通信接口，具备向其它装置发送数据的功能、及从其它装置接收数据的功能。通信部18可以是具备无线通信功能的通信接口，也可以是具备有线通信功能的通信接口。

图像形成部20具有图像形成功能。具体而言，图像形成部20具有扫描功能、打印功能、复印功能及传真功能中的至少一个功能。通过执行扫描功能，读取原稿而生成扫描数据(图像数据)。通过执行打印功能，将图像打印于纸张等记录介质上。通过执行复印功能，读取原稿并将其打印于记录介质上。通过执行传真功能，传真发送或传真接收图像数据。另外，也可以执行使多个功能协同的协同功能。例如，也可以执行组合了扫描功能和发送功能(传送功能)的扫描传送功能。通过执行该扫描传送功能，读取原稿生成扫描数据(图像数据)，将该扫描数据发送到接收地址(例如终端装置16等的外部装置)。当然，该协同功能只不过是一例，也可以执行其它协同功能。

存储部22是硬盘或存储器(例如SSD等)等存储装置。在存储部22存储例如表示图像形成的命令的信息(例如作业信息等)、成为打印目标的图像数据、通过执行扫描功能而生成的扫描数据、表示其它装置的地址的装置地址信息、表示服务器14的地址的服务器地址信息、各种控制数据、各种程序等。当然，它们可以存储于不同的存储装置中，也可以存储于一个存储装置中。

UI部24是用户接口部，包含显示部和操作部。显示部例如是液晶显示器等显示装置。操作部例如是触摸面板或键盘等输入装置。当然，也可以是兼做显示部和操作部的用户接口(例如包括触摸式的显示器、或在显示器上电子显示键盘等的装置等)。此外，图像形成装置10可以不具备UI部24，也可以不具备显示部而具备作为硬件的硬件用户接口部(硬件UI部)。硬件UI部例如是特殊化为数字输入的硬键(例如数字键)、特殊化为方向的指示的硬键(例如方向指示键)等。

控制部26控制图像形成装置10各部的动作。

以下，参照图3详细说明服务器14的结构。在图3中，示出服务器14的结构。

通信部28是通信接口，具有向其它装置发送数据的功能、及从其它装置接收数据的功能。通信部28可以是具备无线通信功能的通信接口，也可以是具备有线通信功能的通信接口。

存储部30是硬盘或存储器(例如SSD等)等存储装置。在存储部30存储有例如装置功能信息32、协同功能信息34、各种数据、各种程序、表示各装置的地址的装置地址信息、表示服务器14的地址的服务器地址信息等。当然，它们可以被存储在不同的存储装置中，也可以存储于一个存储装置中。存储于存储部30的装置功能信息32及协同功能信息34定期或在被指定的时机提供给终端装置16，由此，也可以更新存储于终端装置16的信息。以下，对装置功能信息32和协同功能信息34进行说明。

装置功能信息32是表示图像形成系统中所包含的各装置(例如图像形成装置10或装置12)具有的功能的信息，例如是表示用于识别装置的装置识别信息和用于识别该装置所具有的功能的功能识别信息的关联的信息。装置识别信息例如是表示装置ID、装置名称、装置的种类的信息、型号、位置信息、表示装置的外观的外观图像等。功能识别信息例如是功能ID或功能名称等。例如，在图像形成装置10具有扫描功能、打印功能、复印功能及扫描传送功能的情况下，在该图像形成装置10的装置识别信息中，表示扫描功能的功能识别信息、表示打印功能的功能识别信息、表示复印功能的功能识别信息、及表示扫描传送功能的功能识别信息相关联。通过参照装置功能信息32，特定(识别)各装置所具有的功能。

协同功能信息34是表示通过使多个功能协同而执行的协同功能的信息。通过使多个功能协同，执行一或多个协同功能。协同功能可以通过使一个装置(例如图像形成装置10或装置12)具有的多个功能协同而执行，也可以使多个装置(例如图像形成装置10和装置12)具有的多个功能协同而执行。另外，发出操作指示的终端装置(本实施方式中为终端装置16)也包含在识别目标的装置内，可以将终端装置具有的功能用作协同功能的一部分。

协同功能信息34例如是表示用于在识别协同功能中被利用的各功能的功能识别信息的组合、和用于识别该协同功能的协同功能识别信息的关联的信息。协同功能识别信息例如是协同功能ID或协同功能名称等。

在使多个装置协同的情况下，协同功能信息34是表示利用多个装置具有的多个功能的协同功能的信息，是表示用于识别协同功能所利用的各装置的装置识别信息的组合和协同功能识别信息的关联的信息。

协同功能可以是通过使互不相同的多个功能协同而执行的功能，也可以是使相同功能协同而执行的功能。协同功能也可以是在协同前不能利用的功能。在协同前不能利用的功能可以是协同目标的装置所具有的功能中、可通过利用相同功能而利用的功能，也可以是可通过组合互不相同的功能而利用的功能。例如，通过使具有打印功能的装置(打印机)和具有扫描功能的装置(扫描仪)协同，实现作为协同功能的复印功能。即，通过使打印功能和扫描功能协同，实现复印功能。该情况下，作为协同功能的复印功能和打印功能及扫描功能的组合被关联。在协同功能信息34中，例如，用于识别作为协同功能的复印功能的协同功能识别信息和用于识别具有打印功能的装置的装置识别信息及用于识别具有扫描功能的装置的装置识别信息的组合被关联。

此外，在存储部30也可以存储可利用功能信息。可利用功能信息是表示各用户可利用的功能的信息，例如是表示用于识别用户的用户识别信息和表示该用户可利用的功能的功能识别信息(包含协同功能识别信息)的关联的信息。用户可利用的功能如上所述例如是对用户无偿提供的功能、或用户购买的功能等，也可以是单体的装置所具有的功能，也可以是协同功能。用户识别信息例如是用户ID或姓名等用户账户信息。通过参照可利用功能信息，特定各用户可利用的功能。可利用功能信息例如在每次对用户提供功能时(例如每次对用户无偿或有偿提供功能时)被更新。

控制部36控制服务器14的各部的动作。另外，控制部36包含特定部38。

特定部38接受用于识别装置的装置识别信息，特定在存储于存储部30的装置功能信息32中与该装置识别信息相关联的功能的功能识别信息。由此，特定(识别)装置所具有的功能。例如，从终端装置16向服务器14发送装置识别信息，通过特定部38特定与该装置识别信息相关联的功能的功能识别信息。关于功能的信息(例如功能识别信息或功能的说明信息等)例如从服务器14发送到终端装置16并在终端装置16进行显示。由此，关于由装置识别信息特定的装置所具有的功能的信息在终端装置16进行显示。

另外，特定部38接收用于识别协同目标的各装置的装置识别信息，特定在存储于存储部30的协同功能信息34中与各装置识别信息的组合相关联的协同功能的协同功能识别信息。由此，特定(识别)通过使协同目标的各装置所具有的功能协同而执行的协同功能。例如，从终端装置16向服务器14发送多个装置识别信息，由特定部38特定与该多个装置识别信息相关联的协同功能的协同功能识别信息。关于协同功能的信息(例如协同功能识别信息或协同功能的说明信息等)例如从服务器14发送到终端装置16并在终端装置16进行显示。由此，在终端装置16显示关于由多个装置识别信息特定的多个装置执行的协同功能的信息。

例如，在识别到一个装置的情况下(例如拍摄到一个装置的情况下)，特定部38接收用于识别该装置的装置识别信息，特定在装置功能信息32中与该装置识别信息相关联的功能的功能识别信息。由此，在识别到一个装置的情况下(例如拍摄到一个装置的情况下)，特定(识别)该装置所具有的功能。在识别到多个装置的情况下(例如拍摄到多个装置的情况下)，特定部38接收用于识别该多个装置中所含的各装置的装置识别信息，特定在协同功能信息34中与各装置识别信息的组合相关联的协同功能的协同功能识别信息。由此，在识别到多个装置的情况下(例如拍摄到多个装置的情况下)，特定(识别)利用该多个装置所具有的功能的协同功能。这样，特定部38根据所识别的装置的数量(例如根据拍摄到的装置的数量)，切换功能的特定处理。在终端装置16中，根据所识别(例如拍摄)的装置的数量，显示关于单体的装置所具有的功能的信息、或关于利用多个装置所具有的功能的协同功能的信息。当然，即使在拍摄到多个装置的情况下，特定部38也可以接收该多个装置中所含的各装置的装置识别信息，通过参照装置功能信息32而特定(识别)各装置所具有的功能。

此外，在对用户可利用的功能进行了管理的情况下，特定部38也可以接收用于识别用户的用户识别信息，特定在存储于存储部30的可利用功能信息中与该用户识别信息相关联的各功能的功能识别信息。由此，特定(识别)该用户可利用的功能组。例如，从终端装置16向服务器14发送用户识别信息，由特定部38特定与该用户识别信息相关联的各功能的功能识别信息。关于用户可利用的各功能的信息(例如表示各功能的名称的信息)例如从服务器14发送到终端装置16并在终端装置16进行显示。由此，将关于由用户识别信息特定的用户可利用的各功能的信息在终端装置16进行显示。例如，特定部38接收装置识别信息和用户识别信息，特定在装置功能信息32中与该装置识别信息相关联的功能的功能识别信息，另外，特定在可利用功能信息中与该用户识别信息相关联的功能的功能识别信息。由此，特定由该装置识别信息特定的装置所具有的功能、即由该用户识别信息特定的用户可利用的功能。

控制部36也可以执行功能的购买处理并对该购买历史进行管理。例如，在用户购买了收费功能的情况下，控制部36也可以对该用户应用收费处理。

另外，控制部36也可以执行例如字符识别功能、翻译功能、图像加工功能、图像形成功能等关于图像处理的功能。当然，控制部36也可以执行关于图像处理以外的处理的功能。通过执行字符识别功能，识别图像内的字符，生成表示该字符的字符数据。通过执行翻译功能，将图像内的字符翻译成用特定的语言表示的字符，并生成表示被翻译的字符的字符数据。通过执行图像加工功能，对图像进行加工。控制部36例如从图像形成装置10接收通过执行扫描功能而生成的扫描数据，以该扫描数据为目标，执行字符识别功能、翻译功能、图像加工功能等关于图像处理的功能。控制部36也可以从终端装置16接收图像数据，以该图像数据为目标执行各功能。由控制部36生成的字符数据及图像数据例如从服务器14发送到终端装置16。服务器14被作为外部装置利用，协同功能也可以是利用包含服务器14的多个装置所具有的功能的功能。

以下，参照图4详细说明终端装置16的结构。在图4中，示出终端装置16的结构。

通信部40是通信接口，具有向其它装置发送数据的功能、及从其它装置接收数据的功能。通信部40可以是具备无线通信功能的通信接口，也可以是具备有线通信功能的通信接口。

作为拍摄单元的摄像头42通过对拍摄目标进行拍摄而生成图像数据(例如静止图像数据或运动图像数据)。另外，还可以是，由通信部40接收不仅利用终端装置16的摄像头，而且用与网络等通信路径相连的外部的摄像头所拍摄的图像数据，并在UI部46显示图像数据，从而用户可操作图像数据。

存储部44是硬盘或存储器(例如SSD等)等存储装置，存储各种程序、各种数据、服务器14的地址信息、各装置的地址信息(例如图像形成装置10或装置12的地址信息)、关于识别的装置的信息、关于识别的协同目标的装置的信息、关于识别的装置所具有的功能的信息、关于协同功能的信息等。

UI部46是用户接口部，包含显示部和操作部。显示部例如是液晶显示器等显示装置。操作部例如是触摸面板、键盘、鼠标等输入装置。当然，也可以是兼做显示部和操作部的用户接口(例如包含触摸式的显示器、或在显示器上电子显示键盘等的装置)。

控制部48控制终端装置16各部的动作。控制部48例如作为显示控制单元(控制单元)起作用，在UI部46的显示部显示各种信息。

在UI部46的显示部例显示如由摄像头42拍摄的图像、与作为利用目标的装置(例如单独利用的装置或协同目标的装置)被识别的装置相关的图像等。与装置相关的图像可以是由摄像头42拍摄的表示该装置的图像(静止图像或运动图像)，也可以是示意性表示该装置的图像(例如图标)。示意性表示的图像的数据例如可以存储于服务器14并从服务器14提供给终端装置16，也可以预先存储于终端装置16，也可以存储于其它装置并从该其它装置提供给终端装置16。

上述的装置功能信息32也可以存储于终端装置16的存储部44。该情况下，装置功能信息32也可以不存储于服务器14的存储部30。同样，上述的协同功能信息34也可以存储于终端装置16的存储部44。该情况下，协同功能信息34也可以不存储于服务器14的存储部30。终端装置16的控制部48也可以具有上述的特定部38，基于装置识别信息识别装置，特定装置所具有的功能，也可以特定利用多个功能的协同功能。该情况下，服务器14也可以不具有特定部38。

在创建有可利用功能信息的情况下，该可利用功能信息也可以存储于终端装置16的存储部44。该情况下，可利用功能信息也可以不存储于服务器14的存储部30。终端装置16的控制部48也可以对用户购买功能的历史进行管理。该情况下，服务器14的控制部36也可以不具有该管理功能。终端装置16的控制部48也可以基于用户识别信息特定可由用户利用的功能。

进而，作为另一例，也可以将装置功能信息32或协同功能信息34存储在图像形成装置10或装置12等装置中，图像形成装置10或装置12等装置也可以具有特定部38。即，服务器14的特定部38进行的处理可以在服务器14中进行，也可以在终端装置16中进行，还可以在图像形成装置10或装置12等装置中进行。

在本实施方式中，作为一例，通过应用AR(Augmented Reality)技术(增强现实技术)，取得装置识别信息并识别利用目标的装置。例如，通过应用AR技术，取得单独使用的装置的装置识别信息并识别该装置，另外，取得协同目标的装置的装置识别信息并识别协同目标的装置。作为AR技术，使用公知的AR技术。例如，使用采用二维条形码等标记的标记型AR技术、采用图像识别技术的无标记型AR技术、采用位置信息的位置信息AR技术等。当然，也可以不应用AR技术而取得装置识别信息并识别利用目标的装置。例如，如果是与网络相连的装置，则可以基于IP地址识别装置，也可以读出装置ID而识别装置。进而，如果是具备红外线通信、可见光通信、Wi-Fi(Wireless Fidelity)(登记商标)、蓝牙(Bluetooth(登记商标))之类的各种无线通信功能的装置、终端装置，则也可以通过利用这些无线通信功能取得协同的装置的装置ID而识别装置，执行协同功能。

以下，参照图5详细说明装置识别信息的取得处理。作为一例，对取得图像形成装置10的装置识别信息的情况进行说明。图5示意性示出图像形成装置10的外观。在此，对用于应用标记型AR技术取得装置识别信息的处理进行说明。在图像形成装置10的框体上设置有二维条形码等标记50。标记50是将图像形成装置10的装置识别信息编码化的信息。用户启动终端装置16的摄像头42，利用摄像头42拍摄设置于利用目标的图像形成装置10上的标记50。由此，生成表示标记50的图像数据。该图像数据例如从终端装置16发送到服务器14。在服务器14中，控制部36通过对该图像数据所表示的标记图像应用解码处理而提取装置识别信息。由此，识别出利用目标的图像形成装置10(具有所拍摄的标记50的图像形成装置10)。服务器14的特定部38对在装置功能信息32中与所提取的装置识别信息相关联的功能的功能识别信息进行特定。由此，特定(识别)利用目标的图像形成装置10具有的功能。

此外，终端装置16的控制部48也可以通过对表示标记50的图像数据应用解码处理而提取装置识别信息。该情况下，所提取的装置识别信息从终端装置16发送到服务器14。服务器14的特定部38特定在装置功能信息32中与从终端装置16发送的装置识别信息相关联的功能的功能识别信息。在终端装置16的存储部44存储有装置功能信息32的情况下，终端装置16的控制部48也可以特定在该装置功能信息32中与所提取的装置识别信息相关联的功能的功能识别信息。

在标记50中也可以编码化含有图像形成装置10所具有的功能的功能识别信息。该情况下，通过对表示标记50的图像数据应用解码处理，提取该图像形成装置10的装置识别信息，同时，还提取该图像形成装置10所具有的功能的功能识别信息。由此，特定(识别)图像形成装置10，同时，特定(识别)该图像形成装置10所具有的功能。该解码处理可以由服务器14进行，也可以由终端装置16进行。

在执行利用多个装置所具有的功能的协同功能的情况下，通过拍摄协同目标的各装置的标记而取得各装置的装置识别信息，由此，特定(识别)协同功能。

在应用无标记型AR技术取得装置识别信息的情况下，例如，用户利用终端装置16的摄像头42拍摄利用目标的装置(例如图像形成装置10)的外观的全部或一部分。当然，从外观拍摄而得到利用目标装置的名称(例如商品名)或型号之类的用于特定装置的信息是有益处的。通过拍摄，生成表示利用目标的装置的外观的全部或一部分的外观图像数据。该外观图像数据例如从终端装置16发送到服务器14。在服务器14中，控制部36基于该外观图像数据识别利用目标的装置。例如，在服务器14的存储部30，针对每一装置存储有表示外观图像数据和该装置的装置识别信息的关联的外观图像关联信息，该外观图像数据表示装置的外观的全部或一部分。控制部36例如将从终端装置16发送的外观图像数据和外观图像关联信息中包含的各外观图像数据进行比较，基于该比较结果特定利用目标的装置的装置识别信息。例如，控制部36从自终端装置16发送的外观图像数据提取利用目标的装置的外观的特征，特定在外观图像关联信息中所含的外观图像数据组中表示与其外观的特征相同或类似的特征的外观图像数据，并特定与该外观图像数据相关联的装置识别信息。由此，识别利用目标的装置(由摄像头42拍摄的装置)。作为另一例，在拍摄装置的名称(例如商品名)或型号，生成显示名称或型号的外观图像数据的情况下，基于该外观图像数据所表示的名称或型号也可以识别利用目标的装置。服务器14的特定部38特定装置功能信息32中与特定的装置识别信息相关联的各功能的功能识别信息。由此，特定利用目标的装置(例如图像形成装置10)具有的功能。

此外，终端装置16的控制部48也可以将表示利用目标的装置(例如图像形成装置10)的外观的全部或一部分的外观图像数据和外观图像关联信息中所含的各外观图像数据进行比较，基于该比较结果特定利用目标的装置的装置识别信息。外观图像关联信息也可以存储于终端装置16的存储部44。该情况下，终端装置16的控制部48通过参照存储于终端装置16的存储部44的外观图像关联信息，而特定利用目标的装置的装置识别信息。或者，终端装置16的控制部48也可以从服务器14取得外观图像关联信息，通过参照该外观图像关联信息，特定利用目标的装置的装置识别信息。

在执行利用多个装置所具有的功能的协同功能的情况下，通过拍摄协同目标的各装置的外观的全部或一部分，取得各装置的装置识别信息，由此，特定(识别)协同功能。

在应用位置信息AR技术取得装置识别信息的情况下，例如，通过利用GPS(GlobalPositioning System)功能，取得表示设置有装置(例如图像形成装置10)的位置的位置信息。例如，各装置具有GPS功能，取得表示装置本身的位置的装置位置信息。终端装置16对利用目标的装置输出表示装置位置信息的取得请求的信息，作为针对该取得请求的响应，从该装置接收该装置的装置位置信息。该装置位置信息例如从终端装置16发送到服务器14。在服务器14中，控制部36基于该装置位置信息识别利用目标的装置。例如，在服务器14的存储部30，针对每个装置存储有表示装置位置信息和该装置的装置识别信息的关联的位置关联信息，该装置位置信息表示设置有装置的位置。控制部36特定在该位置关联信息中与从终端装置16发送的装置位置信息相关联的装置识别信息。由此，特定(识别)利用目标的装置。服务器14的特定部38特定装置功能信息32中与特定的装置识别信息相关联的各功能的功能识别信息。由此，特定(识别)利用目标的装置(例如图像形成装置10)所具有的功能。

此外，终端装置16的控制部48也可以特定在位置关联信息中与利用目标的装置的位置信息相关联的装置识别信息。位置关联信息也可以存储于终端装置16的存储部44。该情况下，终端装置16的控制部48通过参照存储于终端装置16的存储部44的位置关联信息，特定利用目标的装置的装置识别信息。作为另一例，终端装置16的控制部48也可以从服务器14取得位置关联信息，通过参照该位置关联信息，特定利用目标的装置的装置识别信息。

在执行利用多个装置的协同功能的情况下，取得协同目标的各装置的装置位置信息，并基于各装置位置信息特定各装置的装置识别信息。由此，特定(识别)协同功能。

以下，详细说明本实施方式的图像形成系统。

参照图6，对装置功能信息32详细地进行说明。在图6中，示出作为装置功能信息32的装置功能管理表的一例。在装置功能管理表中，作为一例，使装置ID、表示装置名(例如装置的种类)的信息、表示装置所具有的功能的信息(功能识别信息)、图像ID相互关联。装置ID和装置名称相当于装置识别信息的一例。图像ID是用于识别表示装置的图像(例如表示装置的外观的图像、示意性表示装置的图像(例如图标)等)的图像识别信息的一例。此外，装置功能管理表中也可以不含图像ID。例如，装置ID为“B”的装置是复合机(具有多个图像形成功能的图像形成装置)，具有打印功能或扫描功能等功能。用于识别表示该装置的图像的图像ID与该装置相关联。表示装置的图像的数据例如存储于服务器14的存储部30。

例如，通过应用AR技术，取得用于识别利用目标的装置的装置ID。服务器14的特定部38通过参照装置功能管理表，特定与该装置ID相关联的装置名称、功能及图像ID。由此，识别利用目标的装置。例如，将表示装置名称的信息、及表示装置的图像的数据从服务器14发送到终端装置16，它们被显示于终端装置16的UI部46。表示装置的图像作为与该装置相关的图像被显示。当然，也可以在终端装置16的UI部46显示由摄像头42拍摄到的图像本身。另外，在终端装置16的UI部46，当由用户指定与装置相关的图像(例如由摄像头42拍摄的图像或示意性表示装置的图像)时，可以从服务器14向终端装置16发送关于该装置所具有的功能的信息(例如功能识别信息或功能的说明信息等)并在终端装置16的UI部46显示。

以下，参照图7对协同功能信息34详细地进行说明。图7表示作为协同功能信息34的协同功能管理表的一例。在协同功能管理表中，作为一例，装置ID的组合、表示协同目标的装置名(例如各装置的种类)的信息、表示协同功能的信息(协同功能识别信息)相互关联。例如，装置ID为“A”的装置是PC(个人计算机)，装置ID为“B”的装置是复合机。通过使PC(A)和复合机(B)协同，作为协同功能，实现例如“扫描传送功能”及“打印功能”。“扫描传送功能”是将通过复合机(B)的扫描而生成的图像数据向PC(A)传送的功能。“打印功能”是将保存于PC(A)的数据(例如图像数据或文档数据)向复合机(B)发送并用复合机(B)进行打印的功能。

以下，参照图8，对单独利用装置时的处理进行说明。在图8中，示出单独利用的装置的一例。作为一例，图像形成装置10是被单独利用的装置。图像形成装置10例如是复合机。图像形成装置10是现实空间存在的装置。图8所示的终端装置16是现实空间存在的装置，例如是智能手机或手机等便携终端装置。

例如，在图像形成装置10的框体上设置有二维条形码等标记50。在使用标记型AR技术或无标记型AR技术的情况下，用户通过终端装置16(例如智能手机)的摄像头42拍摄利用目标的图像形成装置10。由此，生成表示标记50的图像数据或表示图像形成装置10的外观的外观图像数据。在终端装置16的UI部46的显示部显示有装置显示画面52，在该装置显示画面52显示有与图像形成装置10相关的装置图像54。装置图像54例如是通过摄像头42的拍摄而生成的图像(可以是具有拍摄时的尺寸的图像，也可以是放大或缩小的图像)。

通过摄像头42的拍摄而生成的图像数据从终端装置16发送到服务器14。在服务器14中，控制部36通过对图像数据应用解码处理而提取图像形成装置10的装置识别信息，由此，识别图像形成装置10。作为另一例，也可以生成表示图像形成装置10的外观的外观图像数据，从终端装置16向服务器14发送外观图像数据。该情况下，在服务器14中，控制部36通过参照外观图像关联信息，特定图像形成装置10的装置识别信息。由此，识别图像形成装置10。

另外，服务器14的特定部38通过参照装置功能信息32(例如，图6所示的装置功能管理表)，特定(识别)图像形成装置10所具有的功能。关于这一点，参照图6详细地进行说明。图像形成装置10作为一例是“复合机(B)”。特定部38特定图6所示的装置功能管理表中与复合机(B)相关联的功能。由此，特定复合机(B)所具有的功能。关于被特定的功能的信息从服务器14发送到终端装置16。当然，用于识别装置及功能的处理也可以由终端装置16进行。

此外，在装置显示画面52上，也可以代替通过摄像头42的拍摄而生成的图像，作为装置图像54显示与所识别的图像形成装置10相关的预先准备的图像(不是通过拍摄得到的图像本身，而是示意性的图像(例如图标))或通过外部的摄像头的拍摄而生成的图像。

例如，在利用通过拍摄装置而得到的图像数据的情况下，由于当前的装置本身的外观(例如反映出划痕、笔记、粘贴在装置上的贴纸等的外观)反映在图像上，因此，具有对于用户来说通过视觉了解与其它同种装置的不同的效果。

在利用示意性图像的情况下，示意性的图像的数据例如从服务器14发送到终端装置16。例如当识别图像形成装置10时，服务器14的特定部38通过参照图6所示的装置功能管理表(装置功能信息32)，特定与图像形成装置10相关的示意性图像。该示意性图像的数据从服务器14发送到终端装置16，该示意性图像被作为装置图像54显示于装置显示画面52。示意性图像的数据也可以预先存储于终端装置16。该情况下，当识别图像形成装置10时，存储于终端装置16的装置图像54在装置显示画面52上显示。示意性图像的数据也可以存储于服务器14或终端装置16以外的装置中。

另外，当装置被识别时，将表示该装置的名称的信息从服务器14发送到终端装置16，在终端装置16，也可以在装置显示画面52上显示装置的名称。在图8所示的例子中，图像形成装置10是复合机，显示其名称“复合机(B)”。

当特定了图像形成装置10所具有的功能时，例如，如图9所示，终端装置16的控制部48使终端装置16的UI部46显示功能显示画面56，且在该功能显示画面56上显示关于功能的信息。作为有关功能的信息，例如显示用于指示该功能的执行的按钮图像。作为图像形成装置10的复合机(B)例如具有打印功能、扫描功能、复印功能及传真功能，因此，在功能显示画面56上显示用于指示这些功能的执行的按钮图像。例如，当用户使用终端装置16指定表示打印功能的按钮图像，并指示打印功能的执行时，表示打印功能的执行指示的执行指示信息从终端装置16发送到图像形成装置10。该执行指示信息中包含用于执行打印功能的控制数据、或打印功能所应用的图像数据等数据等。图像形成装置10收到执行指示信息时，则按照该执行指示信息执行打印。

在图10中，示出功能显示画面的另一例。如图8所示，该功能显示画面58是在利用单体装置时，在终端装置16的UI部46显示的画面。如上所述，特定利用目标的装置(例如图像形成装置10)，并特定利用目标的装置所具有的功能。另外，使用利用目标的装置的用户也可以特定表示与用户识别信息相关联的功能的功能识别信息、即该用户可利用的功能。进而，因为特定了利用目标的装置所具有的功能，所以也可以特定在成为提供目标的功能组中利用目标的装置不具有的功能。这些信息也可以在功能显示画面58上显示。

在图10所示的功能显示画面58上，作为功能识别信息的一例，显示有表示功能A的按钮图像60、表示功能B的按钮图像62、及表示功能C的按钮图像64。功能A是利用目标的装置(例如所识别的图像形成装置10)所具有的功能、即用户可利用的功能。功能B是利用目标的装置所具有的功能、即用户不可利用的功能。用户通过接受功能B的提供，该用户则可以利用功能B。如果功能B是有偿的功能，用户则可以通过购买功能B而利用功能B，如果功能B是无偿的功能，用户则可以通过无偿接受功能B的提供而利用功能B。功能C是利用目标的装置不具有的功能、即利用目标的装置不对应的功能。终端装置16的控制部48也可以根据由按钮图像表示的功能是否是利用目标的装置所具有的功能，改变该按钮图像的显示方式。另外，控制部48也可以根据由按钮图像表示的功能是否是用户可利用的功能，改变该按钮图像的显示方式。例如，控制部48也可以改变按钮图像的颜色或形状。在图10所示的例子中，按钮图像60、62、64分别用不同的颜色显示。作为一例，表示利用目标的装置所具有的功能即用户可利用的功能的按钮图像(例如显示功能A的按钮图像60)用蓝色显示。表示利用目标的装置所具有的功能即用户不可利用的功能的按钮图像(显示功能B的按钮图像62)用黄色显示。表示利用目标的装置不具有的功能的按钮图像(例如显示功能C的按钮图像64)用灰色显示。作为另一例，控制部48可以改变按钮图像60、62、64的形状，也可以改变功能显示名称的字体。当然，也可以通过另外的方法改变显示方式。由此，能够以良好的可视性向用户传递各功能可否利用。

例如，当用户利用终端装置16指定表示功能A的按钮图像60并赋予功能A的执行指示时，表示功能A的执行指示的执行指示信息从终端装置16发送到利用目标的装置。该执行指示信息中包含用于执行功能A的控制数据、或功能A进行的处理所应用的图像数据等数据等。利用目标的装置收到执行指示信息时，则按照该执行指示信息执行功能A。例如，在利用目标的装置为图像形成装置10的情况中功能A为扫描传送功能的情况下，由图像形成装置10的图像形成部20执行扫描功能，由此生成扫描数据(图像数据)。该扫描数据从图像形成装置10发送到所设定的接收地址(例如终端装置16)。

另外，在用户利用终端装置16指定了表示功能B的按钮图像62且指示功能B的提供的情况下，执行提供处理。在由服务器14进行提供处理的情况下，终端装置16访问服务器14。由此，作为用于使用户可以利用功能B的信息，在终端装置16的UI部46显示用于接受功能B的提供的画面(例如Web站点)。通过在该画面上进行提供程序，用户可以利用功能B。例如，在终端装置16存储有Web浏览器的程序，通过利用该Web浏览器，实现从终端装置16向服务器14的访问。当用户使用Web浏览器访问服务器14时，在终端装置16的UI部46显示功能提供画面(例如Web站点)，经由该Web站点提供功能。当然，也可以通过服务器14以外的服务器等进行提供处理。作为另一例，在终端装置16的UI部46，作为用于使用户可以利用功能B的信息，也可以显示用于对管理者等委托功能B的利用的利用许可委托画面(例如Web站点)。经由该利用许可委托画面将功能B的利用许可委托给管理者等，在得到该许可的情况下，用户可以利用功能B。

以下，参照图11对利用协同功能时的处理进行说明。在图11中，示出协同目标的装置的一例。作为一例，使用图像形成装置10和作为装置12的投影仪(以下称作投影仪12)用作协同目标的装置。图像形成装置10、投影仪12及终端装置16是存在于现实空间的装置。

例如，在图像形成装置10的框体上设置有二维条形码等标记50，在投影仪12的框体上设置有二维条形码等标记66。标记66是将投影仪12的装置识别信息编码化的信息。在使用标记型AR技术或无标记型AR技术的情况下，用户通过终端装置16(例如智能手机)的摄像头42拍摄协同目标的图像形成装置10和投影仪12。在图11所示的例子中，在摄像头42的拍摄区域包含图像形成装置10和投影仪12这两者的状态下，一起拍摄图像形成装置10和投影仪12。由此，生成表示各标记50、66的图像数据。在终端装置16的UI部46的显示部显示有装置显示画面68，在该装置显示画面68显示有与图像形成装置10相关的装置图像70和与投影仪12相关的装置图像72。装置图像70、72例如是通过摄像头42的拍摄而生成的图像(可以是具有拍摄时的尺寸的图像，也可以是放大或缩小的图像)。

通过摄像头42的拍摄而生成的图像数据从终端装置16发送到服务器14。在服务器14中，控制部36通过对图像数据应用解码处理而提取图像形成装置10的装置识别信息和投影仪12的装置识别信息，由此，识别图像形成装置10和投影仪12。作为另一例，也可以生成表示图像形成装置10和投影仪12各自的外观的外观图像数据，并将其从终端装置16发送到服务器14。该情况下，在服务器14中，控制部36通过参照外观图像关联信息，特定图像形成装置10的装置识别信息和投影仪12的装置识别信息。由此，识别图像形成装置10和投影仪12。

另外，服务器14的特定部38通过参照协同功能信息34(例如图7所示的协同功能管理表)，特定(识别)利用图像形成装置10所具有的功能和投影仪12所具有的功能的协同功能。参照图7详细说明这一点。图像形成装置10作为一例为“复合机(B)”，投影仪12作为一例为“投影仪(C)”。特定部38特定图7所示的协同功能管理表中与复合机(B)和投影仪(C)的组合相关联的协同功能。由此，特定通过使复合机(B)和投影仪(C)协同而执行的协同功能。关于特定的协同功能的信息从服务器14发送到终端装置16。当然，用于识别装置或协同功能的处理也可以由终端装置16进行。

此外，在装置显示画面68上，也可以代替通过摄像头42的拍摄而生成的图像，显示与识别的图像形成装置10相关的预先准备的图像(例如示意性图像(例如图标))、或通过外部的摄像头的拍摄而生成的图像，作为装置图像70。同样，也可以显示与被识别的投影仪12相关的预先准备的图像或通过外部的摄像头的拍摄而生成的图像，作为装置图像72。如上所述，示意性图像的数据例如可以从服务器14发送到终端装置16，也可以预先存储于终端装置16，还可以存储于这些以外的装置。

另外，当识别装置时，也可以将表示该装置的名称的信息从服务器14发送到终端装置16，在终端装置16中，在装置显示画面68上显示装置的名称。在图11所示的例子中，示出图像形成装置10的名称“复合机(B)”和投影仪12的名称“投影仪(C)”。

此外，即使在拍摄到多个装置的情况下，服务器14的特定部38也可以通过参照装置功能信息32而特定各装置所具有的功能。在图11所示的例子中，特定部38也可以分别特定图像形成装置10所具有的功能和投影仪12所具有的功能。关于所特定的功能的信息也可以从服务器14发送到终端装置16。

当特定协同功能时，例如，如图12所示，终端装置16的控制部48使终端装置16的UI部46显示功能显示画面74，且使该功能显示画面74显示关于协同功能的信息。作为关于协同功能的信息，例如显示用于指示该协同功能的执行的按钮图像。通过使复合机(B)与投影仪(C)协同，例如，可以执行由投影仪(C)投影通过复合机(B)的扫描而生成的图像的协同功能、或由复合机(B)打印通过投影仪(C)投影的图像的协同功能。用于指示这些协同功能的执行的按钮图像显示于功能显示画面74。例如，当用户使用终端装置16指定按钮图像、指示协同功能的执行时，表示该协同功能的执行指示的执行指示信息则从终端装置16发送到图像形成装置10和投影仪12。图像形成装置10和投影仪12收到执行指示信息时，则执行由用户指定的协同功能。

也可以通过用户的操作而指定协同目标的装置。例如，通过由摄像头12拍摄图像形成装置10和投影仪12，如图11所示，在终端装置16的UI部46显示与图像形成装置10相关的装置图像70和与投影仪12相关的装置图像72。此外，与装置相关的图像可以是通过摄像头42的拍摄得到的图像，也可以是与所识别的装置相关的预先准备的图像(例如示意性图像(例如图标))。通过用户在装置显示画面68上指定装置图像70、72，指定图像形成装置10和投影仪12作为协同目标的装置。例如，当用户指定装置图像70时，标记型AR技术或无标记型AR技术被应用于装置图像70，由此，特定(识别)图像形成装置10。同样，当用户指定装置图像72时，标记型AR技术或无标记型AR技术被应用于装置图像72，由此，特定(识别)投影仪12。由此，特定由图像形成装置10和投影仪12执行的协同功能，在终端装置16的UI部46显示关于该协同功能的信息。

作为另一例，通过用户在装置显示画面68上触摸装置图像70，并在直至装置图像72之间用手指进行操作(例如用手指等描绘)，指定装置图像70、72，且也可以指定图像形成装置10和投影仪12作为协同目标的装置。触摸装置图像70、72的顺序或描绘的方向也可以与上述的例子相反。当然，也可以使用用于描绘装置显示画面68的笔之类的手指以外的画面接触装置。可以通过如画圆那样的描绘操作来指定协同目标的装置，也可以通过在预先设定的时间内指定与要协同的装置相关的装置图像，指定协同目标的装置。在解除协同时，用户可以在装置显示画面68上指定解除目标的装置，也可以按协同解除按钮。在不是协同目标的装置被映在图像上的情况下，也可以通过用户在装置显示画面68上指定该装置，将该装置从协同目标的装置组除去。也可以通过如标注十字标记等那样的预先设定的操作，指定解除目标的装置。

协同目标的各装置也可以分别拍摄。例如，通过将摄像头42的拍摄分多次进行，识别协同目标的各装置。在将摄像头42的拍摄分成多次的情况下，在各次拍摄中被识别的装置的装置识别信息被存储于服务器14或终端装置16的存储部。例如，在摄像头42的拍摄区域包含图像形成装置10的状态下拍摄图像形成装置10，接着，在摄像头42的拍摄区域包含投影仪12的状态下拍摄投影仪12。由此，生成关于图像形成装置10的图像数据和关于投影仪12的图像数据，通过对各图像数据应用标记型AR技术或无标记型AR技术，特定(识别)图像形成装置10和投影仪12，并特定(识别)利用图像形成装置10和投影仪12的功能的协同功能。例如，不限于将协同目标的各装置配置在相互接近的位置并在摄像头42的拍摄区域必须一并包含图像形成装置10和投影仪12这两者。有时也可以通过改变摄像头42的拍摄区域的角度或放大或缩小拍摄区域来对应，但在用这样的操作不能对应的情况下，通过分多次进行拍摄而识别协同目标的装置的方法也可以作为解决方案。

作为另一例，也可以预先设定协同目标的装置作为基本协同装置。例如，预先设定图像形成装置10作为基本协同装置。基本协同装置的装置识别信息也可以预先存储于服务器14或终端装置16的存储部。用户也可以利用终端装置16指定基本协同装置。在设定了基本协同装置的情况下，用户通过终端装置16的摄像头42拍摄基本协同装置以外的协同目标的装置。由此，特定(识别)协同目标的装置，并特定(识别)利用基本协同装置和拍摄到的装置所具有的功能的协同功能。

此外，在即使应用AR技术等也无法识别拍摄目标的装置的情况下，表示该拍摄目标的装置的装置图像也可以不在装置显示画面上显示。由此，能够提高所识别的装置的可视性。例如，在识别出的装置和未识别的装置混合存在，且分别由摄像头42拍摄到的情况下，将表示未识别的装置的装置图像设为非显示。由此，表示识别出的装置的装置图像被显示且不会被表示未识别的装置的装置图像掩盖，由此，能够提高识别出的装置的可视性。另外，也可以将表示识别出的装置的装置图像强调显示。例如，也可以用特定的颜色显示表示识别出的装置的装置图像，也可以强调显示装置图像的边缘，也可以将装置图像放大显示，也可以将装置图像三维显示，还可以使装置图像闪烁显示。由此，能够提高识别出的装置的可视性。

以下，对单独利用装置的功能(以下称作“单独利用功能”)的显示和协同功能的显示的切换控制详细地进行说明。

例如，在预先设定的识别时间内仅识别出一个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置(例如图像形成装置10)所具有的功能的信息，将其作为关于单独利用功能的信息。识别期间的长度也可以由用户进行变更。此外，也可以通过应用AR技术来识别装置，还可以通过应用AR技术以外的技术来识别装置。装置的识别处理可以由服务器14进行，也可以由终端装置16进行。识别时间的起点(起算点)例如可以是识别出一个装置的时间点，也可以是用户指定的时间点(例如识别处理开始时间点)。

例如，从识别到一个装置的时间点起在识别时间内未识别到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。该情况下，该一个装置作为在识别期间内被识别的装置来对待。关于装置的信息可以是从服务器14发送到终端装置16的信息，也可以是预先存储于终端装置16的信息。

作为另一例，将用户指定的时间点作为识别时间的开始时间点，从该开始时间点起在识别时间内仅识别到一个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。

作为另一例，在识别到一个装置后，赋予了单独利用功能的显示指示的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。终端装置16的控制部48例如总是或者在拍摄到一个装置的情况下(或者识别到一个装置的情况下)，使图8所示的装置显示画面52显示用于指示单独利用功能的显示的按钮图像。在由用户按了该按钮图像的情况下，控制部48使UI部46显示关于该一个装置所具有的功能的信息。

在经过了识别时间的时间点，终端装置16的控制部48也可以使终端装置16的UI部46显示确认画面。该确认画面例如是用于用户指示识别时间的延长的画面。在用户经由确认画面指示了识别时间的延长的情况下，在该延长时间内未拍摄到其它装置时，终端装置16的控制部48使终端装置16的UI部46显示关于所识别的装置所具有的功能的信息。

对关于单独利用功能的信息的显示控制更详细地进行说明。例如，通过标记型AR技术或无标记型AR技术来识别装置。例如，在预先设定的拍摄时间内仅拍摄到一个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。拍摄时间的起点(起算点)可以是拍摄到一个装置的时间点，也可以是用户指示的时间点(例如拍摄开始时间点)。拍摄时间的长度也可以由用户进行变更。此外，当拍摄到该一个装置时，通过标记型AR技术或无标记型AR技术识别该一个装置。该识别处理可以由服务器14进行，也可以由终端装置16进行。

例如，从拍摄到一个装置的时间点起在拍摄时间内未拍摄到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。该情况下，该一个装置作为在拍摄时间内被拍摄到的装置来对待。

作为另一例，将用户指定的时间点作为拍摄时间的开始时间点，从该开始时间点起在拍摄时间内仅拍摄到一个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。

作为另一例，在拍摄到一个装置后赋予了单独利用功能的显示指示的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于该一个装置所具有的功能的信息，将其作为关于单独利用功能的信息。

例如，在拍摄时间内仅拍摄到一个装置的情况下(例如从拍摄到第一个装置的时间点起在拍摄时间内未拍摄到其它装置的情况、或从用户指定的开始时间点起在拍摄时间内仅拍摄到一个装置的情况下)，终端装置16的控制部48将通过该拍摄生成的图像数据发送到服务器14。拍摄时间可以由控制部48测量，也可以由计时器测量。服务器14的特定部38基于该图像数据特定(识别)装置，并特定该装置所具有的功能。关于该功能的信息被从服务器14发送到终端装置16并显示于终端装置16的UI部46。当然，也可以是终端装置16不进行时间的管理，而是服务器14进行时间的管理，将关于所识别的装置所具有的功能的信息发送到终端装置16。

在经过了拍摄时间的时间点，终端装置16的控制部48也可以使终端装置16的UI部46显示确认画面。该确认画面例如是用于用户指示拍摄时间的延长的画面。在用户经由确认画面指示了拍摄时间的延长的情况下，在该延长时间内未拍摄到其它装置时，终端装置16的控制部48将通过拍摄得到的图像数据发送到服务器14，相应地，使终端装置16的UI部46显示该一个装置所具有的功能。延长时间的长度也可以由用户进行变更。

作为另一例，终端装置16的控制部48在拍摄到一个装置后并赋予了单独利用功能的显示指示的情况下，将通过该拍摄而生成的图像数据发送给服务器14，相应地，也可以从服务器14接收关于拍摄的装置所具有的功能的信息。

作为再一例，终端装置16的控制部48也可以在每次拍摄装置而生成图像数据时，将该图像数据发送给服务器14，相应地从服务器14接收关于拍摄到的装置所具有的功能的信息。该情况下，终端装置16的控制部48在于拍摄时间内仅拍摄到一个装置的情况下，使终端装置16的UI部46显示关于该一个装置的信息，将其作为关于单独利用功能的信息。

另一方面，在识别时间内识别到多个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在该识别时间内识别的多个装置所具有的功能的协同功能的信息。在延长了识别时间的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在包含该延长时间的识别时间内所识别的多个装置所具有的功能的协同功能的信息。在该识别时间内所识别的多个装置被指定作为协同目标的装置。关于协同功能的信息可以是从服务器14发送到终端装置16的信息，也可以是预先存储于终端装置16的信息。

例如，从识别到第一个装置的时间点起在识别时间内识别到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用包含该第一个装置和该其它装置的多个装置所具有的功能的协同功能的信息。该情况下，第一个装置也被作为在识别时间内所识别的装置来对待。

另外，从识别到第一个装置的时间点起在识别时间内识别到其它装置的情况下，终端装置16的控制部48也可以设定以识别到该其它装置的时间点为开始时间点的新的识别时间。以后也同样，在新的识别时间内进一步识别到其它装置的情况下，进一步设定新的识别时间。该情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在全识别时间内所识别的多个装置(包含第一个装置)所具有的功能的协同功能的信息。

作为另一例，将用户指定的时间点作为识别时间的开始时间点，从该开始时间点起在识别时间内拍摄到多个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。

作为另一例，在识别到多个装置后赋予了协同功能的显示指示的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。终端装置16的控制部48例如总是、或在拍摄到多个装置的情况下(或识别到多个装置的情况下)，使装置显示画面68显示用于指示协同功能的显示的按钮图像。在用户按了该按钮图像的情况下，控制部48使UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。

作为另一例，在识别到第一个装置后且在未赋予该第一个装置所具有的功能的执行指示的期间识别到其它装置的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。例如，如图9或图10所示，在终端装置16的UI部46显示有功能显示画面56、58的状态下，在由用户指示功能的执行之前拍摄到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用最初识别的装置和该其它装置所具有的功能的协同功能的信息。

对关于协同功能的信息的显示控制更详细地进行说明。例如，通过标记型AR技术或无标记型AR技术识别多个装置。例如，在预先设定的拍摄时间内拍摄到多个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在该拍摄时间内拍摄到的多个装置所具有的功能的协同功能的信息。在延长了拍摄时间的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在包含该延长时间的拍摄时间内拍摄到的多个装置所具有的功能的协同功能的信息。在该拍摄时间内拍摄到的多个装置被指定作为协同目标的装置。此外，如果拍摄到多个装置，则通过标记型AR技术或无标记型AR技术识别该多个装置。该识别处理可以由服务器14进行，也可以由终端装置16进行。

例如，从拍摄到第一个装置的时间点起在拍摄时间内拍摄到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用包含该第一个装置和该其它装置的多个装置所具有的功能的协同功能的信息。该情况下，第一个装置也被作为在拍摄时间内拍摄的装置来对待。

另外，从拍摄到第一个装置的时间点起在拍摄时间内拍摄到其它装置的情况下，终端装置16的控制部48也可以设定将拍摄到该其它装置的时间点作为开始时间点的新的拍摄时间。以后也同样，在新的拍摄时间内进一步拍摄到其它装置的情况下，进一步设定新的拍摄时间。该情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用在全拍摄时间内拍摄到的多个装置(包含第一个装置)所具有的功能的协同功能的信息。

作为另一例，将用户指定的时间点作为拍摄时间的开始时间点，从该开始时间点起在拍摄时间内拍摄到多个装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。

作为另一例，在拍摄到多个装置后并赋予了协同功能的显示指示的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。

作为另一例，在拍摄到第一个装置后且在未赋予该第一个装置所具有的功能的执行指示期间拍摄到其它装置的情况下，终端装置16的控制部48也可以使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。例如，如图9或图10所示，在终端装置16的UI部46显示有功能显示画面56、58的状态下，在由用户指示功能的执行之前拍摄到其它装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用最初拍摄到的装置和该其它装置所具有的功能的协同功能的信息。

例如，在拍摄时间内拍摄到多个装置的情况下(例如从拍摄到第一个装置的时间点起在拍摄时间内拍摄到其它装置的情况、或从用户指定的开始时间点起在拍摄时间内拍摄到多个装置的情况)，终端装置16的控制部48将通过该拍摄生成的多个图像数据发送到服务器14。服务器14的特定部38基于各图像数据特定(识别)各装置，且特定利用所识别的多个装置所具有的功能的协同功能。关于该协同功能的信息被从服务器14发送到终端装置16并在终端装置16的UI部46进行显示。当然，也可以特定各装置单独具有的功能，将关于各装置所具有的功能的信息从服务器14发送到终端装置16，并显示于终端装置16的UI部46。

作为另一例，终端装置16的控制部48在拍摄到多个装置后并赋予了协同功能的显示指示的情况下，将通过该拍摄生成的多个图像数据发送到服务器14，相应地，也可以从服务器14接收关于利用拍摄到的多个装置所具有的功能的协同功能的信息。

作为另一例，在拍摄到第一个装置后并赋予了该第一个装置所具有的功能的执行指示之前拍摄到其它装置的情况下，终端装置16的控制部48将通过该拍摄生成的多个图像数据发送到服务器14，相应地，也可以从服务器14接收关于利用拍摄到的多个装置所具有的功能的协同功能的信息。

作为另一例，终端装置16的控制部48在每次拍摄到装置并生成图像数据时，都将该图像数据发送到服务器14，相应地，也可以从服务器14接收关于利用拍摄到的多个装置所具有的功能的协同功能的信息。该情况下，终端装置16的控制部48在拍摄时间内拍摄到多个装置的情况下，使终端装置16的UI部46显示关于利用该多个装置所具有的功能的协同功能的信息。

以下，对关于功能的信息的另一显示例进行说明。

在图13中，示出单独利用功能的显示例。终端装置16的控制部48使终端装置16的UI部46显示装置显示画面52，且使该装置显示画面52显示表示拍摄到的装置(例如图像形成装置10)的装置图像54、和关于该装置所具有的功能的信息。在图13所示的例子中，在具有气球形状的显示区域76显示有关于图像形成装置10所具有的功能的信息(例如各功能的名称)。显示区域76的形状只不过是一个例子，也可以显示具有其它形状的显示区域76。当由用户指定关于显示于显示区域76内的功能的信息并赋予了功能的执行指示时，执行该指定的功能。

在图14中，示出协同功能的显示例。终端装置16的控制部48使终端装置16的UI部46显示装置显示画面68，且在该装置显示画面68显示表示拍摄到的多个装置(例如图像形成装置10和投影仪12)的装置图像70、72。另外，终端装置16的控制部48使装置显示画面68显示关于利用该多个装置所具有的功能的协同功能的信息。在图14所示的例子中，在具有气球形状的显示区域78显示有关于协同功能的信息(例如协同功能的名称或说明文)。显示区域78只不过是一个例子，也可以显示具有其它形状的显示区域78。当由用户指定关于显示于显示区域78内的协同功能的信息并赋予协同功能的执行指示时，执行该指定的协同功能。

另外，终端装置16的控制部48也可以使装置显示画面68显示关于协同目标的各装置所具有的单独利用功能的信息。在图14所示的例子中，在具有气球形状的显示区域80显示有关于图像形成装置10所具有的功能的信息，在具有气球形状的显示区域82显示有关于投影仪12所具有的功能的信息。终端装置16的控制部48也可以将关于协同功能的信息和关于单独利用功能的信息区别开显示于装置显示画面68。例如，显示区域78也可以用与显示区域80、82不同的颜色进行显示，显示区域78的形状也可以是与显示区域80、82的形状不同的形状。作为另一例，显示区域78、80、82的显示位置可以根据单独利用功能和协同功能而不同。例如，显示区域80在对应的装置图像70附近被显示，显示区域82在对应的装置图像72附近被显示，显示区域78在比显示区域80、82更远离装置图像70、72的位置被显示。这样，通过将显示区域78与显示区域80、82区别开进行显示，用户能够容易进行单独利用功能和协同功能的区别。

终端装置16的控制部48也可以根据用户的指示控制关于单独利用功能的信息的显示或关于协同功能的信息的显示。例如，在用户指定了装置图像(例如装置图像70)的情况下，终端装置16的控制部48也可以使装置显示画面68显示关于与所指定的装置图像相关的装置(例如图像形成装置10)所具有的功能的信息。在用户指定装置图像并赋予了单独利用功能的显示指示的情况下，终端装置16的控制部48使装置显示画面68显示关于与所指定的装置图像相关的装置所具有的功能的信息。在用户指定了多个装置图像(例如装置图像70、72)的情况下，终端装置16的控制部48也可以使装置显示画面68显示关于利用与所指定的多个装置图像相关的多个装置(例如图像形成装置10和投影仪12)所具有的功能的协同功能的信息。例如，在由用户指定了第一个装置图像后，在预先设定的时间内由用户指定了其它装置图像的情况下，终端装置16的控制部48使装置显示画面68显示关于利用与这些多个装置图像相关的多个装置所具有的功能的协同功能的信息。作为另一例，在用户指定多个装置图像并赋予了协同功能的显示指示的情况下，终端装置16的控制部48也可以使装置显示画面68显示关于利用与所指定的多个装置图像相关的多个装置所具有的功能的协同功能的信息。

如上所述，根据本实施方式，在识别(例如拍摄)到一个装置的情况下，显示关于该一个装置所具有的功能的信息，在识别(例如拍摄)到多个装置的情况下，显示关于利用该多个装置所具有的功能的协同功能的信息。由此，向用户提供利用识别(例如拍摄)到的装置可执行的功能的信息，这对于用户来说会较便利。

另外，通过执行协同功能，执行各装置无法单独执行的功能，因此，会较便利。

另外，因为仅应用AR技术识别装置即可利用单独利用功能及协同功能，所以与用户通过手动操作进行用于执行功能的设定等的情况相比，用简单的作业就可以利用各功能，从而能够节省用户的时间和精力。

另外，根据本实施方式，例如，在多个用户利用多个装置这样的环境下，在终端装置16适当地显示关于单独利用功能的信息或与关于协同功能的信息。例如，即使在从装置去除了触摸面板等用户接口的情况下，终端装置16也可作为用户接口使用。作为其它场面，例如在用户的目的地等暂时利用装置的情况下，也可以由终端装置16实现适于该用户的用户接口、即显示有由该用户指定的装置所具有的功能或利用该装置的协同功能的用户接口。

此外，在上述实施方式中，对利用两个装置的协同功能进行了说明，但是，不用说，协同功能也可以是利用三个以上的装置的功能。

另外，即使在识别(例如拍摄)到多个装置的情况下，由用户指定的装置也能够被从协同目标的装置除外。

(变形例1)

以下，对变形例1进行说明。在变形例1中，识别到多个装置，且显示关于协同功能的信息。与上述的实施方式同样，装置可以通过使用AR技术来识别，也可以通过使用AR技术以外的技术来识别。装置的识别处理可以由服务器14进行，也可以由终端装置16进行。

在变形例1中，终端装置16的控制部48根据装置显示画面68上的装置图像的显示位置而改变协同功能，并使终端装置16的UI部46显示关于该协同功能的信息。例如，根据装置图像的显示位置变更在协同功能中被利用的各装置的利用顺序，终端装置16的控制部48使终端装置16的UI部46显示关于按照该利用顺序的协同功能的信息。换言之，根据装置图像的显示位置变更在协同功能中被利用的各装置之间移动的数据的移动顺序，终端装置16的控制部48使终端装置16的UI部46显示关于按照该移动顺序的协同功能的信息。以下，对变形例1详细地进行说明。

在图15中，示出变形例1的装置显示画面68。在装置显示画面68上，例如通过边界线84预先设定有显示与成为起点的装置相关的装置图像的起点显示区域86、和显示与成为下一协同目标的装置相关的装置图像的协同目标显示区域88。作为一个例子，装置显示画面68被左右分割，在左侧设定起点显示区域86，在右侧设定协同目标显示区域88。当然，边界线84或表示显示区域的字符列(例如“左”或“右”)也可以不被显示。在图15所示的例子中，在起点显示区域86显示有装置图像70，在协同目标显示区域88显示有装置图像72。因此，指定与装置图像70相关的图像形成装置10(复合机(B))作为起点装置，指定与装置图像72相关的投影仪12(投影仪(C))作为协同目标装置。该情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用图像形成装置10作为起点装置并且利用投影仪12作为协同目标装置的协同功能的信息。终端装置16的控制部48例如使终端装置16的UI部46显示关于先利用作为起点装置的图像形成装置10，接着利用作为协同目标装置的投影仪12的协同功能的信息。换言之，终端装置16的控制部48使终端装置16的UI部46显示关于使数据从作为起点装置的图像形成装置10向作为协同目标装置的投影仪12移动的协同功能的信息。此外，装置图像70、72可以是通过摄像头的拍摄而生成的图像，也可以是示意性图像(例如图标)。

在图16中，示出关于协同功能的信息的显示例。在终端装置16的UI部46显示有功能显示画面90，在该功能显示画面90中显示有关于利用图像形成装置10作为起点装置并且利用投影仪12作为协同目标装置的协同功能的信息。在图16所示的例子中，该协同功能是使通过扫描得到的图像数据从图像形成装置10(复合机(B))向投影仪12(投影仪(C))移动并由投影仪12投影图像的功能。具体而言，当执行该协同功能时，利用图像形成装置10作为起点装置，将通过该图像形成装置10进行的扫描而生成的图像数据发送到作为协同目标装置的投影仪12，并由投影仪12投影图像。

在图17中，示出变形例1的装置显示画面68的另一个例子。在装置显示画面68上，通过边界线84设定起点显示区域92和协同目标显示区域94。与图15所示的例子不同，在装置显示画面68上，在右侧设定有起点显示区域92，在左侧设定有协同目标显示区域94。该情况下，指定与装置图像72相关的投影仪12(投影仪(C))作为起点装置，指定与装置图像70相关的图像形成装置10(复合机(B))作为协同目标装置。该情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用投影仪12作为起点装置并且利用图像形成装置10作为协同目标装置的协同功能的信息。终端装置16的控制部48例如使终端装置16的UI部46显示关于先利用作为起点装置的投影仪12，接着利用作为协同目标装置的图像形成装置10的协同功能的信息。换言之，终端装置16的控制部48使终端装置16的UI部46显示关于使数据从作为起点装置的投影仪12向作为协同目标装置的图像形成装置10移动的协同功能的信息。

在图18中，示出关于协同功能的信息的显示例。在终端装置16的UI部46显示有功能显示画面96，在该功能显示画面96中显示有关于利用投影仪12作为起点装置并且利用图像形成装置10作为协同目标装置的协同功能的信息。在图18所示的例子中，该协同功能是打印(印刷)所投影的图像的功能。具体而言，当执行该协同功能时，利用投影仪12作为起点装置，将被投影仪12投影的图像数据发送到作为协同目标装置的图像形成装置10，并由图像形成装置10打印该图像数据。

在变形例1中，终端装置16将显示于起点显示区域86(92)的装置图像的数据作为起点装置的图像数据发送到服务器14，将显示于协同目标显示区域88(94)的装置图像的数据作为协同目标装置的图像数据发送到服务器14。服务器14的特定部38将与起点装置的图像数据相关的装置作为起点装置对待，将与协同目标装置的图像数据相关的装置作为协同目标装置对待。在服务器14中存储有变形例1的协同功能管理表的数据，在该协同功能管理表中，起点装置的装置识别信息、协同目标功能的装置识别信息、协同功能识别信息相互关联。服务器14的特定部38在该协同功能管理表中特定与作为起点装置特定的装置的装置识别信息和作为协同目标装置特定的装置的装置识别信息相关联的协同功能识别信息。例如，作为起点装置的图像形成装置10的装置识别信息、作为协同目标装置的投影仪12的装置识别信息、投影通过扫描而得到的图像的协同功能(图16所示的协同功能)的协同功能识别信息相互关联。另外，作为起点装置的投影仪12的装置识别信息、作为协同目标装置的图像形成装置10的装置识别信息、打印所投影的图像的协同功能(图18所示的协同功能)的协同功能识别信息相互关联。因此，通过参照变形例1的协同功能管理表，特定利用起点装置和协同目标装置所具有的功能的协同功能。

在变形例1中，也可以改变装置图像的显示位置。该情况下，显示有装置图像的装置显示画面作为用于改变装置图像的显示位置的编辑画面起作用。此外，可以在拍摄的状态下使画面转向编辑画面，也可以在预先完成装置图像的拍摄或接收了装置图像等保有装置图像的状态下，开始显示用于指示协同功能的编辑画面。当然，也可以通过其它方法使画面向编辑画面过渡。例如，如图19所示，在起点显示区域86显示有装置图像70，在协同目标显示区域88显示有装置图像72。例如，在用户向箭头98所示的方向使装置图像70从起点显示区域86移动到协同目标显示区域88的情况下，终端装置16的控制部48按照该移动指示，使协同目标显示区域88显示装置图像70，不使起点显示区域86显示装置图像70。由此，与装置图像70相关的图像形成装置10(复合机(B))被特定(识别)作为协同目标装置。另外，在用户向箭头100所示的方向使装置图像72从协同目标显示区域88移动到起点显示区域86的情况下，终端装置16的控制部48按照该移动指示，使起点显示区域86显示装置图像72，不使协同目标显示区域88显示装置图像72。由此，与装置图像72相关的投影仪12(投影仪(C))被特定(识别)作为起点装置。在变更显示位置后且用户赋予了协同功能的显示指示的情况下，也可以在终端装置16的UI部46显示关于对应于变更后的显示位置的协同功能的信息，即使用户未赋予协同功能的显示指示，也可以伴随显示位置的变更，在终端装置16的UI部46显示关于对应于变更后的显示位置的协同功能的信息。

在上述变形例1中，将装置显示画面68在左右方向上分割，但这只不过是一个例子，也可以在上下方向上分割，并在上下方向上并列显示起点显示区域和协同目标显示区域。作为另一例，可以在画面的中央附近显示起点显示区域，且以包围该起点显示区域的方式显示协同目标显示区域，与之相反，也可以在画面的中央附近显示协同目标显示区域，且以包围该协同目标显示区域的方式显示起点显示区域。

另外，在上述变形例1中，对利用两个装置的协同功能进行了说明，但不用说，协同功能也可以是利用三个以上的装置的功能。例如，终端装置16的控制部48使装置显示画面68显示多个协同目标显示区域。对各协同目标显示区域预先设定利用顺序，按照该利用顺序决定各装置的利用顺序(协同顺序)。例如，与在第一个协同目标显示区域显示的装置图像相关的装置被用作第一个协同目标装置，与显示于第二个协同目标显示区域的装置图像相关的装置被用作第二个协同目标装置。该情况下的协同功能是首先利用起点装置，接着利用第一个协同目标装置，接着再利用第二个协同目标装置的功能。换言之，该协同功能是数据按起点装置、第一个协同目标装置、第二个协同目标装置的顺序移动的功能。在各协同目标显示区域设定的利用顺序也可以由用户进行变更。

如上所述，根据变形例1，因为根据装置图像的显示位置变更协同功能，所以能够提高变更协同功能的操作性。另外，能够用简单的操作变更协同功能。

(变形例2)

以下，对变形例2进行说明。在变形例2中，与上述变形例1同样，识别到多个装置。另外，根据装置图像的显示位置，显示关于单独利用功能的信息、或关于协同功能的信息的任一信息。

例如，在显示于终端装置16的UI部46的装置显示画面上，沿特定的方向(例如左右方向)排列有多个装置图像的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用与该多个装置图像相关的多个装置所具有的功能的协同功能的信息。例如，如图20所示，装置显示画面68被边界线102左右分割，在左侧的区域104显示有装置图像70、在右侧的区域106显示有装置图像72的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用与装置图像70相关的图像形成装置10和与装置图像72相关的投影仪12的协同功能的信息。与变形例1同样，也可以将区域104、106中的一个区域用作起点显示区域，将其它区域用作协同目标显示区域。

在装置显示画面上，在与上述特定的方向交差的方向(例如上下方向)排列有多个装置图像的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于与各装置图像相关的各装置所具有的功能(单独利用功能)的信息。例如，如图21所示，在装置显示画面68由边界线108上下分割，在上侧的区域110显示有装置图像70、下侧的区域112显示有装置图像72的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于与装置图像70相关的图像形成装置10所具有的功能(单独利用功能)的信息、和关于与装置图像72相关的投影仪12所具有的功能(单独利用功能)的信息。

此外，边界线102、108、左右及上下的字符列可以显示，也可以不显示。

例如，在用户利用终端装置16的UI部46赋予了协同功能用的显示区域的显示指示的情况下，如图20所示，终端装置16的控制部48将装置显示画面68左右分割，设定区域104、106。另一方面，在用户赋予了单独利用功能用的显示区域的显示指示的情况下，如图21所示，终端装置16的控制部48将装置显示画面68上下分割，设定区域110、112。当然，即使未由用户赋予显示区域的显示指示，在多个装置图像沿左右方向排列的情况下，也可以显示关于协同功能的信息，且在多个装置图像沿上下方向排列的情况下，也可以显示关于单独利用功能的信息。

在多个装置图像沿左右方向排列的情况下，可以显示关于单独利用功能的信息，在多个装置图像沿上下方向排列的情况下，可以显示关于协同功能的信息。当然，在沿这些以外的方向排列有多个装置图像的情况下，也可以根据其方向显示关于单独利用功能的信息、或关于协同功能的信息的任一信息。

如上所述，根据变形例2，因为是根据多个装置图像的显示位置显示关于单独利用功能的信息、或关于协同功能的信息，所以用简单的操作即可切换并显示这些信息。

(变形例3)

以下，对变形例3进行说明。在变形例3中，在与拍摄到的装置相关的装置图像不满足预先设定的区域基准的情况下，该装置不能作为利用目标的装置被识别。例如，如图22所示，作为复合机(B)的图像形成装置10由摄像头42拍摄。在图像形成装置10的跟前侧(图像形成装置10与终端装置16之间)配置有作为障碍物的树木，与图像形成装置10相关的装置图像70(例如通过摄像头42进行的拍摄而生成的图像)与树木的图像114重叠。即，装置图像70因障碍物的图像而缺损。该情况下，图像形成装置10无法作为利用目标的装置被识别。例如，利用对装置的拍摄而得到的外观图像数据从终端装置16发送到服务器14，服务器14的特定部38基于该外观图像数据对装置进行特定(识别)。该情况下，在外观图像数据中含有缺损部分的情况下，服务器14的特定部38无法基于该外观图像数据对装置进行特定(识别)。由此，与包含缺损部分的外观图像数据相关的装置(例如图像形成装置10)无法作为利用目标的装置被识别。

此外，障碍物例如是无法通过服务器14的特定部38作为装置来识别的物体。因为树木等无法作为装置来登记，所以即使表示树木的外观图像数据被发送到服务器14，树木也无法作为装置来识别，而是作为障碍物来识别。

服务器14的特定部38也可以根据外观图像数据中的缺损部分以外的区域的大小，进行基于该外观图像数据的装置的特定(识别)。例如，在外观图像数据中的缺损部分以外的区域的大小为预先设定的阈值以上的情况下，服务器14的特定部38也可以基于该外观图像数据中的缺损部分以外的区域对装置进行特定(识别)。作为另一例，在缺损部分以外的区域比缺损部分大的情况下，服务器14的特定部38也可以基于该外观图像数据中的缺损部分以外的区域对装置进行特定(识别)。作为另一例，在将无标记型AR技术应用于外观图像数据且能够特定装置的情况下，即使外观图像数据中包含缺损部分，服务器14的特定部38也可以基于外观图像数据中的缺损部分以外的区域对装置进行特定(识别)。

在图像形成装置10(复合机(B))未被识别为利用目标的装置的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于拍摄到的其它装置的功能的信息。例如，拍摄作为投影仪(C)的投影仪12，显示与投影仪12相关的装置图像72，且拍摄摄像头(D)，显示与摄像头(D)相关的装置图像116。该情况下，终端装置16的控制部48按照上述的实施方式的处理，使终端装置16的UI部46显示关于利用投影仪(C)和摄像头(D)所具有的功能的协同功能的信息、或关于投影仪(C)和摄像头(D)分别所具有的功能(单独利用功能)的信息。

此外，也可以利用在外观图像数据中与缺损部分以外的图像部分相关的功能构筑协同功能。例如，在图22所示的例子中，在装置图像70中表示有复合机(B)(图像形成装置10)的主体部的情况下，终端装置16的控制部48也可以根据上述的实施方式的处理，使终端装置16的UI部46显示关于利用该主体部所具有的功能的协同功能的信息、或关于该主体部所具有的功能(单独利用功能)的信息。例如，在装置的每一部分，表示该部分的外观部分图像和该部分所具有的功能相互关联，表示该关联的装置功能信息32存储于服务器14的存储部30。通过参照该装置功能信息32，特定(识别)与缺损部分以外的图像部分相关的功能。另外，表示利用多个部分所具有的功能的协同功能的协同功能信息34存储于服务器14的存储部30。当然，该协同功能信息34也可以包含表示利用装置的部分所具有的功能和装置整体所具有的功能的协同功能的信息。通过参照该协同功能信息34，特定(识别)利用与缺损部分以外的图像部分相关的功能的协同功能。

在装置图像缺损的情况下，服务器14的特定部38也可以通过使用标记型AR技术或位置信息AR技术等多个识别技术，特定(识别)与该装置图像相关的装置，由此，也可以特定(识别)该装置所具有的功能、利用该装置所具有的功能的协同功能。

如上所述，根据变形例3，与缺损的装置图像相关的装置被从利用目标的装置去除。由此，防止了与缺损的装置图像相关的装置在用户不期望其作为利用目标的装置等时，用户未假定的装置被识别，其结果，防止了关于该装置所具有的功能的信息、或关于利用该装置所具有的功能的协同功能的信息被显示。

(变形例4)

以下，对变形例4进行说明。在变形例4中，与上述变形例1同样，识别出多个装置。另外，根据进行装置的拍摄的拍摄装置与各装置之间的位置关系，变更被用作协同功能的起点的装置。

例如，越是设置于距拍摄装置(例如具备摄像头42的终端装置16)近的位置的装置(拍摄到的装置)，越优先被用作协同功能的起点装置。该情况下，服务器14的特定部38取得表示终端装置16与各装置之间的距离的信息，基于该距离对各装置赋予优先顺序。终端装置16或各装置的位置信息例如通过利用GPS(Global Positioning System)功能而取得。当然，也可以通过其它技术取得位置信息。例如，终端装置16或各装置具备GPS功能，取得本身的位置信息。终端装置16从各装置取得位置信息，将终端装置16和各装置的位置信息发送到服务器14。服务器14的特定部38基于终端装置16和各装置的位置信息，计算终端装置16与各装置之间的距离。例如，与终端装置16之间的距离最短的装置被用作第一个(最优先)装置，与终端装置16之间的距离为第二短的装置被用作第二个装置。该情况下，服务器14的特定部38特定(识别)从优先顺序高的装置所具有的功能起按顺序利用的协同功能，终端装置16的控制部48使终端装置16的UI部46优先显示从优先顺序高的装置所具有的功能起按顺序利用的协同功能。

例如，如图23所示，由摄像头42拍摄作为复合机(B)的图像形成装置10、作为投影仪(C)的投影仪12、摄像头(D)及显示器(E)。该情况下，与复合机(B)相关的装置图像70、与投影仪(C)相关的装置图像72、与摄像头(D)相关的装置图像116及与显示器(E)相关的装置图像118被显示于终端装置16的UI部46。例如，在按投影仪(C)、摄像头(D)、显示器(E)及复合机(B)的顺序判断为距终端装置16近的情况下，特定(识别)按投影仪(C)、摄像头(D)、显示器(E)及复合机(B)的顺序利用的协同功能，且在终端装置16的UI部46优先显示该协同功能。

作为另一例，也可以是，越是与在距设定于装置显示画面68上的基准位置120近的位置显示的装置图像相关的装置，越是被优先用作协同功能的起点装置。该情况下，终端装置16将表示基准位置120与各装置图像之间的距离(例如图23所示的各箭头的长度)的信息发送到服务器14。服务器14的特定部38基于基准位置120与各装置图像之间的距离对与各装置图像相关的各装置赋予优先顺序。例如，与其与基准位置120之间的距离为最短的装置图像相关的装置被用作第一个(最优先)装置，与距基准位置120的距离第二短的装置图像相关的装置被用作第二个装置。该情况下，服务器14的特定部38特定(识别)从优先顺序高的装置所具有的功能起按顺序利用的协同功能，终端装置16的控制部48使终端装置16的UI部46显示该协同功能。此外，终端装置16的控制部48可以将表示基准位置120的标记(例如具有圆形状的标记)、或表示图像间的距离的箭头显示于装置显示画面68，也可以不显示。

终端装置16的控制部48也可以将表示优先顺序的信息(例如与距终端装置16近的位置的顺序对应的编号)与各装置图像相关联后显示于装置显示画面68。例如，在各装置图像的附近显示表示优先顺序的信息(例如编号)。在图23所示的例子中，在与投影仪(C)相关的装置图像72的附近显示有表示第一个(最优先)的编号。关于其它装置图像也同样。

如上所述，根据变形例4，优先显示越是接近拍摄装置(例如终端装置16)的装置所具有的功能越被优先利用的协同功能。由此，在用户期望要从设置于距拍摄装置(例如终端装置16)近的位置的装置起按顺序利用时等，显示关于适于用户的期望的协同功能的信息，因此会较便利。

也可以基于与各装置相关的装置图像(外观图像)彼此的缺损关系，判定各装置的位置关系。例如，如图24所示，在与显示器(E)相关的装置图像118(例如由摄像头42的拍摄得到的外观图像)上重叠显示有与复合机(B)相关的装置图像70的情况下，判定为复合机(B)被设置在比显示器(E)更接近终端装置16的位置。该判定可以由终端装置16进行，也可以由服务器14进行。该情况下，服务器14的特定部38特定(识别)按复合机(B)、显示器(E)的顺序利用各装置的协同功能，终端装置16的控制部48使终端装置16的UI部46优先显示关于该协同功能的信息。

此外，因为在装置图像118上重叠有装置图像70，所以装置图像118出现缺损。该情况下，服务器14的特定部38通过使用标记型AR技术或位置信息AR技术等多个识别技术，特定(识别)与装置图像118相关的显示器(E)，由此，也可以特定(识别)显示器(E)所具有的功能或利用显示器(E)所具有的功能的协同功能。

(变形例5)

以下，对变形例5进行说明。在变形例5中，对装置的各部分分配有功能，且显示关于分配给所识别(例如拍摄)的部分的功能的信息、关于利用分配给所识别(例如拍摄)的部分的功能的协同功能的信息。以下，对变形例5详细地进行说明。

在图25中，示出变形例5的装置功能管理表的一个例子。变形例5的装置功能管理表的数据作为装置功能信息32存储于服务器14。在变形例5的装置功能管理表中，作为一个例子，装置ID、表示装置名称(例如装置的种类)的信息、表示装置的部分名称(例如部分的种类)的信息、作为用于识别该部分的部分识别信息的部分ID、表示分配给该部分的功能(该部分所具有的功能)的信息、用于识别与该部分相关的装置部分图像的部分图像ID相互关联。装置部分图像是表示通过摄像头的拍摄而得到的装置的部分的外观的图像。当然，示意性表示装置的部分的部分图像也可以与该部分相关联。例如，对装置的每一部分分配不同的功能。

举出具体例进行说明，在PC(A)的显示部分配画面显示功能，表示画面显示功能的信息和与该显示部相关的装置部分图像的部分图像ID关联。画面显示功能是在PC(A)显示信息的功能。在PC(A)的主体部分配有数据保存功能，表示数据保存功能的信息和在与该主体部相关的装置部分图像的部分图像ID相关联。数据保存功能是在PC(A)保存数据的功能。

另外，对复合机(B)的主体部分配有打印功能，表示打印功能的信息和与该主体部相关的装置部分图像的部分图像ID相关联。对复合机(B)的读取部(例如与复合机(B)的原稿罩、原稿玻璃或自动原稿供纸装置对应的部分)分配有扫描功能，表示扫描功能的信息和与该读取部相关的装置部分图像的部分图像ID相关联。对复合机(B)的后处理装置分配有装订功能，表示装订功能的信息和与该后处理装置相关的装置部分图像的部分图像ID相关联。装订功能是通过订书钉装订被输出的纸张的功能。

分配给装置的部分的功能例如通过使用无标记型AR技术来特定(识别)。例如，在装置的部分被摄像头(例如终端装置16的摄像头42)拍摄到的情况下，将表示该部分的外观图像数据从终端装置16发送到服务器14。服务器14的特定部38特定(识别)在装置功能管理表中与该外观图像数据相关联的功能。由此，特定(识别)分配给所拍摄到的部分的功能。例如，在复合机(B)的主体部被摄像头42拍摄到的情况下，将表示复合机(B)的主体部的外观图像数据从终端装置16发送到服务器14。服务器14的特定部38特定在装置功能管理表中与该外观图像数据相关联的打印功能。由此，特定分配给复合机(B)的主体部的功能为打印功能。

当然，被分配给装置的部分的功能也可以通过使用标记型AR技术来特定(识别)。例如，在装置的各部分设置有将用于识别部分的部分识别信息(例如部分ID)进行了编码化的二维条形码等标记。在设置于部分的标记被摄像头拍摄到并应用标记型AR技术时，取得该部分的部分识别信息(例如部分ID)。标记型AR技术的应用可以在终端装置16进行，也可以在服务器14进行。当这样取得部分识别信息时，服务器14的特定部38特定(识别)在装置功能管理表中与该部分识别信息(例如部分ID)相关联的功能。

在图26中，示出变形例5的协同功能管理表的一个例子。变形例5的协同功能管理表的数据作为协同功能信息34存储于服务器14。变形例5的协同功能管理表是表示利用多个部分所具有的功能的协同功能的信息，在该协同功能管理表中，作为一个例子，表示装置的部分的组合的信息、表示部分ID的组合的信息、表示利用该组合中包含的多个部分所具有的功能的协同功能的信息相互关联。当然，在协同功能管理表中，表示装置的部分和装置的整体的组合的信息、表示利用该装置的部分所具有的功能和装置的整体所具有的功能的协同功能的信息可以关联。

举出具体例进行说明，在PC(A)的显示部与复合机(B)的主体部的组合中，被分配有作为协同功能的打印功能，表示作为协同功能的打印功能的信息和表示PC(A)的显示部的部分ID与复合机(B)的主体部的部分ID的组合的信息相关联。作为协同功能的打印功能，例如是将保存于PC(A)的数据发送到复合机(B)，通过复合机(B)打印该数据的功能。

另外，在复合机(B)的主体部与投影仪(C)的主体部的组合中，被分配有作为协同功能的打印功能，表示作为协同功能的打印功能的信息和表示复合机(B)的主体部的部分ID与投影仪(C)的主体部的部分ID的组合的信息相关联。作为协同功能的打印功能，例如是将通过投影仪(C)投影的数据发送到复合机(B)，通过复合机(B)打印该数据的功能。

另外，在复合机(B)的读取部与投影仪(C)的主体部的组合中，被分配有作为协同功能的扫描投影功能，表示作为协同功能的扫描投影功能的信息和表示复合机(B)的读取部的部分ID与投影仪(C)的主体部的部分ID的组合的信息相关联。作为协同功能的扫描投影功能，例如是将通过复合机(B)进行的扫描而生成的数据发送到投影仪(C)，通过投影仪(C)投影该数据的功能。

此外，协同功能可以是利用同一装置中包含的多个部分所具有的功能的功能，也可以是利用互不相同的多个装置的部分所具有的功能的功能。另外，协同功能也可以是利用三个以上的部分所具有的功能的功能。

例如，当利用标记型AR技术或无标记型AR技术特定(识别)装置的多个部分(例如互不相同的多个装置的多个部分、或同一装置的多个部分)时，服务器14的特定部38在协同功能管理表中特定(识别)与被识别的多个部分的组合相关联的协同功能。由此，特定(识别)利用识别(例如拍摄)到的多个部分所具有的功能的协同功能。例如，在复合机(B)的主体部和投影仪(C)的主体部由终端装置16的摄像头42拍摄并识别到复合机(B)的主体部和投影仪(C)的主体部的情况下，服务器14的特定部38在协同功能管理表中特定和复合机(B)的主体部与投影仪(C)的主体部的组合相关联的作为协同功能的打印功能等。

在变形例5中，也与上述的实施方式同样，关于单独利用功能的信息或关于协同功能的信息也可以被显示于终端装置16的UI部46。例如，在由用户赋予了单独利用功能的显示指示、或者仅识别到装置内的一个部分的情况下，终端装置16的控制部48可以使终端装置16的UI部46显示关于识别到的一个部分所具有的功能的信息。另一方面，在识别到多个装置的多个部分、或识别到同一装置内的多个部分、或识别到多个部分之后被赋予协同功能的显示指示的情况下，终端装置16的控制部48可以使终端装置16的UI部46显示关于利用被识别的多个部分所具有的功能的协同功能的信息。

以下，举出具体例对变形例5进行说明。例如，作为图像形成装置10的复合机(B)的主体部由终端装置16的摄像头42拍摄，且通过标记型AR技术或无标记型AR技术特定(识别)复合机(B)的主体部。该情况下，例如，如图27所示，在终端装置16的UI部46显示装置显示画面52，在该装置显示画面52显示与复合机(B)的主体部相关的装置部分图像121。在复合机(B)的读取部或后处理装置未被识别的情况下，与读取部相关的装置部分图像122和与后处理装置相关的装置部分图像124不会显示在装置显示画面52上。

例如，在由用户赋予了单独利用功能的显示指示、或不是拍摄多个部分而是仅拍摄了一个部分的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于复合机(B)的主体部所具有的功能的信息，作为关于单独利用功能的信息。此外，复合机(B)的主体部所具有的功能的识别处理可以由终端装置16进行，也可以由服务器14进行。在图27所示的例子中，在设置于装置显示画面52内的显示区域126显示有关于复合机(B)的主体部所具有的功能的信息(例如各功能的名称)。当关于显示于显示区域126内的功能的信息由用户指定并赋予了功能的执行指示时，执行该指定的功能。显示区域126被配置在与复合机(B)的主体部相关的装置部分图像121的附近。当然，终端装置16的控制部48也可以使终端装置16的UI部46显示与装置显示画面52不同的功能显示画面，且在该功能显示画面内显示关于复合机(B)的主体部所具有的功能的信息。

此外，在终端装置16的UI部46显示有表示装置整体的装置图像的情况下，在该装置图像中关于与由用户指定的部分对应的功能的信息也可以作为关于单独利用功能的信息被显示于终端装置16的UI部46。例如，对装置图像内的每个位置分配不同的功能，关于与各位置对应的各功能的信息被作为装置功能信息32存储于服务器14。表示在装置图像中由用户指定的位置的信息从终端装置16被发送到服务器14，服务器14的特定部38特定(识别)与该指定的位置对应的功能。关于该功能的信息被作为单独利用功能显示于终端装置16的UI部46。作为另一例，表示装置的整体的装置图像也可以由表示构成该装置的多个部分的多个装置部分图像构成。如上所述，由于在装置部分图像中被分配有功能，因此特定与由用户指定的装置部分图像对应的功能，在终端装置16的UI部46显示关于该功能的信息。

终端装置16的控制部48在拍摄到装置的整体的情况下，使终端装置16的UI部46显示关于该装置所具有的一或多个功能的信息，在拍摄到装置的一部分的情况下，也可以使终端装置16的UI部46显示关于分配给该一部分的功能的信息。例如，在拍摄到复合机(B)整体的情况下，如图9所示，显示关于复合机(B)所具有的功能的信息，在拍摄到复合机(B)的主体部的情况下，如图27所示，也可以显示关于该主体部所具有的功能的信息。

另外，由终端装置16的摄像头42拍摄作为图像形成装置10的复合机(B)的主体部和作为投影仪12的投影仪(C)的主体部，且通过标记型AR技术或无标记型AR技术特定(识别)复合机(B)的主体部和投影仪(C)的主体部。该情况下，例如，如图28所示，在终端装置16的UI部46显示有装置显示画面68，且在该装置显示画面68显示有与复合机(B)的主体部相关的装置部分图像121和与投影仪(C)的主体部相关的装置部分图像128。

例如，在由用户赋予了协同功能的显示指示、或在拍摄时间内拍摄到多个部分、或赋予分配给一个部分的功能的执行指示之前拍摄到多个部分的情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用复合机(B)的主体部所具有的功能和投影仪(C)的主体部所具有的功能的协同功能的信息。此外，协同功能的识别处理可以由终端装置16进行，也可以由服务器14进行。在图28所示的例子中，在设置于装置显示画面68内的显示区域130显示有关于协同功能的信息(例如协同功能的名称)。当由用户指定关于显示于显示区域130内的功能的信息，且赋予协同功能的执行指示时，执行该指定的协同功能。另外，在图28所示的例子中，关于复合机(B)的主体部所具有的功能的信息显示于显示区域132内，关于投影仪(C)的主体部所具有的功能的信息显示于显示区域134内。显示区域132配置于与复合机(B)的主体部相关的装置部分图像121的附近，显示区域134配置于与投影仪(C)的主体部相关的装置部分图像128的附近。当然，终端装置16的控制部48也可以使终端装置16的UI部46显示与装置显示画面68不同的功能显示画面，且在该功能显示画面内显示关于协同功能的信息或关于单独利用功能的信息。另外，显示区域132、134也可以不显示，也可以根据用户的指示切换显示和非显示。

此外，终端装置16的控制部48也可以使装置显示画面68显示与装置部分图像相关的装置所具有的功能的名称(例如打印机和扫描仪等)。由此，向用户提供容易了解对各部分分配哪种功能的信息。当然，功能的名称也可以不被显示。

如上所述，根据变形例5，在识别到装置的一部分的情况下，显示关于该一部分所具有的功能的信息，在识别到多个部分的情况下，显示关于利用该多个部分所具有的功能的协同功能的信息。例如，在装置中通过识别(例如拍摄)利用目标的部分，显示关于该部分所具有的功能的信息，因此，与显示关于装置所具有的全功能的信息的情况相比，不易显示对于用户来说不需要的信息，所以较便利。同样，通过识别(例如拍摄)多个部分，显示关于利用该多个部分所具有的功能的协同功能的信息，因此，不易显示对

(变形例6)

以下，对变形例6进行说明。变形例6是变形例1、5的组合。例如，是拍摄了复合机(B)的主体部和投影仪(C)的主体部的例子。该情况下，例如，如图29所示，在终端装置16的UI部46显示装置显示画面68，在该装置显示画面68显示与复合机(B)的主体部相关的装置部分图像121和与投影仪(C)的主体部相关的装置部分图像128。与变形例1同样，在装置显示画面68设定有起点显示区域86和协同目标显示区域88。该情况下，与显示于起点显示区域86内的装置部分图像相关的装置的部分作为起点被指定，与显示于协同目标显示区域88内的装置部分图像相关的装置的部分被指定为协同目标。在图29所示的例子中，由于装置部分图像121显示于起点显示区域86内，因此，指定了复合机(B)的主体部作为起点，且由于装置部分图像128显示于协同目标显示区域88内，因此，指定了投影仪(C)的主体部作为协同目标。该情况下，终端装置16的控制部48使终端装置16的UI部46显示关于利用复合机(B)的主体部作为起点并且利用投影仪(C)的主体部作为协同目标的协同功能的信息。终端装置16的控制部48例如使终端装置16的UI部46显示关于首先利用作为起点的复合机(B)的主体部，接着利用作为协同目标的投影仪(C)的主体部的协同功能的信息。换言之，终端装置16的控制部48使终端装置16的UI部46显示关于使数据从作为起点的复合机(B)的主体部向作为协同目标的投影仪(C)移动的协同功能的信息。

另外，与变形例1同样，也可以改变装置部分图像的显示位置。例如，在用户使装置部分图像121移动到协同目标显示区域88的情况下，与装置部分图像121相关的复合机(B)的主体部被作为协同目标装置的部分来对待。同样，在用户使装置部分图像128移动到起点显示区域86的情况下，与装置部分图像128相关的投影仪(C)的主体部被作为起点装置的部分来对待。

与变形例1同样，终端装置16将显示于起点显示区域86的装置部分图像的数据作为起点装置的部分的图像数据发送到服务器14，将显示于协同目标显示区域88的装置部分图像的数据作为协同目标装置的部分的图像数据发送到服务器14。服务器14的特定部38将与起点装置的部分的图像数据相关的装置的部分设定为起点，将与协同目标装置的部分的图像数据相关的装置的部分设定为协同目标。在服务器14中存储有变形例6的协同功能管理表的数据，在该协同功能管理表中，起点装置的部分的识别信息、协同目标装置的部分的识别信息、协同功能识别信息相关联。服务器14的特定部38特定在该协同功能管理表中使起点装置的部分的识别信息与协同目标装置的部分的识别信息相关联的协同功能识别信息。当像这样特定协同功能识别信息时，在终端装置16的UI部46显示关于特定的协同功能的信息。

此外，也可以从表示装置的整体的装置图像将表示部分的装置部分图像分离，改变装置部分图像的显示位置。例如，如图30所示，将表示复合机(B)的整体的装置图像70显示于起点显示区域86。该情况下，如箭头136所示，当用户使装置图像70中包含的装置部分图像122从起点显示区域86向协同目标显示区域88移动时，与装置部分图像122相关的部分所具有的功能(例如读取部所具有的扫描功能)被设定为协同目标的功能。同样，当由用户使显示于协同目标显示区域88的装置图像中包含的装置部分图像向起点显示区域86移动时，与该装置部分图像相关的部分所具有的功能被设定为起点的功能。

如上所述，根据变形例6，由于是根据装置部分图像的显示位置变更协同功能，因此，能够提高变更协同功能的操作性。另外，能够通过简单的操作变更协同功能。

(变形例7)

以下，参照图31及图32对变形例7进行说明。在图31及图32中，示出变形例7的装置显示画面68。在变形例7中，与上述的变形例1等同样，在装置显示画面68上设定有起点显示区域86和协同目标显示区域88，在同一协同目标显示区域88内显示有多个装置图像(例如装置图像72、116、118)。此外，在起点显示区域86内显示有装置图像70。该情况下，与显示于协同目标显示区域88内的各装置图像相关的各装置的利用的顺序(协同的顺序)可以由用户指定，也可以基于各装置图像的显示位置的关系自动设定。

在根据用户的指示设定协同的顺序的情况下，用户例如按顺序指定显示于协同目标显示区域88内的各装置图像。例如，在由用户按照与投影仪(C)相关的装置图像72、与显示器(E)相关的装置图像118、与摄像头(D)相关的装置图像116的顺序指定各装置图像的情况下，与显示于起点显示区域86内的装置图像70相关的复合机(B)首先被利用，之后，协同目标的各装置按该指定顺序协同(利用)。

在自动设定协同顺序的情况下，也可以按照距显示于起点显示区域86内的装置图像70近的顺序对各装置分配协同顺序。在图31所示的例子中，按照距装置图像70近的顺序在协同目标显示区域88内显示装置图像72、装置图像118及装置图像116。该情况下，复合机(B)首先被利用，之后，各装置按投影仪(C)、显示器(E)及摄像头(D)的顺序协同(利用)。

作为另一例，与在距显示于起点显示区域86内的装置图像70最近的位置显示的装置图像相关的装置也可以设定为最初的协同目标装置，基于显示于同一协同目标显示区域88内的装置图像彼此的位置关系，依次决定第二个以后的协同目标装置的协同顺序。例如，如图32所示，与在距装置图像70最近的位置显示的装置图像72相关的装置被设定为最初的协同目标装置。接着，在协同目标显示区域88内，与在最接近装置图像72的位置显示的装置图像116相关的摄像头(D)被设定为第二个协同目标装置。接着，在协同目标显示区域88内，以与已经被设定为协同目标的装置相关的装置图像(例如装置图像72)以外的装置图像为目标，与在最接近装置图像116的位置显示的装置图像118相关的显示器(E)被设定为第三个协同目标装置。关于其以后的协同顺序，也同样。

如上所述，在同一协同目标显示区域88内显示有多个装置图像的情况下，通过基于装置图像彼此的显示位置的关系自动设定协同顺序，节省了用户的时间和精力，比较便利。此外，在同一协同目标显示区域88内显示有多个装置部分图像的情况下，也通过与上述相同的处理决定各装置的部分的协同顺序。当然，也可以在起点显示区域86内显示装置部分图像。

此外，在上述的实施方式及变形例中，协同功能可以是利用装置的整体彼此的组合的功能，也可以是利用装置的部分彼此的组合的功能，还可以是利用装置的整体与装置的部分的组合的功能。

另外，也可以根据用户的指示来切换各变形例的功能。例如，在用户指示执行变形例1的功能的情况下，执行变形例1的功能，由此，也可以在装置显示画面上设定起点显示区域和协同目标显示区域。对于其它变形例也相同，在用户指示执行变形例的功能的情况下，执行该变形例的功能。

以下，在上述的实施方式及变形例中，对执行装置所具有的功能时的处理进行说明。作为一例，对执行协同功能时的处理进行说明。该情况下，从终端装置16对协同目标的装置发送连接请求，终端装置16与协同目标的装置连接。以下，参照图33说明该连接处理。图33是表示该处理的时序图。

首先，用户利用终端装置16指示协同功能执行用的应用(程序)的启动。终端装置16的控制部48根据该指示启动该应用(S01)。此外，该应用可以预先存储于终端装置16的存储部44，也可以从服务器14等下载。

接着，通过应用标记型AR技术、无标记型AR技术或位置信息AR技术，识别协同目标的装置(S02)。当然，也可以通过AR技术以外的技术识别协同目标的装置。在应用标记型AR技术或无标记型AR技术的情况下，用户通过终端装置16的摄像头42拍摄协同目标的装置。作为一例，在使用图像形成装置10(复合机(B))和投影仪12(投影仪(C))作为协同装置的情况下，用户通过摄像头42拍摄图像形成装置10和投影仪12。取得图像形成装置10和投影仪12各自的装置识别信息，图像形成装置10和投影仪12被识别为协同目标的装置。在应用位置信息AR技术的情况下，取得图像形成装置10和投影仪12各自的位置信息，并基于该位置信息特定图像形成装置10和投影仪12各自的装置识别信息，从而识别图像形成装置10和投影仪12。

如上所述，在识别到多个装置、或赋予了协同功能显示的指示、或在赋予一个装置具有的单独利用功能的执行指示之前识别到其它装置的情况下，识别利用多个装置所具有的功能的协同功能。在终端装置16的UI部46显示关于所识别的协同功能的信息(S03)。协同功能的识别处理可以由服务器14进行，也可以由终端装置16进行。

接着，在终端装置16中，由用户指定执行目标的协同功能时，终端装置16向执行该协同功能的协同目标的装置(例如图像形成装置10和投影仪12)发送表示连接请求的信息(S04)。例如，在服务器14存储有表示协同目标的装置的地址的地址信息的情况下，终端装置16从服务器14取得协同目标的装置的地址信息。在装置识别信息中包含有地址信息的情况下，终端装置16也可以从协同目标的装置的装置识别信息取得各自的地址信息。作为另一例，也可以在终端装置16中存储协同目标的装置的地址信息。当然，终端装置16也可以通过其它方法取得协同目标的装置的地址信息。终端装置16使用协同目标的装置(例如图像形成装置10和投影仪12)的地址信息，向协同目标的装置(例如图像形成装置10和投影仪12)发送表示连接请求的信息。

收到表示连接请求的信息的图像形成装置10和投影仪12许可或不许可与终端装置16的连接(S05)。例如，在图像形成装置10和投影仪12相当于连接未被许可的装置的情况、或相当于请求连接的装置的数量超过上限的装置的情况下，连接不被许可。此外，在来自终端装置16的连接被许可的情况下，也可以以不从终端装置16变更图像形成装置10和投影仪12的固有的设定信息的方式禁止该变更操作。例如，也可以禁止图像形成装置10的色彩的参数、向节电转移时的设定时间等的变更。由此，相对于协同目标的装置的安全性提高。作为另一例，在使装置协同的情况下，与不使该装置协同而单独利用的情况相比，也可以限制设定信息的变更。例如，与单独利用装置的情况相比，也可以许可更少的设定项目的变更。另外，也可以禁止如运行历史那样的其它用户的个人信息的阅览。由此，能够提高针对用户的个人信息的安全性。

表示连接的许可或不许可的结果信息从图像形成装置10和投影仪12发送到终端装置16(S06)。在向图像形成装置10和投影仪12的连接被许可的情况下，在终端装置16和图像形成装置10及投影仪12之间被建立通信。

接着，用户利用终端装置16指示协同功能的执行(S07)。根据该指示，表示协同功能的执行指示的执行指示信息从终端装置16发送到图像形成装置10和投影仪12(S08)。向图像形成装置10发送的执行指示信息中包含表示在图像形成装置10执行的处理的信息(例如作业信息)，向投影仪12发送的执行指示信息中包含表示在投影仪12执行的处理的信息(例如作业信息)。

收到了执行指示信息的图像形成装置10和投影仪12按照执行指示信息执行功能(S09)。例如，在如从图像形成装置10(复合机(B))向投影仪12(PC(A))传送扫描数据并由投影仪12投影数据的功能那样，在协同功能中包含在图像形成装置10和投影仪12之间进行数据的收发的处理时，在图像形成装置10和投影仪12之间建立通信。该情况下，例如，在向图像形成装置10发送的执行指示信息中包含投影仪12的地址信息，在向投影仪12发送的执行指示信息中包含图像形成装置10的地址信息，使用这些地址信息在图像形成装置10和投影仪12之间建立通信。

当协同功能的执行结束时，表示协同功能的执行结束的信息被从图像形成装置10和投影仪12发送到终端装置16(S10)。在终端装置16的UI部46显示表示协同功能的执行结束的信息(S11)。此外，在即使从赋予了执行指示的时间点起经过预先设定的时间也未显示表示执行结束的信息时，终端装置16的控制部48也可以使UI部46显示表示错误的信息，再次将执行指示信息、或表示连接请求的信息发送到图像形成装置10和投影仪12。

接着，用户确认是否解除图像形成装置10与投影仪12的协同状態(S12)，执行与解除与否相应的处理(S13)。在解除协同状态时，用户利用终端装置16赋予解除的指示。由此，终端装置16和图像形成装置10及投影仪12之间的通信被解除。同样，图像形成装置10与投影仪12之间的通信也被解除。在未解除协同状态的情况下，也可以继续赋予执行指示。

另外，也可以增加协同目标的装置。例如，也可以取得第三台装置的装置识别信息，特定通过使包含图像形成装置10和投影仪12的三台装置协同而执行的协同功能。此外，表示图像形成装置10和投影仪12已经被识别为协同功能的信息存储于服务器14或终端装置16。

表示协同目标的装置的装置识别信息、表示被执行的协同功能的协同功能识别信息也可以存储于终端装置16或服务器14等。例如，也可以取得利用终端装置16的用户的用户账户信息(用户识别信息)，创建表示该用户账户信息、表示协同目标的装置的装置识别信息、表示被执行的协同功能的协同功能识别信息的关联的历史信息，并存储于终端装置16或服务器14等。历史信息可以由终端装置16创建，也可以由服务器14创建。通过参照历史信息，特定哪一协同功能使用哪一装置组来执行。

此外，协同目标的装置(例如图像形成装置10和投影仪12)也可以将请求连接的用户的用户账户信息及表示连接请求源的终端装置16的终端识别信息作为历史信息进行存储。通过参照该历史信息，特定利用装置的用户。例如，在特定装置损坏时使用了该装置的用户时、或对消耗品等进行收费处理时等，也可以充分利用历史信息来特定用户。历史信息可以存储于服务器14或终端装置16，也可以存储于其它的装置。

用户账户信息例如预先存储于终端装置16的存储部44，终端装置16的控制部48作为用户识别单元的一例起作用，从存储部44读入用户的用户账户信息，识别使用终端装置16的用户。在存储部44存储有多个用户的用户账户信息的情况下，用户使用终端装置16指定本身的用户账户信息。由此，该用户的用户账户信息被读入，该用户被识别。作为另一例，终端装置16的控制部48也可以通过读入终端装置16中登录的用户的用户账户信息而识别用户。作为再一例，在同一终端装置16中仅存储有一个用户账户信息的情况下，终端装置16的控制部48也可以通过读入该用户账户信息而识别用户。此外，在未设定用户账户且未创建用户账户信息的情况下，进行初始设定，由此，创建用户账户信息。

也可以针对每一用户管理其协同功能的使用历史，在终端装置16的UI部46显示读入的用户账户信息表示的由用户过去利用的表示协同功能的信息。表示其使用历史的信息可以存储于终端装置16，也可以存储于服务器14。另外，也可以显示以预先设定的利用频率以上的频率利用的表示协同功能的信息。通过设置这种快捷功能，能够节省关于协同功能的用户的操作的时间和精力。

此外，执行单独利用功能时，表示该单独利用功能的执行指示的信息从终端装置16发送到执行单独利用功能的装置。该装置按照该执行指示执行单独利用功能。

上述图像形成装置10、服务器14及终端装置16分别作为一例通过硬件与软件的协作来实现。具体而言，图像形成装置10、服务器14及终端装置16分别具备未图示的CPU等一或多个处理器。通过该一或多个处理器读出并执行存储于未图示的存储装置的程序，实现图像形成装置10、服务器14及终端装置16各部的功能。上述程序经由CD或DVD等记录介质、或经由网络等通信路径存储于存储装置。作为另一例，图像形成装置10、服务器14及终端装置16各自的各部也可以通过例如处理器或电路等硬件资源而实现。在该实现中也可以利用存储器等器件。作为再一例，图像形成装置10、服务器14及终端装置16各自的各部也可以通过DSP(Digital Signal Processor)或FPGA(Field Programmable Gate Array)等而实现。

Claims (25)

1.一种信息处理装置，其特征在于，

具有控制单元，所述控制单元在拍摄到一个装置的情况下，控制所述一个装置所具有的功能的显示，在预先设定的时间内拍摄到多个装置的情况下，控制能够通过组合所述多个装置所具有的功能来执行的协同功能的显示，

在拍摄到所述多个装置的情况下，在显示单元显示与所述多个装置相关的多个图像，

所述控制单元根据所述显示单元上的所述多个图像的显示位置，改变所述协同功能，控制所述协同功能的显示。

2.根据权利要求1所述的信息处理装置，其中，

所述多个装置包含第一装置和第二装置，

在拍摄到所述第一装置后且在未被赋予所述第一装置所具有的功能的执行指示的期间拍摄到所述第二装置的情况下，所述控制单元控制利用所述第一装置和所述第二装置所具有的功能的所述协同功能的显示。

3.根据权利要求1所述的信息处理装置，其中，

所述多个装置包含第一装置和第二装置，

在从拍摄到所述第一装置的时间点起的预先设定的时间内拍摄到所述第二装置的情况下，所述控制单元控制利用所述第一装置和所述第二装置所具有的功能的所述协同功能的显示。

4.根据权利要求1所述的信息处理装置，其中，

在拍摄到所述多个装置的情况下，所述控制单元控制所述多个装置中包含的各装置所具有的功能的显示，同时控制所述协同功能的显示。

5.根据权利要求1所述的信息处理装置，其中，

在拍摄到所述多个装置的情况下，在由用户赋予了单独利用功能的显示指示时，所述控制单元控制所述多个装置中包含的各装置所具有的功能的显示，在由用户赋予了所述协同功能的显示指示时，所述控制单元控制所述协同功能的显示。

6.根据权利要求1所述的信息处理装置，其中，

在拍摄到所述一个装置的一部分的情况下，所述控制单元控制被分配给所述一部分的功能的显示。

7.根据权利要求1所述的信息处理装置，其中，

在控制所述协同功能的显示的情况下，在拍摄到所述多个装置中包含的装置的一部分时，所述控制单元控制利用被分配给所述一部分的功能的所述协同功能的显示。

8.根据权利要求1所述的信息处理装置，其中，

在拍摄到所述一个装置的整体的情况下，所述控制单元控制所述一个装置所具有的一或多个功能的显示，在拍摄到所述一个装置的一部分的情况下，所述控制单元控制被分配给所述一部分的功能的显示。

9.根据权利要求1所述的信息处理装置，其中，

所述控制单元控制以与显示于所述显示单元的所述多个图像中显示于预先设定的区域的图像相关的装置为起点的所述协同功能的显示。

10.根据权利要求9所述的信息处理装置，其中，

在所述预先设定的区域显示有与装置的一部分相关的图像的情况下，所述控制单元控制以分配给与所述一部分相关的图像的功能为起点的所述协同功能的显示。

11.根据权利要求9或10所述的信息处理装置，其中，

所述控制单元控制用于使所述预先设定的区域显示与拍摄到的装置相关的图像的编辑画面的显示。

12.根据权利要求1所述的信息处理装置，其中，

根据与所述多个装置相关的所述多个图像的显示位置，变更在所述协同功能中被利用的各装置的利用顺序。

13.根据权利要求1所述的信息处理装置，其中，

根据与所述多个装置相关的所述多个图像的显示位置，变更在所述协同功能中被利用的各装置之间移动的数据的移动顺序。

14.根据权利要求1至8中任一项所述的信息处理装置，其中，

在拍摄到所述多个装置的情况下，根据所述多个装置与进行拍摄的拍摄装置之间的位置关系，变更被用作所述协同功能的起点装置。

15.根据权利要求14所述的信息处理装置，其中，

越是设置于距所述拍摄装置近的位置的装置，越是被优先用作所述协同功能的起点装置。

16.根据权利要求14所述的信息处理装置，其中，

越是与显示于距设定在显示图像的显示画面上的基准位置近的位置的图像相关的装置，越是被优先用作所述协同功能的起点装置。

17.根据权利要求14所述的信息处理装置，其中，

基于与所述多个装置中包含的各装置相关的外观图像彼此的缺损关系，判定所述位置关系。

18.根据权利要求14所述的信息处理装置，其中，

所述控制单元使利用所述起点装置所具有的功能的所述协同功能优先显示于显示单元。

19.根据权利要求14所述的信息处理装置，其中，

所述控制单元使与距所述拍摄装置近的位置的顺序对应的信息与所述多个装置中包含的各装置相关联而显示于显示单元。

20.根据权利要求1所述的信息处理装置，其中，

在拍摄到所述多个装置的情况下，所述控制单元根据与所述多个装置相关的多个图像的显示位置，控制所述多个装置中包含的各装置所具有的功能的显示或利用所述多个装置所具有的功能的协同功能的显示。

21.根据权利要求1至8中任一项所述的信息处理装置，其中，

在与拍摄到的装置相关的外观图像不满足预先设定的区域基准的情况下，该装置不会被识别为利用目标的装置。

22.根据权利要求21所述的信息处理装置，其中，

在所述外观图像因障碍物而缺损的情况下，所述外观图像不满足所述区域基准。

23.根据权利要求1至8中任一项所述的信息处理装置，其中，

在控制所述协同功能的显示的情况下，在与拍摄到的装置相关的外观图像仅表示该装置的一部分的情况下，分配给与所述一部分相关的图像的功能在所述协同功能中被利用。

24.根据权利要求1至8中任一项所述的信息处理装置，其中，

还具有识别单元，其基于由拍摄单元的拍摄所得到的装置的图像，识别由所述拍摄单元拍摄到的装置，

在由所述识别单元识别到所述一个装置的情况下，所述控制单元控制所述一个装置所具有的功能的显示，在由所述识别单元识别到所述多个装置的情况下，所述控制单元控制利用所述多个装置所具有的功能的所述协同功能的显示。

25.一种信息处理方法，其特征在于，

在拍摄到一个装置的情况下，控制所述一个装置所具有的功能的显示，在预先设定的时间内拍摄到多个装置的情况下，控制能够通过组合所述多个装置所具有的功能来执行的协同功能的显示，

在拍摄到所述多个装置的情况下，在显示单元显示与所述多个装置相关的多个图像，

根据所述显示单元上的所述多个图像的显示位置，改变所述协同功能，控制所述协同功能的显示。

Images