CN107018254A - 信息处理系统、信息处理终端以及信息处理方法 - Google Patents

Abstract

本发明涉及信息处理系统和信息处理方法，其目的在于通过描绘作业者动作轨迹来分析作业者作业等。轨迹描绘装置中，用户在显示器(500)显示的帧上选择了追踪对象区域后，设定信息取得部(352)取得该区域的追踪对象信息，并保存到追踪对象信息存储部(354)中。而后，追踪对象追踪部(353)根据取得的追踪对象信息和以规定的追踪方法生成的概率分布图像，追踪追踪对象物体，并将追踪结果数据保存到追踪结果数据存储部(356)中。而后，图生成部(359)对每一个帧，将保存的追踪结果数据的帧与颜色信息相关联，并将时间上位于前一个位置的帧的中心坐标与下一个帧的中心坐标连接起来。

Description

信息处理系统、信息处理终端以及信息处理方法

技术领域

本发明涉及信息处理系统、信息处理终端以及信息处理方法。

背景技术

增强现实(Augmented Reality，简称为AR)技术能够通过在用户认知现实世界之际提供辅助性信息，在用户眼前显示超越现实世界的信息。

在现有的信息处理系统中，存在一种利用上述AR技术形成的形象化促销工具的技术方案，该技术方案用智能终端认识图像形成装置打印的状态图案，通过目视智能终端，对于常设提问(Frequently Asked Questions，FAQ)或解消故障的技术支持的功能、以及图像形成装置的设置，形成形象性体验。

专利文献1(特开2013-026922号公报)公开了一种图像形成系统，其目的在于，让提供打印物等稿件的用户简单地向阅读该稿件的人提供关于该稿件的附加信息。该图像形成系统具体具备图像形成装置、服务器以及携带终端。

图像形成装置从基本稿件和附加于基本稿件的增强现实用附加信息的稿件中取出增强现实用附加信息，生成与该增强现实用附加信息对应的标签，而后将该增强现实用附加信息与该标签相关联地登录到服务器中，输出附加标签的基本稿件的图像。

而后，携带终端拍摄由图像形成装置输出的附加标签的基本稿件的图像，并从拍摄的图像提取标签，再从服务器中取得与该标签相关联的增强现实用附加信息，进而将该增强现实用附加信息重叠到拍摄图像上显示。

但是，现有信息处理系统中的AR技术存在安全性差的问题。究其原因在于，由于通过检测图像形成装置的状态，在智能终端的画面上显示表示该状态的信息经过合成后的图像，这样，任何人都能够阅览合成图像中包含的增强现实用附加信息。

上述专利文献1公开了通过携带终端(智能终端)认知稿件时附加增强现实用附加信息。但是由于任何人都能够阅览增强现实用附加信息，安全性问题依然未能获得解决。

发明内容

鉴于上述问题，本发明提供以下方案，其目的在于，在正在拍摄的记录媒体上重叠显示符合用户权限的重叠数据，用以提高安全性能。

为了实现上述目的，本发明提供一种信息处理系统，其特征在于，具备以下各单元：用于拍摄图像的单元；用于在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的单元；用于向所述服务器发送所述识别符以及用来确定所述用户的用户识别信息的单元；用于接收所述服务器发送的符合所述用户权限的重叠数据的单元；以及，用于将所述重叠数据重叠到所述记录媒体上进行显示的单元。

本发明的效果在于，在正在拍摄的记录媒体上重叠现实符合用户权限的重叠数据，提高安全性能。

附图说明

图1是本发明第一实施方式涉及的信息处理系统1的整体构成示意图。

图2是本发明第一实施方式涉及的信息处理系统的功能模块图。

图3是本发明第一实施方式涉及的一例AR标记的示意图。

图4是本发明第一实施方式涉及的智能终端的一例动作流程图。

图5是本发明第一实施方式涉及的智能终端上的坐标表示示意图。

图6是本发明第一实施方式涉及的智能终端对虚拟屏幕的透视摄影的示意图。

图7是本发明第一实施方式涉及的经过智能终端处理后重叠了虚拟物体图像的图像的示意图。

图8是本发明第一实施方式涉及的打印数据中包含的AR标记的示意图。

图9是本发明第一实施方式涉及的关于对应文句例和其分类的AR标记图案的示意图。

图10是本发明第一实施方式涉及的智能终端上的显示画面示意图。

图11是本发明第一实施方式涉及的主计算机的处理流程图。

图12是本发明第一实施方式涉及的主计算机的AR信息制作画面的示意图。

图13是本发明第一实施方式涉及的主计算机的AR标记图像选择画面的示意图。

图14是本发明第一实施方式涉及的主计算机上显示的各种重复警告信息的示意图。

图15是本发明第一实施方式涉及的主计算机上显示的要求重新选择AR标记的信息的示意图。

图16是本发明第一实施方式涉及的主计算机重新设置AR标记的示意图。

图17是本发明第一实施方式涉及的图像形成装置的处理流程图。

图18是本发明第一实施方式涉及的智能终端的处理流程图。

图19是本发明第一实施方式涉及的智能终端上显示的未从服务器收到AR信息时的信息的示意图。

图20是本发明第一实施方式涉及的服务器的处理流程图。

图21是本发明第一实施方式涉及的服务器在没有用户ID时发送的信息的示意图。

图22是本发明第二实施方式涉及的信息处理系统的功能模块图。

图23是本发明第二实施方式涉及的服务器的处理流程图。

图24是本发明第二实施方式涉及的群服务器的处理流程图。

具体实施方式

以下参考附图，详述本发明的实施方式。

本发明为了在正在拍摄中的记录媒体上重叠显示符合用户权限的重叠数据，提高安全性能，具有以下构成。

即，本发明的信息处理系统的特征在于，具备以下各单元：用于拍摄图像的单元；用于在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的单元；用于向所述服务器发送所述识别符以及用来确定所述用户的用户识别信息的单元；用于接收所述服务器发送的符合所述用户权限的重叠数据的单元；以及，用于将所述重叠数据重叠到所述记录媒体上进行显示的单元。

为此，本发明能够在正在拍摄中的记录媒体上重叠显示符合用户权限的重叠数据，提高安全性能。

以下参考附图，详述本发明的上述特征。

首先阐述AR技术。

增强现实(AR)技术是虚拟现实(VR)技术的变形，正如字面表达，是指通过增加/删除/强调/衰减当时周围的现实环境，扩展表达人所看到的现实世界。相对于VR技术用人为构建的现实体验来取代现实，AR技术改变了现实中的一部分。

VR展示五官感觉，例如位于假想房间中望着假想桌子上的假想茶壶。对此，AR则针对在实际有人存在的房间中的桌子上，展示放置虚拟茶壶的信息。

VR也称为强化现实或增强现实，其通过加入计算机信息，提供在实际状态上经过强化/增强的显示信息。

由于用现实环境作为信息源，在很多情况下必然需要实况处理。在技术课题上，除了虚拟现实中显示处理之外，尤其还需要解决虚拟物体图像与现实环境/物体之间的相互作用，例如在视觉要素中的照明、阴影、接触、隐蔽等问题。

作为计算机扩展现实的方式，目前尝试展示对于视觉、听觉、触觉等人所具有的感官和体验的信息。相对于VR重视展示假想物体图像的现实性，AR还重视与现实世界中位置、物体等的关联性。而在重视后者的系统中，也存在用单纯的信息展示方式作为扩展现实的方式，例如用文字或声音来说明场所以及物体等。

不少系统利用VR中广泛使用的设备和技术来展示或取得信息。例如，视觉信息展示主要用于头盔式显示器。而目前，以现实环境作业援助为目的，还探讨使用手机等小型信息终端画面来展示信息。

由于被展示的环境对象是现实环境，为此，有望将现实环境中的作业援助作为该环境展示的应用领域。目前处于实际开发之中的例如有提供导航信息、向飞行器或复印机的维修人员提供技术信息、面向医疗领域的手术援助信息展示等的应用研究。

另外，在用来制作面向普通消费者服务的常用方式中，例如有利用ARToolKit等图像识别常规，用数码相机拍摄二维编码图像案或静画等作为AR标记，现时合成显示将AR标记跟踪移动(matchmove)到影像中形成的3D动画，或者显示符合静画的内容等。

其次描述AR的显示方法。

从技术特性角度，AR技法大致可以分成两大类。

其一被称为“基于场所的AR”，即利用能够从GPS等取得的位置信息来展示信息。其二被称为“基于视觉的AR”，即应用图像认识/空间认识等技术，直接认知/解析眼前存在的环境来展示信息。

<第一实施方式>

信息处理系统

参考图1描述信息处理系统1的整体结构。图1是本发明第一实施方式涉及的信息处理系统1的整体构成示意图。

信息处理系统1在网络环境上构成，通过网络N(互联网或LAN(Local AreaNetwork))连接主计算机10、图像形成装置20、服务器30、智能终端40。用网络N连接的各种装置并不仅限于一台，可以以多台构成。

其次，参考图2描述信息处理系统的功能模块结构。图2是本发明第一实施方式涉及的信息处理系统的功能模块图。

主计算机

图2所示的主计算机10具备打印数据制作部12、AR信息制作部14、以及通信部16。

主计算机10接受用户的打印数据加工(保密数据的删除)、AR显示条件信息、使用的AR标记的指定、打印条件指定、打印指示等。

打印数据制作部12根据打印条件和打印数据的解析结果，将AR标记附加到打印数据上。

打印数据制作部14用来制作AR信息，该AR信息用于将加工之前的原始打印数据和表示安全水平的AR显示条件信息相关联。

通信部16用于通过网络N向图像形成装置发送打印数据，另外还通过网络N向服务器30发送原始打印数据以及AR信息。

在此，使用的AR标记可以指定多个，在未指定的情况下也可以选择既定的AR标记。

图像形成装置

图2显示的图像形成装置20具备通信部22和打印数据输出部24。

通信部22通过网络N从主计算机10接受打印数据。

打印数据输出部24将主计算机指定的打印数据打印到记录媒体上。

服务器

图2所示的服务器30具备显示数据制作部32、通信部34、原始打印数据存储部36、AR信息存储部38。

显示数据制作部32根据AR标记信息和AR信息，加工原始打印数据，生成加工数据。

通信部34通过网络N将加工数据送往智能终端40。

原始打印数据存储部36保存原始数据、AR标记、安全水平信息。

AR信息存储部38具备识别标记表、安全表、以及对比表，其中保存各种识别标记以及与各用户ID对应的AR信息。AR信息存储部38中保存的用户ID可以改写。

智能终端

智能终端40具备通信部42、操作部44、显示部46、存储部48、摄像部50、控制部52。

通信部42用于通过网络N实行与主计算机10等的外设之间的信息通信，其功能可以利用NIC(Network Interface Card)等通信装置实现。

操作部44用于根据用户操作，输入应用软件需要的各种信息，其功能可以利用触摸屏或键开关等输入装置实现。

显示部46用于显示各种画面，其功能可以利用液晶显示器以及触摸面板方式显示器等显示装置来实现。

存储部48用于保存智能终端40上实行的各种应用软件的程序、以及智能终端40实行的各种处理中使用的数据等，其功能可以通过例如HDD(Hard Disk Drive)、SSD(SolidState Drive)、存储卡、光盘、以及RAM(Random Access Memory)等磁性或光学性以及电学性保存信息的存储装置中的任意一种存储装置来实现。

摄像部50用于按照控制部50的指示，光学读取稿件，生成图像，能够通过读取装置，其功能可以通过例如数码相机等实现。

控制部52用于控制部智能终端40的各个功能部，通过CPU(Central ProcessingUnit)或LSI(Large Scale Integration)等实现。控制部52例如内部具有ROM(Read OnlyMemory)、RAM(Random Access Memory)、CPU，从ROM读取操作系统(OS)，展开到RAM上，启动OS，在OS的管理下，从ROM读取程序(处理模块)，执行各种处理。

而后，控制部52具备图像取得部54、信息取得部56、计算部58、置换部60。

图像取得部54用于包含取得增强现实处理用的AR标记的图像。图像取得部54可以通过光学读取记录媒体上打印了AR标记的稿件，来取得包含AR标记的图像。除此之外，图像取得部54还可以从外部(例如通过网络N连接的主计算机10(一例信息处理装置)等)取得包含AR标记的图像。

信息取得部56从图像取得部54取得的图像内的AR标记中取得埋藏在该AR标记中的第一信息。该第一信息是有关图像打印之前该AR标记在现实世界中的大小的信息。具体为，信息取得部56从图像取得部54取得的图像中检测AR标记，取得埋藏在检测到的AR标记中的第一信息。

计算部58用四个顶点坐标计算(推定)照相机的相对位置/姿势。计算部58将三维标记坐标系统中以正方形设置的四个顶点的坐标转换到二维照相机虚拟屏幕S′的坐标系，从而求出照相机的相对位置/姿势。

置换部60根据照相机的相对位置/姿势以及第二信息(表示现实世界中的大小)，在标记坐标系统的三维空间上进行设置。

AR标记

其次，参考图3描述AR标记。图3是本发明第一实施方式涉及的一例AR标记的示意图。

AR标记200构成为包含外部区域201和内部区域202。外部区域201用于检测AR标记200，内部区域202用于埋藏第一信息。

在图3的示例中，AR标记200呈正方形，但是本发明并不受此限制，只要是已知的而且可检测的形状，长方形、圆形等均可用来作为AR标记。

关于AR标记200的颜色，从图像处理的观点出发，优选黑白。但是本发明亦不受此限制，可以是彩色的。

在此描述智能终端40的信息取得部56中的处理。

例如，信息取得部56对图像取得部54取得的图像实施二值处理、标签处理(将相邻的具有相同颜色的像素设置为同一块的处理)，分为白像素块和黑像素块。

而后信息处理部56对分离出来的黑象素块分别实行检测处理，从轮廓上检测4个顶点。

其结果，经过四个顶点检测的黑象素块成为AR标记200的外部区域，为此，信息取得部56能够从图像取得部54取得的图像中检测AR标记200，从AR标记200的内部区域202取得第一信息。

如果AR标记200为圆形，则信息取得部56可以实行中继(hub)转换等，检测构成园的黑象素块。

第一信息表示在图像打印(复印)之前AR标记在现实世界中的大小，具体为用AR标记内构成规定区域的构成要素的颜色组合来表示图像打印之前AR标记在现实世界中的大小。

以图3所示的AR标记200为例，用构成内部区域202的像素的颜色的组合来表示图像打印之前AR标记在现实世界之中的大小。

在图3所示的AR标记200中，设定内部区域202例如以6×6(36)像素构成，像素颜色是白色时为0，像素颜色是黑色时为1，则图像打印之前AR标记在现实世界之中的大小可以用36比特的二进数表示。

但是在36比特(像素)中，内部区域202的四个角落上的像素值用于图像(AR标记200)朝向的检测，用来无论向图像的上下左右中任意一个方向转动时，均能够检测AR标记200。

在剩下的32比特中，前半部分的8比特用于作为识别符，用来识别基于在增强显示处理中使用的AR标记200被设置到三维空间中的3D虚拟物体图像。

为此在图3的示例中，可以用24比特(像素)表示AR标记200一边长度，在用1mm单位描述AR标记200的一边长度的情况下，能够描述的范围为1mm至16777216mm。

但是，在加入校验和用以提高鲁棒性的情况下，AR标记200的一边长度描述范围也可以小于上述范围。

智能终端的动作

以下参考图4，描述智能终端40的动作。图4是本发明第一实施方式涉及的智能终端40的一例动作流程图。

在此设定，由图像形成装置20打印到记录媒体上的稿件(打印件)上，已经打印了包含AR标记200在内的图像。

首先在步骤S201，摄像部50拍摄被打印了包含AR标记200在内的图像的稿件，图像取得部54取得该图像。

其次在步骤S203，信息取得部56从取得的图像中提取AR标记200。

而后，在步骤S205，信息取得部56从提取的AR标记200中进一步取得埋藏在该AR标记200中的第二信息以及埋藏在该AR标记200中的3D虚拟物体图像的识别符。

而后，在步骤S207，计算部58用步骤S203中检测到的四个顶点(具体参考在信息取得部56种描述的方法)的坐标，计算(推定)照相机的相对位置/姿势。具体如下。计算部58求出从三维标记坐标系统中设置在正方形中的四个顶点坐标转换到二维照相机虚拟屏幕S′坐标系统中的坐标，计算照相机的相对位置/姿势。

关于AR标记200和照相机相对位置/姿势的检测方法，可以参考非专利文献1(增强现实感觉系统构建工具ARToolKit的开发，电子信息通信学会技术研究会，pp79～86，2002-02)等。

标记坐标系统大多为最终放置虚拟物体图像时的球面坐标系统。

在此，已知四个顶点位于同一平面上，为此，如果设定三维标记坐标系统中AR标记200的中心坐标(x，y，z)＝(0，0，0)，则四个顶点M0至M3的坐标为M0＝(-a，-a，0)，M1＝(a，-a，0)，M2＝(-a，a，0)，M3＝(a，a，0)(参见图5)。

在此，参考图5描述智能终端40中的坐标表示。图5是本发明第一实施方式涉及的智能终端40上的坐标表示示意图。

对此，置换部60在实行需要的转动和平行移动，并实施三维坐标转换后，智能终端40的四个顶点M0至M3的坐标被转换为三维照相机坐标系统的坐标。

而后，将三维照相机坐标系统透视投影到虚拟屏幕S′上，求出二维坐标值M0′至M3′(参见图6)。

此时，转动及平行移动的参数相当于照相机的相对位置及姿势。

在此参考图6描述智能终端40对虚拟屏幕S′的透视摄影。图6是本发明第一实施方式涉及的智能终端40对虚拟屏幕S′的透视摄影的示意图。

接着，在步骤S209，通信部42通过网络N将埋藏在AR标记200中的3D虚拟物体图像的识别符送往服务器30。而后，信息处理部56通过通信部42取得来自服务器30的3D虚拟物体图像(重叠数据)。而后，置换部根据照相机的相对位置和姿势以及第二信息(现实世界中的大小)，将该3D虚拟物体图像设置到标记坐标系统得三维空间中。

在此，置换部60在3D虚拟物体图像的设置中使用了第二信息，因而能够比照现实世界中的大小来设置3D虚拟物体图像。

接着在步骤S211，显示部46绘制将被置于三维空间中的3D虚拟物体图像透视投影到屏幕S上时的图像，与步骤S201中取得的图像重叠。

例如，智能终端40用OpenGL活着Direct3D等3D编程应用软件，在步骤S201取得的图像上，描绘被设置在三维空间中的3D虚拟物体图像。

而后在步骤S213，显示部46在显示器等上显示重叠了虚拟物体图像的图像(参考图7)。

此外，上述第一信息也可以是与表示图像打印之前AR标记200在现实世界中大小的信息相关联的信息，上述第二信息也可以是与表示图像打印之后AR标记200在现实世界中大小的信息相关联的信息。

控制部52使用图像编辑处理或图像合成处理，在用摄像部50(照相机)拍摄的图像上附加某种信息。此时，通过检测摄像部50拍摄的图像的构成或者AR标记200，判断需要附加到图像上的信息，并且在设定需要附加到图像上的信息为目前的位置信息的情况下，能够实行图像的转换显示。

控制部52以每秒60次左右的速度反复实行上述处理(S207至S213)，用以显示画面，实况显示重叠图像。反复处理次数按照表1所示的表格，检测并改变CPU性能。

据此，能够根据CPU性能来切换反复实行从提取识别符到显示AR信息为止的处理次数。

表1

No	CPU性能	反复处理次数/秒	备考
				1	小于1.0GHz	10
2	1.0以上且小于1.2GHz	20
				3	1.2以上且小于1.5GHz	30
4	1.5以上且小于2.0GHz	40
				5	2.0以上且小于2.5GHz	50
6	2.5GHz以上	60

用户可以改变表1所示的表格中的参数。用户还可以通过操作部44直接输入“反复处理次数/秒”。

这样便能够切换到用户需要的反复处理次数。

智能手机终端上的显示

以下参考图7，描述智能终端40上显示的图像。图7是本发明第一实施方式涉及的通过智能终端40处理后重叠了虚拟物体图像的图像的示意图。

图7的(a)显示原始摄影图像的图像300a。在对图像300a实施图6所示的置换处理后，能够将重叠数据，如图7(b)的图像300b中的重叠文字(“·机密信息A1”至“·机密信息AD2”)那样，重叠到拍摄的图像，形成合成图像。

如图7的(c)所示的图像300c是一例来自于用位于前方的智能终端40拍摄图7的(a)所示的图像300a得到的图像。本例同样经过图6所示的置换处理，根据照相机的相对位置/姿势以及第二信息，按照标记坐标和倾斜角度以相同比率变倍后，重叠到图像上。

例如，图像300a中，设摄像图像与AR标记200的比率为，纵向10：5，横向10：8，此时，以纵向5/10＝1/2，横向8/10＝4/5的比率对重叠图像变倍，显示到智能终端40上。

图7的(d)显示“无法检测AR标记”的图像300d。如图像300d，摄像范围中能够未能够包含整个AR标记，在这种情况下，无法辨认AR标记200中包含的信息，为此被判断为没有AR标记200，无法重叠图像。对此，显示部46可在智能终端400上显示“把整个AR标记纳入画面中”的信息。

这样，用户在目视确认到要求将整个AR标记纳入画面中的信息后，会意识到需要移动视角，将整个AR标记纳入画面。

以下参考图8，描述包含打印数据的AR标记200。图8是本发明第一实施方式涉及的打印数据中包含的AR标记的示意图。

用户可以通过主计算机10指定AR标记附加方式/不附加AR标记方式。

图8的(a)显示一例附加AR标记方式的文本310，其中，打印数据内明确设置AR标记200。AR标记的设置条件为，AR标记大小(长×宽)＜空白区域大小(长×宽)。

在此描述AR标记200的设置方法。

第一种方法是在打印数据中搜索与AR标记200大小(长×宽)一致的图像空白区域，用于设置AR标记200。寻找面积在以指定的AR标记200的长×宽表示的面积以上的图像空白区域，用来设置AR标记200。此外，在未满足条件的情况下，还可以缩小AR标记200一方用以设置AR标记200。

第二种方法是在打印数据中搜索与预设的图像空白区域保持一致的AR标记200来设置。以AR标记200的面积小于指定的图像空白区域的长×宽面积为条件，设置能够与条件一致的AR标记200。此外，在未满足条件的情况下，还可以缩小AR标记200用以设置AR标记200。

指定多个AR标记200而没有确定使用哪一个AR标记200时，对打印数据实行OCR处理，提取文句，根据该文句内容切换到相关的AR标记200。在此选择在OCR处理中使用的检索文句为最多的AR标记200。

图8的(b)所示的不含AR标记方式将打印数据的图像内容和图像设置作为AR标记200的图像比特设置处理。

AR标记的概念

以下参考图9，说明AR标记的概念。图9是本发明第一实施方式涉及的关于对应文句例和其分类的AR标记图案的示意图。

如图9所示，可以根据对应文句例和其分类内容，从主计算机10选择AR标记图案。

智能终端的显示画面

以下参考图10描述智能终端40上显示的显示画面。图10是本发明第一实施方式涉及的智能终端40上的显示画面示意图。

图10中，(a)显示用图像形成装置20打印的稿件。(b)至(e)是在用智能终端40拍摄(a)所示稿件的图像上，附加基于安全水平的信息后显示到智能终端40上的例子。由此可知，根据安全水平A至D，能够切换可以从服务器30取得的数据。

主计算机的动作

以下参考图11，描述主计算机10的动作。图11是本发明第一实施方式涉及的主计算机10的处理流程图。

在步骤S401，AR信息制作部14选择设置位置。具体为，AR信息制作部14输入由用户操作输入的AR标记的设置位置以及各安全水平的公开信息。

主计算机的AR信息制作画面

在此参考图12，描述主计算机10的AR信息制作画面。图12是本发明第一实施方式涉及的主计算机10的AR信息制作画面的示意图。

如图12所示，在主计算机10显示的AR信息制作画面400上，除了“原始摄影图像”的图像300a以外，还显示“选择标记”的设定区域、“各安全水平的非公开信息”的设定区域。

在“选择标记”的设定区域中，“标记设置”的设定可以指定设置的坐标、长×宽、有无自动缩小。

在“安全水平的非公开信息”的设定区域中可以指定安全水平A至D各自切除的数据的坐标、长×宽的大小、转动角度。

“加入AR标记”键410受到按动时，在预览区域中显示AR标记200。

确定了设定内容后，按动“执行”键420。

在步骤S403，AR信息制作部14通过通信部42向服务器30发送AR标记一览表要求，提出询问。AR信息制作部14通过通信部42收到服务器30提供的AR标记一览表，向用户显示该AR标记一览表，要求用户从中选择AR标记的种类。AR信息制作部14根据用户的选择制作AR信息。用户可以选择多个AR标记。

主计算机的AR标记图像选择画面

在此参考图13描述主计算机10的AR标记图像选择画面。图13是本发明第一实施方式涉及的主计算机10的AR标记图像选择画面的示意图。

在“标记图像选择”的设定区域中“自动”表示用AR信息制作部14自动制作AR标记。画面右上部分显示AR信息制作部14自动制作的AR标记460。

确定了设定内容后，按动“执行”键470。

在步骤S405，通信部16通过网络N将AR信息要求送往服务器30询问。通信部16受到来自服务器30关于AR信息的回信。

在步骤S406，AR信息制作部14检查AR标记200是否重复。

如果AR标记200重复(S406的是)，则AR信息制作部14显示警告。当用户操作按动取消键后，返回步骤S401，要求用户重新输入。

这样，通过显示要求AR标记200的重新输入的信息，目视确认到该信息的制作者便能够意识到需要重新输入AR标记200。

主计算机的重复警告信息

在此参考图14描述主计算机的重复警告信息。图14中，(a)显示本发明第一实施方式涉及的主计算机10在显示AR标记时发出的重复警告信息530的示意图，(b)显示本发明第一实施方式涉及的主计算机10的AR标记登录画面570的示意图。

当AR标记200重复时，AR信息制作部14显示图14的(a)显示的警告信息。按动取消键540，则返回步骤S401，要求用户重新输入AR标记200。

这样，通过显示要求重新输入AR标记200的信息，目视确认到该信息的制作者便能够意识到需要重新输入AR标记200。

在AR标记200重复时，AR信息制作部14返回步骤S401。

而在图14的(a)上选择“登录”键550，则显示图14的(b)所示的AR标记登录画面570。在该画面570上，在输入区域580中输入文件路径后，显示图像预览590，按动“登录”键600，用户在主计算机10中保存的AR标记200信息便能够被上载到服务器300，加到服务器30中保存的AR标记200中，更新AR标记一览表。

进而，对于成为重复对象的AR标记200，AR信息制作部14能够用本次信息重写。

这样，将本次利用的AR标记200重写到已经被用过的AR标记200上，从而能够使用最新的AR标记200。

在步骤S407，AR信息制作部14检索打印数据内可供设置AR标记200的位置。在此，设置检索处理仅在步骤S401中设显示AR标记200的情况下才施行。检索条件如下。

用户选择的AR标记的面积(长×宽)＜用户指定的设置面积(长×宽)

AR信息制作部14以用户指定的设置面积(长×宽)大于用户选择的AR标记的面积(长×宽)为检索条件，对用户选择的每个AR标记反复搜索。

在步骤S408，如果所有AR标记200都无法设置，则AR信息制作部14显示警告信息。通过用户操作，取消键受到按动后，AR信息制作部14返回步骤S401，要求重新选择AR标记200。

这样，通过显示要求重新显示AR标记的信息，目视确认到该信息的制作者便能够意识到需要改变原图像上用于放置AR标记200的设置位置。

重新选择信息

在此参考图15，描述要求重新选择AR标记200的信息。图15是本发明第一实施方式涉及的主计算机10上显示的要求重新选择AR标记200的信息650的示意图。

AR信息制作部14在无法设置的情况下，检索文本内的图像空白区域，寻找能够容纳AR标记200大小的区域，决定AR标记200的设置位置。

这样，即便原图像上设置AR标记200的设置位置被原图像中一部分非空白区域占据，也能够通过检索找出原图像中能够容纳AR标记的空白区域，将AR标记200设置到该空白区域上。5

重新设置AR标记

在此参考图16描述AR标记的重新设置。图16是本发明第一实施方式涉及的主计算机10重新设置AR标记的示意图。

如图16所示，在自动重新设置处理中，AR信息制作部14在文本680内检索相当于标记大小(长×宽)的空白区域(未设置文字和图像的区域)，再找到满足标记大小＜文本内空白区域的条件时，重新设置AR标记200。

图16中的(a)显示AR标记的设置预定部位690，但是预定部位上存在文字，为此无法设置AR标记。而(b)显示在文本680内检索相当于AR标记大小的区域，将AR标记设置到能够容纳AR标记的区域700中。

上述条件不成立时，AR信息制作部14返回步骤S401要求重新选择AR标记。

在步骤S409，通信部16对附加了AR标记200与打印数据之间的相关联信息和各安全水平的公开信息的AR信息、以及原始打印数据附加识别符后，通过网络N送往服务器30。

在步骤S410，打印数据制作部12从原始打印数据中去除各安全水平的公开信息所表示的范围的图像，制作打印数据(原图像)，并将该打印数据通过网络N，从通信部16送往图像形成装置20。

这样，便能够制作附带AR标记200的原图像，并将该原图像送往图像形成装置20。

图像形成装置的动作

以下参考图17，描述图像形成装置20的动作。图17是本发明第一实施方式涉及的图像形成装置20的处理流程图。

在步骤S501，通信部22经由网络N接收主计算机10发送的打印数据。而后，在步骤S502，打印数据输出部24将打印数据打印输出到记录媒体上。其结果，图像形成装置20将去除了各安全水平的公开信息表示的范围的图像的内容打印到记录媒体上。

这样便能够将受到的打印数据(原图像)打印到记录媒体上。

智能终端的动作

以下参考图18，描述智能终端40的动作。图18是本发明第一实施方式涉及的智能终端40的处理流程图。

在步骤S601，摄像部50用照相机拍摄了记录媒体上打印的稿件后，信息取得部56检测AR标记200中的识别符。

在步骤S602，信息部402将检测到的以AR标记200表示的识别符和从智能终端40读取的用户ID送往服务器30，要求询问关于识别符和用户ID。即通信部42通过网络N，将用户ID和识别符送往服务器30。

此外，智能终端40在向服务器30询问时用的用户ID也可以通过操作部44由用户指定。

这样便能够取得与指定的用户ID对应的AR信息。

而后在步骤S603，通信部42在经由网络收到服务器30发送的AR信息时，进入步骤S604，显示部46合成重叠数据即AR信息和摄像图像，显示到智能终端40的画面上。

而如果在步骤S603未收到服务器30发送AR信息，则显示部40不加工显示画面。

另外，显示部46在未收到AR信息时，也可以显示相关的警告信息。

这样，在未收到服务器30发送AR信息时显示警告信息，用户便能够注意到未能获得AR信息。

智能终端上的显示信息

在此参考图19，描述智能终端40上显示的信息。图19是本发明第一实施方式涉及的智能终端40上显示的未从服务器收到AR信息时显示的信息710。

服务器的动作

以下参考图20，描述服务器30的动作。图20是本发明第一实施方式涉及的服务器30的处理流程图。

在步骤S701，通信部34经由网络N，接收智能终端40发送的AR标记200的识别符和用户ID的询问要求。

在步骤S702，显示数据制作部32用收到的识别符作为关键词，检索AR信息存储部38的识别符表中保存的与识别符对应的AR信息。

表2显示识别符表，其中记载了与识别符对应的AR信息。

表2

在步骤S703，显示数据制作部32判断智能终端40发送的询问要求中的AR标记200的识别符与从AR信息存储部38中检索到的结果的AR信息的识别符是否一致，如果不一致，则结束处理。

而如果两者一致，则进入步骤S704，显示数据制作部32用收到的用户ID作为检索键，检索安全表(表3)中的安全水平。

表3是表示安全水平和用户ID之间关系的安全表。

表3

在步骤S705，显示数据制作部32检查有无安全水平，如果没有，则结束处理。

而如果安全表中没有用户ID，则向用户发送安全表中没有用户ID的警告消息，还可以要求用户重新输入用户ID。

这样，确认到警告信息的用户便能够意识到用户ID尚未登录。

据此便能够根据收到的识别符以及用户ID，检索符合用户权限的AR信息，并将该AR信息送往发送用户ID的终端，提高安全性能。

没有用户ID时的信息

以下参考图21，描述服务器30在没有用户ID时发送的信息750。图21是本发明第一实施方式涉及的服务器30在没有用户ID时发送的信息750的示意图。此时要求用户输入用户ID和密码。

另一方面，如果安全表中存在用户ID，则在步骤S706中，显示数据制作部32通过通信部34向智能终端40发送AR信息。

另外，在收到主计算机发送的要求改变安全水平的数量、对应各安全水平的用户ID的情况下，显示数据制作部32还可以改变在步骤S704中使用的安全表中的用户ID。

这样，便能够改变安全表中的用户ID。

再者，在收到主计算机10发送的要求改变安全表中表示的AR信息的情况下，显示数据制作部32还可以改变AR信息。

这样，便能够改变AR信息，改善便利性能。

显示数据制作部32在安全表中检索与用户ID对应的安全水平(例如A～D)之后，参考AR图像和安全水平的对比表(表4)，选择并读取AR信息和安全水平对应的图像。显示数据制作部32将被选的图像数据作为重叠数据，通过通信部34送往智能终端40。

表4是表示与AR信息和安全水平(显示条件信息)相对应的送往智能终端的图像之间关系的对比表。

表4

对于主计算机10发送的AR标记信息询问，服务器30实行重复检查，检查AR信息保存部38中保存的AR信息中是否有相同的AR标记，服务器30可以将检查结果作为对于主计算机10的答复。

如果收到主计算机10发送的要求更新服务器30的原始打印数据存储部36 中保存的AR标记200以及AR标记一览表的更新要求，则能够按照该要求内容更新服务器30内的信息。

而后如上所述，摄像部50拍摄图像。在拍摄了带有表示数据显示条件的AR标记200(标记图像)的记录媒体后，信息取得部56从拍摄的AR标记200(标记图像)中提取用于识别记录媒体的识别符。通信部42将该识别符以及用来确定用户的用户ID送往服务器30。而后，通信部42收到服务器30发送的符合用户权限的重叠数据。显示部46将重叠数据重叠到正在显示的记录媒体上。

这样，便能够将符合用户权限的重叠数据重叠到正在拍摄的记录媒体上，提高安全性能。

<第二实施方式>

以下参考图22，描述信息处理系统2的功能模块。图22是本发明第二实施方式涉及的信息处理系统的功能模块图。

第二实施方式以第一实施方式为基础，其特征在于进一步具备群服务器60。

在第一实施方式中用用户ID来判断安全水平。但是个人的管理信息需要个别管理，因而管理便利性较差。为此，第二实施方式的信息处理系统2能够以用户群为单位进行管理。

群服务器60具备群数据存储部62、用户ID转换部64、通信部66。

群数据存储部62用于保持作为用户群信息的群表以及用户群ID表。

用户ID转换部64用于将用户ID转换为用户所属的群信息。

通信部66用于将经过用户ID转换部64转换的数据通知智能终端40。

在第一实施方式中，直接将用户ID送往服务器30，在服务器30一方转换到与用户ID相关联的安全水平。

而在第二实施方式中，利用用于将用户ID转换为用户群ID的群服务器60，由服务器30将用户ID通知群服务器60，在群服务器60中将用户ID转换为用户群ID。

而后，与第一实施方式相同，用用户群ID取代用户ID，实行到AR信息取得为止的处理。

参考图23，描述服务器30的动作。图23是本发明第二实施方式涉及的服务器30的处理流程图。

在步骤S801，通信部34通过网络N，接收智能终端40发送的关于AR标记200的识别符以及用户ID的询问要求。

在步骤S802，通信部34为了取得用户群ID，将AR标记200的识别符以及用户ID送往群服务器60询问，要求提供用户群ID。

在步骤S803，如果收到群服务器60发送的用户群ID，则通信部34进入图20所示的步骤S702，实行与步骤S702之后相同的控制处理。而如果收到群服务器60发送的警告，则进入步骤S804，将表示没有用户ID的警告送往智能终端40，结束处理。

此时，智能终端40显示图21所示的在用用户ID时的信息。4

参考图24，描述群服务器60的动作。图24是本发明第二实施方式涉及的群服务器60的处理流程图。

在步骤S901，通信部66收到服务器30发送的AR标记的识别符即种类以及用户群ID的询问要求。

在步骤S902，用户ID转换部64根据收到的AR标记的识别符即种类以及用户群ID的询问要求，在保存在群数据存储部62中的用户群ID进行检索。

换言之，用户ID转换部64以AR标记的种类为检索键，检索群表(表5)，选择符合AR标记的种类的群。之后，用户ID转换部64以选定的群作为检索键，在用户ID表中进行检索，选择与该群相符合的用户群ID。

在步骤S903，用户ID转换部64判断AR标记的种类是否一致。如果AR标记的种类不一致，则在步骤S905，通信部66向服务器30发送警告，结束处理。

而如果用户ID一致，则在步骤S904，通信部66将与收到的AR标记的种类一致的用户群ID送往服务器30。

表5先是一例表示AR标记的种类和群之间关系的群表，该表保存在群服务器60的群数据存储部62中。群表中，例如将群集A服务会员级别与AR标记的种类及AR标记A先对应地保存。

表5

用户ID转换部64的群检索可参考与AR标记的种类对应的群表(表5)，选择符合AR标记种类的群。群表预先登录在群服务器60中。

表6是一例表示A服务会员级别与用户ID之间关系的用户群ID表，与A服务会员级别对应的用户ID被保存在群服务器60的群数据存储部62中。用户群ID表中，例如将群即A服务会员级别的白金会员与用户ID即“Taro Yamada”～”Hanako Yamada”相对应地保存。

表6

关于用户ID转换部64对于用户群ID的检索，可以参考上述选择的群的用户ID表(表6)，选择符合A服务会员级别的用户群ID。

第二实施方式能够在服务器30通过网络N受到智能终端40发送的关于AR标记200的识别符即种类以及用户ID的询问要求时，将该关于AR标记200的识别符即种类以及用户ID的询问要求送往群服务器60。群服务器60根据服务器30发送的关于AR标记200的识别符即种类以及用户ID的询问要求，检索群数据存储部62中保存的用户群ID。而后，群服务器60将与AR标记的种类一致的用户群ID送往服务器30。

这样，服务器30便能够根据与群服务器30发送的AR标记200的识别符对应的群用户ID，检索符合群用户权限的AR信息，并将该AR信息送往发送用户ID的智能终端，提高安全性能。

而且，根据与AR标记的识别符对应的群用户ID，还能够改变智能终端上显示的数据。

进而，与AR标记的识别符对应，还能够从多个用户群表中选择适合的用户群表。

再者，用户群表中能够预存多个群信息，用以扩大群信息的利用范围。

进而，在无法获得群信息的情况下，能够在智能终端上显示警告信息。

本发明的实施方式例的构成、作用以及效果

[第一方式]

本方式的信息处理系统1的特征在于，具备以下各部：摄像部50，用于拍摄图像；信息提取部56，用于在拍摄附加了表示数据的显示条件的AR标记200(标记图像)的记录媒体后，从拍摄了的AR标记200(标记图像)中提取用来识别记录媒体的识别符；通信部42，用于向服务器30发送识别符以及用来确定用户的用户ID(用户识别信息)；通信部42，用于接收服务器32发送的符合用户权限的重叠数据；以及，显示部46，用于将重叠数据重叠到记录媒体上进行显示。

本方式用摄像部50拍摄图像；在拍摄附加了表示数据表示条件的AR标记200(标记图像)的记录媒体后，用信息提取部56从拍摄的AR标记200(标记图像)提取用来识别记录媒体的识别符；用通信部42向服务器30发送识别符以及用来确定用户的用户ID(用户识别信息)；用通信部42接收服务器32发送的符合用户权限的重叠数据；用显示部46将重叠数据重叠到记录媒体上进行显示。

这样便能够在正在显示的记录媒体上重叠显示符合用户权限的重叠数据，提高安全性能。

[第二方式]

本方式的信息处理系统1的特征在于，服务器30具备以下各部：AR信息存储部38，用于保存识别符以及与用户ID对应的AR信息(重叠数据)；通信部34，用于接收智能终端40发送的识别符以及用户ID；显示数据制作部32，用于根据识别符和用户ID，在AR信息存储部38中检索符合用户权限的AR信息；以及，通信部34，用于将AR信息送往发送用户ID的送信终端。

本方式用AR信息存储部38保存识别符以及与用户ID对应的AR信息(重叠数据)；用通信部34接收智能终端40发送的识别符以及用户ID；用显示数据制作部32根据识别符和用户ID，在AR信息存储部38中检索符合用户权限的AR信息；用通信部34将AR信息送往发送用户ID的智能终端。

这样便能够根据收到的识别符和用户ID，检索符合用户权限的AR信息，向发送用户ID的智能终端发送AR信息，提高安全性能。

[第三方式]

本方式的信息处理系统1的特征在于，主计算机10具备：打印数据制作部12，用于制作附加AR标记200(标记图像)的原图像；以及，通信部16，用于向图像形成装置20发送原图像。

本方式的主计算机用打印数据制作部12制作附加AR标记200(标记图像)的原图像，用通信部16向图像形成装置20发送原图像。

这样便能够制作附加AR标记200的原图像，并将该原图像送往图像形成装置。

[第四方式]

本方式的信息处理系统1的特征在于，图像形成装置20具备：通信部22，用于接收打印数据(原图像)；以及，打印数据输出部24，用于将打印数据打印到记录媒体上。

本方式的图像形成装置20用通信部22接收打印数据(原图像)，用打印数据输出部24将打印数据打印到记录媒体上。

这样便能够将受到的打印数据打印到记录媒体上。

[第五方式]

本方式的信息处理系统1的特征在于，主计算机10具备AR信息制作部14，用于在制作附加AR标记200(标记图像)的原图像时，如果附加了AR标记200的原图像已经被利用，则显示要求制作者重新输入AR标记200的信息。

本方式的主计算机10所具备AR信息制作部14在制作附加AR标记200的原图像时，如果附加了AR标记200的原图像已经被利用，则显示要求制作者重新输入AR标记200的信息。

这样，通过显示要求重新输入AR标记的信息，目视确认到该信息的制作者便能够意识到需要重新输入AR标记。

[第六方式]

本方式的信息处理系统1的特征在于，主计算机10具备AR信息制作部14，用于在制作附加了AR标记200(标记图像)的原图像时，如果AR标记200已经被利用，则显示要求制作者重新输入AR标记200的信息。

本方式的主计算机10所具备AR信息制作部14在制作附加了AR标记200的原图像时，如果AR标记200已经被利用，则显示要求制作者重新输入AR标记200的信息。

这样，通过显示要求重新输入AR标记的信息，目视确认到该信息的制作者便能够意识到需要重新输入AR标记。

[第七方式]

本方式的信息处理系统1的特征在于，其中，主计算机具备AR信息制作部14，该AR信息制作部14用于在制作附加了AR标记200的原图像之际，使得AR标记200以及AR标记200的一览能够更新。

本方式的主计算机用AR信息制作部14在在制作附加了AR标记200的原图像之际，能够使得AR标记200以及AR标记200的一览更新。

这样，通过使得AR标记200以及AR标记200的一览能够更新，便可以利用最新的AR标记200以及AR标记200的一览。

[第八方式]

本方式的信息处理系统1的特征在于，其中，主计算机10具备AR信息制作部14，该AR信息制作部14用于在制作附加了AR标记200的原图像之际，将当前利用的AR标记200重写到已经被利用的AR标记200上。

本方式的主计算机10用AR信息制作部14在制作附加了AR标记200的原图像之际，将当前利用的AR标记200重写到已经被利用的AR标记200上。

这样，通过将当前利用的AR标记200重写到已经被利用的AR标记200上，便能够使用最新的AR标记200。

[第九方式]

本方式的信息处理系统1的特征在于，其中，主计算机10具备AR信息制作部14，该AR信息制作部14用于在制作附加了AR标记200的原图像之际，如果原图像上用来附加AR标记200的设置位置被原图像中的一部分非空白区域占据，则显示要求制作者重新设置AR标记200的信息。

本方式的主计算机10用AR信息制作部14在制作附加了AR标记200的原图像之际，在原图像上用来附加AR标记200的设置位置占据了原图像中一部分非空白区域的情况下，显示要求制作者重新设置AR标记200的信息。

这样，通过显示要求制作者重新设置AR标记200的信息，目视确认到该信息的制作者便能够意识到需要改变原图像上用来附加AR标记200的设置位置。

[第十方式]

本方式的信息处理系统1的特征在于，其中，主计算机10具备AR信息制作部14，该AR信息制作部14用于在制作附加了AR标记200的原图像之际，在原图像上用来附加AR标记200的设置位置被原图像中的一部分非空白区域占据的情况下，检索原图像中的空白区域，将AR标记200设置到空白区域中。

本方式的主计算机10用AR信息制作部14在制作附加了AR标记200的原图像之际，在原图像上用来附加AR标记200的设置位置占据了原图像中一部分非空白区域的情况下，检索原图像中的空白区域，将AR标记200设置到空白区域中。

这样，即使在原图像上用来附加AR标记200的设置位置占据了原图像中一部分非空白区域的情况下，能够将AR标记200设置到在原图像中检索到的空白区域上。

[第十一方式]

本方式的信息处理系统1的特征在于，其中，智能终端40具备显示部46，该显示部46用于在无法从服务器30取得AR信息(重叠数据)时，显示警告信息。

本方式的信息处理系统1的智能终端40在无法从服务器30取得AR信息(重叠数据)时，用显示部46显示警告信息。

这样，显示部46在无法从服务器30取得AR信息(重叠数据)时，显示警告信息，用户便能够意识到无法从服务器30取得AR信息。

[第十二方式]

本方式的信息处理系统1的特征在于，其中，智能终端40具备操作部44，该操作部44用于在从服务器30取得AR信息(重叠数据)时，指定用户ID。

本方式的智能终端40用操作部44在从服务器30取得AR信息(重叠数据)时指定用户ID，取得与被指定的用户ID相对应的AR信息。

这样，便能够取得与被指定的用户ID相对应的AR信息。

[第十三方式]

本方式的信息处理系统1的特征在于，其中，服务器30具备显示数据制作部32，该显示数据制作部32在收到要求提供重叠数据时，如果用户ID尚未登录，则用警告信息作为答复。

本方式的服务器30在收到要求提供重叠数据时，如果用户ID尚未登录，则用显示数据制作部32使用警告信息作为答复。

这样，目视确认到警告信息的用户便能够意识到用户ID尚未登录。

[第十四方式]

本方式的信息处理系统1的特征在于，其中，服务器30具备显示数据制作部32，该显示数据制作部32在收到要求提供重叠数据时，能够改变与用户ID对应的安全表。

本方式的服务器30在收到要求提供重叠数据时，能够用显示数据制作部32改变与用户ID对应的安全表。

这样，便能够改变安全表中的用户ID。

[第十五方式]

本方式的信息处理系统1的特征在于，其中，服务器30具备显示数据制作部32，该显示数据制作部32能够改变AR信息(重叠数据)。

本方式的服务器30用显示数据制作部32改变AR信息(重叠数据)。

这样便能够改变AR信息，提高便利性能。

[第十六方式]

本方式的信息处理系统1的特征在于，其中，智能终端40具备控制部52，该控制部52用于按照实行处理的CPU的性能，切换反复实行从提取识别符到显示AR信息(重叠数据)的反复次数。

本方式的智能终端40用控制部52按照实行处理的CPU的性能，切换反复实行从提取识别符到显示AR信息的反复次数。

这样，便能够按照CPU性能，切换反复实行从提取识别符倒显示AR信息的反复次数。

[第十七方式]

本方式的信息处理系统1的特征在于，其中，智能终端40具备控制部52，该控制部52用于按照用户指定来切换反复次数。

本方式的用控制部52控制按照用户指定来切换反复次数(第十六方式)。

这样便能够按照切换到用户需要的反复次数。

[第十八方式]

本方式的信息处理系统1的特征在于，其中，智能终端40具备显示部46，该显示部46在拍摄记录媒体时，如果记录媒体上显示的标记图像不在规定的摄像范围以内，则显示要求让标记图像能够容纳到规定的摄影范围以内的信息。

本方式的显示部46在拍摄记录媒体时，如果记录媒体上显示的标记图像不在规定的摄像范围以内，则显示要求让标记图像能够容纳到规定的摄影范围以内的信息。

这样，用户在目视确认到要求让标记图像能够容纳到规定的摄影范围之内的信息后，能够意识到需要移动视角，让标记图像能够容纳到规定的摄影范围以内。

[第十九方式]

本方式的信息处理方法的特征在于，具备以下步骤：摄像步骤，拍摄图像；信息提取步骤，在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别记录媒体的识别符；送信步骤，向服务器30发送所述识别符以及用来确定用户的用户识别信息；以及，收信步骤，接收服务器30发送的符合用户权限的重叠数据。

本方式的作用及效果与第一方式相同。

[第二十方式]

本方式的信息处理终端通过网络与服务器相连接，该信息处理终端的特征在于，具备以下各单元：用于拍摄图像的单元；用于在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的单元；用于向所述服务器发送所述识别符以及用来确定用户的用户识别信息的单元；用于接收所述服务器发送的符合所述用户权限的重叠数据的单元；以及，用于将所述重叠数据重叠到所述记录媒体上进行显示的单元。

本方式的作用及效果与第一方式相同。

Claims (20)

1.一种信息处理系统，其特征在于，具备以下各单元：

用于拍摄图像的单元；

用于在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的单元；

用于向服务器发送所述识别符以及用来确定用户的用户识别信息的单元；

用于接收所述服务器发送的符合所述用户权限的重叠数据的单元；以及，

用于将所述重叠数据重叠到所述记录媒体上进行显示的单元。

2.根据权利要求1所述的信息处理系统，其特征在于，进一步具备以下单元：

用于保存所述识别信息以及与所述用户识别信息对应的重叠数据的单元；

用于接收所述识别符以及所述用户识别信息的单元；

用于根据所述识别符和所述用户识别信息，检索符合所述用户权限的重叠数据的单元；以及，

用于将所述重叠数据送往发送所述用户识别信息的送信终端的单元。

3.根据权利要求1所述的信息处理系统，其特征在于，进一步具备：

用于制作附加了所述标记图像的原图像的单元；以及，

用于向图像形成装置发送所述原图像的单元。

4.根据权利要求3所述的信息处理系统，其特征在于，进一步具备：

用于接收所述原图像的单元；以及，

用于将所述原图像打印到所述记录媒体上的单元。

5.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像时，如果该附加了所述标记图像的原图像已经被利用，则显示要求制作者重新输入所述标记图像的信息的单元。

6.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像时，如果所述标记图像已经被利用，则显示要求制作者重新输入所述标记图像的信息的单元。

7.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像之际，更新所述标记图像以及所述标记图像的一览的单元。

8.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像之际，将当前利用的标记图像重写到已经被利用过的标记图像上的单元。

9.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像之际，如果该原图像上用来附加所述标记图像的设置位置被该原图像中的一部分非空白区域占据，则显示要求制作者重新设置所述标记图像的信息的单元。

10.根据权利要求3所述的信息处理系统，其特征在于，进一步具备用于在制作附加了所述标记图像的原图像之际，如果该原图像上用来附加所述标记图像的设置位置被该原图像中的一部分非空白区域占据，则检索原图像中的空白区域，将所述标记图像设置到该空白区域中的单元。

11.根据权利要求1所述的信息处理系统，其特征在于，进一步具备用于在无法从所述服务器取得重叠数据时，显示警告信息的单元。

12.根据权利要求1所述的信息处理系统，其特征在于，进一步具备用于在从服务器取得重叠数据时，指定所述用户识别信息的单元。

13.根据权利要求2所述的信息处理系统，其特征在于，进一步具备在收到要求提供所述重叠数据时，如果所述用户识别信息尚未登录，则用警告信息作为答复的单元。

14.根据权利要求2所述的信息处理系统，其特征在于，进一步具备在收到要求提供所述重叠数据时，改变与所述用户识别信息对应的安全表的单元。

15.根据权利要求2所述的信息处理系统，其特征在于，进一步具备改变所述重叠数据的单元。

16.根据权利要求1所述的信息处理系统，其特征在于，进一步具备用于按照实行处理的CPU的性能，切换反复实行从提取所述识别符到显示所述重叠数据的反复次数的单元。

17.根据权利要求16所述的信息处理系统，其特征在于，进一步具备用于按照所述用户的指定来切换所述反复次数的单元。

18.根据权利要求1所述的信息处理系统，其特征在于，进一步具备在拍摄所述记录媒体时，如果该记录媒体上显示的所述标记图像不在规定摄像范围以内，则显示要求让该标记图像能够容纳到所述规定摄影范围以内的信息的单元。

19.一种信息处理方法，其特征在于，具备以下各步骤：

拍摄图像的步骤；

在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的步骤；

向所述服务器发送所述识别符以及用来确定所述用户的用户识别信息的步骤；

接收所述服务器发送的符合所述用户权限的重叠数据的步骤；以及，

将所述重叠数据重叠到所述记录媒体上进行显示的步骤。

20.一种信息处理终端，其通过网络与服务器相连接，该信息处理终端的特征在于，具备以下各单元：

用于拍摄图像的单元；

用于在拍摄附加了表示数据显示条件的标记图像的记录媒体后，从拍摄了的标记图像中提取用来识别所述记录媒体的识别符的单元；

用于向所述服务器发送所述识别符以及用来确定用户的用户识别信息的单元；

用于接收所述服务器发送的符合所述用户权限的重叠数据的单元；以及，

用于将所述重叠数据重叠到所述记录媒体上进行显示的单元。