CN103281475A - 图像处理程序、便携式终端以及图像处理方法 - Google Patents

Abstract

本发明提供了图像处理程序、便携式终端及图像处理方法，图像处理程序是图像处理系统能执行的图像处理程序，其中，第二定位用符号由假想矩形构成，假想矩形通过两条直线部以及两条假想直线构成四边而形成，假想直线部连接两条直线部的两端中的未形成角部的各个端部以及矩形状的显现部的四个角部中的距离角部最远的角部，图像处理程序使CPU执行：从通过摄像单元拍摄到的、包括至少两处规定位置的定位用符号的摄像对象物的原图像数据检测定位用符号的步骤；将以定位用符号为基准计算出的规定区域识别作为第一范围的步骤；提取处于第一范围的图像数据并将其获取作为提取图像数据的步骤；以及在图像数据保存单元中保存提取图像数据的步骤。

Description

图像处理程序、便携式终端以及图像处理方法

本申请是申请日为2011年7月13日、申请号为201210250122.7、发明名称为“图像处理系统以及图像处理方法”的专利申请（该申请是2011年7月13日（中国国家阶段进入日为2012年6月12日）、申请号为201180004911.6、发明名称为“图像处理系统以及其中使用的摄像对象物”的专利申请的分案申请）的分案申请，其全部内容结合于此作为参考。。

技术领域

本发明是适用于使用微型数码相机或便携电话的照相机功能对文档（document）进行拍摄的有效技术。

背景技术

安装在微型数码相机、便携电话或智能手机（smart phone）中的数码相机能进行数百万像素以上的高精度摄像，其不仅能进行风景或人物等的摄像，还越来越多地用于拍摄纸制的文档、记事本或名片等。

在作为代表性智能手机的苹果公司的iPhone（苹果公司授权的AiPhone公司（アイホン社）的注册商标）中，众所周知有如下几种被称为扫描应用的应用程序：读入用安装的照相机拍摄到的纸介质的表面图像，从连续性的像素的变化识别该纸介质的边缘（edge），将因从斜向拍摄而成为梯形状态的边缘校正为方形（梯形校正），从而完成如用近拍方式的文档扫描仪读入纸介质那样的图像。

另一方面，作为对用如上所述的照相机拍摄到的文档的图像进行校正的技术，有日本特开2010-130181号公报（专利文献1）。在该专利文献1中，如权利要求7及段落0047所记载的那样，公开有沿个人计算机（主体PCB）的键盘的两侧设置作为标记的红线RL，并将其与拍摄图像的画面侧边缘的倾角作为校正参数来进行梯形校正的技术。

【先行技术文献】

【专利文献】

专利文献1：日本特开2010-130181号公报

在所述专利文献1中，以设置于个人计算机（主体PCB）的两侧的被斜向拍摄的红线RL的标记为基准进行梯形校正，因此具有能够自动地进行梯形校正的优点，但如果置于个人计算机（主体PCB）之前的文档未放置在相对于个人计算机（主体PCB）的正确的位置，则存在无法进行正确的梯形校正的问题点。也就是说，在是稍微向斜向倾斜放置文档（DCM）的情况下，即使对处于倾斜状态的拍摄图像进行梯形校正，因作为图像而重现的文档（DCM）发生变形，则导致给人以不协调感的图像的可能性较高。

而且，即使同时使用识别上述文档的边缘部分来进行梯形校正的现有技术，除了需要进行复杂的校正计算以外，若文档被放置在与其纸张颜色同系列的机器上、或角部因装订器的钉而破碎或弯折，则边缘部分的识别率变低，大多情况下无法再现正确的文档。

发明内容

本发明鉴于上述问题而提出，其目的在于提供一种不受文档的放置方式或照相机位置的影响，且即使存在纸张的颜色或角部的破碎问题也能进行图像修整，文档的再现性较高的摄像技术。

本发明为了解决上述问题而采用以下的方式。

更详细地说，本发明的一个方面的图像处理系统包括：摄像对象物，在至少两处的规定位置，具有由多值化的图形构成的符号码形成的定位用符号；摄像单元，用于拍摄所述摄像对象物；图像获取单元，从所述摄像单元拍摄到的原图像数据中检测所述定位用符号，将以所述定位用符号为基准计算出的规定区域识别作为第一范围，仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取；以及图像数据保存单元，用于保存所述图像获取单元获取到的提取图像数据。

依据本发明，由于在作为摄像对象物的文档或记事本本身设置定位用符号（符号码），因此不受文档的放置方式或照相机的位置影响，且即使存在纸张的颜色或角部的破碎，也能进行图像修整，能够获得再现性较高的文档图像。换言之，由多值化的图形构成的符号码是具有显现部和非显现部的符号码。此外，定位用符号若存在两处以上则能够识别外形，若存在三处则能求出图像的坐标。但是，优选设置顶点检测用单元用于应对拍摄时的失真。若定位用符号存在四处，则在拍摄时，即使失真也能获知外形，但无法获知方向，因而优选设置定向符号。

另外，在本发明的图像处理系统中，在所述摄像对象物中也可以包括：位于所述第一范围的规定位置的用于识别所述第一范围的方向的定向符号、以及在所述第一范围内或在与第一范围不同的其他区域设置的第二范围，在所述图像获取单元或图像数据保存单元中预先存储有核对用字符信息，所述图像获取单元以所述定向符号为基准识别所述第一范围的方向，基于识别出的方向信息检测所述第二范围，核对在所述第二范围描绘的图像和所述字符信息，在识别出所述图像是字符时，将所述字符保存作为从所述第一范围读取到的图像数据的关联信息。

依据本发明，对于从第一范围读取的图像数据，由于能够将作为关联信息而记载在第二范围中的字符作为字符信息识别并存储，因此能够将该字符信息用作图像数据的索引（index），从而能够提高图像数据的检索性。第一范围的规定位置是指例如第一范围的上部或定位用符号之内的其中一个。关联信息例如是日期。

另外，在本发明中，所述核对用字符信息能够被设定为字母字符和数字中的至少任一种。通过将第二范围中记载的字符的识别限定为字母、数字，从而能够提高识别率，使处理高速化。

此外，在本发明的图像处理系统中，所述摄像单元也可以读取所述摄像对象物，如果从读取到的图像检测到至少三处所述定位用符号，则将该拍摄图像转移至所述图像获取单元。通过摄像单元检测到至少三处定位用符号，从而能求出图像的坐标，通过将拍摄图像数据转移至图像处理单元，从而能够实现自动快门。其结果是，能不用用户的多余操作即可在最佳定时（timing）获取图像数据。

并且，在本发明的图像处理系统中，摄像对象物上的所述第一范围也可以呈矩形状，在所述矩形的四个顶点分别配置有所述定位用符号，所述图像获取单元读出预先存储的各定位用符号间的基准距离，核对在拍摄图像中的所述各定位用符号间的距离与所述预先存储的各定位用符号间的基准距离是否一致，在不一致的情况下，以使拍摄的图像中的各定位用符号的距离与所述各定位用符号间的基准距离一致的方式校正拍摄的图像。

依据本发明，在文档、记事本等的摄像对象物本身设置定位用符号，以该定位用符号为基准进行图像校正（梯形校正）处理，所以与进行纸张的边缘识别的情况相比，能不受摄像对象物的放置方式（方向、位置或其地点）影响而可靠地识别图像数据的获取范围。

另外，在本发明的图像处理系统中，所述摄像对象物的表面也可以被进行以下的印刷处理：在电子复制时、在规定的位置显现用与其他位置不同的形状设置的禁止符号，拍摄所述摄像对象物的所述摄像单元在拍摄图像中识别出所述禁止符号时，不执行将所述拍摄图像转移至所述图像获取单元的处理。

依据本发明，即使要通过摄像单元拍摄电子复制后的（复印的）摄像对象物，也不用进行图像获取单元的图像处理，因此能够防止非法的电子复制（复印）。

另外，本发明能够指定本发明的图像处理系统中使用的摄像对象物。也就是说，本发明的上述图像处理系统的摄像对象物在至少两处规定位置具有通过由多值化的图形构成的符号码形成的定位用符号。

根据本发明的摄像对象物，通过在至少两个地方（例如左上和右下）设定特殊形状的定位用符号，从而与在第一范围记载的手写字符等图形清楚区分，且也易于确定该范围。定位用符号也可使用与QR码（商标注册第4075066号）中所使用的相同的定位用符号。

此外，在本发明的摄像对象物中，由所述多值化的图形构成的符号码也可以具有显现部和非显现部，所述非显现部包括：背景部和潜像部，所述背景部和潜像部具有通过所述摄像单元获得的拍摄图像不可视的不同模式，如果电子复制该读取对象物并印刷该复制物，则背景部和潜像部显现的复制物以被可视的状态重现。

依据本发明，通过在定位用符号的图形中设置通过摄像单元未被可视而利用电子复制（采用复印机的复印）可视地显现的背景部和潜像部，从而能够防止复制的摄像对象物的非法使用。也就是说，在对使用电子复制（采用复印机的复印）进行复制的摄像对象物进行拍摄的情况下，通过显现定位用符号的背景部和潜像部，从而被摄像单元识别为定位用符号的图形本身不同的形状。因此，摄像单元不能指定定位用符号，不能够转移至图像获取单元。

另外，在本发明中，也可以在除形成有定位用符号的区域外的规定区域，包括背景部及潜像部，该背景部及潜像部具有在从摄像单元获得的拍摄图像未可视化的不同模式，在电子复制该读取对象物并印刷该复制物时，在背景部和潜像部显现的禁止符号被可视化的状态下重现。通过在规定的区域设置通过摄像单元未被可视化而利用电子复制（采用复印机的复印）可视地显现的背景部和潜像部，从而能够防止复制的摄像对象物的不正当使用。也就是说，当检测出摄像单元可视地显现的背景部和潜像部、即禁止符号时，通过不将拍摄图像数据转移至图像获取单元，从而能够防止不正当使用。

另外，本发明另一方面的图像处理系统包括：透明薄片，在至少两处既定位置设置有由多值化的图形构成的符号码形成的定位用符号，所述透明薄片被载置在作为摄像对象物的纸张上；摄像单元，用于拍摄所述摄像对象物；图像获取单元，从所述摄像单元隔着所述透明薄片拍摄到的纸张表面的原图像数据检测所述定位用符号，将以所述定位用符号为基准计算出的规定区域识别作为第一范围，仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取；以及图像数据保存单元，用于保存所述图像获取单元获取到的提取图像数据。

另外，本发明其他方面的图像处理系统也可以包括：两张以上的贴片，被粘贴在作为摄像对象物的纸张上，所述贴片由定位用符号构成，所述定位用符号由多值化的图形构成的符号码形成；摄像单元，用于拍摄所述摄像对象物；图像获取单元，用于从所述摄像单元拍摄到的纸张表面的原图像数据检测所述贴片的定位用符号，将以所述定位用符号为基准计算出的规定区域识别作为第一范围，仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取；以及图像数据保存单元，用于保存所述图像获取单元获取到的提取图像数据。通过在透明薄片上配置定位用符号、或通过贴片构成定位用符号，从而即使在作为摄像对象物的文档或记事本不具有定位用符号的情况下，也能进行图像修整。

另外，本申请也能够指定为图像处理方法。也就是说，在本申请其他方面的图像处理方法中，通过摄像单元对在至少两处规定位置具有由多值化的图形构成的符号码形成的定位用符号的摄像对象物的表面进行拍摄，通过图像获取单元处理原图像数据，并记录在图像数据保存单元中，所述图像处理方法包括：所述摄像单元以包括至少所述两处规定位置的定位用符号的方式对所述摄像对象物进行拍摄的步骤；所述图像获取单元从拍摄到的原图像数据检测所述定位用符号，并将以所述定位用符号为基准计算出的规定区域识别作为第一范围的步骤；仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取的步骤；以及在所述图像数据保存单元中保存所述提取图像数据的步骤。

另外，本申请也能指定为图像处理程序。也就是说，对于本发明其他方面的图像处理程序，所述图像处理程序能通过图像处理系统执行，所述图像处理系统通过摄像单元对在至少两处规定位置具有由多值化的图形构成的符号码形成的定位用符号的摄像对象物的表面进行拍摄，通过图像获取单元处理原图像数据，并记录在图像数据保存单元中，所述图像处理程序使图像处理系统能执行以下的步骤：所述摄像单元以包括至少所述两处规定位置的定位用符号的方式对所述摄像对象物进行拍摄的步骤；所述图像获取单元从拍摄到的原图像数据检测所述定位用符号，并将以所述定位用符号为基准计算出的规定区域识别作为第一范围的步骤；仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取的步骤；以及在所述图像数据保存单元中保存所述提取图像数据的步骤。

另外，本发明也可以是图像处理系统中使用的摄像对象物，在图像处理系统中，通过摄像单元进行拍摄，用图像获取单元处理该图像数据，并保存在数据保存单元中，其中，该摄像对象物包括：定位用符号，为确定所述摄像对象物的摄像范围而被设置在至少两处规定位置，通过由多值化的图形构成的符号码形成；以及第一范围，以所述定位用符号为基准而设置在规定的位置，用于在所述图像获取单元进行图像数据的提取。

而且，在本发明的摄像对象物中，在所述摄像对象物上还可以设置有：定向符号，在所述第一范围的规定位置用于识别该第一范围的方向；以及第二范围，所述第二范围设置在所述第一范围内或设置在与第一范围不同的区域，通过所述第二范围与所述定向符号之间的位置关系来识别所述第二范围的方向，并且所述第二范围由记载有用于与预先存储在所述图像数据保存单元中的核对用字符信息进行核对的字符。

此外，本发明其他方面的图像处理系统基于网络，所述图像处理系统包括：摄像对象物，在至少两处的规定位置，具有由多值化的图形构成的符号码形成的定位用符号；摄像单元，用于拍摄所述摄像对象物；发送单元，用于经由网络发送通过摄像单元拍摄到的原图像数据；图像获取单元，在经由所述网络接收原图像数据的图像处理服务器中，从所述摄像单元拍摄到的原图像数据检测所述定位用符号，将以所述定位用符号为基准计算出的规定区域识别作为第一范围，仅提取处于所述第一范围的图像数据并将其作为提取图像数据获取；以及图像数据保存单元，用于保存所述图像获取单元获取到的提取图像数据。

发明效果

通过本发明，能够提供一种不受文档的放置方式或照相机位置的影响，且即使存在纸张的颜色或角部的破碎问题，也能进行图像修整，文档的再现性较高的摄像技术。

附图说明

图1是示出实施方式中的作为摄像对象物的记录（memo）纸张的图（1）。

图2是示出实施方式中的作为摄像对象物的记录纸张的图（2）。

图3是示出作为实施方式中的摄像对象物的记录纸张的图（3）。

图4是实施方式中所使用的带照相机的智能手机的结构图。

图5是在网络上利用实施方式的情况的说明图。

图6是示出实施方式的处理的一例流程图。

图7是示出实施方式中的拍摄状态、和印刷有定位标记的透明板的图。

图8是示出作为实施方式中的摄像对象物的记录纸张的图（4）。

图9是示出印刷有实施方式中所使用的定位标记的贴片（seal）的图。

图10是示出实施方式的处理的另一例流程图。

具体实施方式

（实施方式1）

基于附图说明本发明。图1示出本实施方式中的记录纸张（摄像对象物）（DOC）的表面的结构。如图1所示，该记录（memo）纸张（DOC）由设于上部的装订带（US）和纸张主体构成。也可在纸张主体的上方沿装订带（US）在图1的水平方向上设置加工线（ミシン目）（ML），以使能够切下记录纸张主体。

在记录纸张主体的表面，在四角附近印刷有定位用符号（M1～M4）。四个定位用符号中的左上（M1）、左下（M2）及右下（M3）的定位用符号对应于本发明的由多值化的图形构成的符号码（symbol code），在四角形状的粗线形状的线图（显现部）内部配置有被白纸的底色部分的区域（非显现部）包围的全面涂抹印刷的四角形（显现部）。优选为了以比通用的笔记工具（铅笔、圆珠笔、签字笔）粗的线印刷该粗线形状，而与后述的第一范围所记录的笔记工具的笔迹明确地区分。此外，定位用符号也可以是颜色码（color code）。

在纸张主体的右上印刷有与上述定位用符号形状不同的定向符号（M4）。定向符号（M4）对应于本发明的由被多值化处理后的图形构成的符号码，其是与上述左上（M1）、左下（M2）及右下（M3）的定位用符号不同的形状。这样，通过仅设四个符号之中的一个的形状为不同的形状，从而在用照相机（CAM）核定时，可以检测出记录纸张（DOC）的正方向。

被上述四个定位用符号（M1～M4）包围的区域被作为用户能描绘手写字符、图形、记号、图画等的第一范围（AR1）。然后，该第一范围（AR1）被图像读入作为原图像数据。

此外，在本例中，虽然将第一范围（AR1）识别作为被四个定位用符号（M1～M4）所包围的部分，但不一定需要配置四个定位用符号，如图3所示，也可只在左上（M6）和右下（M7）配置。也就是说，也可将以连接左上的定位标记（M6）和右下的定位标记（M7）的线设定为对角线的矩形区域识别作为第一范围（AR1）。

另外，在上述的说明中，虽然改变四个定位用符号（M1～M4）中的右上的符号的形状并将其作为定向符号，但该定向符号除了定位用符号（M1～M4）之外，也可如图1、图2的M5所示那样印刷在其他部位。

而且，也可以根据定位用符号（M1）和定位用符号（M2）的相对位置关系识别第二范围（AR2）。也可以将定位用符号彼此的相对位置关系取而代之地根据定位用符号和定向符号的相对位置关系来识别第二范围（AR2）。另外，在如图3所示的例子中，也可根据装订带（US）为基准识别第二范围（AR2）。

在图1中，在紧邻第一范围（AR1）的定向符号（M4）左侧的区域设置有第二范围（AR2）。该第二范围（AR2）具有与定向符号的高度相同的高度，定向符号（M4）的左端侧边与第二范围的右端侧边一致，因此若能够从用照相机（CAM）拍摄到的原图像数据检测出定向符号（M4），则也能检测出第二范围。

虽在图1中没有详细示出，但如图3所示，在第二范围以浅色印刷有由构成七段（segment）的直线片构成的记入向导（entry guide）。也就是说，通过用笔记工具在构成七段的记入向导部分上描画，从而能够在各段如电子计分板（electric scoreboard）的数字显示那样记录0～9的数字。

通过这样设置七段记入向导，从而能提高记入的数字的识别率。此外，虽然以设置七段记入向导来简化记入的数字的识别的情况为例进行了说明，但并不仅限于此，也可以浅色印刷每一个字符的框，使得能够对在框内记入的数字或字母字符进行字符识别。也就是说，能够通过用照相机（CAM）读取记入该第二范围（AR2）的字符（字母、数字），并与存储在存储器（MEM）中的字符图案（核对用字符信息）相比较，从而进行字符识别。

如图2所示，在纸张记事本（DOC）的定向符号（M4）的正下部分设置有禁止符号（AS1）。该禁止符号被进行不能视觉识别的印刷例如底纹印刷，其在用复印装置等电子复制时被作为可视性禁止符号出现。此外，禁止符号只要在第一范围（AR1）内的规定位置即可，也可以如例如图2所示，配置在左下的定位用符号（M2）的正上方位置。

另外，也可通过使底纹印刷显现（可视化），从而利用程序主动地识别为禁止符号。这样，也可以在识别出在记录纸张（DOC）上存在禁止符号的阶段，中央处理装置（CPU）基于程序中止图像处理，在显示器（DISP）上进行“该纸张不是标准的纸张”等显示。

接着，使用图4对本实施方式所使用的带照相机的智能手机（MP）的硬件结构进行说明。该智能手机（MP）是例如苹果公司的iPhone（AiPhone公司授权的注册商标）。

在主体上设置有主页按钮（BTN），作为使显示器（DISP）上显示的图标或菜单回到主页画面、或照相机（CAM）的快门（shutter）而发挥作用。

智能手机（MP）内部以中央处理装置（CPU）为中心而具有主存储器（MM）、经由总线（BUS）连接的存储器单元（MEM）、通信接口（TIF）、照相机（CAM）、上述按钮（BTN）、将触摸面板（TPN）和显示器（DISP）一体化而成的触摸面板显示器、以及扬声器（SPK）。

如图5所示，通信接口（TIF）能通过无线电话线路经由基站（BS）与通用的网络（NW）连接。另外，该通信接口（TIF）能与无线LAN的访问点（AP）通信，能经由任一种通信方式与网络连接。

在存储器单元（MEM）上设置有操作系统（OS），且还设置有图像处理应用程序（APL）、用于保存原图像数据或字符信息的用户数据区域（UDT）。

在本实施方式中，通过中央处理装置（CPU）经由总线（BUS）及主存储器（MM）读入并依次执行存储器单元（MEM）的图像处理应用程序（APL），从而实现上述记录纸张（DOC）的摄像及其图像处理。基于图6的处理流程说明该处理。

首先，通过用户的触摸面板（TPN）的触摸操作选择/启动本图像处理应用程序（APL）时（步骤601），照相机（CAM）的功能变为动作状态，拍摄作为摄像对象物的记录纸张（DOC），中央处理装置（CPU）基于程序读入该拍摄图像，并判断有无在图2中已经说明了的禁止符号（步骤603）。通过读出在存储器单元中记录的作为基准的禁止符号的图像数据并将其与来自照相机（CAM）的原图像数据相比较，从而进行该禁止符号的判断。

这里，在检测出禁止符号的情况下，不进行后续处理，返回步骤602。此外，此时如上所述，也可在显示器（DISP）上进行用于通知用户检测到禁止符号的“该纸张不是标准的纸张”等的显示。

在未检测到禁止符号时，中央处理装置（CPU）从原图像数据找出定位用符号（步骤604）。也通过读出在存储器单元中记录的作为基准的定位用符号的图像数据并将其与来自照相机（CAM）的原图像数据相比较，从而进行该定位用符号的检索。

在检测到定位用符号时，将该阶段中的原图像数据保存在存储器单元（MEM）中（步骤605）。也可从扬声器（SPK）输出用于通知决定采用此时的该原图像数据的快门声。另外，即使在步骤604中未识别出定位用符号的情况下，也可通过用户对按钮（BTN）操作而产生快门声（步骤611），在存储器单元（MEM）中保存该时刻的原图像数据，同时继续定位用符号的检索（步骤612）。在这种情况下，在一定时间内未能检测到定位用符号的情况下，也可选择是原样保持该原图像数据还是返回步骤602并再次拍摄（步骤613）。

在步骤605保持原图像数据时，对定位用符号的数量进行计数（步骤606）。这里，在仅检测到三个定位用符号时，根据该三个位置推断出剩下的一个定位用符号，并虚拟地追加设定第四个定位用符号（步骤610）。

在确定了全部四个定位用符号（M1～M4）时，设定彼此连接该四个定位用符号的外缘的四条假想线，将被该假想线包围的部分作为第一范围并进行图像提取（步骤607）。

接着，对提取图像以使四边的位置和距离与预先在存储器单元中存储的基准位置/距离相整合的方式进行梯形校正（步骤608），将校正后的图像作为记录纸张（DOC）的再现图像保持在存储器单元（MEM）中（步骤609）。

此外，在图6中，已经对禁止符号（AS1）配置于纸张记事本（DOC）的定向符号（M4）的正下方部分、或者左下的定位用符号（M2）的正上方位置时的处理进行了说明。这里，如图2所示，可以通过底纹印刷在定位用符号（例如M3）的非显现部（白底部分）设置禁止符号。另外，也可通过底纹印刷在其他的定位用符号（例如M3）的非显现部（白底部分）设置禁止符号。通过这样重叠印刷定位用符号（M3）和禁止符号（AS3），从而当本记录纸张（DOC）被复印装置等进行电子复制时，由于该复制物的定位用符号（M3）的形状变得不同，因此在用照相机（CAM）读取后的图像处理中，中央处理装置（CPU）进行通过程序未识别作为定位用符号（M3）的处理。由此，也可不进行第一范围的原图像数据的处理。

如上所述，在通过底纹印刷在定位用符号的非显现部（白底部分）设置禁止符号的情况下，不需要识别禁止符号。因此，能够通过图10所示的处理流程进行摄像及图像处理。图10所示的处理在不进行图6中的判断有无禁止符号的处理（步骤603）的情况下就进行找出定位用符号的处理（步骤1004）这点与图6所示的处理流程不同。此外，图10的各步骤的标号的后两位数字与图6的各步骤的标号的后两位数字对应，设后两位数字相同的步骤进行同样的处理。

此外，在上述的处理流程中，虽然已经对以使用全部四个定位用符号进行梯形校正的情况为例进行了说明，但并不仅限于此，也可如图3所说明的那样，仅以左上的定位用符号（M6）和右下的定位用符号（M7）为基准执行梯形校正。在这种情况下，仅检测步骤606中两个定位用符号即可。另外，也可推断剩余的两个定位用符号的位置并设定为虚拟定位用符号。

在以上的说明中，已经说明了用智能手机（MP）进行全部处理的情况，但也可将一部分处理让经由网络（NW）连接的服务器（SV）执行。

例如，通过照相机（CAM）进行记录纸张（DOC）的拍摄后，将原图像数据暂时保存在存储器单元（MEM）中，同时经由通信接口（TIF）及网络（NW）发送给服务器（SV）。

也可在接收到上述原图像数据的服务器（SV）中，基于存储在服务器中的图像处理程序，根据原图像数据检测上述定位用符号，并将以该定位用符号为基准计算出的规定区域识别作为第一范围，仅提取处于该第一范围的图像数据并将其作为提取图像数据保存在服务器（SV）中。

也可经由网络（NW）从智能手机（MP）访问保存在服务器（SV）中的图像数据。

在以上的说明中，已经对以在记录纸张（DOC）本身直接印刷定位用符号和定向符号的情况为例进行了说明，但并不仅限于此，也可在透明的塑料薄片（PL）上印刷定位用符号和定向符号、或粘贴印刷好的定位用符号和定向符号的贴片，在使该塑料薄片（PL）覆盖在记录纸张（DOC）上的状态下，用照相机（CAM）透过塑料薄片对记录纸张（DOC）的表面进行拍摄。

另外，如图9所示，也可提供作为由印刷了定位用符号和定向符号的塑料膜构成的贴片（SL），在该贴片（SL）的背面设置粘着面，并粘贴在在通用的记录纸张和报告纸张（report paper）上。

此外，在上述说明中，已经对将摄像对象物作为记录纸张（DOC）的情况进行了说明，但也可以是A4尺寸左右的报告纸张、白纸、印刷完毕的文档、名片或名片大小的记录纸张等，只要能设定定位符号和定向符号则其可以是任意大小。

产业上的可利用性

本发明能够用于使用照相机进行非近拍的文档拍摄的图像处理领域。

符号说明

DOC  摄像对象物（记录纸张）  AR1  第一范围

AR2  第二范围                US  装订带

M1～M4、M6、M7  定位用符号（M4是定向符号）

M5  定向符号                 AS1～AS3  禁止符号

MP  智能手机                 CAM  照相机

PL  塑料薄片                 SL  贴片

CPU  中央处理装置            MM  主存储器

BUS  总线                    MEM  存储器单元

OS  操作系统                 APL  图像处理程序

UDT  用户数据区域            TIF  通信接口

BTN  主页按钮                TPN  触摸面板

DISP  显示器面板             SPK  扬声器

BS  基地站                   AP  访问点

Claims (10)

1.一种图像处理程序，所述图像处理程序是图像处理系统能执行的图像处理程序，在所述图像处理系统中，通过摄像单元对摄像对象物进行拍摄，并通过CPU对其原图像数据进行处理并注册到图像数据保存单元中，其中，所述摄像对象物具有由配置在至少两处的规定位置的多值化的图形构成的符号码所形成的定位用符号，所述图像处理程序的特征在于，

所述定位用符号是在矩形的纸张主体的四角附近中的至少两处设置的至少两种矩形的所述定位用符号，所述定位用符号由多值化的图形构成的符号码形成，

所述定位用符号具有显现部以及非显现部，所述显现部由与所述纸张主体的底色不同的色值构成，所述非显现部由所述纸张主体的底色构成，

第一定位用符号的所述显现部包括：具有直线部和角部的框状的显现部，两条所述直线部分别与从所述纸张主体的角延伸的两边平行，所述角部由两条所述直线部的端部彼此连接而成，第一定位用符号的所述非显现部由被所述框状的显现部包围的底色区域构成，

第二定位用符号的所述显现部至少包括：具有直线部和角部的显现部，两条所述直线部分别与从所述纸张主体的角延伸的两边平行，所述角部由两条所述直线部的端部彼此连接而成；以及矩形状的显现部，位于该具有直线部和角部的显现部的内侧，所述第二定位用符号的所述非显现部由所述具有直线部和角部的显现部与所述矩形状的显现部之间的区域构成，

所述第二定位用符号由假想矩形构成，所述假想矩形通过两条所述直线部以及两条假想直线构成四边而形成，两条所述假想直线连接两条所述直线部的两端中的未形成所述角部的各个端部以及所述矩形状的显现部的四个角部中的距离所述角部最远的角部，

所述图像处理程序使CPU执行：

从通过所述摄像单元拍摄到的、包括所述至少两处规定位置的定位用符号的所述摄像对象物的原图像数据检测所述定位用符号的步骤；

将以所述定位用符号为基准计算出的规定区域识别作为第一范围的步骤；

仅提取处于所述第一范围的图像数据并将其获取作为提取图像数据的步骤；以及

在所述图像数据保存单元中保存所述提取图像数据的步骤。

2.根据权利要求1所述的图像处理程序，其特征在于，

在检测所述定位用符号的步骤中，从所述原图像数据检测由至少两种形状构成的多个定位用符号，

所述图像处理程序还使所述CPU执行：为了识别所述摄像对象物的第一范围的方向，以与所述多个定位用符号间的位置关系一致的方式读出预先存储的各定位用符号的基准位置，根据该基准位置，识别第一范围的方向。

3.根据权利要求1或2所述的图像处理程序，其特征在于，

所述图像处理程序还使所述CPU执行：识别与所述第一范围不同的第二范围，将描绘在所述第二范围的图像和预先存储在所述图像数据保存单元中的核对用信息进行核对，在识别出相当于所述核对用信息时，将该图像保存作为从所述第一范围读取到的图像数据的关联信息。

4.根据权利要求1至3中任一项所述的图像处理程序，其特征在于，

在检测所述定位用符号的步骤中，从所述原图像数据检测多个定位用符号，

所述图像处理程序还使所述CPU执行：读出预先存储的各位置定位用符号间的基准距离，核对所述多个定位用符号间的距离是否与所述基准距离一致，在不一致的情况下，对拍摄到的图像进行校正，以使所述多个定位用符号间的距离与所述基准距离一致。

5.根据权利要求1至4中任一项所述的图像处理程序，其特征在于，

在检测所述定位用符号的步骤中，从所述原图像数据检测四个定位用符号，

在所述获取步骤中，仅提取处于所述第一范围的图像数据，并将其获取作为由将所述四个定位用符号的附近作为顶点的矩形构成的所述提取图像数据。

6.根据权利要求1至4中任一项所述的图像处理程序，其特征在于，

在检测定位用符号的步骤中，从所述原图像数据检测五个定位用符号，

在所述获取步骤中，仅提取处于所述第一范围的图像数据，将其获取作为所述提取图像数据，在所述提取图像数据中，是将五个定位用符号中的四个定位用符号的附近作为顶点的矩形且其他另一个定位用符号是所述图像获取单元用于定义所述摄像对象物的拍摄方向的定位用符号。

7.根据权利要求1至6中任一项所述的图像处理程序，其特征在于，

所述图像处理程序使所述CPU在从拍摄到的所述摄像对象物的图像检测出多处所述定位用符号时，自动获取所述提取图像数据。

8.根据权利要求1至7中任一项所述的图像处理程序，其特征在于，

所述图像处理程序使CPU还执行将所述提取图像数据保存在服务器中的步骤。

9.一种便携式终端，其特征在于，所述便携式终端是安装有根据权利要求1至8中任一项所述的图像处理程序的所述图像处理系统。

10.一种图像处理方法，所述图像处理方法是图像处理系统能执行的图像处理方法，在所述图像处理系统中，通过摄像单元对摄像对象物进行拍摄，并通过CPU对其原图像数据进行处理并注册到图像数据保存单元中，其中，所述摄像对象物具有由配置在至少两处的规定位置的多值化的图形构成的符号码所形成的定位用符号，所述图像处理方法的特征在于，

所述定位用符号是在矩形的纸张主体的四角附近中的至少两处设置的至少两种矩形的所述定位用符号，所述定位用符号由多值化的图形构成的符号码形成，

所述定位用符号具有显现部以及非显现部，所述显现部由与所述纸张主体的底色不同的色值构成，所述非显现部由所述纸张主体的底色构成，

第一定位用符号的所述显现部包括：具有直线部和角部的框状的显现部，两条所述直线部分别与从所述纸张主体的角延伸的两边平行，所述角部由两条所述直线部的端部彼此连接而成，第一定位用符号的所述非显现部由被所述框状的显现部包围的底色区域构成，

第二定位用符号的所述显现部至少包括：具有直线部和角部的显现部，两条所述直线部分别与从所述纸张主体的角延伸的两边平行，所述角部由两条所述直线部的端部彼此连接而成；以及矩形状的显现部，位于该具有直线部和角部的显现部的内侧，所述第二定位用符号的所述非显现部由所述具有直线部和角部的显现部与所述矩形状的显现部之间的区域构成，

所述第二定位用符号由假想矩形构成，所述假想矩形通过两条所述直线部以及两条假想直线构成四边而形成，两条所述假想直线连接两条所述直线部的两端中的未形成所述角部的各个端部以及所述矩形状的显现部的四个角部中的距离所述角部最远的角部，

在所述图像处理方法中，所述CPU执行：

从通过所述摄像单元拍摄到的、包括所述至少两处规定位置的定位用符号的所述摄像对象物的原图像数据检测所述定位用符号的步骤；

将以所述定位用符号为基准计算出的规定区域识别作为第一范围的步骤；

仅提取处于所述第一范围的图像数据并将其获取作为提取图像数据的步骤；以及

在所述图像数据保存单元中保存所述提取图像数据的步骤。

Images