CN101008984A - 图像处理装置、图像处理方法及程序 - Google Patents

Abstract

本发明提供图像处理装置、图像处理方法及程序。图像处理装置包括图像捕捉部、标记图像检测部、判断部以及输出部。图像捕捉部捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围。标记图像检测部从所述捕捉图像中检测所述标记图像。判断部基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中。当判断部判断出所述识别目标范围不包括在所述捕捉图像中时，输出部输出用于捕捉所述识别目标范围的指导。

Description

图像处理装置、图像处理方法及程序

技术领域

本发明涉及一种用于对通过捕捉目标图像而获得的捕捉图像进行图像处理的图像处理装置、图像处理方法及程序。

背景技术

存在如下的技术：使用包括诸如便携式电话或数字摄像机的图像捕捉部的图像处理装置，来捕捉形成在诸如纸的介质上的目标图像以获取捕捉图像，并从该捕捉图像中提取信息。这种类型的图像处理装置捕捉包括表示二维码(例如，条码或QR码(注册商标))、字符等的图像区域(识别目标范围)的目标图像，并且对该识别目标范围执行识别处理(例如，对码信息的分析或OCR处理)，从而可获得由这些码所表示的数字数据。此外，在利用公知的数字水印技术等将目标数据以人眼无法一眼就可察觉的形式嵌入目标图像中的情况下，该图像处理装置还可通过获取包括所嵌入的目标数据的识别目标范围的捕捉图像并对其进行分析，来提取所嵌入的目标数据(参见日本特开2002-544637号公报(对应于WO00/70585)和日本特开2004-349879号公报)。

当采用这种类型的图像处理装置来捕捉目标图像时，用户不总是容易地按照识别目标范围在捕捉图像中的位置、尺寸等能满足期望条件的方式来捕捉目标图像。这是因为通常用户不会准确地知道诸如适于图像处理装置对识别目标范围执行识别处理的情况的图像尺寸的条件。此外，在识别目标范围是其中通过数字水印技术嵌入有数字数据的图像区域的情况下，用户首先就难以判断该目标图像中的哪个部分是识别目标范围。

为了解决该问题，日本特开2004-213215号公报提出了这样一种技术，在该技术中，基于对捕捉图像中的识别目标范围的限定结果，将指导信息输出给用户，使得用户可以改变识别目标范围在捕捉图像中的位置或尺寸。然而，根据该技术，除非实际地限定了识别目标范围，否则无法判断该识别目标范围是否包括在捕捉图像中。在捕捉图像中的识别目标范围的尺寸过小的情况下，除非实际地限定了识别目标范围，否则也无法将此事实呈现给用户。

发明内容

在这种情况下做出了本发明。本发明提供一种图像处理装置、图像处理方法及程序，由此当用户捕捉包括识别目标范围的目标图像时，用户可以容易地捕捉按照期望条件地包括识别目标范围的捕捉图像。

根据本发明的一方面，一种图像处理装置包括图像捕捉部、标记图像检测部、判断部以及输出部。所述图像捕捉部捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围。所述标记图像检测部从所述捕捉图像中检测所述标记图像。所述判断部基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中。当所述判断部判断出所述识别目标范围不包括在所述捕捉图像中时，所述输出部输出用于捕捉所述识别目标范围的指导。

根据该结构，如上所述地对标记图像进行检测并基于检测结果进行判断。因此，在不进行限定识别目标范围的处理并尝试对所限定的识别目标范围进行识别处理的情况下就可以判断所述识别目标范围是否包括在所述捕捉图像中。

此外，当所述标记图像检测部没有检测到所述标记图像时，所输出的指导可以包括关于捕捉对焦、捕捉尺寸或捕捉地点的信息。

此外，当所检测到的标记图像的数量不等于预定数量并且所检测到的标记图像的尺寸不在预定范围内时，所输出的指导可以包括关于捕捉尺寸和捕捉的缩放倍率中的至少一个的信息。

此外，当所检测到的标记图像的数量不等于预定数量并且所检测到的标记图像的尺寸在预定范围内时，所输出的指导可以包括关于捕捉地点的信息。

此外，当所检测到的标记图像的数量等于预定数量时，所述判断部还对以下情况中的至少一个进行判断：

所述识别目标范围的尺寸是否在预定范围内，

所述捕捉图像的亮度是否满足预定条件，

所述捕捉图像的焦距是否对准，以及

所检测到的识别目标范围是否失真。

所述输出部基于所述判断的结果输出所述指导。

根据本发明的另一方面，一种图像处理装置包括图像捕捉部、标记图像检测部、位置估计部以及输出部。图像捕捉部捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括由多种标记图像组成的标记图像集和由所述标记图像集限定的识别目标范围。所述标记图像检测部从所述捕捉图像中检测包括在所述标记图像集中的至少一部分标记图像。所述位置估计部基于所检测到的标记图像的种类，来估计所述识别目标范围在所述捕捉图像中的位置。所述输出部基于所述识别目标范围的所述估计位置，输出用于捕捉所述识别目标范围的指导。

根据该结构，可以检测标记图像并基于所检测到的标记图像的种类来估计所述识别目标范围在所述捕捉图像中的位置。

根据本发明的又一方面，一种图像处理装置包括显示器、捕捉部以及指导图像显示部。所述显示器显示要捕捉的图像。所述捕捉部捕捉包括识别目标范围的所述图像，要对所述识别目标范围进行识别处理。所述指导图像显示部按照使第一指导图像和第二指导图像叠加在要捕捉的图像上的方式来显示所述第一指导图像和所述第二指导图像。所述第一指导图像表示要包括所捕捉的识别目标范围的区域。所述第二指导图像表示所捕捉的识别目标范围的最小尺寸。

根据该结构，即使在用户不知道所述识别目标范围相对于所述捕捉图像的期望尺寸的情况下，用户也可以通过在检查这两个指导图像的同时捕捉目标图像而容易地获得具有期望尺寸的识别目标范围的图像。因此，可以提高用户友好性。

此外，所述图像处理装置还可以包括判断部和结果显示部。所述判断部判断所捕捉的识别目标范围是否包括在所述第一指导图像的范围内，并且判断所捕捉的识别目标范围是否大于所述第二指导图像的尺寸。所述结果显示部基于判断结果进行显示。

根据本发明的另一方面，一种图像处理方法包括以下步骤：捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围；从所述捕捉图像中检测所述标记图像；基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中；以及当判断出所述识别目标范围不包括在所述捕捉图像中时，输出用于捕捉所述识别目标范围的指导。

根据本发明的另一方面，一种计算机可读介质存储有使计算机执行图像处理的程序。所述图像处理包括以下步骤：捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围；从所述捕捉图像中检测所述标记图像；基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中；以及当判断出所述识别目标范围不包括在所述捕捉图像中时，输出用于捕捉所述识别目标范围的指导。

附图说明

将基于以下附图详细描述本发明的示例性实施例，在附图中：

图1是示出了根据本发明示例性实施例的图像处理装置的示意性构成的框图；

图2是示出了根据本发明示例性实施例的图像处理装置的功能的功能框图；

图3是示出了由根据本发明示例性实施例的图像处理装置执行的处理的示例的流程图；

图4是示出了要由根据本发明示例性实施例的图像处理装置捕捉的目标图像的示例的图；

图5是示出了由根据本发明示例性实施例的图像处理装置执行的处理的另一示例的流程图；

图6A和6B是示出了要由根据本发明示例性实施例的图像处理装置捕捉的目标图像的示例以及通过捕捉该目标图像而获得的捕捉图像的示例的图；

图7A和7B是示出了要由根据本发明示例性实施例的图像处理装置捕捉的目标图像的另一示例以及通过捕捉该目标图像而获得的捕捉图像的另一示例的图；

图8是示出了由根据本发明示例性实施例的图像处理装置执行的处理的另一示例的流程图；以及

图9A和9B是示出了由根据本发明示例性实施例的图像处理装置显示的指导图像的示例的图。

具体实施方式

下面将参照附图描述本发明的示例性实施例。如图1所示，根据本发明示例性实施例的图像处理装置10包括控制部11、存储部12、操作部13、显示部14、以及图像捕捉部15。

控制部11是根据存储在存储部12中的程序进行操作的CPU等。在该实施例中，控制部11控制图像捕捉部15捕捉目标图像，从而获取捕捉图像。对捕捉图像执行诸如标记图像检测的图像处理。此外，控制部11控制显示部14显示稍后将描述的指导图像。稍后将对要由控制部11执行的处理的示例进行更详细的描述。

存储部12是其中存储有要由控制部11执行的程序的计算机可读存储介质。存储部12包括诸如RAM或ROM的存储器件以及盘装置中的至少一个。存储部12还作为控制部11的工作存储器而进行操作。

例如，操作部13包括操作按钮和触摸板。操作部13将用户的指示操作的内容输出到控制部11。例如，显示部14是基于控制部11的控制而显示信息的显示器等。

图像捕捉部15是CCD摄像机等，其对形成在作为待拍摄目标的介质上的图像进行捕捉，并将如此获得的捕捉图像的图像数据输出到控制部11。

如图2所示，图像处理装置10在功能上包括图像捕捉控制部21、标记图像检测部22、识别目标范围获取部23、以及识别处理部24。例如，可以通过执行存储在存储部12中的程序的控制部11来实现这些功能。

图像捕捉控制部21控制图像捕捉部15捕捉目标图像以获得捕捉图像。此外，图像捕捉控制部21将所获得的捕捉图像显示在显示部14上以将该捕捉图像呈现给用户。此外，图像捕捉控制部21根据用户对操作部13的指示操作将表示捕捉图像的图像数据存储在存储部12中。

此外，当将捕捉图像显示在显示部14上时，图像捕捉控制部21还可按照目标区域指导图像和尺寸指导图像叠加在捕捉图像上的方式将这两个指导图像显示在显示部14上。例如，图像捕捉控制部21根据用户对操作部13的指示操作，在开始诸如二维码获取模式的预定拍摄模式时显示这些指导图像。稍后将描述这些指导图像的详情。

通过对由图像捕捉控制部21获取的捕捉图像执行图像处理，标记图像检测部22检测包括在捕捉图像中的各标记图像，以获取标记图像在捕捉图像中的位置。这例如可以通过以下处理来实现。即，首先，标记图像检测部22通过对捕捉图像进行二值化处理来获取二值图像。然后，对包括在该二值图像中的具有预定像素值(为“1”或“0”的位)的像素进行标注处理，从而提取并标注通过连接这些像素而获得的连接图像。然后，从经标注的连接图像中选择各自具有包括在预定范围内的尺寸的图像作为候选标记图像。然后，对各个所选候选标记图像进行关于所述候选标记图像是否与存储在图像处理装置10中的标记图像图案相匹配的匹配处理。因此，获得了表示候选标记图像与标记图像的相似度的值(一致度)。这里，可以通过使用根据各所选候选标记图像进行了尺寸校正的标记图像图案来执行匹配处理。当候选标记图像的相似度不小于预定阈值时，标记图像检测部22将该候选标记图像确定为标记图像。

标记图像检测部22可以检测标记图像在捕捉图像中的位置，并指明标记图像的尺寸。当在目标图像中包括多种标记图像时，标记图像检测部22可以指明各个检测到的标记图像的种类。例如，可以根据标记图像的形状、颜色或尺寸来指明各个标记图像的种类。作为一示例，标记图像检测部22可以通过基于各像素在预定颜色空间中的特定分量颜色(例如，RGB颜色空间中的蓝色)的浓度值对包括在捕捉图像中的像素进行二值化处理，来检测具有特定分量颜色的标记图像。此外，可以存储多个标记图像图案，从而可以通过进行候选标记图像与这些标记图像图案的匹配处理来检测具有特定形状的标记图像。

识别目标范围获取部23基于标记图像检测部22对标记图像的检测结果等，获取包括在由图像捕捉控制部21获取的捕捉图像中的识别目标范围。当可以获取识别目标范围时，识别目标范围获取部23判断所获取的识别目标范围是否满足执行识别处理所需的预定条件。

当无法获取识别目标范围时或者当所获取的识别目标范围不满足预定条件时，识别目标范围获取部23执行预定处理，例如将校正指导信息输出给用户。这样，用户可以知道如何校正图像捕捉范围或者到目标图像的距离，以便捕捉按照期望条件地包括识别目标范围的捕捉图像。因此，可以提高用户友好性。

例如，识别目标范围获取部23可以按如下方式输出校正指导信息，即，将表示消息信息或预定指示的内容的校正指导图像显示在显示部14上。识别目标范围获取部23可以按如下方式输出校正指导信息，即，从扬声器(未示出)通过语音来输出消息信息等。或者，识别目标范围获取部23可以按使灯(未示出)亮或闪烁的方式输出校正指导信息。

识别处理部24对由识别目标范围获取部23获取的识别目标范围执行识别处理。如下将给出识别处理的具体示例。即，当识别目标范围包括字符图像时，识别处理是获取由该字符图像表示的字符码的处理。当识别目标范围包括码图像时，识别处理是通过预定的分析处理获取由条码、二维码等的码图像表示的数据的处理。当识别目标范围是其中通过数字水印技术嵌入有目标数据的图像区域时，识别处理是利用应对嵌入用数字水印技术的方法提取所嵌入的目标数据的处理。

接下来，将对某些处理示例进行描述，在这些处理示例中，图像处理装置10捕捉目标图像以从捕捉图像中获取识别目标范围。

将参照图3的流程图描述在如下情况下的示例作为第一示例，即，图像处理装置10捕捉包括多个标记图像以及由所述多个标记图像限定的识别目标范围的目标图像的至少一部分。这里，将基于以下假设给出具体示例：捕捉了如图4所示的目标图像，该目标图像包括为矩形区域的识别目标范围A1以及布置在该矩形区域的顶点附近的四个十字标记图像(即，标记图像M1至M4)。

首先，根据用户对操作部13的指示操作，图像捕捉控制部21控制图像捕捉部15捕捉目标图像的至少一部分，以获取捕捉图像(S1)。

接下来，标记图像检测部22从在S1的处理中所获取的捕捉图像中检测标记图像(S2)。

然后，识别目标范围获取部23基于S2的检测结果来判断识别目标范围A1是否按照期望条件地包括在捕捉图像中。作为具体示例，如下执行该处理。

即，识别目标范围获取部23首先判断在S2的处理中是否已检测到至少一个标记图像(S3)。当根本检测不到任何标记图像时，可以认为因为从一开始捕捉图像中就根本不包括识别目标范围A1或者到目标图像的距离过短从而无法将整个识别目标范围A1包括在捕捉图像中，所以在捕捉图像中不包括标记图像。在某些情况下，尽管在捕捉图像中包括标记图像，但是因为捕捉图像离焦或者捕捉图像中的识别目标范围A1过小，所以仍无法检测到标记图像。在此情况下，识别目标范围获取部23根据判断结果输出校正指导信息(S4)。如此输出的校正指导信息是诸如“图像离焦或捕捉尺寸不适当”或者“请检查焦点、捕捉尺寸、或捕捉地点”的消息信息。

当在S3的处理中检测到至少一个标记图像时，识别目标范围获取部23随后判断是否检测到预定数量的标记图像(S5)。这里，用于判断的预定数量是预先设定的、作为用于限定识别目标范围的标记图像的数量的数量。在图4的情况下，该预定数量为4。

当无法检测到预定数量的标记图像时，就认为因为识别目标范围A1相对于捕捉图像的位置或尺寸与期望的条件不同，所以识别目标范围A1没有整体地包括在捕捉图像中。在此情况下，尽管识别目标范围获取部23可以根据判断结果输出校正指导信息，但是识别目标范围获取部23还可以根据检测到的标记图像的尺寸执行以下处理。

即，识别目标范围获取部23判断在S3的处理中检测到的标记图像是否包括在预定范围内(S6)。例如，可以基于在目标图像中标记图像相对于识别目标范围的尺寸的尺寸以及图像捕捉部15的分辨率，来决定该预定范围。

当判断得出标记图像的尺寸不包括在预定范围内时，识别目标范围获取部23根据S5和S6的判断结果输出表示应该校正识别目标范围A1相对于捕捉图像的尺寸的校正指导信息(S7)。例如，识别目标范围获取部23输出诸如“捕捉尺寸不适当”、“请确认捕捉尺寸”、或“请缩小缩放倍率”的消息信息。

当判断得出标记图像的尺寸包括在预定范围内时，识别目标范围获取部23根据S5和S6的判断结果输出表示应该校正要捕捉的目标图像的位置的校正指导信息(S8)。例如，识别目标范围获取部23输出诸如“捕捉地点不适当地移动”或“请确认捕捉地点”的消息信息。

另一方面，当判断得出在S5的处理中已检测到预定数量的标记图像时，识别目标范围获取部23可确定识别目标范围A1包括在捕捉图像中。尽管识别处理部24可以立即对该识别目标范围执行识别处理，但是如稍后将要描述的，识别目标范围获取部23随后根据检测到的标记图像来判断包括在捕捉图像中的识别目标范围A1是否满足执行识别处理所需的预定条件(S9)。当判断得出识别目标范围A1不满足预定条件之一时，识别目标范围获取部23根据该判断结果输出校正输出信息(S10)。

例如，识别目标范围获取部23判断捕捉图像中的识别目标范围A1的尺寸是否包括在预定范围内。作为一具体示例，识别目标范围获取部23可以基于对各个检测到的标记图像的尺寸是否包括在预定范围内的判断或者标记图像之间的距离是否包括在预定范围内的判断，来判断识别目标范围A1的尺寸是否包括在预定范围内。当基于标记图像之间的距离来进行判断时，例如，在图4的示例中基于标记图像M1和M4的位置来计算在捕捉图像中标记图像M1与标记图像M4之间的距离。识别目标范围获取部23可以基于对计算出的距离是否包括在预定范围内的判断，来判断识别目标范围A1的尺寸是否包括在预定范围内。

当判断得出识别目标范围A1的尺寸不包括在预定范围内时，可能由于捕捉图像的分辨率问题而无法执行识别处理。因此，根据该判断结果，识别目标范围获取部23输出表示应该校正捕捉图像中的识别目标范围A1的尺寸的校正指导信息。例如，当判断得出识别目标范围A1的尺寸小于预定范围时，识别目标范围获取部23输出诸如“请更大地捕捉图像”的消息信息。

识别目标范围获取部23可以判断捕捉图像的亮度是否满足预定条件。作为一具体示例，识别目标范围获取部23基于对构成各标记图像的像素的浓度值的平均值(标记图像浓度值)是否不小于一预定阈值的判断、构成外围图像区域(其是各标记图像周围的预定范围)的像素的浓度值的平均值(外围图像浓度值)是否小于一预定阈值的判断、以及标记图像浓度值与外围图像浓度值之差是否不小于一预定值的判断，来判断捕捉图像的亮度。

当判断得出捕捉图像的亮度不满足预定条件时，可能由于无法获得足够的灰度(gradation)而无法执行识别处理。因此，识别目标范围获取部23根据该判断结果输出表示应该调节拍摄时的亮度的校正指导信息。例如，当标记图像浓度值与外围图像浓度值之差小于预定值或者外围图像浓度值不小于预定阈值时，识别目标范围获取部23输出诸如“请在更亮的地点捕捉图像”的消息信息。当标记图像浓度值小于预定阈值时，识别目标范围获取部23输出诸如“太亮了。请检查照明”的消息信息。

识别目标范围获取部23可以判断捕捉图像是否对焦。作为一具体示例，识别目标范围获取部23产生包括标记图像的边界的特定像素行的浓度值分布。当在该浓度值分布中从最大浓度值到最小浓度值的宽度w不小于预定阈值时，识别目标范围获取部23确定标记图像的边缘部分模糊并且捕捉图像离焦。相反，当该宽度w小于该预定阈值时，识别目标范围获取部23确定捕捉图像对焦。

当判断得出捕捉图像离焦时，识别目标范围获取部23根据该判断结果输出表示捕捉图像应该对焦的校正指导信息，这是因为离焦可能对识别处理产生不利影响。例如，识别目标范围获取部23输出诸如“图像离焦”的消息信息。

此外，识别目标范围获取部23可以判断识别目标范围A1是否失真。例如，当图像捕捉部15的镜头向目标图像显著地倾斜时，捕捉图像中的识别目标范围A1的形状失真到不可校正的程度。作为一具体示例，识别目标范围获取部23将捕捉图像中的标记图像M1和M2之间的距离a与标记图像M3和M4之间的距离b进行比较。当距离a和b之差不小于一预定阈值或者距离a和b之比不小于一预定阈值时，识别目标范围获取部23确定识别目标范围A1失真。类似地，识别目标范围获取部23对标记图像M1和M3之间的距离c与标记图像M2和M4之间的距离d进行比较。当距离c和d之差不小于一预定阈值或者距离c和d之比不小于一预定阈值时，识别目标范围获取部23确定识别目标范围A1失真。

当判断得出识别目标范围A1失真时，识别目标范围获取部23根据该判断结果输出表示应该使目标图像平行于图像捕捉部15的镜头而被捕捉的校正指导信息。例如识别目标范围获取部23输出诸如“请平行地捕捉图像”的消息信息。

当前述处理中的判断得出识别目标范围A1整体地包括在捕捉图像中并且满足执行识别处理所需的预定条件时，识别目标范围获取部23基于检测到的标记图像的位置来限定识别目标范围A1(S11)。识别处理部24对所限定的识别目标范围A1执行预定的识别处理并输出结果(S12)。

根据前述处理，从通过捕捉目标图像而获得的捕捉图像中检测标记图像，并且基于该检测结果进行判断。因此，无需限定识别目标范围A1并尝试对识别目标范围A1进行识别处理，就可以判断识别目标范围A1是否按照期望条件地包括在捕捉图像中。此外，根据该判断结果，输出校正指导信息。因此，可以向用户通知捕捉图像具有什么问题，从而可以提高用户友好性。

在以上描述中由识别目标范围获取部23执行的判断处理的过程仅仅是作为示例而给出的。可以按不同的过程来执行该判断处理，或者可以仅执行该判断处理的一部分。

尽管在以上描述中以输出消息信息作为校正指导信息的情况为例，但是可以按照如下处理来输出校正指导信息，即，将诸如表示这些消息的内容的预定标记的校正指导图像代替消息信息或与消息信息一起显示在显示部14上。

接下来，将参照图5的流程图描述在如下情况下的示例作为第二示例，即，图像处理装置10捕捉包括由多种标记图像形成的标记图像集以及由该标记图像集限定的识别目标范围的目标图像的至少一部分。这里，将基于以下假设给出具体示例：捕捉了如图6A所示的目标图像，该目标图像包括为矩形区域的识别目标范围A2以及布置在该识别目标范围A2的顶点附近的四个不同形状的标记图像(即，标记图像M5至M8)。

首先，根据用户对操作部13的指示操作，图像捕捉控制部21控制图像捕捉部15捕捉目标图像的至少一部分，以获取捕捉图像(S21)。

接下来，标记图像检测部22从在S21的处理中所获取的捕捉图像中检测标记图像(S22)。

然后，与第一示例的情况相似，识别目标范围获取部23基于标记图像检测部22对标记图像的检测结果来判断识别目标范围A2是否包括在捕捉图像中。识别目标范围获取部23根据该判断结果执行输出校正指导信息的处理。在此情况下，与第一示例的情况相似，识别目标范围获取部23可以基于各检测到的标记图像的尺寸等来执行判断处理。这里，如下面将要描述的，假设识别目标范围获取部23仅基于各检测到的标记图像的种类来进行判断。

首先，识别目标范围获取部23判断是否已检测到在用于限定识别目标范围A2的标记图像集中包括的所有标记图像(S23)。这里，因为标记图像集中包括多种标记图像，所以识别目标范围获取部23可以判断是否已检测到预定数量的标记图像以及所检测到的标记图像的种类是否与预定标记图像集中包括的标记图像的种类一致。因此，例如当标记图像检测部22错误地检测到标记图像时，识别目标范围获取部23可以更准确地判断识别目标范围A2是否包括在捕捉图像中。

当S23的处理中的判断得出没有检测到所有标记图像时，识别目标范围获取部23根据各检测到的标记图像的种类，来估计识别目标范围A2在捕捉图像中的位置(S24)。

如下将给出具体示例。如果检测到的标记图像的种类应该位于识别目标范围A2的下方，则识别目标范围获取部23估计出识别目标范围A2相对于该检测到的标记图像的位置位于上部。如果检测到的标记图像的种类应该位于识别目标范围A2的右侧，则识别目标范围获取部23估计出识别目标范围A2相对于该检测到的标记图像的位置位于左侧。将基于以下假设给出一示例：当捕捉图6A所示的目标图像时获得图6B所示的捕捉图像。在此情况下，检测到的标记图像的形状与标记图像M7和M8的形状一致。因此，可以估计出识别目标范围A2相对于检测到的标记图像位于上部，并且如图6B中的虚线所示朝向捕捉图像的顶部。

识别目标范围获取部23基于在S24的处理中所估计的位置，选择并输出要输出的校正指导信息(S25)。如下将给出示例。即，当识别目标范围获取部23估计出识别目标范围A2位于捕捉图像的上部时，识别目标范围获取部23输出诸如“请更向上地捕捉图像”的消息信息。当识别目标范围获取部23估计出识别目标范围A2位于捕捉图像的左部时，识别目标范围获取部23输出诸如“请更向左地捕捉图像”的消息信息。此外，识别目标范围获取部23可以根据所估计的位置距画面中央的偏移距离，来改变要输出的校正指导信息。

另一方面，当S23的处理中的判断得出已检测到所有标记图像时，识别目标范围获取部23基于检测到的标记图像的位置来限定识别目标范围A2(S26)。识别处理部24对所限定的识别目标范围A2执行预定的识别处理并输出结果(S27)。

根据前述处理，从通过捕捉目标图像而获得的捕捉图像中检测标记图像，并根据检测到的标记图像的种类来估计识别目标范围A2的位置。因此，可以根据识别目标范围A2的位置来输出校正指导信息。因此，可以向用户通知识别目标范围A2在捕捉图像中偏向哪个方向，从而可以提高用户友好性。

尽管在以上描述中以输出消息信息作为校正指导信息的情况为例，但是还可以按照如下处理来输出校正指导信息，即，将诸如表示这些消息的内容的预定标记的校正指导图像代替消息信息或与消息信息一起显示在显示部14上。这里，当利用带箭头指示等的校正指导图像指定要校正的方向时，用户可以直观地知道识别目标范围A2偏向哪个方向。在此情况下，可以基于在S24的处理中估计的识别目标范围A2的位置的偏移距离来改变箭头的长度等。

尽管针对包括在标记图像集中的标记图像在种类上完全不同的情况进行了描述，但是包括在标记图像集中的标记图像的一部分也可以种类相同。例如，在图7A的示例中，在用于限定识别目标范围A3的标记图像集中包括有四个标记图像M9至M12，并且位于矩形区域的对角线上的标记图像M9和M12的种类相同。在此情况下，当仅仅检测到标记图像M9和M12中的任一个时，无法估计识别目标范围的位置。当检测到两个相邻的标记图像时，可以基于检测到的标记图像的种类组合来估计识别目标范围A3的位置。当在图7A所示的目标图像的示例中获得了图7B所示的捕捉图像时，可以根据检测到这两个不同的标记图像M9和M10而估计出识别目标范围的位置在捕捉图像的下部，如图7B中的虚线所示。

在第一和第二示例的每一个中，作为由标记图像检测部22检测标记图像的目标的捕捉图像可以不是在用户具体指示(例如，按下快门按钮)的定时所捕捉的图像。例如，当图像捕捉控制部21通过捕捉图像而获取运动图像时，捕捉图像可以是包括在该运动图像中的帧图像。

接下来，将参照图8的流程图描述如下情况下的指导图像显示示例作为第三示例，即，图像处理装置10捕捉包括识别目标范围的目标图像的至少一部分。

当基于用户的指示操作等开始诸如二维码获取模式的预定拍摄模式时，图像捕捉控制部21首先将两个指导图像(即，目标区域指导图像G1和尺寸指导图像G2)显示在显示部14上(S31)。这里，作为示例，显示在显示部14上的图像是图9A中所示的图像。

这里，目标区域指导图像G1是表示作为识别处理目标的识别处理目标区域的图像。当将识别目标范围拍摄为包括在该区域中时，识别处理部24可以将作为识别处理目标的识别目标范围的尺寸限制到一预定尺寸。因此，可以减少识别处理部24的处理量，从而可以提高处理效率。

尺寸指导图像G2是表示在由目标区域指导图像G1表示的识别处理目标区域中的识别目标范围的最小可识别尺寸的图像。当捕捉图像中的识别目标范围的尺寸过小时，由于分辨率的问题，识别处理部24难以对识别目标范围执行识别处理。当将识别目标范围拍摄为大于由尺寸指导图像G2表示的最小可识别尺寸时，识别处理部24可以对识别目标范围执行识别处理。

顺便提及，这些目标区域指导图像G1和尺寸指导图像G2可以是各自表示如图9A所示的框线的图像，或者可以是各自表示作为示例的矩形区域的四个顶点的位置的图像。

目标区域指导图像G1和尺寸指导图像G2可以根据作为通过用户的指示操作等而确定的识别处理目标的图像的种类而不同。例如，当指定了用以对包括字符图像的识别目标范围的捕捉图像执行识别处理的字符图像获取模式时，可以将如图9B所示的目标区域指导图像G3和尺寸指导图像G4显示在显示部14上。

与由于S31的处理而显示指导图像一起，图像捕捉控制部21控制图像捕捉部15开始捕捉图像并将由此获得的捕捉图像按照使捕捉图像叠加在两个指导图像上的方式显示在显示部14上(S32)。

这里，用户调节图像处理装置10的位置或者图像捕捉部15的缩放倍率，以使得在显示部14上，包括在目标图像中的识别目标范围包括在由目标区域指导图像G1表示的识别处理目标区域中、并且大于由尺寸指导图像G2表示的最小可识别尺寸。用户通过对操作部13的指示操作(例如，按下快门按钮)向图像处理装置10发出指示，从而限定识别目标范围并对所限定的识别目标范围执行识别处理(S33)。

识别目标范围获取部23基于在S33从用户发出指示操作的时间点处的捕捉图像，获取识别目标范围(S34)。这里，可以类似于第一或第二示例地进行安排以使得标记图像检测部22首先检测标记图像并且识别目标范围获取部23基于检测到的标记图像获取识别目标范围。

这里，识别目标范围获取部23按以下方式判断捕捉图像中的识别目标范围的尺寸是否满足识别处理所需的预定条件(S35)。即，识别目标范围获取部23判断在S34的处理中所获取的识别目标范围是否包括在由目标区域指导图像G1表示的识别处理目标区域中，以及该识别目标范围是否被拍摄为大于由尺寸指导图像G2表示的最小可识别尺寸。

当判断得出识别目标范围的尺寸不满足预定条件时，例如，类似于第一示例中的S10的处理，输出校正指导信息(S36)。

另一方面，当判断得出识别目标范围的尺寸满足预定条件时，识别处理部24对在S34的处理中所获取的识别目标范围执行识别处理并输出结果(S37)。

根据前述处理，用户在针对两个指导图像进行检查的同时捕捉目标图像，从而，即使当用户不知道捕捉图像中的识别目标范围的期望尺寸时，用户也可以按该期望尺寸来拍摄识别目标范围。因此，可以提高用户友好性。

可以适当地组合采用在前述第一至第三示例中获取识别目标范围的处理。

对本发明示例性实施例的前述描述是为了例示和描述的目的而提供的。其并非旨在穷举或者将本发明限于所公开的确切形式。显然，许多修改和变型对于本领域技术人员是显而易见的。选择并描述示例性实施例是为了最好地说明本发明的原理及其实际应用，从而使得本领域其他技术人员能够理解本发明的适用于所构想特定用途的各种实施例和各种变型例。旨在由所附权利要求及其等同物来限定本发明的范围。

Claims (10)

1、一种图像处理装置，该图像处理装置包括：

图像捕捉部，其捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围；

标记图像检测部，其从所述捕捉图像中检测所述标记图像；

判断部，其基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中；以及

输出部，其在所述判断部判断出所述识别目标范围不包括在所述捕捉图像中时输出用于捕捉所述识别目标范围的指导。

2、根据权利要求1所述的图像处理装置，其中，当所述标记图像检测部没有检测到所述标记图像时，所输出的指导包括关于捕捉焦点、捕捉尺寸或捕捉地点的信息。

3、根据权利要求1所述的图像处理装置，其中，当所检测到的标记图像的数量不等于预定数量并且所检测到的标记图像的尺寸不在预定范围内时，所输出的指导包括关于捕捉尺寸和捕捉的缩放倍率中的至少一个的信息。

4、根据权利要求1所述的图像处理装置，其中，当所检测到的标记图像的数量不等于预定数量并且所检测到的标记图像的尺寸在预定范围内时，所输出的指导包括关于捕捉地点的信息。

5、根据权利要求1所述的图像处理装置，其中：

当所检测到的标记图像的数量等于预定数量时，所述判断部还对以下情况中的至少一个进行判断：

所述识别目标范围的尺寸是否在预定范围内，

所述捕捉图像的亮度是否满足预定条件，

所述捕捉图像的焦距是否对准，以及

所检测到的识别目标范围是否失真，并且

所述输出部基于所述判断的结果输出所述指导。

6、一种图像处理装置，该图像处理装置包括：

图像捕捉部，其捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括由多种标记图像组成的标记图像集和由所述标记图像集限定的识别目标范围；

标记图像检测部，其从所述捕捉图像中检测包括在所述标记图像集中的至少一部分标记图像；

位置估计部，其基于所检测到的标记图像的数量和所检测到的标记图像的种类中的至少一个，来估计所述识别目标范围在所述捕捉图像中的位置；以及

输出部，其基于所述识别目标范围的所述估计位置，输出用于捕捉所述识别目标范围的指导。

7、一种图像处理装置，该图像处理装置包括：

显示器，其显示要捕捉的图像；

捕捉部，其捕捉包括识别目标范围的所述图像，所述识别目标范围要被进行识别处理；以及

指导图像显示部，其按照使第一指导图像和第二指导图像叠加在要捕捉的图像上的方式来显示所述第一指导图像和所述第二指导图像，其中：

所述第一指导图像表示要包括所捕捉的识别目标范围的区域，并且

所述第二指导图像表示所捕捉的识别目标范围的最小尺寸。

8、根据权利要求7所述的图像处理装置，该图像处理装置还包括：

判断部，其判断所捕捉的识别目标范围是否包括在所述第一指导图像的范围内，并且判断所捕捉的识别目标范围是否大于所述第二指导图像的尺寸；和

结果显示部，其基于判断结果进行显示。

9、一种图像处理方法，该图像处理方法包括以下步骤：

捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围；

从所述捕捉图像中检测所述标记图像；

基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中；以及

当判断出所述识别目标范围不包括在所述捕捉图像中时，输出用于捕捉所述识别目标范围的指导。

10、一种存储有使计算机执行图像处理的程序的计算机可读介质，所述图像处理包括以下步骤：

捕捉目标图像的至少一部分以获取捕捉图像，该目标图像包括多个标记图像和由所述多个标记图像限定的识别目标范围；

从所述捕捉图像中检测所述标记图像；

基于检测结果判断所述识别目标范围是否包括在所述捕捉图像中；以及

当判断出所述识别目标范围不包括在所述捕捉图像中时，输出用于捕捉所述识别目标范围的指导。

Images