CN107113377A - 图像处理装置、图像处理方法、图像处理程序以及存储介质 - Google Patents

Abstract

目的在于使用户注意到由不知道内容和使用方法的处理带来的效果，实现这样的处理的使用促进。该图像处理装置(1)具有：被摄体识别电路(5)，其识别输入图像内存在的被摄体种类；存储电路(3)，其存储多个加工指示数据，该多个加工指示数据表示对输入图像进行处理的加工内容；加工指示数据取得电路(6)，其根据由被摄体识别电路(5)识别出的被摄体种类，从存储电路(3)取得预先定义的加工指示数据；加工指示数据判定电路(7)，其针对所取得的各个加工指示数据，计算表示不适于输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的加工指示数据；以及图像加工电路(8)，其使用所选择的规定数量的加工指示数据，进行输入图像的加工。

Description

图像处理装置、图像处理方法、图像处理程序以及存储介质

技术领域

本发明涉及图像处理装置、图像处理方法、图像处理程序以及存储介质。

背景技术

已知有如下的信息处理终端：用户预先登记与被摄体ID对应的1个以上的处理内容信息，在满足在通过拍摄而取得的照片中拍摄到与被摄体ID一致的被摄体的情况等各条件的情况下，实施对应的处理内容信息的处理(例如，参照专利文献1。)。

现有技术文献

专利文献

专利文献1：日本特许第5246592号公报

发明内容

发明要解决的课题

专利文献1的信息处理终端仅实施被登记且与被摄体ID对应的处理内容信息的处理。

在最近的照相机中，大多内置有如过滤处理或裁剪处理那样根据用户的喜好而实施的多个图像处理，但能够将其全部掌握并运用自如的用户较少。即，准备了适于被摄体或拍摄场景的各种各样的图像处理，如果使用这些图像处理，则能够给用户提供图像处理的新的享受方法，但也有时一次也未使用。

在专利文献1的信息处理终端中，为了实施处理，前提是用户有意识地预先登记与该处理对应的处理内容信息。因此，用户需要预先知道处理内容信息的内容和使用方法，针对不知道内容和使用方法的处理，甚至不感觉到使用的必要性，永久都不会被使用。

本发明正是鉴于上述情况而完成的，其目的在于提供一种能够使用户注意到不知道内容和使用方法的处理的效果，实现促进这种处理的使用的图像处理装置、图像处理方法、图像处理程序和存储介质。

用于解决课题的手段

本发明的一个方式是一种图像处理装置，其具有：被摄体识别电路，其识别输入图像内存在的被摄体种类；存储电路，其存储多个加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；加工指示数据取得电路，其根据由所述被摄体识别电路识别出的所述被摄体种类，从所述存储电路取得预先定义的所述加工指示数据；加工指示数据判定电路，其针对由该加工指示数据取得电路取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及图像加工电路，其使用由该加工指示数据判定电路选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

根据本方式，在输入了输入图像后，被摄体识别电路识别出输入图像内存在的被摄体种类，加工指示数据取得电路根据识别出的被摄体种类，取得存储电路所存储的多个加工指示数据。而且，加工指示数据判定电路针对所取得的各个加工指示数据计算无效度，将无效度较高的加工指示数据判定为无效而从选择对象排除。

即使是作为适于输入图像内存在的被摄体种类而预先定义的加工指示数据，有时也不适于实际的输入图像，加工指示数据判定电路计算表示这样的程度的无效度，选择规定数量的无效度为规定的阈值以下的加工指示数据。

而且，使用所选择的规定数量的加工指示数据在图像加工电路中对输入图像进行加工，由此生成规定数量的图像，该图像被实施了对于被摄体种类和输入图像都适用的加工。

即，根据本方式，即使在用户不知道加工内容及其使用方法的情况下，也能够确定由该加工带来的效果，能够注意到这样的加工的存在和加工的效果。因此，能够减少内置的大量图像处理中的未被使用的图像处理，实现使用的促进。

在上述方式中，也可以是，所述加工指示数据判定电路与各所述加工指示数据对应地存储适于该加工指示数据的判定的无效度的类别，计算根据想要进行判定的各所述加工指示数据而选择出的类别的无效度。

由此，并未使用相同类别的无效度，而是选择并计算适于加工指示数据的无效度，以判定不同的加工指示数据的无效，所以能够高精度地选择适于输入图像的加工指示数据。

此外，在上述方式中，也可以是，具有显示电路，该显示电路显示在所述加工指示数据判定电路中选择出的多个所述加工指示数据和在所述图像加工电路中加工后的图像中的至少一方。

由此，将被加工后的图像和用于该加工的加工指示数据中的至少一方显示到显示电路，所以能够确认被使用的加工内容或者由该加工带来的效果。由于选择了适于被摄体种类和输入图像双方的加工内容的加工指示数据，所以能够利用表现该加工原本的效果的图像，使用户识别由加工带来的正确效果。

此外，在上述方式中，也可以是，所述无效度被定义为如下的函数：根据所述加工指示数据对所述输入图像实施的加工前后的图像中的变化量越大，则该无效度越低。

由此，在对输入图像实施的加工前后的图像的变化量较大的情况下，由于输入图像因加工而发生较大变化，所以显著呈现了加工的效果，降低无效度而使得能够容易被选择。此外，在对输入图像实施的加工前后的图像的变化量较小的情况下，加工后的图像相对于输入图像没怎么发生变化，所以没怎么呈现出加工的效果，提高无效度而能够使得难以被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含裁剪，所述无效度是根据所述加工指示数据而设定出的裁剪区域与所述输入图像的重复率。

由此，在从输入图像中切出规定范围的裁剪中，裁剪区域与输入图像的重复率越高，则裁剪后的图像相对于输入图像的基于裁剪得到的变化量越小。因此，通过直接将重复率作为无效度，能够使得加工前后的图像变化较少的加工指示数据难以被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含颜色信息的加工和灰度信息的加工中的至少一方，所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的像素值的变动量的倒数。

由此，在对输入图像进行颜色信息或灰度信息的加工的情况下，加工前后的像素值越发生变动，图像的变化量越大，所以通过将像素值的变动量的倒数作为无效度，能够使得加工前后的图像变化较小的加工指示数据难以被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含模糊加工，所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的模糊度的变动量的倒数。

由此，在对输入图像实施模糊加工的情况下，加工前后的模糊度越发生变动，图像的变化量越大，所以通过将模糊度的变动量的倒数作为无效度，能够使得加工前后的图像变化较少的加工指示数据难以被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含梯形校正加工，所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的直线状边缘部相对于铅直线的角度的变动量的倒数。

在对输入图像实施梯形校正加工的情况下，输入图像中的直线状边缘部相对于铅直线的角度接近零。因此，通过将加工前后的图像中的直线状边缘部相对于铅直线的角度的变动量的倒数作为无效度，能够对于针对直线状边缘部相对于铅直线的角度较大的输入图像的加工获得较大的效果，能够使得梯形校正加工的加工指示数据容易被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含光学畸变像差效果赋予的加工，所述无效度是所述输入图像中的光学畸变像差的量。

由此，在输入图像中的光学畸变像差较大的输入图像的情况下，即使进行光学畸变像差效果赋予的加工，效果也不明显，所以输入图像中的光学畸变像差越大，无效度越高，能够使得难以被选择。

此外，在上述方式中，也可以是，所述无效度是预计为能够通过基于所述加工指示数据的所述输入图像的加工而得到的预计图像和根据所述加工指示数据而对所述输入图像实施了加工后的图像之差。

由此，预计图像和加工后的图像之差越大，无效度越高，能够使得难以被选择。为了使预计图像成为通过基于加工指示数据的加工而显著呈现了该效果的图像，优选加工后的图像与预计图像之差越小，越容易被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含裁剪，所述无效度是根据所述加工指示数据而设定出的裁剪区域从所述输入图像超出的超出区域的大小。

由此，在根据包含裁剪的加工指示数据而设定出的裁剪区域从输入图像超出的情况下，可能得到与以未超出为前提的预计图像不同的加工后的图像，所以这样的加工指示数据的无效度较高，能够使得难以选择这样的加工指示数据。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含旋转加工，所述无效度是所述输入图像中的所述被摄体的基准轴在图像中的倾斜角度。

由此，在通过基于包含旋转加工的加工指示数据的旋转加工而使得被摄体的基准轴旋转为规定的角度的情况下，在输入图像中的被摄体的基准轴已经倾斜的情况下，进一步被大幅地旋转，因此可能得到与预计图像不同的加工后的图像。因此，关于这样的加工指示数据，输入图像中的基准轴的倾斜角度较大，无效度较高，能够使得难以被选择。

此外，在上述方式中，也可以是，由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含颜色信息的加工和灰度信息的加工中的至少一方，所述无效度是根据所述输入图像中的所述被摄体的像素值而设定的。

由此，在对输入图像进行颜色信息或灰度信息的加工的情况下，在输入图像中已经具有被摄体的像素值通过加工而发生变化的倾向的像素值的情况下，通过加工会使像素值变化到预计值以上，所以在这样的情况下，能够提高无效度，使得加工指示数据难以被选择。

例如，在加工指示数据包含对曝光进行负校正的加工内容时，在输入图像中被摄体的曝光已经为不足的情况下，可能得到过度不足的图像，所以与预计图像之差较大，能够提高无效度。

此外，在上述方式中，也可以是，所述加工指示数据判定电路针对判定为所述无效度比规定的阈值高而从选择中排除的加工指示数据，对排除次数进行计数并存储到所述存储电路，将所存储的所述排除次数较高的加工指示数据优先作为判定对象。

由此，可将无效度较高而多次被排除的加工指示数据优先作为判定对象，能够提高成为加工指示数据判定电路的判定对象的机会而使得容易被选择。

此外，本发明的另一方式是一种图像处理方法，其包含：被摄体识别步骤，识别输入图像内存在的被摄体种类；加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

此外，本发明的另一方式是一种图像处理程序，该图像处理程序使计算机执行以下步骤：被摄体识别步骤，识别输入图像内存在的被摄体种类；加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

此外，本发明的另一方式是计算机可读取的存储介质，其存储了使计算机执行以下步骤的程序：被摄体识别步骤，识别输入图像内存在的被摄体种类；加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

发明效果

根据本发明，实现如下的效果：能够使用户注意到由不知道内容和使用方法的处理带来的效果，实现这样的处理的使用促进。

附图说明

图1是示出本发明的一个实施方式的图像处理装置的框图。

图2是示出图1的图像处理装置的存储电路所存储的加工指示数据的一例的图。

图3A是示出输入图像的一例的图。

图3B是示出图3A的输入图像所设定的裁剪区域的图。

图3C是示出输入图像与裁剪区域的重复区域的图。

图4是示出本发明的一个实施方式的图像处理方法的流程图。

图5是示出图4的流程图的加工指示数据选择例程的内容的流程图。

图6是示出图5的流程图的无效度计算例程的内容的流程图。

图7A是示出输入图像的一例的图。

图7B是示出预计图像的一例的图。

图7C是示出裁剪区域的超出区域的图。

图8是示出被摄体的基准轴倾斜的输入图像的一例的图。

图9是示出存储到存储电路中的无效度数据的一例的图。

图10是示出图4的图像处理方法的变形例的流程图。

图11是示出图10的流程图的加工指示数据选择例程的内容的流程图。

图12是示出存储到存储电路中的无效度数据的其他例的图。

具体实施方式

以下，参照附图对本发明一个实施方式的图像处理装置1和图像处理方法进行说明。

如图1所示，本实施方式的图像处理装置1具有：图像输入电路2，其输入由照相机等拍摄装置取得的图像(输入图像)P；存储电路3，其存储针对输入图像P的加工指示数据；以及运算电路4，其根据该存储电路3所存储的加工指示数据，对输入到了图像输入电路2的输入图像P进行加工。

运算电路4具有：被摄体识别电路5，其对输入到了图像输入电路2的输入图像P实施公知的识别处理，识别被摄体O的类别(被摄体种类)；以及加工指示数据取得电路6，其根据由该被摄体识别电路5识别出的被摄体种类，从存储电路3取得加工指示数据。此外，运算电路4具有：加工指示数据判定电路7，其根据输入图像P来计算由该加工指示数据取得电路6取得的加工指示数据的无效度，选择无效度较低的多个加工指示数据；图像加工电路8，其使用由该加工指示数据判定电路7选择出的加工指示数据，对输入图像P实施加工；以及输出数据控制电路9，其控制这些被摄体识别电路5、加工指示数据取得电路6、加工指示数据判定电路7和图像加工电路8。

如图2所例示那样，在存储电路3中，与有可能被识别的关注被摄体种类(被摄体种类)相对应地存储有多个适于该关注被摄体种类的加工指示数据。在图2所示的例子中，在关注被摄体种类中包含人物面部、焦点坐标等。关注被摄体种类不限于此，也能够使用其他任意的被摄体种类。此外，在本实施方式中，列举加工指示数据的加工内容包含裁剪的情况为例进行说明。

根据图2的例子，在与裁剪对应的加工指示数据的加工内容中包含关注被摄体O配置、纵横比和变焦率等。作为关注被摄体O配置，包含中央配置、3分割线交点配置等。作为纵横比，包含4：3、1：1、16：9等。作为变焦率，包含固定倍率(1.0，0.9等)、尽可能大、尽可能小等。

加工指示数据取得电路6以由被摄体识别电路5识别出的关注被摄体种类为关键词在存储电路3中进行检索，从与关注被摄体种类相对应地存储的图2的加工指示数据列中，取得预先设定的个数的加工指示数据。

将加工指示数据的取得数量设定为比预定了最终的输出的加工指示数据的输出数量大的数值。

加工指示数据判定电路7针对由加工指示数据取得电路6取得的各个加工指示数据，计算其无效度并进行是否为无效的判定，在无效度比规定的阈值低的情况下，作为要输出的加工指示数据而进行选择，在无效度较高的情况下从选择对象中排除。

这里，对加工指示数据判定电路7计算的无效度进行说明。

无效度是表示加工指示数据不适于输入图像P的加工的程度的数值，例如，在加工指示数据包含裁剪作为加工内容的情况下，计算输入图像P与裁剪区域Q的重复率，作为无效度。

在针对图3A的输入图像P应用加工指示ID＝4的加工指示数据的情况下，加工内容的关注被摄体O配置是3分割线交点配置，纵横比是4：3，变焦率是“尽可能大”。在该情况下，设定了如图3B所示的裁剪区域Q。因此，如图3C所示，计算裁剪区域(阴影部分)Q的面积相对于输入图像P的面积的比，作为重复率。

即，重复率越大，则裁剪加工前后的图像的变化量越小，重复率越小，则裁剪加工前后的图像的变化量越大。在对输入图像P实施裁剪而得到的加工后的图像未相对于输入图像P发生变化的情况下，观察到加工前后的图像的用户无法识别裁剪的效果。因此，在这样的情况下，提高该加工指示数据的无效度而使得难以被选择。

输出数据控制电路9重复加工指示数据判定电路7对加工指示数据的选择作业，直到选择出预先设定的输出数量的加工指示数据为止。

图像加工电路8使用所选择的规定数量的加工指示数据，对输入图像P实施各加工指示数据所包含的加工内容的处理。由此，可生成规定数量的图像处理后的图像。

以下对使用了这样构成的本实施方式的图像处理装置1的图像处理方法进行说明。

如图4所示，本实施方式的图像处理方法包含：步骤S1，取得输入图像P；步骤(被摄体识别步骤)S2，识别所取得的输入图像P内存在的被摄体种类；步骤S3，设定输出数量n；步骤(加工指示数据判定步骤)S4，选择所设定的输出数量n的加工指示数据；以及步骤(图像加工步骤)S5，使用所选择的多个加工指示数据，对输入图像P实施加工。

在步骤S1中，将1个输入图像P输入到图像输入电路2。在步骤S2中，利用被摄体识别电路5识别所输入的输入图像P内的关注被摄体O，检测关注被摄体种类。在步骤S3中，设定用户期望输出的加工指示数据数量。输出数量n可以由用户每次进行设定，也可以使用预先设定的值。

如图5所示，步骤S4包含：步骤(加工指示数据取得步骤)S41，其根据识别出的被摄体种类，取得存储电路3所存储的多个加工指示数据；步骤S42，重置计数器k；步骤S43，选择所取得的加工指示数据中的1个加工指示数据，作为判定对象；步骤S44，针对被选择为判定对象的加工指示数据，计算无效度；以及步骤S45，其根据计算出的无效度，判定加工指示数据是否是无效。此外，设定被判定为不是无效的加工指示数据，作为要输出的加工指示数据(步骤S46)。

步骤S41以超过按照加工指示ID的顺序设定出的输出数量n的规定数量，进行加工指示数据的取得。例如，在输出数量为n个的情况下，预计成为无效的数量，进行n+α个加工指示数据的取得。

并且，选择加工指示数据的步骤S4包含：步骤S47，在选择不是无效的加工指示数据作为要输出的加工指示数据的情况下，将计数器k加1；步骤S48，判定计数器k是否达到了所设定的输出数量n；以及步骤S49，在计数器k达到了输出数量n的情况下，输出所设定的规定数量的加工指示数据。

如图6所示，步骤S44包含：步骤S441，根据被选择为判定对象的加工指示数据，与该加工指示数据对应地选择适于该加工指示数据的判定的无效度的类别；以及步骤S442，其针对加工指示数据，计算所选择的类别的无效度。加工指示数据和无效度的类别可以在相互对应的状态下存储到加工指示数据判定电路7中，也可以存储到存储电路3而被读出。将各类别的无效度的计算方法与无效度的类别对应起来。

如图6所示，步骤S442包含：步骤S4421，在包含裁剪作为加工指示数据的加工内容的情况下，根据裁剪的指示内容计算裁剪区域Q；以及步骤S4422，其计算裁剪区域Q相对于输入图像P的重复率。

根据这样构成的本实施方式的图像处理装置1和图像处理方法，在加工指示数据取得电路6取得存储电路3所存储的加工指示数据时，通过取得根据关注被摄体种类而存储的多个加工指示数据，选择了适于被摄体O的种类的加工指示数据。而且，加工指示数据判定电路7根据输入图像P选择无效度较低的加工指示数据，从而选择了也适于输入图像P的加工指示数据。

即，根据本实施方式的图像处理装置1和图像处理方法，用户仅通过将输入图像P输入，就可选择多个适于输入图像P内存在的被摄体O的种类且也适于输入图像P的加工指示数据，以使用所选择的多个加工指示数据进行了加工后的状态进行提供。因此，用户即使不精通加工内容或者不知道这样的加工的存在本身，通过观察所得到的图像，也能够知道其效果，注意到这样的加工的有效性，能够实现这样的加工的使用促进。

另外，本实施方式的图像处理装置1可以具有显示电路(省略图示)，该显示电路显示被加工指示数据判定电路7选择出的多个加工指示数据和被图像加工电路8加工后的图像中的至少一方。

在该情况下，由于将由图像加工电路8加工后的图像和用于该加工的加工指示数据中的至少一方显示到显示电路，所以能够确认被使用的加工内容或者由该加工带来的效果。由于选择了适于被摄体种类和输入图像P双方的加工内容的加工指示数据，作为加工指示数据，所以能够利用呈现出该加工原本的效果的图像，使用户识别出由加工带来的正确效果。

此外，在本实施方式中，使用了裁剪区域Q相对于输入图像P的重复率本身作为无效度，但可以使用将重复率与任意的系数相乘得到的值作为无效度，也可以基于换算表，根据重复率换算无效度。此外，只要是加工后的图像相对于输入图像P的变化量越大则越变低的函数即可，也可以使用除重复率以外的其他函数作为无效度。

此外，虽然针对所选择的加工指示数据，计算关于该加工指示数据所包含的裁剪加工的无效度，但也可以取而代之，按照要选择的加工指示数据所包含的多个加工内容中的每个加工内容来计算无效度，使用将这些汇总后的无效度来进行无效判定。作为汇总多个无效度的方法，采用无效度的单纯和、及对各无效度进行加权相加的方法等即可。

此外，在本实施方式中，对加工指示数据的加工内容包含裁剪的情况进行了说明。也可以取而代之，还能够应用于对过滤效果等颜色信息或灰度信息进行加工的加工内容。

在该情况下，计算加工前后的像素值的变动量的倒数作为无效度即可。

在加工指示数据包含给颜色信息或灰度信息带来变化的加工内容的情况下，为了计算无效度，对输入图像P实施无效度判定用的临时加工。例如，进行利用缩小了输入图像P后的图像等的简易加工。

而且，按照输入图像P的每个像素，计算输入图像P与简易加工后的图像的像素值的变动量的倒数。像素值的变动量例如是差分。由此，能够使用加工前后的图像的变化量越小则越高的无效度。

此外，在加工指示数据包含给颜色信息或灰度信息带来变化的加工内容的情况下，有时能够通过白平衡设定等拍摄参数进行规定。在该情况下，能够使用输入图像P的拍摄参数自身的变动量的倒数，作为无效度。即，能够在不分析图像的像素值的情况下计算加工前后的图像的变化量。

例如，通过将加工内容的白平衡设定的颜色温度值与输入图像P的白平衡设定的颜色温度值之间的差分的倒数作为无效度，能够使用加工前后的图像的变化量越小则越高的无效度。

这样，本发明的加工指示数据的加工内容也可以是拍摄参数或显影参数。

此外，在加工指示数据包含模糊加工的加工内容的情况下，将模糊加工的加工内容的目标模糊度与输入图像P的模糊度的变动量的倒数作为无效度。由此，能够使用加工前后的图像的变化量越小则越高的无效度。

例如能够使用如对图像内区域进行频率分析并将低频成分相对于高频成分的量定量化的模糊评价函数，来进行计算模糊度。

此外，在加工指示数据包含梯形校正加工的加工内容的情况下，通过梯形校正加工，将输入图像P内的被摄体O具有的直线状边缘部校正为与图像上的铅直线一致。因此，在该情况下，输入图像P中的直线状边缘部相对于图像上的铅直线的倾斜角度越大，梯形校正加工的效果越显著，所以通过使用输入图像P中的上述倾斜角度的倒数或对输入图像P实施的加工前后的图像中的上述角度的变动量的倒数作为无效度，能够使用加工前后的图像的变化量越小则越高的无效度。

此外，在加工指示数据包含光学畸变像差效果赋予的加工内容的情况下，输入图像P中的光学畸变像差越大，越难以看出加工的光学畸变像差效果赋予的效果，所以通过使用输入图像P中的光学畸变像差的量作为无效度，能够使用加工前后的图像的变化量越小则越高的无效度。

此外，在本实施方式中，使用实际上被认为加工前后的图像的变化量越小则越大的函数作为无效度，但也可以取而代之，使用如下函数作为无效度，该函数表示预计为能够通过基于加工指示数据的输入图像P的加工而得到的预计图像(想要的图像)R与根据加工指示数据而对输入图像P实施了加工的图像之差(意图差分量)。

例如，在加工指示数据的加工内容包含裁剪的情况下，将根据加工指示数据而设定出的裁剪区域Q从输入图像P超出的超出区域S的大小作为无效度即可。即，如图7A所示，针对偏向周边地配置有作为被摄体O的人物的输入图像P，在关注被摄体O配置的参数是“中央配置”的情况下，想要的图像R认为是图7B所示的图像，但根据被摄体O的偏向方式、纵横比、变焦率等的不同，如图7C所示，裁剪区域Q被定义在从输入图像P超出的位置。该超出区域(阴影部分)S的大小越大，则加工后的图像越远离预计图像R，意图差分量越增加，所以能够提高无效度。

此外，在加工指示数据的加工内容包含旋转加工的情况下，将输入图像P中的被摄体O的基准轴T在图像中的倾斜角度作为无效度即可。即，如图8所示，在作为被摄体O的人物的基准轴T最初就倾斜的情况下，在进行了朝向与其倾斜方向相同的方向的旋转加工后，被摄体O比想要的图像更较大倾斜，在进行了朝向反方向的旋转加工后，被摄体O的倾斜比想要的图像小，无论哪种情况下，意图差分量都增大，所以能够提高无效度。

具体而言，加工指示数据判定电路7根据加工指示数据的加工内容分析输入图像P，判定输入图像P中的被摄体O的基准轴T的倾斜角度是否比规定的阈值大。在基准轴T的倾斜角度较大的情况下，无效度较高，所以容易将该加工指示数据判定为无效。

此外，在加工指示数据的加工内容包含颜色信息的加工或灰度信息的加工的至少1个的情况下，根据输入图像P中的被摄体O的像素值，设定无效度即可。

例如，在是将曝光进行负校正的加工内容的情况下，在输入图像P的曝光已经不足的情况下，会生成比想要的图像暗的图像，所以意图差分量较大。即，在该情况下，在像素值较小的情况下无效度提高，所以将像素值的倒数设定为无效度即可。

具体而言，加工指示数据判定电路7根据加工指示数据的加工内容分析输入图像P，判定输入图像P中的被摄体O的像素值是否比规定的阈值大。在曝光负校正的加工内容的情况下，由于在像素值较小的情况下无效度较高，所以容易将该加工指示数据判定为无效。

此外，例如，在保留输入图像P中的红色并使其他为灰色的加工内容的情况下，如果输入图像P中不存在红色，则整体成为灰色，所以会生成与想要的图像不同的图像。在该情况下，通过将在图像中红色的像素值较高的像素在全体中所占据的比例的倒数设定为无效度，能够将生成非意图的图像的加工指示数据判定为无效而排除。

此外，在本实施方式中，也可以是，加工指示数据判定电路7针对判定为无效度比规定的阈值高而从选择中排除的加工指示数据，对排除次数进行计数，存储到存储电路3，加工指示数据取得电路6优先取得排除次数较高的加工指示数据。

即，例如图9所示，与各加工指示ID相对应地预先存储全部无效次数(排除次数)，作为与该加工指示ID对应的加工指示数据的无效度数据。图9示出除全部无效次数以外还存储有连续无效次数和无效度的例子。

全部无效次数是以前判定为无效的次数的总数，连续无效次数是在最后判定为不是无效以后连续判定为无效的次数，无效度是最后计算出的无效度。

而且，如图10所示，在图像输入电路2中输入了多个输入图像P的情况下(步骤S51)，选择其中1个输入图像P(步骤S52)，直到所输入的全部输入图像P的处理结束为止，实施上述步骤S2至S5的工序(步骤S53)。如图11所示，加工指示数据判定电路7参照与由加工指示数据取得电路6取得的多个加工指示数据相对应地存储的无效度数据，将全部无效次数较大的加工指示数据优先作为判定对象(步骤S61)。

而且，在进行了无效判定的结果是判定为了无效的情况下，更新该加工指示数据的无效度数据的全部无效次数等(步骤S62)，进行针对下一个加工指示数据的判定处理。由加工指示数据取得电路6取得的加工指示数据的取得数量比最终输出的加工指示数据的输出数量多，所以在达到了输出数量后，不进行针对所取得的全部加工指示数据的判定。

因此，由此，因无效而被排除的次数较多的加工指示数据优先成为判定对象，所以能够增加判定的机会，容易被加工指示数据判定电路7选择。其结果，能够防止如较多判定为不是无效的加工指示数据未被使用就被隐藏了的情况。

此外，在图9中示出了按照每个加工指示ID，存储无效度数据的例子，但也可以取而代之，按照加工指示数据的加工内容的每个种类，存储无效次数。例如，在判定为某个加工指示数据是无效的情况下，在该加工指示数据的加工内容中包含滤波器(Filter)A时，增加滤波器(Filter)A的无效次数并进行存储。而且，加工指示数据判定电路7在判定中不仅使用加工指示ID的无效度数据，还使用与各加工指示ID相关联的加工内容各自的无效度次数。

此外，无效度的历史数据可以如图12所示地进行存储。

在图12中，“判定顺序”按照越是新历史则序号越小的顺序进行存储。“日期时刻”是判定了加工指示ID的日期时刻，“输入图像名”是输入图像P的文件名(或者，用于确定文件的识别信息)，“输入图像累计数”是输入图像P的累计张数。

在这样预先存储的情况下，输出数据控制电路9在输出n个加工指示数据时，优先输出从最后判定为不是无效时起的经过时间较长的加工指示ID即可。

此外，在本实施方式中，图像处理装置1进行的处理以硬件的处理为前提，但不限于此，例如还能够通过软件进行处理。在该情况下，图像处理装置1具有进行处理的CPU和RAM等主存储装置，具有存储了用于使CPU执行上述处理的全部或者一部分的程序的计算机可读取的存储介质即可。这里，将该程序称作图像处理程序。而且，CPU读出存储介质所存储的图像处理程序，通过执行信息的加工/运算处理，实现与上述图像处理装置1相同的处理。

这里，计算机可读取的记录介质是指磁盘、磁光盘、CD-ROM、DVD-ROM、半导体存储器等。此外，也可以是，通过通信线路向计算机发布该图像处理程序，接收到该发布的计算机执行该图像处理程序。

此外，本实施方式的各种电路除构成为作为1个芯片而被安装以外，也可以构成为分割而安装在布线基板上。

标号说明

1：图像处理装置；3：存储电路；5：被摄体识别电路；6：加工指示数据取得电路；7：加工指示数据判定电路；8：图像加工电路；S2：被摄体识别步骤；S4：加工指示数据判定步骤；S5：图像加工步骤；S41：加工指示数据取得步骤；O：被摄体；P：输入图像；Q：裁剪区域；R：预计图像；S：超出区域。

Claims (17)

1.一种图像处理装置，其具有：

被摄体识别电路，其识别输入图像内存在的被摄体种类；

存储电路，其存储多个加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；

加工指示数据取得电路，其根据由所述被摄体识别电路识别出的所述被摄体种类，从所述存储电路取得预先定义的所述加工指示数据；

加工指示数据判定电路，其针对由该加工指示数据取得电路取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及

图像加工电路，其使用由该加工指示数据判定电路选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

2.根据权利要求1所述的图像处理装置，其中，

所述加工指示数据判定电路与各所述加工指示数据对应地存储适于该加工指示数据的判定的无效度的类别，计算根据想要进行判定的各所述加工指示数据而选择出的类别的无效度。

3.根据权利要求1或2所述的图像处理装置，其中，

该图像处理装置具有显示电路，该显示电路显示在所述加工指示数据判定电路中选择出的多个所述加工指示数据和在所述图像加工电路中加工后的图像中的至少一方。

4.根据权利要求2或3所述的图像处理装置，其中，

所述无效度被定义为如下的函数：根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的变化量越大，则该无效度越低。

5.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含裁剪，

所述无效度是根据所述加工指示数据而设定出的裁剪区域与所述输入图像的重复率。

6.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含颜色信息的加工和灰度信息的加工中的至少一方，

所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的像素值的变动量的倒数。

7.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含模糊加工，

所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的模糊度的变动量的倒数。

8.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含梯形校正加工，

所述无效度是根据所述加工指示数据而对所述输入图像实施的加工前后的图像中的直线状边缘部相对于铅直线的角度的变动量的倒数。

9.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含光学畸变像差效果赋予的加工，

所述无效度是所述输入图像中的光学畸变像差的量。

10.根据权利要求2所述的图像处理装置，其中，

所述无效度是预计为能够通过基于所述加工指示数据的所述输入图像的加工而得到的预计图像与根据所述加工指示数据而对所述输入图像实施了加工后的图像之差。

11.根据权利要求10所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含裁剪，

所述无效度是根据所述加工指示数据而设定出的裁剪区域从所述输入图像超出的超出区域的大小。

12.根据权利要求10所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含旋转加工，

所述无效度是所述输入图像中的所述被摄体的基准轴在图像中的倾斜角度。

13.根据权利要求4所述的图像处理装置，其中，

由所述加工指示数据判定电路判定的所述加工指示数据的加工内容包含颜色信息的加工和灰度信息的加工中的至少一方，

所述无效度是根据所述输入图像中的所述被摄体的像素值而设定的。

14.根据权利要求1～13中的任意一项所述的图像处理装置，其中，

所述加工指示数据判定电路针对判定为所述无效度比规定的阈值高而从选择中排除的加工指示数据，对排除次数进行计数而存储到所述存储电路，将所存储的所述排除次数较高的加工指示数据优先作为判定对象。

15.一种图像处理方法，其包括：

被摄体识别步骤，识别输入图像内存在的被摄体种类；

加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；

加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及

图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

16.一种图像处理程序，其中，具有：

被摄体识别步骤，识别输入图像内存在的被摄体种类；

加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；

加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及

图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。

17.一种计算机可读取的存储介质，其中，该计算机可读取的存储介质存储了使计算机执行以下步骤的程序：

被摄体识别步骤，识别输入图像内存在的被摄体种类；

加工指示数据取得步骤，根据通过所述被摄体识别步骤识别出的被摄体种类，从多个加工指示数据中取得预先定义的所述加工指示数据，该多个加工指示数据表示对所述输入图像进行处理的加工内容；

加工指示数据判定步骤，针对通过该加工指示数据取得步骤取得的各个所述加工指示数据，计算表示不适于所述输入图像的程度的无效度，选择该无效度为规定的阈值以下的规定数量的所述加工指示数据；以及

图像加工步骤，使用在该加工指示数据判定步骤中选择出的规定数量的所述加工指示数据，进行所述输入图像的加工。