CN104335571B - 图像处理装置、摄像装置、计算机及图像处理方法 - Google Patents

Abstract

提供能够进行与光学低通滤光器的有无或各种排列图案的滤色器适当地对应的图像缩小处理，能够生成使莫尔条纹等的图像劣化不显眼的缩小图像的图像处理装置、摄像装置、计算机、图像处理方法及程序。图像缩小处理部(16)具备：数据获取部(70)，获取图像摄影数据(包含摄像数据)(30)是否包含摄影条件数据的情况及摄影条件数据的内容；及缩小处理判别单元，基于摄影条件数据的获取结果，判别与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理(低通滤光处理等)执行与否、缩小关联处理的处理参数(低通滤光处理的截止频率等)及缩小处理的处理参数(缩小率等)中的至少任一个。摄影条件数据包含与光学低通滤光器的有无相关的信息或与滤色器的排列相关的信息。

Description

图像处理装置、摄像装置、计算机及图像处理方法

技术领域

本发明涉及图像处理装置、摄像装置、图像处理方法及程序，尤其是涉及根据摄影图像生成缩小图像的图像缩小处理。

背景技术

在相机等摄像器件的领域中，通过配设有RGB等的滤色器的摄像元件(CCD、CMOS等)来获取数字摄影图像。在如此获取的摄影图像中，有时所谓莫尔条纹、离焦、纹理紊乱、伪色、重叠失真等画质劣化显眼，尤其是在根据摄影图像生成的缩小图像中，这些画质劣化显著地体现。因此，提出了抑制莫尔条纹等图像劣化的各种技术。

例如专利文献1公开了如下的技术：根据边缘区域的检测结果、变倍率、利用者的指定信息来切换低通滤光器并实施与图像种类和变倍率对应的平滑化处理，由此生成莫尔条纹、离焦少的变倍图像。

而且，专利文献2公开了如下的技术：取入由多个像素数据构成的处理对象的图像，使这多个像素数据的位置在各像素数据的附近区域内对应各像素数据随机地移动，由此无论图案、网点等的重复花纹的周期如何都能减少莫尔条纹。

专利文献

专利文献1：日本特开平05-328106号公报

专利文献2：日本特开2005-056006号公报

发明内容

发明要解决的课题

如专利文献1公开的技术那样，为了抑制莫尔条纹等图像劣化而去除空间频率高的成分(高频成分)是有效的，通常使用低通滤光器(LPF)。作为该低通滤光器，除了基于信号处理的低通滤光器之外，将向摄像元件照射的光中的高频成分光学性地截止的光学低通滤光器(OLPF)的有效利用也不断发展。

另一方面，通过对滤色器的排列图案设法改良等，即便不使用低通滤光器也能够获取充分地抑制了莫尔条纹等图像劣化的摄影图像。因此，在滤色器的排列图案的情况下，不积极地使用光学低通滤光器，不失去高频成分，能够获取进一步提高了分辨率感的摄影图像。

然而，在摄影图像包含高频成分的情况下，在摄影图像中即使莫尔条纹、图像重叠等图像劣化不显眼，在对摄影图像进行缩小加工而获得的缩小图像中，也有由于其高频成分而使莫尔条纹、图像重叠等图像劣化变得显眼的情况。

如此，光学低通滤光器的有无或各种排列图案的滤色器的使用等、摄像装置的结构及功能也多样化，但是在专利文献1、专利文献2公开那样的现有技术中，难以进行与上述多样化对应的适当的图像缩小加工。

例如在专利文献1公开的技术中，根据变倍率、图像的种类等来切换低通滤光器的种类，但是光学低通滤光器的有无或滤色器的排列图案被变更的情况下的处理在专利文献1中没有公开或暗示。

另外，在专利文献2中，也是虽然公开了莫尔条纹减少处理技术，但是根据光学低通滤光器的有无或滤色器的排列图案而莫尔条纹减少处理没有最佳化。因此，通过专利文献2的莫尔条纹减少处理技术，在对例如经由拜耳排列滤色器而获得的摄影图像和进行了防止莫尔条纹等的设计改良的经由具有其他图案排列的滤色器而获得的摄影图像实施了相同的图像缩小处理的情况下，在一方的缩小图像中也存在莫尔条纹等图像劣化显眼的可能性。

本发明鉴于上述的情况而作出，目的在于提供能够进行与光学低通滤光器的有无或各种排列图案的滤色器适当地对应的图像缩小处理，能够生成使莫尔条纹等图像劣化不显眼的缩小图像的技术。

用于解决课题的方案

本发明的一方案涉及一种图像处理装置，被输入包含摄像数据的图像摄影数据，该图像处理装置具备：数据获取单元，判别所输入的图像摄影数据是否包含摄影条件数据，且在判别为所输入的图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及缩小处理决定单元，基于数据获取单元的摄影条件数据的获取结果，决定与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息与摄像数据的摄像生成时的光学低通滤光器的有无相关的信息，缩小处理决定单元基于摄影条件数据的获取结果，在通过滤色器的排列在由摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况下，决定执行低通滤光处理作为所述缩小关联处理。

根据本方案，基于与光学低通滤光器的有无相关的信息，能够决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。由此，能够使与光学低通滤光器的有无对应的缩小关联处理及缩小处理最佳化。

另外，在此所说的“缩小关联处理”是包括与摄像数据的缩小处理关联的全部处理的概念，包含能够提高通过缩小处理获得的缩小图像的画质的处理。具体而言，将摄像数据所包含的高频成分去除的低通滤光处理或其他处理包含于缩小关联处理。因此作为“缩小关联处理的处理参数”，可列举例如能够由低通滤光器除去的高频成分的范围(截止频率范围)。

另外，“缩小处理”是包括对摄像数据的图像尺寸进行缩小的全部处理的概念，包括获取使通过摄像数据重现的图像的横向像素数/纵向像素数减小的缩小图像的图像处理。例如，基于能够对VGA、SVGA、XGA、SXGA、UXGA、QXGA、全尺寸图像(摄像元件的可摄影最大尺寸的图像)或其他尺寸的图像进行重现的摄像数据而生成缩小图像(缩略图像等)用的图像数据的图像处理包含于缩小处理。因此，作为“缩小处理的处理参数”，可列举例如缩小处理中的缩小率或缩小插值处理的处理参数。另外，在缩小图像中对于向莫尔条纹等图像劣化容易显眼的尺寸的缩小处理，本方案特别有效，但摄像数据的尺寸、缩小图像的尺寸没有特别限定。

另外，“光学低通滤光器”是将光的高频成分光学性地截止的滤光要素，可以适当配置在能够从向摄像元件照射之前的光中将高频成分截止的位置。另外，与光学低通滤光器的有无相关的信息可以直接包含于摄影条件数据，例如在对应摄像器件的各机种来决定光学低通滤光器的有无的情况下，可以将能够间接地获取与光学低通滤光器的有无相关的信息的机种名等其他信息包含于摄影条件数据。

本发明的另一方案涉及一种图像处理装置，通过滤色器的排列在由摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况是判断为摄像数据含有较多高频成分的可能性高的情况。

根据本方案，基于与滤色器的排列相关的信息，能够决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。由此，能够使与滤色器的排列图案特性对应的缩小关联处理及缩小处理最佳化。

另外，“滤色器”是在光向摄像元件照射时使光通过由此用于判断各色的光的强度的滤光要素，可以使用原色滤光器(红色、绿色、蓝色等)或互补色滤光器(青色、品红色、黄色、绿色等)作为滤色器。另外，滤色器的排列图案、构成色要素没有特别限定。另外，与滤色器的排列相关的信息可以直接包含于摄影条件数据，也可以在例如对应摄像器件的各机种来决定滤色器的排列的情况下将能够间接地获取与滤色器的排列相关的信息的机种名等其他信息包含于摄影条件数据。

根据本方案，可以在通过低通滤光处理从摄像数据除去了高频成分之后进行缩小处理。由此，在通过缩小处理获得的缩小图像中，能够进一步防止莫尔条纹等图像劣化的产生。

优选的是，缩小处理的处理参数是缩小处理中的缩小率。

根据本方案，能够通过摄影条件数据(与光学低通滤光器的有无或滤色器的排列相关的信息)所对应的缩小率来实施摄像数据的缩小处理。由此，在通过缩小处理而获得的缩小图像中，能够进一步防止莫尔条纹等图像劣化的产生。

优选的是，缩小处理的处理参数是缩小处理中的插值处理的处理参数。

根据本方案，能够通过摄影条件数据(与光学低通滤光器的有无或滤色器的排列相关的信息)所对应的处理参数来进行缩小处理的插值处理。由此，在通过缩小处理而获得的缩小图像中，能够进一步防止莫尔条纹等图像劣化的产生。另外，在此所说的插值处理没有特别限定，可以采用能够获得所希望的缩小图像数据的任意的插值处理。

作为这样的插值处理，可列举例如近邻取样(NearestNeighbor)法、双线性插值(Bi-linearInterpolation)法、双三次插值(Bi-cubicConvolutionInterpolation)法、样条插值(SplineInterpolation)法或其他插值处理方法。

优选的是，插值处理基于样条插值处理法，插值处理的处理参数是样条插值系数。

如本方案那样通过基于插值重现性优异的样条插值处理法的插值处理来实施缩小处理，能够生成莫尔条纹等图像劣化非常难产生的优异的画质的缩小图像的图像数据。

样条插值处理法是已经公知的手法，但是对该插值方法没有特别限定。因此，也可以使用例如日本特开平09-050515记载的样条插值处理法来进行缩小处理。

优选的是，图像处理装置被输入包含由多个摄像部摄像生成的摄像数据的图像摄影数据，所述多个摄像部至少包括第一摄像部及第二摄像部，缩小处理决定单元以在由第一摄像部摄像生成的图像摄影数据与由第二摄像部摄像生成的图像摄影数据之间使缩小处理后的缩小图像数据的画质包含于预定的容许范围的方式，来决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。

根据本方案，在由多个摄像部摄像生成的图像摄影数据向图像处理装置输入的情况下，以在由第一摄像部摄像生成的图像摄影数据与由第二摄像部摄像生成的图像摄影数据之间使缩小处理后的画质包含于预定的容许范围的方式，来决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。因此，即使在多个摄像部间的摄像能力不同的情况下，也能够生成均匀的画质的缩小图像。

另外，在此所说的“缩小处理后的缩小图像的画质包含于预定的容许范围”是指通过缩小处理而获得的缩小图像的画质收纳于预定的容许范围内的范围，例如是指成为缩小图像的图像劣化(莫尔条纹等)的要因的各种参数处于预定的容许范围内的情况。作为这样的“缩小图像的画质”，可列举例如空间频率或彩度量等。

另外，“摄像部”是包括有助于摄像数据的生成的各种设备类的概念，可以将所谓摄像元件自身当作摄像部，也可以将包含向摄像元件引导光的透镜类的整体结构当作摄像部。因此，对于被输入包含由不同的摄像元件、不同的透镜或者透镜～摄像元件间的结构不同的摄像器件摄像生成的摄像数据的图像摄影数据的图像处理装置，能够适用本方案。

优选的是，图像处理装置具备根据缩小处理决定单元的决定结果来进行缩小关联处理的缩小关联处理单元。

根据本方案，能够基于与根据摄影条件数据而决定的摄像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数的决定结果，由缩小关联处理单元进行摄像数据的缩小关联处理。因此，在判断为根据摄影条件数据不需要缩小关联处理的情况下，不进行缩小关联处理，而且，能够通过与摄影条件数据相适的处理参数来实施缩小关联处理。

优选的是，图像处理装置具备根据缩小处理决定单元的决定结果来进行缩小处理的缩小处理单元。

根据本方案，能够基于根据摄影条件数据而决定的缩小处理的处理参数进行基于缩小处理单元的缩小处理。因此，能够通过与摄影条件数据相适的处理参数来实施缩小处理。

优选的是，还具备对缩小处理决定单元的决定结果进行显示的显示单元。

根据本方案，使用者经由显示单元的显示，能够确认缩小处理决定单元的决定结果。在此显示单元的显示方法没有特别限定，可以是将缩小处理决定单元的决定结果对使用者进行警告通知的方法，也可以是使用者以可知(确定)/未知(不确定)的方式选择显示缩小处理决定单元的决定结果的方法。

优选的是，所述显示单元能够选择地显示关于所述缩小关联处理执行与否的所述缩小处理决定单元的决定结果的确定，所述图像处理装置还具备接受与所述缩小处理决定单元的决定结果的确定相关的使用者的选择的选择单元，所述缩小处理决定单元根据经由所述选择单元接受到的选择结果，来确定所述缩小关联处理执行与否。

根据本方案，使用者能够确定选择显示单元所显示的缩小处理决定单元的决定结果(缩小关联处理执行与否)，根据该使用者的选择结果来决定缩小关联处理执行与否。

优选的是，由所述缩小处理决定单元决定的所述缩小关联处理的处理参数及所述缩小处理的处理参数包含多个选择候补，所述显示单元从所述多个选择候补之中能够选择地显示所述缩小关联处理的处理参数及所述缩小处理的处理参数，所述图像处理装置还具备接受使用者从所述多个选择候补之中的选择的选择单元，所述缩小处理决定单元根据经由所述选择单元接受到的选择结果，来确定所述缩小关联处理的处理参数及所述缩小处理的处理参数。

根据本方案，使用者能够从显示单元所显示的多个选择候补之中选择缩小关联处理的处理参数及缩小处理的处理参数，根据该使用者的选择结果来决定缩小关联处理的处理参数及缩小处理的处理参数。因此，根据摄影条件数据而使选择候补的范围适当化，由此使用者对最佳的处理参数的选择变得容易。

优选的是，图像处理装置具备根据确定出的缩小关联处理执行与否及缩小关联处理的处理参数而进行缩小关联处理的缩小关联处理单元。

根据本方案，基于确定出的缩小关联处理执行与否、缩小关联处理的处理参数的决定结果，通过缩小关联处理单元能够进行摄像数据的缩小关联处理。因此，在使用者判断为根据摄影条件数据不需要缩小关联处理的情况下，不进行缩小关联处理，而且能够根据使用者的意图来实施基于与摄影条件数据相适的处理参数的缩小关联处理。

优选的是，图像处理装置具备根据确定出的缩小处理的处理参数而进行缩小处理的缩小处理单元。

根据本方案，能够基于确定出的缩小处理的处理参数进行缩小处理单元的缩小处理。因此，能够根据使用者的意图来实施基于与摄影条件数据相适的处理参数的缩小处理。

本发明的另一方案涉及一种摄像装置，具备：摄像单元，具有对包含摄像数据的图像摄影数据进行摄像生成的摄像部；及上述的图像处理装置。

本方案的摄像装置没有特别限定，除了以摄像为主要功能的数码相机之外，具备摄像以外的其他功能(通话功能、通信功能、其他计算机功能)的移动设备类也包含于在此所说的摄像装置。

本发明的另一方案涉及一种摄像装置，具备：摄像单元，具有至少包括第一摄像部及第二摄像部的多个摄像部；及上述的图像处理装置。

本方案的摄像装置没有特别限定，除了具备多个摄像部且以摄像为主要功能的数码相机(例如可对应3D的相机等)之外，具备摄像以外的其他功能(通话功能、通信功能、其他计算机功能)的移动设备类也包含于在此所说的摄像装置。

本发明的另一方案涉及一种摄像装置，具备：摄像单元，具有对包含摄像数据的图像摄影数据进行摄像生成的摄像部，摄像部能够从至少包括第一摄像部及第二摄像部的多个摄像部之中选择互换；及上述的图像处理装置。

本方案的摄像装置没有特别限定，例如，能够由使用者互换透镜、摄像元件(CCD、CMOS等)的数码相机等也包含于在此所说的摄像装置。

本发明的另一方案涉及具备上述的图像处理装置的计算机。

本发明的另一方案涉及一种图像处理方法，具备：数据获取步骤，判别包含摄像数据的图像摄影数据是否包含摄影条件数据，且在判别为所输入的图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及缩小处理决定步骤，基于摄影条件数据的获取结果，决定与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的摄像生成时的光学低通滤光器的有无相关的信息。

本发明的另一方案涉及一种图像处理方法，具备：数据获取步骤，判别包含摄像数据的图像摄影数据是否包含摄影条件数据，且在判别为所输入的图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及缩小处理决定步骤，基于摄影条件数据的获取结果，决定与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息。

本发明的另一方案涉及一种程序，用于使计算机执行如下步骤：判别包含摄像数据的图像摄影数据是否包含摄影条件数据，且在判别为所输入的图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及基于摄影条件数据的获取结果，决定与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的摄像生成时的光学低通滤光器的有无相关的信息。

本发明的另一方案涉及一种程序，用于使计算机执行如下步骤：判别包含摄像数据的图像摄影数据是否包含摄影条件数据，且在判别为所输入的图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及基于摄影条件数据的获取结果，决定与根据摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个，摄影条件数据包含与摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息。

发明效果

根据本发明，基于与摄像数据生成时的光学低通滤光器的有无相关的信息或与摄像部的滤色器的排列相关的信息，能够决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。因此，能够使与光学低通滤光器的有无或摄像部的滤色器的排列对应的缩小关联处理及缩小处理最佳化，能够生成莫尔条纹等图像劣化不显眼的缩小图像。

附图说明

图1是例示能够适用本发明的设备类的功能框图，(a)示出具备一个摄像元件的摄像器件的一例，(b)示出具备二个(多个)摄像元件的摄像器件的一例，(c)示出摄像部与图像缩小处理部分体设置的例子。

图2是表示图像缩小处理部的输入输出图像摄影数据的概略的图，(a)示出图像缩小处理部的处理前后的数据结构，(b)示出附带信息(摄影条件数据)的一例。

图3是表示摄像装置(数码相机)的一实施方式的框图。

图4是表示滤色器的基本排列图案例的图，(a)示出拜耳排列的滤色器，(b)示出具有另一类型的排列的滤色器。

图5表示将图4(b)所示的基本排列图案的滤色器沿水平方向及垂直方向各排列配置两个的滤色器排列。

图6是与以图像缩小处理部为主体的图像缩小处理关联的功能框图。

图7是表示第一实施方式的缩小处理的流程的流程图，(a)是与处理A(缩小关联处理)相关的流程图，(b)是采用低通滤光(LPF)处理作为处理A的情况下的流程图。

图8是表示第二实施方式的缩小处理的流程的流程图，(a)是与处理A(缩小关联处理)相关的流程图，(b)是采用低通滤光(LPF)处理作为处理A的情况下的流程图。

图9是表示第三实施方式的缩小处理的流程的流程图，(a)是与处理B(缩小处理)相关的流程图，(b)是采用基于样条插值处理法的缩小处理作为处理B的情况下的流程图。

图10是表示第四实施方式的缩小处理的流程的流程图。

图11是表示第五实施方式的缩小处理的流程的流程图。

图12是表示第六实施方式的缩小处理的流程的流程图。

图13是表示第七实施方式的缩小处理的流程的流程图。

图14是表示第八实施方式的缩小处理的流程的流程图。

图15是作为本发明的摄影装置的一例的智能电话的外观图。

图16是表示图15所示的智能电话的结构的框图。

具体实施方式

以下，参照附图，说明本发明的实施方式。首先，说明本发明的概略，然后，说明具体的适用例。另外，下述的结构只不过是例示，对于其他结构也能够适用本发明。而且，各结构能够通过任意的硬件、软件或两者的组合来适当实现。

本申请发明涉及摄影图像的缩小处理技术，能够适用于可进行摄影图像的图像处理的全部设备类。因此，例如通过能够拍摄摄影图像的相机等摄像器件或连接有摄像器件的计算机也能够实现本发明。

图1(a)是表示具备一个摄像元件的摄像器件的一例的功能框图，图1(b)是表示具备二个(多个)摄像元件的摄像器件的一例的功能框图。而且，图1(c)是表示摄像器件及连接有该摄像器件的计算机的一例的功能框图。

图1(a)所示的摄像单元10具备相互连接的摄像部12、数字图像处理部14、图像缩小处理部16、使用者I/F(使用者接口)17、输入输出控制部18、存储部20、显示部22及信号输入输出I/F(信号输入输出接口)24。

摄像部12根据需要而具备例如透镜、光圈、快门、配设有滤色器的摄像元件(CCD、CMOS等)等，进行摄影而生成摄像数据。另外，后述的光学低通滤光器(OLPF)可以设于摄像部12，也可以不设于摄像部12。

数字图像处理部14对由摄像部12生成的摄像数据实施数字图像处理，根据需要而进行例如偏置校正处理、WB(白平衡)校正处理、泛白像素检测校正处理、曝光校正处理、γ(伽玛)校正处理、去马赛克算法处理等。

另外，由摄像部12获取了摄像数据时的摄影条件的数据(摄影条件数据(摄影日、像素数、F值(光圈值)等)可以附加于摄像数据。摄影条件数据可以在摄像时在摄像部12向摄像数据附加，也可以在摄像后在数字图像处理部14等中向摄像数据附加。在摄影条件数据未向摄像数据附加的情况下，生成不包含摄影条件数据但是包含摄像数据的图像摄影数据。如此生成的图像摄影数据向后段的图像缩小处理部16传送。

图像缩小处理部16基于所输入的图像摄影数据，生成摄影图像的缩小图像。详细情况在后文叙述，但是如图2(a)所示，包含摄影数据(主图像)32及摄影条件数据(附带信息)34的图像摄影数据30在图像缩小处理部16中生成缩小图像，还包含缩小图像数据(缩略图像等)38的图像摄影数据36从图像缩小处理部16被输出。尤其是在以下的实施方式中，在摄影条件数据34包含“与光学低通滤光器的有无相关的信息”及/或“与滤色器的排列图案相关的信息”的情况下，图像缩小处理部16对“与光学低通滤光器的有无相关的信息”及/或“与滤色器的排列图案相关的信息”实施最佳化后的缩小处理，能够生成优异的画质的缩小图像。

另外，输入到图像缩小处理部16的图像摄影数据30也可以不包含图2(b)所示那样的摄影条件数据(尤其是“与光学低通滤光器的有无相关的信息”及/或“与滤色器的排列图案相关的信息”)34。在这种情况下，图像缩小处理部16对未附加摄影条件数据的摄影数据32进行适合的缩小处理而生成缩小图像。

该图像缩小处理部16的图像缩小处理的详情在后文叙述(参照图6～图14)。

包含“由图像缩小处理部16生成的缩小图像数据38”及“与图像摄影数据30相同的摄影数据(主图像)32”的图像摄影数据36由图1(a)所示的输入输出控制部18进行输出控制，存储于存储部(存储器等)20，在显示部(液晶显示器等)22显示缩小图像，或经由信号输入输出I/F24向外部输出。

另外，摄像部12、数字图像处理部14、图像缩小处理部16及输入输出控制部18的各种处理的信息能够经由显示部22向使用者提供。使用者也可以一边确认显示部22所显示的信息，一边经由使用者I/F17，对摄像部12、数字图像处理部14、图像缩小处理部16及输入输出控制部18发送控制指示信号。

上述的缩小图像的生成处理在图1(b)所示的具备多个摄像部(第一摄像部12A、第二摄像部12B)的摄像单元10’中同样能够实施。即，在第一摄像部12A及第二摄像部12B中分别生成的摄像数据与摄像部为一个的摄像单元10(图1(a))同样，在数字图像处理部14中实施数字图像处理，在图像缩小处理部16中生成缩小图像，包含缩小图像的图像摄影数据36由输入输出控制部18进行输入输出控制，在存储部20存储图像摄影数据36，或在显示部22显示缩小图像，或经由信号输入输出I/F24向外部输出。另外，使用者也同样可以经由使用者I/F17，对摄像部(第一摄像部12A、第二摄像部12B)、数字图像处理部14、图像缩小处理部16及输入输出控制部18发送控制指示信号。

另外，作为能够互换摄像部的结构，也可以采用能够从至少包含第一摄像部及第二摄像部的多个摄像部之中进行选择互换的摄像单元。例如，图1(b)所示的第一摄像部12A及第二摄像部12B作为能够进行安装及拆卸的结构，也可以是能够选择第一摄像部12A及第二摄像部12B中的任一个进行使用的结构。作为采用这样的结构的设备类，可列举例如能够替换包含透镜～摄像元件的透镜单元(摄像部)的相机(透镜互换相机等)。

图1(a)及图1(b)示出了摄像部12、12A、12B和图像缩小处理部16单体地设置的例子，但摄像部和图像缩小处理部也可以如图1(c)所示那样分体地设置。

例如，对于具备摄像部12的摄像单元10”与具备图像缩小处理部16的计算机11能够经由彼此的信号输入输出I/F24A、24B连接的系统也可以适用本申请发明。

在这种情况下，数字图像处理部可以设置在摄像单元10侧(参照图1(c)的附图标记“14A”)，也可以设置在计算机11侧(参照图1(c)的附图标记“14B”)。在摄像单元10”侧设置数字图像处理部14A的情况下，数字图像处理后的图像摄影数据经由信号输入输出I/F24A从摄像单元10”输出，并经由信号输入输出I/F24B向计算机11输入。输入到计算机11的图像摄影数据30与上述同样，在图像缩小处理部16中生成缩小图像，包含缩小图像的图像摄影数据36由输入输出控制部18控制，向存储部20、显示部22及信号输入输出I/F24B适当输出。而且，在计算机11侧设置数字图像处理部14B的情况下，包含数字图像处理前的摄影数据(Raw数据等)的图像摄影数据30经由信号输入输出I/F24A从摄像单元10”输出，并经由信号输入输出I/F24B向计算机11输入。输入到计算机11的图像摄影数据30与上述同样，在数字图像处理部14B中实施数字图像处理，在图像缩小处理部16中生成缩小图像，包含缩小图像的图像摄影数据36由输入输出控制部18控制，向存储部20、显示部22及信号输入输出I/F24B适当输出。

另外，该功能结构不仅能够适用于图1(c)所示的“摄像装置(系统)，其具备：摄像单元，具有摄像生成包含摄影数据32的图像摄影数据30的摄像部12；及计算机，具有图像缩小处理部(图像处理装置)16”，而且也能够适用于图1(b)所示的摄像单元10’与计算机11连接的情况那样的“摄像装置(系统)，其具备：摄像单元，具有至少包含第一摄像部12A及第二摄像部12B的多个摄像部；及计算机，具有图像缩小处理部(图像处理装置)16”。

接着，说明将上述的图1(a)所示的类型的摄像单元10适用于数码相机的情况下的更详细的具体例。

图3是表示摄像装置(数码相机)的一实施方式的框图。

该摄像装置40是将拍摄到的图像记录在内部存储器(存储器部56)或外部的记录媒介(未图示)中的数码相机，装置整体的动作由CPU(中央处理装置)42统一控制。

在摄像装置40设有包含快门按钮(快门开关)、模式转盘、再生按钮、菜单/OK键、十字键、变焦按钮、返回键等的操作部44。来自该操作部44的信号向CPU42输入，CPU42基于输入信号来控制摄像装置40的各电路，例如，经由器件控制部46来控制透镜部48、快门50、作为图像获取单元发挥功能的摄像元件52，而且进行摄影动作控制、图像处理控制、图像数据的记录/再生控制、显示部55的显示控制等。

透镜部48包含聚焦透镜、变焦透镜、光圈等，通过了透镜部48及快门50后的光束在摄像元件52的受光面上成像。

摄像元件52是CMOS(ComplementaryMetal-OxideSemiconductor)型、XY寻址型或CCD(ChargeCoupledDevice)型等的彩色图像传感器，具有将滤色器和接受通过了滤色器后的光的多个受光元件(光电二极管)形成二维排列的结构。在各光电二极管的受光面上成像的被摄体像被转换成与其入射光量对应的量的信号电压(或电荷)。

图4是表示滤色器的基本排列图案例的图，图4(a)示出所谓拜耳(Bayer)排列的滤色器，图4(b)示出具有另一类型的排列的滤色器。另外在图4中，“R”表示Red(红色)滤光片，“G”表示Green(绿色)滤光片，“B”表示Blue(蓝色)滤光片。

本例的摄像元件52的滤色器将由与M×N(6×6)像素对应的正方排列图案构成的基本排列图案P沿水平方向及垂直方向反复配置而构成。因此，在进行从摄像元件52读出的RGB的RAW数据(马赛克图像)的图像处理等时，能够按照重复图案进行处理。这样的滤色器排列中，红(R)、绿(G)、蓝(B)各色滤光片(R滤光片、G滤光片、B滤光片)以预定的周期性排列。

例如在图4(a)所示的拜耳排列的滤色器中，G滤光片与R滤光片交替配置的行(水平方向排列)和G滤光片与R滤光片交替配置的行在垂直方向上交替配置，在各R滤光片及各B滤光片的上下左右的位置配置G滤光片。并且，在各R滤光片的倾斜方向的位置配置B滤光片，在各B滤光片的倾斜方向的位置配置R滤光片，在各G滤光片的倾斜方向的位置配置G滤光片。

另一方面，在图4(b)所示的另一排列的滤色器中，成为由实线的框围成的3×3像素的A排列和由虚线的框围成的3×3像素的B排列在水平方向及垂直方向上交替排列而成的排列。

A排列及B排列中，G滤光片分别配置在四角和中央，在两对角线上配置G滤光片。在A排列中，R滤光片隔着中央的G滤光片而在水平方向上排列，B滤光片隔着中央的G滤光片而在垂直方向上排列。另一方面，在B排列中，B滤光片隔着中央的G滤光片而在水平方向上排列，R滤光片隔着中央的G滤光片而在垂直方向上排列。即，A排列和B排列中，R滤光片与B滤光片的位置关系颠倒，但是其他配置同样。

另外，A排列和B排列的四角的G滤光片通过将A排列和B排列在水平、垂直方向上交替配置，而成为与2×2像素对应的正方排列的G滤光片。

图5表示将图4(b)所示的基本排列图案的滤色器在水平方向及垂直方向上各排列配置两个的滤色器排列。在该滤色器排列中，根据图5可知，通常最有助于获得亮度信号的颜色(在该实施方式中为G色)所对应的G滤光片在滤色器排列的水平、垂直、斜右上(NE)及斜左上(NW)方向的各行内配置一个以上。

NE表示斜右上方向，NW表示斜右下方向。例如，在正方形的像素的排列的情况下，斜右上及斜右下方向是相对于水平方向分别呈45°的方向，但是若为长方形的像素的排列，则是长方形的对角线的方向且其角度根据长边/短边的长度而可变。

根据这样的滤色器排列，与亮度系像素对应的G滤光片配置在滤色器排列的水平、垂直及倾斜(NE、NW)方向的各行内，因此无论成为高频的方向如何，都能够提高高频区域的去马赛克算法处理的重现精度。

另外，图5所示的滤色器排列中，上述G色以外的两种颜色以上的其他颜色(在该实施方式中为R、B色)所对应的R滤光片、B滤光片分别在基本排列图案的水平及垂直方向的各行内配置一个以上。

R滤光片、B滤光片配置在滤色器排列的水平及垂直方向的各行内，因此能够减少伪色(彩色莫尔条纹)的产生。由此，能够省略用于减少(抑制)伪色的产生的光学低通滤光器。另外，即使在适用光学低通滤光器的情况下，也能够适用用于防止伪色的产生的将高频成分截止的作用弱的滤光器，能够避免分辨率受损。

而且，图5所示的滤色器排列的基本排列图案P中，该基本排列图案内的R、G、B滤光片所对应的R像素、G像素、B像素的像素数分别为8像素、20像素、8像素。即，RGB像素的各像素数的比率为2：5：2，最有助于获得亮度信号的G像素的像素数的比率大于其他颜色的R像素、B像素的像素数的比率。

如上述那样，在图5所示的滤色器排列中，G像素的像素数与R、B像素的像素数的比率不同，尤其是最有助于获得亮度信号的G像素的像素数的比率大于R、B像素的像素数的比率，因此能够抑制去马赛克算法处理时的混淆，而且也能够改善高频重现性。

具备上述的图4(a)或图4(b)所示的具有基本排列的滤色器的摄像元件52中蓄积的信号电荷基于从器件控制部46施加的读出信号而被读出作为与信号电荷对应的电压信号。从摄像元件52读出的电压信号向A/D转换器(模拟/数字转换器)54施加，在此，依次转换成与滤色器排列对应的数字的R、G、B信号，且暂时保存于存储器部56。

存储器部56包含作为易失性存储器的SDRAM或作为能够改写的非易失性存储器的EEPROM(存储单元)等，SDRAM被使用作为CPU42对程序的执行时的工作区域，而且，被使用作为将拍摄获取的数字图像信号暂时保持的存储区域。另一方面，在EEPROM中，存储有包含图像处理程序的相机控制程序、摄像元件52的像素的缺陷信息、包含混色校正的图像处理等所使用的各种参数、表等。

图像处理部58对暂时存储于存储器部56的数字的图像信号进行混色校正、白平衡校正、伽玛校正处理、去马赛克算法处理(去马赛克算法处理)、RGB/YC转换等预定的信号处理。

由图像处理部58处理后的图像数据在编码器60中被编码成图像显示用的数据，经由驱动器62而向设于相机背面的显示部55输出。由此，将被摄体像连续地显示在显示部55的显示画面。

当存在操作部44的快门按钮的第一阶段的按压(半按)时，CPU42进行控制，以使AF动作(自动聚焦)及AE动作(自动曝光)开始，经由器件控制部46使透镜部48的聚焦透镜沿着光轴方向移动，使聚焦透镜来到对焦位置。

CPU42在快门按钮的半按时基于从A/D转换器54输出的图像数据来算出被摄体的明亮度(摄影Ev值)，通过该摄影Ev值来决定曝光条件(F值、快门速度)。

在AE动作及AF动作结束而存在快门按钮的第二阶段的按压(全按)时，通过决定的曝光条件来控制光圈、快门50及摄像元件52的电荷蓄积时间而进行正式摄像。在正式摄像时从摄像元件52读出且由A/D转换器54进行了A/D转换后的RGB的马赛克图像(图4及图5所示的滤色器排列所对应的图像)的图像数据暂时存储于存储器部56。

暂时存储于存储器部56的图像数据由图像处理部58适当读出，在此，进行包含混色校正、白平衡校正、伽玛校正、去马赛克算法处理、RGB/YC转换等的预定的信号处理。进行了RGB/YC转换后的图像数据(YC数据)按照预定的压缩格式(例如，JPEG方式)被压缩，被压缩后的图像数据以预定的图像文件(例如，Exif文件)形式记录在内部存储器或外部存储器中。

在这样的摄像装置40中，有时配设有将向摄像元件52照射的光的高频成分光学性地截止的光学低通滤光器(OLPF)64。例如在使用图4(a)所示的具有拜耳型的基本排列的滤色器的情况下，所获得的图像的高频成分容易成为莫尔条纹等图像劣化的要因。因此，在使用高频成分容易引发图像劣化的拜耳型那样的滤色器来获取图像数据的情况下，通过配置光学低通滤光器64能够抑制图像劣化。另一方面，在使用图4(b)所示的具有基本排列的滤色器的情况下，如上述那样能够进一步减少莫尔条纹等图像劣化，因此不设置光学低通滤光器，由此能够获得保留有高频成分的分辨率高的图像数据。

如此，是否配设光学低通滤光器64根据在摄像装置40中使用的摄像元件(滤色器)的种类、具体的图像处理内容等的装置结构而适当决定。

接着，说明具有这样的装置结构的摄像装置40中的与图像缩小处理关联的具体的处理内容。

如参照图2(a)说明的那样，在图像缩小处理中，不包含缩小图像数据的图像摄影数据30向图像缩小处理部16输入，在图像缩小处理部16中生成缩小图像数据38，包含缩小图像数据38的摄影条件数据34从图像缩小处理部16输出。

图6是以图像缩小处理部16为主体的与图像缩小处理关联的功能框图。图像缩小处理部16具有数据获取部(数据获取单元)70、缩小处理决定部(缩小处理决定单元)72、缩小关联处理部(缩小处理关联处理单元)74及缩小处理部(缩小处理单元)76。

数据获取部70获取所输入的图像摄影数据30(参照图2)是否包含摄影条件数据34的情况及摄影条件数据34的内容。在由数据获取部70获取的摄影条件数据34中可以包含与对后段生成的缩小图像数据造成影响的信息相关的全部数据。尤其是在本例中，成为缩小图像中的莫尔条纹等图像劣化的要因的高频成分的有无、多少的判断基准的“与摄影数据32的摄像生成时的光学低通滤光器64(参照图3)的有无相关的信息”、“与摄像数据的摄像生成时所用的摄像元件的滤色器的排列(参照图4及图5)相关的信息”等可以包含于摄影条件数据34。

缩小处理决定部72基于数据获取部70对摄影条件数据34的获取结果，决定与图像摄影数据30的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个。

在此所说的“缩小关联处理”可以包含与后段的图像缩小处理关联的全部处理，例如有在图像缩小处理之前进行图像摄影数据30的加工处理的缩小前处理。作为缩小前处理，可列举例如用于防止缩小图像中的莫尔条纹等图像劣化的处理，具体而言，可以将通过低通滤光器(LPF)等从图像摄影数据30将高频成分去除的处理设为缩小关联处理。因此，在缩小关联处理为低通滤光处理的情况下，缩小处理决定部72基于数据获取部70中的摄影条件数据34的获取结果，决定是否执行低通滤光处理及/或低通滤光处理的处理参数。

另外，这样的缩小处理决定部72的决定可以通过对使用者催促选择决定(确定)的对话形式来推进处理，也可以基于数据获取部70的决定结果，不对使用者催促选择决定而推进处理。在与使用者的对话形式的情况下，例如缩小处理决定部72可以将决定结果可选择地显示于显示部22。在这种情况下，使用者能够经由选择指示部78选择是否确定显示在显示部22的缩小处理决定部72的决定结果。

另外，选择指示部78可以具有任意的结构，可以与显示部22一体地设置，也可以与显示部22分体地设置。通过如触摸面板等那样将选择指示部78和显示部22一体地设置，使用者能够直观地进行显示部22所提示的选择决定、确定选择。而且，在由与显示部22分体设置的按钮等构成选择指示部78的情况下，使用者能够通过选择指示部78使显示于显示部22的光标等的显示与所希望的选择候补对应而进行选择决定、确定选择。

缩小处理决定部72根据与决定结果的确定相关的使用者的选择结果，来确定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数。因此，例如在将“有缩小关联处理的执行”这样的缩小处理决定部72的决定结果显示于显示部22的情况下，在使用者进行了确定“有缩小关联处理的执行”的选择的情况下，在后段执行缩小关联处理，但是在使用者未进行确定“有缩小关联处理的执行”的选择的情况下(进行了拒绝“有缩小关联处理的执行”的选择的情况下，选择了“没有缩小关联处理的执行”的情况下)，在后段不执行缩小关联处理。

另外，由缩小处理决定部72决定的缩小关联处理的处理参数及缩小处理的处理参数可以包含多个选择候补，在这种情况下，显示部22能够从多个选择候补之中可选择地显示缩小处理的处理参数。使用者能够从显示于显示部22的多个选择候补之中选择被采用作为处理参数的候补，缩小处理决定部72根据使用者的选择，能够确定缩小关联处理的处理参数及缩小处理的处理参数。

当在缩小处理决定部72中决定缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数时，缩小关联处理部74及缩小处理部76基于缩小处理决定部72的决定(确定)而进行缩小关联处理及缩小处理。

缩小关联处理部74根据缩小处理决定部72的决定结果而进行摄影数据32的缩小关联处理。尤其是在通过使用者经由显示部22及选择指示部78选择确定了缩小关联处理执行与否及缩小关联处理的处理参数的情况下，根据该确定出的缩小关联处理执行与否及缩小关联处理的处理参数，缩小关联处理部74进行摄影数据32的缩小关联处理。

另外，也可以不必执行缩小关联处理。例如在缩小处理决定部72中决定了“不执行缩小关联处理”的情况下，跳过缩小关联处理部74的缩小关联处理，进行后段的缩小处理部76的缩小处理。而且，也可以不设置缩小关联处理部74，在这种情况下，在缩小处理决定部72中不进行缩小关联处理执行与否、缩小关联处理的处理参数的决定。

并且，缩小处理部76根据缩小处理决定部72的决定结果而进行摄影数据32的缩小处理。在通过使用者经由显示部22及选择指示部78选择确定了缩小处理的处理参数的情况下，根据该确定出的缩小处理的处理参数，缩小处理部76进行摄影数据32的缩小处理。

如此，通过基于摄影条件数据34而规定的处理参数来进行缩小处理，由此能够使通过该缩小处理所获得的缩小图像的画质适当化，能够进一步防止莫尔条纹等图像劣化。尤其是在缩小处理部76的图像缩小处理之前根据基于摄影条件数据34的处理参数来进行低通滤光处理等缩小关联处理的情况下，能够进一步防止莫尔条纹等图像劣化。

另外，在上述的摄像装置40(参照图3)中，透镜部48、光学低通滤光器64、快门50、摄像元件52作为图1的摄像部12、12A、12B发挥功能，图像处理部58作为图1的数字图像处理部14、14A、14B及图像缩小处理部16发挥功能，操作部44作为图1的使用者I/F17发挥功能，CPU42作为图1的输入输出控制部18发挥功能，编码器60及驱动器62作为图1的输入输出控制部18发挥功能，存储器部56作为图1的存储部20发挥功能，显示部55作为图1的显示部22发挥功能。而且，图6的选择指示部(选择单元)78对应于图1的使用者I/F17或图3的操作部44。

接着，说明具体的缩小处理例。

<第一实施方式>

关于第一实施方式的缩小处理例，参照图6及图7进行说明。图7(a)是表示第一实施方式的缩小处理的流程的流程图。

本实施方式能够适用于例如在连接有摄像单元的计算机中进行图像缩小处理的情况(参照图1(c))，能设想在计算机中安装有用于执行下述的一连串的缩小处理(包含缩小关联处理)的程序(软件)的情况等。

在本实施方式中，通过摄影条件数据的有无、光学低通滤光器的有无及滤色器排列，来控制与缩小关联处理(处理A、低通滤光处理)的执行相关的选择显示的有无。

即，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图7(a)的步骤S11)。数据获取部70获取图像摄影数据30是否包含摄影条件数据34的情况及摄影条件数据34的内容(数据获取步骤)。在本实施方式中，使用“与光学低通滤光器的有无相关的信息”及“滤色器的排列信息”作为摄影条件数据。

并且，缩小处理决定部72基于数据获取部70的摄影条件数据的获取结果，决定与摄像数据的缩小处理关联的缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个(缩小处理决定步骤)。

在图像摄影数据30是否包含摄影条件数据34的判别中(S12)，在判别为图像摄影数据30不包含摄影条件数据34的情况下(S12为“否”)，缩小处理决定部72在显示部22不进行处理A(缩小关联处理)的选择显示(S16)。

另一方面，在判别为图像摄影数据30包含摄影条件数据34的情况下(S12为“是”)，缩小处理决定部72判别光学低通滤光器(OLPF)64(参照图3)的有无(S13)。在判别为未使用光学低通滤光器64的情况下(S13为“否”)，缩小处理决定部72在显示部22不进行处理A的选择显示(S16)。

另一方面，在判别为有光学低通滤光器64的情况下(S13为“是”)，缩小处理决定部72判别所使用的滤色器(CF)是否为拜耳排列(S14)。在判别为滤色器不是拜耳排列的情况下(S14为“否”)，缩小处理决定部72在显示部22不进行处理A的选择显示(S16)。

另一方面，在判别为滤色器是拜耳排列的情况下(S14为“是”)，缩小处理决定部72在显示部22进行处理A的选择显示(S15)。使用者基于该显示部22的处理A的选择显示来操作选择指示部78，由此能够进行处理A执行的确定选择。

另外，显示部22的选择显示的方法没有特别限定，例如可以是作为对使用者的警告来进行通知的形式的方法，也可以是显示缩小处理决定部72的决定结果而向使用者询问是否知晓该判断结果的形式的方法，还可以是显示缩小处理决定部72的决定结果及与该决定结果相反的选择项而让使用者选择任一者的形式的方法。

并且，缩小处理决定部72判断是否由使用者进行了处理A执行的选择确定(S17)。在判断为处理A的执行由使用者选择确定的情况下(S17为“是”)，在缩小关联处理部74中执行处理A(S18)，然后，在缩小处理部76中进行图像缩小处理(S19)。

另一方面，在处理A的执行未由使用者选择的情况下(处理A的非执行被选择确定的情况下)(S17为“否”)，跳过处理A，以不进行处理A的状态在缩小处理部76中进行图像缩小处理(S19)。

另外，在判别为没有摄影条件数据34的情况下(S12为“否”)、判别为没有光学低通滤光器的情况下(S13为“否”)及判别为滤色器不是拜耳排列的情况下(S14为“否”)那样在显示部22未进行处理A的选择显示的情况下(S16)，不进行使用者对处理A的选择确定，在缩小关联处理部74中强制性地执行处理A(S18)。

图7(b)是在图7(a)的处理流程中采用了低通滤光(LPF)处理作为处理A(缩小关联处理)的情况下的流程图。除了图7(b)的步骤S111～S119将“处理A”置换为“低通滤光处理”这一点之外，与图7(a)的步骤S11～S19相同，因此省略图7(b)所示的处理流程的详细说明。

根据图7(a)及图7(b)所示的处理流程，在摄影条件数据34不明的情况下(S12及S112为“否”)，在没有光学低通滤光器的状态下拍摄而摄影数据32含有较多高频成分的可能性高的情况下(S13及S113为“否”)，或者滤色器排列具有拜耳排列以外的特有的排列的情况下(S14及S114为“否”)，不向使用者显示(S16及S116)，而在缩小处理(S19)之前强制性地执行缩小关联处理(处理A、低通滤光处理)(S18及S118)。

因此，即使在使用能够获取包含较多高频成分的摄影数据32的具有拜耳排列以外的基本排列的滤色器(例如参照图4(b)及图5)的情况下，也能够在图像缩小处理前实施缩小关联处理(处理A、低通滤光处理)，能够进一步减少缩小图像中的莫尔条纹等图像劣化。

另一方面，在有光学低通滤光器的状态下拍摄生成摄影数据32而不包含高频成分(或者，摄影数据32所包含的高频成分非常少)的可能性高(S13及S113为“是”)且滤色器排列为一般的拜耳排列的情况下(S14及S114为“是”)，经由显示部22向使用者询问缩小关联处理(处理A、低通滤光处理)执行与否，根据使用者的经由选择指示部78的选择确定结果执行缩小关联处理(S17及S117为“是”)或不执行缩小关联处理(S17及S117为“否”)。

如以上说明的那样，根据本实施方式，根据光学低通滤光器的有无及滤色器的排列图案，能够使显示部22及选择指示部78的可设定范围及/或处理选择内容最佳化，使用者关于基于摄影数据32的缩小图像数据38的生成，能够任意地选择最佳的处理。因此，能够以非常高的水平实现缩小图像中的莫尔条纹等图像劣化的回避和与使用者的需求对应的灵活的缩小关联处理及缩小处理。

另外，在上述的实施方式中，对进行光学低通滤光器的有无的判别(S13及S113)及滤色器的排列图案的判别(S14及S114)这两者的例子进行了说明，但也可以仅进行任一方的判别。例如，在仅判别光学低通滤光器的有无的情况下，不进行“所使用的滤色器(CF)是否为拜耳排列的判别(S14及S114)”，因此在判别为使用了光学低通滤光器的情况下，缩小处理决定部72在显示部22进行处理A/低通滤光处理的选择显示(S15及S115)。另一方面，在仅判别滤色器的排列图案的情况下，不进行“光学低通滤光器的有无的判别(S13及S113)”，因此在判别为图像摄影数据30包含摄影条件数据34的情况下(S12为“是”)，缩小处理决定部72进行所使用的滤色器(CF)是否为拜耳排列的判别(S14及S114)。

另外，在上述的实施方式中，说明了在判别为没有摄影条件数据34的情况下(S12为“否”)、判别为没有光学低通滤光器的情况下(S13为“否”)及判别为滤色器不是拜耳排列的情况下(S14为“否”)那样在显示部22未进行处理A的选择显示的情况下(S16)，在缩小关联处理部74中强制性地执行缩小关联处理(处理A、低通滤光处理)(S18)的例子，但是在这样的情况下也可以不强制性地执行缩小关联处理。

<第二实施方式>

关于第二实施方式的缩小处理例，参照图6及图8进行说明。图8(a)是表示第二实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第一实施方式相同或类似的处理，省略详细说明。

在本实施方式中，也是通过摄影条件数据的有无、光学低通滤光器的有无及滤色器排列来控制缩小关联处理(处理A、低通滤光处理)的执行的选择显示的有无。

即，与第一实施方式同样，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图8(a)的步骤S21)。而且，在缩小处理决定部72中进行图像摄影数据30是否包含摄影条件数据的判别(S22)，进行光学低通滤光器(OLPF)64的有无的判别(S23)及进行所使用的滤色器(CF)是否为拜耳排列的判别(S24)这一点也与第一实施方式(参照图7(a)的S12～S14)同样。

但是，在本实施方式中，在判别为图像摄影数据30包含摄影条件数据34(S22为“是”)、使用了光学低通滤光器64(S23为“是”)且所使用的滤色器是拜耳排列(S24为“是”)的情况下，缩小处理决定部72不进行显示部22的处理A的选择显示(S25)，强制性地跳过处理A，以不进行处理A的状态在缩小处理部76中进行图像缩小处理(S29)。

另一方面，在判别为图像摄影数据30不包含摄影条件数据(S22为“否”)或未使用光学低通滤光器64(S23为“否”)或所使用的滤色器不是拜耳排列(S24为“否”)的情况下，缩小处理决定部72进行显示部22的处理A的选择显示(S26)。使用者基于该显示部22的处理A的选择显示来操作选择指示部78，由此能够进行处理A执行的确定选择。

并且，缩小处理决定部72判断是否由使用者进行了处理A执行的选择确定(S27)。在判断为处理A的执行由使用者选择确定的情况下(S27为“是”)，在缩小关联处理部74中执行处理A(S28)，然后，在缩小处理部76中进行图像缩小处理(S29)。

另一方面，在处理A的执行未由使用者选择的情况下(处理A的非执行被选择确定的情况下)(S27为“否”)，跳过处理A，以未进行处理A的状态在缩小处理部76中进行图像缩小处理(S29)。

图8(b)是在图8(a)的处理流程中采用了低通滤光处理作为处理A(缩小关联处理)的情况下的流程图。图8(b)的步骤S121～S129除了将“处理A”置换为“低通滤光处理”这一点之外，与图8(a)的步骤S21～S29相同，因此省略图8(b)所示的处理流程的详细说明。

如此在本实施方式中，能够以非常高的水平实现缩小图像中的莫尔条纹等图像劣化的回避和与使用者的需求对应的灵活的缩小关联处理及缩小处理。

<第三实施方式>

关于第三实施方式的缩小处理例，参照图6及图9进行说明。图9(a)是表示第三实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第一实施方式相同或类似的处理，省略详细说明。

在本实施方式中，通过摄影条件数据的有无、光学低通滤光器的有无及滤色器排列来控制缩小处理的处理(处理B、插值处理)的参数范围。

在本实施方式中，也与第一实施方式同样，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图9(a)的步骤S31)。而且，在缩小处理决定部72中进行图像摄影数据30是否包含摄影条件数据的判别(S32)，进行光学低通滤光器(OLPF)64的有无的判别(S33)及进行所使用的滤色器(CF)是否为拜耳排列的判别(S34)这一点也与第一实施方式(参照图7(a)的S12～S14)同样。

其中，在本实施方式中，缩小处理中的处理B(插值处理)的参数的可选择范围(包含多个选择候补的范围)根据摄影条件数据34的有无、光学低通滤光器64的有无及使用滤色器是否为拜耳排列来决定。

例如，在判别为图像摄影数据30不包含摄影条件数据的情况下(S32为“否”)，缩小处理决定部72将“范围σ”作为处理B的处理参数的可选择范围而显示于显示部22(S35d)。而且，在判别为图像摄影数据30包含摄影条件数据(S32为“是”)且未使用光学低通滤光器64(S33为“否”)的情况下，缩小处理决定部72将“范围γ”作为处理B的处理参数的可选择范围而显示于显示部22(S35c)。而且，在判别为使用光学低通滤光器64(S33为“是”)且滤色器的排列不是拜耳排列(S34为“否”)的情况下，缩小处理决定部72将“范围β”作为处理B的处理参数的可选择范围而显示于显示部22(S35b)。另一方面，在判别为滤色器的排列是拜耳排列(S34为“是”)的情况下，缩小处理决定部72将“范围α”作为处理B的处理参数的可选择范围而显示于显示部22(S35a)。

使用者能够经由选择指示部78从如此决定的可选择范围α、β、γ、σ所包含的选择候补之中选择任意的参数。当使用者经由选择指示部78进行了处理B的参数的选择输入时(S36)，缩小处理部76基于由该使用者选择输入的参数而进行处理B(S37)。

图9(b)是在图9(a)的处理流程中采用了“缩小处理中的样条插值处理”作为处理B的情况下的流程图。图9(b)的步骤S131～S137除了将“处理B”置换为“缩小处理中的样条插值处理”这一点之外，与图9(a)的步骤S31～S37大致相同，但是图9(a)的处理B的范围“α”、“β”、“γ”及“σ”在图9(b)中分别为“样条插值系数可设定范围0～0.9”、“样条插值系数可设定范围0～0.8”、“样条插值系数可设定范围0～0.7”及“样条插值系数可设定范围0～1.0”。

即，在判别为图像摄影数据30不包含摄影条件数据的情况下(图9(b)的步骤S132为“否”)，缩小处理决定部72将样条插值系数的最大范围即0～1.0作为可设定范围(S135d)。而且，在摄影时存在“没有光学低通滤光器”的信息的情况下(S133为“否”)，若直接缩小，则产生莫尔条纹等图像劣化的可能性高。而且，样条插值的样条插值系数值越大则锐度越高，但是当样条插值系数过大时，存在产生莫尔条纹等图像劣化的可能性。因此，在这种情况下，缩小处理决定部72缩窄样条插值系数可设定范围，将样条插值系数的可设定范围设定为0～0.7(S135c)。而且，在利用保持具有图4(b)及图5所示那样的排列图案的滤色器的摄像元件拍摄的情况下，与拜耳排列相比能够获取高频成分的数据，但是在直接进行缩小处理的情况下，缩小图像产生莫尔条纹等图像劣化的可能性高。因此，在滤色器的排列图案为拜耳排列以外的图案(图4(b)及图5所示的排列图案等)的情况下，缩小处理决定部72缩窄样条插值系数可设定范围，将样条插值系数的可设定范围设定为0～0.8(S135b)。另一方面，在滤色器的排列图案为“拜耳排列”的情况下，与图4(b)及图5所示的排列图案相比，能获取高频成分下降的数据，莫尔条纹等图像劣化难以产生，因此缩小处理决定部72将样条插值系数的可设定范围设为0～0.9(S135a)。

另外，图9(b)所示那样的样条插值系数可设定范围的数值只不过是一例，可以适当地通过其他数值来规定样条插值系数可设定范围，例如也可以通过数值的大小关系不变的其他值来规定各个情况的样条插值系数可设定范围。

另外，缩小处理时可使用的插值处理没有限定为样条插值法，可以利用任意的插值处理。例如可以利用具有下述的表中所示的特性的近邻取样(最邻近取样)法、双线性插值法、双三次插值法等取代样条插值法，可以能够显示选择各插值法的处理参数的设定范围取代上述样条插值系数可设定范围。

[表1]

如以上说明那样根据本实施方式，根据光学低通滤光器的有无及滤色器的排列图案，能够切换处理B的处理参数(样条插值处理的样条插值系数)的可设定范围，使用者关于基于摄影数据32的缩小图像数据38的生成，能够任意地选择最佳的处理。

<第四实施方式>

关于第四实施方式的缩小处理例，参照图6及图10进行说明。图10是表示第四实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第三实施方式相同或类似的处理，省略详细说明。

在本实施方式中，通过摄影条件数据的有无、光学低通滤光器的有无及滤色器排列来控制缩小处理中的缩小率的参数可设定范围。

在本实施方式中，也与第三实施方式同样，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图10的步骤S41)。而且在缩小处理决定部72中，进行图像摄影数据30是否包含摄影条件数据的判别(S42)，进行光学低通滤光器(OLPF)64的有无的判别(S43)及进行所使用的滤色器(CF)是否为拜耳排列的判别(S44)这一点也与第三实施方式(参照图9(a)的S32～S34)同样。

其中，在本实施方式中，缩小处理的缩小率的参数的可选择范围(包含多个选择候补的范围)根据摄影条件数据34的有无、光学低通滤光器64的有无及使用滤色器是否为拜耳排列来决定。

例如，在判别为图像摄影数据30不包含摄影条件数据的情况下(S42为“否”)，缩小处理决定部72将缩小率的最大范围即“0～1.0”作为缩小率的可选择范围而显示于显示部22(S45d)。而且，在判别为图像摄影数据30包含摄影条件数据(S42为“是”)且未使用光学低通滤光器64(S43为“否”)的情况下，若直接缩小，则缩小图像产生莫尔条纹等图像劣化的可能性高，缩小处理决定部72将“范围0.5～1.0”作为缩小率的可选择范围而显示于显示部22(S45c)。而且，在利用保持具有图4(b)及图5所示的排列图案的滤色器的摄像元件拍摄的情况下，与拜耳排列相比能够获取高频成分的数据，但是在直接进行缩小处理的情况下，在缩小图像产生莫尔条纹等图像劣化的可能性高。因此，在判别为使用光学低通滤光器64(S43为“是”)且滤色器的排列不是拜耳排列(S44为“否”)的情况下，缩小处理决定部72将“范围0.3～1.0”作为缩小率的可选择范围而显示于显示部22(S45b)。另一方面，在判别为滤色器的排列是拜耳排列(S44为“是”)的情况下，缩小处理决定部72将“0.2～0.9”作为缩小率的可选择范围而显示于显示部22(S45a)。

使用者能够经由选择指示部78从如此决定的可选择范围所包含的选择候补之中选择任意的缩小率。当经由选择指示部78进行缩小率的选择输入时(S46)，缩小处理部76基于由该使用者选择输入的缩小率来进行缩小处理(S47)。

另外，图10所示的缩小率可设定范围的数值只不过是一例，可以适当通过其他数值来规定样条插值系数可设定范围，例如也可以通过数值的大小关系不变的其他值来规定各个情况的缩小率可设定范围。

如以上说明那样，根据本实施方式，根据光学低通滤光器的有无及滤色器的排列图案，能够切换缩小处理的缩小率的可设定范围，使用者关于基于摄影数据32的缩小图像数据38的生成能够任意地选择最佳的处理。

<第五实施方式>

关于第五实施方式的缩小处理例，参照图6及图11进行说明。图11是表示第五实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第二实施方式相同或类似的处理，省略详细说明。

本实施方式能够适用于例如在传感器互换型相机中进行图像缩小处理的情况，例如可设想能够至少从第一透镜单元(第一摄像部)及第二透镜单元(第二摄像部)之中选择互换图3的包含透镜部48～摄像元件52的透镜单元(摄像部)的摄像单元等。

在上述的第二实施方式(参照图8(a))中，在将缩小关联处理(处理A、低通滤光处理)执行与否暂时显示于显示部22之后，基于使用者的选择确定(图8(a))，决定了处理A执行与否。相对于此，在本实施方式中，不将缩小关联处理(处理A、低通滤光处理)执行与否显示于显示部22，无论使用者的选择确定如何，都强制性地执行缩小关联处理(处理A、低通滤光处理)。

即，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图11的步骤S51)，在缩小处理决定部72中判别为图像摄影数据30包含摄影条件数据(S52为“是”)、使用光学低通滤光器64(S53为“是”)且所使用的滤色器是拜耳排列(S54为“是”)的情况下，以不进行处理A的状态在缩小处理部76中进行图像缩小处理(S56)。

另一方面，在判别为图像摄影数据30不包含摄影条件数据(S52为“否”)或没有光学低通滤光器64(S53为“否”)或所使用的滤色器不是拜耳排列(S54为“否”)的情况下，缩小关联处理部74强制性地执行处理A(低通滤光处理等)(S55)，然后，在缩小处理部76中执行缩小处理(S56)。

<第六实施方式>

关于第六实施方式的缩小处理例，参照图6及图12进行说明。图12是表示第六实施方式的缩小处理的流程的流程图。

在本实施方式中，关于与上述的第三实施方式相同或类似的处理，省略详细说明。

在上述的第三实施方式(参照图9(a))中，在将缩小处理的处理(处理B、样条插值处理)的参数范围暂时显示于显示部22之后，基于使用者的选择确定(图9(a)的S36)，执行了处理B。相对于此，在本实施方式中，不将缩小处理的处理(处理B、样条插值处理)的参数显示于显示部22，无论使用者的选择确定如何，都强制性地规定缩小处理的处理(处理B、样条插值处理)的参数，执行处理B(缩小处理)。

即，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图12的步骤S61)，在判别为图像摄影数据30不包含摄影条件数据的情况下(S62为“否”)，缩小处理决定部72采用决定“σ’”作为处理B的处理参数(S65d)。而且，在判别为图像摄影数据30包含摄影条件数据(S62为“是”)且未使用光学低通滤光器64(S63为“否”)的情况下，缩小处理决定部72采用决定“γ’”作为处理B的处理参数(S65c)。而且，在判别为使用光学低通滤光器64(S63为“是”)且滤色器的排列不是拜耳排列(S64为“否”)的情况下，缩小处理决定部72采用决定“β’”作为处理B的处理参数(S65b)。另一方面，在判别为滤色器的排列不是拜耳排列(S64为“否”)的情况下，缩小处理决定部72采用决定“α’”作为处理B的处理参数(S65a)。

基于如此采用决定的处理参数α’、β’、γ’、σ’，缩小处理部76进行处理B(缩小处理)(S66)。

<第七实施方式>

关于第七实施方式的缩小处理例，参照图6及图13进行说明。图13是表示第七实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第六实施方式相同或类似的处理，省略详细说明。

在本实施方式中，涉及设想三种以上所使用的滤色器的排列图案的情况下的缩小处理。

即，当图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入时，在数据获取部70中进行摄影条件数据34的获取(图13的步骤S71)，在判别为图像摄影数据30不包含摄影条件数据的情况下(S72为“否”)，缩小处理决定部72决定处理D的执行(S75d)。而且，在判别为图像摄影数据30包含摄影条件数据(S72为“是”)且未使用光学低通滤光器64(S73为“否”)的情况下，缩小处理决定部72决定处理D的执行(S75c)。

并且，在判别为使用光学低通滤光器64(S73为“是”)且滤色器的排列图案为A图案(S74a为“是”)的情况下，缩小处理决定部72决定处理A的执行(S75a)。另一方面，在判别为滤色器的排列图案不是A图案(S74a为“否”)而是B图案(S74b为“是”)的情况下，缩小处理决定部72决定处理B的执行(S75b)。而且，在判别为滤色器的排列图案不是B图案(S74b为“否”)而是C图案(S74c为“是”)的情况下，缩小处理决定部72决定处理C的执行(S75c)。并且，在判别为滤色器的排列图案也不是C图案(S74c为“否”)的情况下，缩小处理决定部72决定处理D的执行(S75d)。

基于如此决定的处理A、处理B、处理C、处理D，在缩小关联处理部74及缩小处理部76中进行处理(S76)。另外，这些处理A、处理B、处理C、处理D可以是缩小关联处理部74的缩小关联处理，也可以是缩小处理部76的缩小处理。在处理A、处理B、处理C、处理D为缩小关联处理部74的缩小关联处理的情况下，能够适当切换缩小处理的前处理，例如在低通滤光处理的截止频率可以相对于处理A、处理B、处理C及处理D分别规定。而且，处理A、处理B、处理C及处理D可以是分别规定缩小处理部76的缩小处理的插值系数(样条插值系数等)或缩小率的处理。

<第八实施方式>

关于第八实施方式的缩小处理例，参照图6及图14进行说明。图14是表示第八实施方式的缩小处理的流程的流程图。

在本实施方式中，对于与上述的第一实施方式相同或类似的处理，省略详细说明。

在本实施方式中，涉及由多个摄像器件(在本例中为摄像器件1及摄像器件2)生成的图像摄影数据30向图像缩小处理部16输入的情况下的缩小处理。

即，在本实施方式中，也与第一实施方式同样，图像摄影数据(没有缩小图像数据)30向图像缩小处理部16输入，但从摄像器件1及摄像器件2分别向图像缩小处理部16传送图像摄影数据30。

数据获取部70从摄像器件1的图像摄影数据30获取摄影条件数据34(图14的步骤S81)，而且从摄像器件2的图像摄影数据30获取摄影条件数据34(S82)。在缩小处理决定部72，在进行图像摄影数据30是否包含摄影条件数据的判别、光学低通滤光器(OLPF)64的有无的判别及所使用的滤色器(CF)是否为拜耳排列的判别这一点与上述的第一实施方式同样(图7(a)的S12～S14)。

并且，缩小处理决定部72以在由摄像器件1摄像生成的图像摄影数据与由摄像器件2摄像生成的图像摄影数据之间使缩小处理后的画质包含于预定的容许范围的方式，判别处理C(缩小关联处理执行与否、缩小关联处理的处理参数及缩小处理的处理参数中的至少任一个)。

在此所说的“缩小处理后的缩小图像的画质包含于预定的容许范围”是指通过缩小处理获得的图像的画质收纳于预定的容许范围内的范围，例如，是指成为缩小图像的图像劣化(莫尔条纹等)的要因的各种参数处于预定的容许范围内的情况。作为这样的“缩小图像的画质”，可列举空间频率或彩度量等。例如，为了进一步防止对本来具有灰色的被摄体的图像附加颜色的现象即彩色莫尔条纹，采用彩度量作为缩小图像的画质，以使彩度量收纳在预定的容许范围内的方式对应各摄像部(摄像器件)来决定缩小关联处理的有无、缩小关联处理的参数、缩小处理的参数。具体而言，能够预先对应各多个摄像部拍摄获取分辨率表，关于该缩小图像来评价画质，以使该评价结果包含于预定的容许范围的方式预先对应各摄像部决定缩小率、处理参数等。另外，在此所说的“预定的容许范围”没有特别限定，可以采用与各种要求对应的适当的范围作为“预定的容许范围”，例如能够根据摄像元件、透镜的特性、图像处理特性等来决定“预定的容许范围”。

即，本实施方式的缩小处理决定部72基于数据获取部70的摄影条件数据的获取结果而判别设定(决定)对由摄像器件1生成的图像(摄影数据32)的处理C的处理参数α’，缩小关联处理部74对由摄像器件1生成的图像以处理参数α’执行处理C(S83)。

而且，缩小处理决定部72基于数据获取部70的获取结果来判别由摄像器件2生成的图像(摄影数据32)的摄影条件数据34与由摄像器件1生成的图像(摄影数据32)的摄影条件数据34是否相同(S84)。更具体而言，关于作为摄影条件数据34而采用的光学低通滤光器的有无及滤色器的排列是否相同，缩小处理决定部72判别由摄像器件1生成的图像与由摄像器件2生成的图像是否相同。

在判别为由摄像器件1生成的图像与由摄像器件2生成的图像的摄影条件数据相同的情况下(S84为“是”)，缩小处理决定部72将对由摄像器件2生成的图像的处理C的处理参数设定为与由摄像器件1生成的图像相同的“α’”，缩小关联处理部74对由摄像器件2生成的图像以处理参数α’执行处理C(S85a)。

另一方面，在判别为由摄像器件1生成的图像与由摄像器件2生成的图像的摄影条件数据不相同的情况下(S84为“否”)，缩小处理决定部72将对由摄像器件2生成的图像的处理C的处理参数判别设定为与由摄像器件1生成的图像不同的“β’”，缩小关联处理部74对由摄像器件2生成的图像以处理参数β’执行处理C(S85b)。另外，关于处理参数β’的设定，通过与上述的处理参数α’同样的基准及步骤进行。

如此实施了处理C的由摄像器件1生成的图像和由摄像器件2生成的图像之后分别在缩小处理部76进行图像缩小处理(S86、S87)。

另外，在此所说的处理C可以是缩小关联处理(低通滤光处理等)，也可以是缩小处理部76的缩小处理用的处理参数(插值系数、缩小率等)的单一的设定处理。

如以上说明的那样根据本实施方式，在根据由多个不同的摄像器件摄像生成的摄影数据32生成缩小图像数据的情况下，即使从任一摄像器件获取图像摄影数据30，根据光学低通滤光器的有无及滤色器的排列图案，也能够使缩小图像的画质同等。

另外，多个摄像器件(摄像器件1、摄像器件2)可以向同一装置装入，也可以向不同装置装入。

在向同一装置装入多个摄像器件的情况下，例如能够具有图1(b)的第一摄像部12A及第二摄像部12B那样的结构。另一方面，在向不同装置装入多个摄像器件的情况下，例如也可以形成为存在多台与图1(c)的计算机11连接的摄像单元10”那样的结构，即使在不同的摄像单元10”与计算机11连接的情况下，也能够将缩小图像的画质保持为相同程度，因此能够减轻使用者感到的不适感等不良情况。

以上，说明了本发明的优选的实施方式，但是本发明没有限定为上述的实施方式，对于其他方式也能够适当应用。

例如，在上述实施方式中说明了数码相机(参照图3)，但摄影装置的结构没有限定于此。作为能够适用本发明的其他摄影装置(摄像装置)，可以设为例如内置型或外带型的PC用相机或者以下说明那样的具有摄影功能的便携终端装置。而且，对于使计算机执行上述的各处理步骤的程序，也能够适用本发明。

作为本发明的摄影装置的一实施方式的便携终端装置，例如，可列举便携电话机或智能电话、PDA(PersonalDigitalAssistants)、便携型游戏机。以下，列举智能电话为例，参照附图来说明详情。

图15是表示作为本发明的摄影装置的一实施方式的智能电话101的外观的图。图15所示的智能电话101具有平板状的框体102，在框体102的一面上具备作为显示部的显示面板121与作为输入部的操作面板122成为一体的显示输入部120。而且，上述框体102具备扬声器131、麦克风132、操作部140、相机部141。另外，框体102的结构没有限定于此，例如，也可以采用显示部与输入部独立的结构，或采用具有折叠结构、滑动机构的结构。

图16是表示图15所示的智能电话101的结构的框图。如图16所示，作为智能电话的主要结构要素，具备无线通信部110、显示输入部120、通话部130、操作部140、相机部141、存储部150、外部输入输出部160、GPS(GlobalPositioningSystem)接收部170、运动传感器部180、电源部190、主控制部100。而且，作为智能电话101的主要功能，具备进行经由基地站装置BS和移动通信网NW的移动无线通信的无线通信功能。

无线通信部110按照主控制部100的指示，对由移动通信网NW收容的基地站装置BS进行无线通信。使用上述无线通信，进行声音数据、图像数据等各种文件数据、电子邮件数据等的收发、Web数据、流数据等的接收。

显示输入部120是通过主控制部100的控制来显示图像(静止图像及活动图像)、文字信息等而视觉性地向使用者传递信息并检测对显示出的信息的使用者操作的所谓触摸面板，具备显示面板121和操作面板122。

显示面板121使用LCD(LiquidCrystalDisplay)、OELD(OrganicElectro-LuminescenceDisplay)等作为显示器件。操作面板122是载置成能够视觉辨认在显示面板121的显示面上显示的图像并检测通过使用者的手指或尖笔而操作的一个或多个坐标的器件。当通过使用者的手指或尖笔来操作上述器件时，将由于操作而产生的检测信号向主控制部100输出。接着，主控制部100基于接收到的检测信号，检测显示面板121上的操作位置(坐标)。

如图15所示，作为本发明的摄影装置的一实施方式所例示的智能电话101的显示面板121和操作面板122成为一体而构成显示输入部120，但操作面板122为将显示面板121完全覆盖的配置。在采用了上述的配置的情况下，操作面板122对于显示面板121外的区域，也可以具备检测使用者操作的功能。换言之，操作面板122可以具备关于与显示面板121重叠的重叠部分的检测区域(以下，称为显示区域)和关于除此以外的不与显示面板121重叠的外缘部分的检测区域(以下，称为非显示区域)。

另外，显示区域的大小与显示面板121的大小可以完全一致，但两者未必非要一致。而且，操作面板122可以具备外缘部分和除此以外的内侧部分这两个感应区域。而且，外缘部分的宽度根据框体102的大小等而适当设计。此外，作为操作面板122采用的位置检测方式，可列举矩阵开关方式、电阻膜方式、表面弹性波方式、红外线方式、电磁感应方式、静电电容方式等，可以采用任一方式。

通话部130具备扬声器131、麦克风132，将通过麦克风132输入的使用者的声音转换成能够由主控制部100处理的声音数据而向主控制部100输出，或者对由无线通信部110或外部输入输出部160接收到的声音数据进行译码而从扬声器131输出。而且，如图15所示，例如，可以将扬声器131搭载于与设有显示输入部120的面相同的面，并将麦克风132搭载于框体102的侧面。

操作部140是使用了键开关等的硬键，接受来自使用者的指示。例如如图15所示，操作部140是如下的按钮式的开关：搭载于智能电话101的框体102的侧面，当利用手指等按压时成为接通，当手指离开时通过弹簧等的复原力而成为断开状态。

存储部150存储主控制部100的控制程序、控制数据、应用软件、将通信对方的名称、电话号码等建立对应关系的地址数据、所收发的电子邮件的数据、通过Web浏览器下载的Web数据、已下载的内容数据，而且暂时存储有流数据等。而且，存储部150由智能电话内置的内部存储部151和具有装卸自如的外部存储器槽的外部存储部152构成。另外，构成存储部150的各个内部存储部151和外部存储部152使用闪存类型(flashmemorytype)、硬盘类型(harddisktype)、微型多媒体卡类型(multimediacardmicrotype)、卡类型的存储器(例如，MicroSD(注册商标)存储器等)、RAM(RandomAccessMemory)、ROM(ReadOnlyMemory)等存储介质来实现。

外部输入输出部160起到与连结于智能电话101的全部外部设备的接口的作用，用于通过通信等(例如，通用串行总线(USB)、IEEE1394等)或网络(例如，互联网、无线LAN、蓝牙Bluetooth(注册商标)、RFID(RadioFrequencyIdentification)、红外线通信(InfraredDataAssociation：IrDA)(注册商标)、UWB(UltraWideband)(注册商标)、紫蜂协议(ZigBee)(注册商标)等)而直接或间接地与其他外部设备连接。

作为与智能电话101连结的外部设备，有例如有/无线头戴受话器、有/无线外部充电器、有/无线数据端口、经由卡槽而连接的存储卡(Memorycard)、SIM(SubscriberIdentityModuleCard)/UIM(UserIdentityModuleCard)卡、经由音频/影像I/O(Input/Output)端子而连接的外部音频/影像设备、无线连接的外部音频/影像设备、有/无线连接的智能电话、有/无线连接的个人计算机、有/无线连接的PDA、有/无线连接的个人计算机、耳机等。外部输入输出部能够将从这样的外部设备接受到传送的数据向智能电话101的内部的各结构要素传递，或能够将智能电话101的内部的数据向外部设备传送。

GPS接收部170按照主控制部100的指示，接收从GPS卫星ST1～STn发送的GPS信号，并执行基于接收到的多个GPS信号的测位运算处理，检测该智能电话101的由纬度、经度、高度构成的位置。GPS接收部170在能够从无线通信部110或外部输入输出部160(例如，无线LAN)获取位置信息时，也能够使用该位置信息来检测位置。

运动传感器部180例如具备三轴的加速度传感器等，按照主控制部100的指示，检测智能电话101的物理动作。通过检测智能电话101的物理动作，能检测智能电话101的动作方向、加速度。上述检测结果向主控制部100输出。

电源部190按照主控制部100的指示，向智能电话101的各部供给蓄积于蓄电池(未图示)的电力。

主控制部100具备微处理器，按照存储部150存储的控制程序、控制数据进行动作，对智能电话101的各部进行统一控制。而且，主控制部100为了通过无线通信部110进行声音通信、数据通信，而具备对通信系统的各部进行控制的移动通信控制功能和应用处理功能。

应用处理功能按照存储部150存储的应用软件使主控制部100进行动作而实现。作为应用处理功能，有例如对外部输入输出部160进行控制而与相向设备进行数据通信的红外线通信功能、进行电子邮件的收发的电子邮件功能、浏览Web页的Web浏览器功能等。

另外，主控制部100具备基于接收数据或已下载的流数据等图像数据(静止图像或活动图像的数据)而将影像显示于显示输入部120等的图像处理功能。图像处理功能是指主控制部100对上述图像数据进行译码，对上述译码结果实施图像处理，并将图像显示于显示输入部120的功能。

而且，主控制部100执行对显示面板121的显示控制、检测通过了操作部140、操作面板122的使用者操作的操作检测控制。

通过显示控制的执行，主控制部100显示用于使应用软件起动的图标、滚动条等软键，或者显示用于生成电子邮件的窗口。另外，滚动条是指用于对在显示面板121的显示区域无法收纳完全的大的图像等接受使图像的显示部分移动的指示的软键。

另外，通过操作检测控制的执行，主控制部100检测通过了操作部140的使用者操作，或者通过操作面板122接受对上述图标的操作、对上述窗口的输入栏的文字列的输入，或者接受通过了滚动条的显示图像的滚动要求。

而且，通过操作检测控制的执行，主控制部100具备判定对操作面板122的操作位置是与显示面板121重叠的重叠部分(显示区域)还是除此以外的不与显示面板121重叠的外缘部分(非显示区域)并控制操作面板122的感应区域、软键的显示位置的触摸面板控制功能。

另外，主控制部100也可以检测对操作面板122的手势操作，根据检测出的手势操作来执行预先设定的功能。手势操作不是以往的单纯的触摸操作，而是通过手指等来描绘轨迹或同时指定多个位置或者将它们组合而从多个位置对至少一个描绘轨迹的操作。

相机部141是使用CMOS(ComplementaryMetalOxideSemiconductor或CCD(Charge-CoupledDevice)等摄像元件进行电子摄影的数码相机。而且，相机部141能够通过主控制部100的控制，将通过摄像获得的图像数据转换成例如JPEG(JointPhotographiccodingExpertsGroup)等压缩后的图像数据，记录于存储部150或通过输入输出部160、无线通信部110来输出。如图15所示，在智能电话101中，相机部141搭载于与显示输入部120相同的面，但相机部141的搭载位置并不局限于此，可以搭载于显示输入部120的背面，或者可以搭载多个相机部141。另外，在搭载有多个相机部141的情况下，也可以对用于摄影的相机部141进行切换而单独拍摄，或者同时使用多个相机部141进行拍摄。

另外，相机部141可以利用于智能电话101的各种功能。例如，可以在显示面板121显示由相机部141获取的图像，或者利用相机部141的图像作为操作面板122的操作输入之一。而且，在GPS接收部170检测位置时，也可以参照来自相机部141的图像来检测位置。而且，参照来自相机部141的图像，不使用三轴的加速度传感器或者与三轴的加速度传感器并用，也能够判断智能电话101的相机部141的光轴方向，或判断当前的使用環境。当然，也可以将来自相机部141的图像在应用软件内进行利用。

此外，也可以向静止图像或活动图像的图像数据附加由GPS接收部170获取的位置信息、由麦克风132获取的声音信息(可以由主控制部等进行声音文本转换而成为文本信息)、由运动传感器部180获取的姿势信息等而记录于存储部150，或通过输入输出部160、无线通信部110输出。

另外，在上述的智能电话101中，相机部141作为图1的摄像部(12、12A、12B)发挥功能，主控制部100作为图1的数字图像处理部(14、14A、14B)及图像缩小处理部16发挥功能，操作部140及操作面板122作为使用者I/F17发挥功能，主控制部100及外部输入输出部160作为图1的输入输出控制部18发挥功能，存储部150作为图1的存储部20发挥功能，显示面板121作为图1的显示部22发挥功能。

附图标记说明

10…摄像单元，11…计算机，12…摄像部，14…数字图像处理部，16…图像缩小处理部，17…使用者I/F，18…输入输出控制部，20…存储部，22…显示部，24…信号输入输出I/F，30…图像摄影数据，32…摄影数据，34…摄影条件数据，36…图像摄影数据，38…缩小图像数据，40…摄像装置，42…CPU，44…操作部，46…器件控制部，48…透镜部，50…快门，52…摄像元件，54…A/D转换器，55…显示部，56…存储器部，58…图像处理部，60…编码器，62…驱动器，64…光学低通滤光器，70…数据获取部，72…缩小处理决定部，74…缩小处理关联处理部，76…缩小处理部，78…选择指示部，100…主控制部，101…智能电话，102…框体，110…无线通信部，120…显示输入部，121…显示面板，122…操作面板，130…通话部，131…扬声器，132…麦克风，140…操作部，141…相机部，150…存储部，151…内部存储部，152…外部存储部，160…外部输入输出部，170…GPS接收部，180…运动传感器部，190…电源部

Claims (19)

1.一种图像处理装置，被输入包含摄像数据的图像摄影数据，所述图像处理装置具备：

数据获取单元，判别所输入的所述图像摄影数据是否包含摄影条件数据，且在判别为所输入的所述图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及

缩小处理决定单元，基于所述数据获取单元的摄影条件数据的获取结果，决定与根据所述摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否及所述缩小关联处理的处理参数，进而决定所述缩小处理的处理参数，

所述摄影条件数据包含与所述摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息及与所述摄像数据的摄像生成时的光学低通滤光器的有无相关的信息，

所述缩小处理决定单元基于所述摄影条件数据的获取结果，在通过所述滤色器的排列在由所述摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况下，决定执行低通滤光处理作为所述缩小关联处理。

2.根据权利要求1所述的图像处理装置，其中，

通过所述滤色器的排列在由所述摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况是判断为所述摄像数据含有较多高频成分的可能性高的情况。

3.根据权利要求1或2所述的图像处理装置，其中，

所述缩小处理的处理参数是所述缩小处理中的缩小率。

4.根据权利要求1或2所述的图像处理装置，其中，

所述缩小处理的处理参数是所述缩小处理中的插值处理的处理参数。

5.根据权利要求4所述的图像处理装置，其中，

所述插值处理基于样条插值处理法，

所述插值处理的处理参数是样条插值系数。

6.根据权利要求1或2所述的图像处理装置，其中，

被输入包含由多个摄像部摄像生成的所述摄像数据的所述图像摄影数据，所述多个摄像部至少包括第一摄像部及第二摄像部，

所述缩小处理决定单元以在由所述第一摄像部摄像生成的所述图像摄影数据与由所述第二摄像部摄像生成的所述图像摄影数据之间使所述缩小处理后的所述缩小图像数据的画质包含于预定的容许范围的方式，来决定所述缩小关联处理执行与否、所述缩小关联处理的处理参数及所述缩小处理的处理参数中的至少任一个。

7.根据权利要求1或2所述的图像处理装置，其中，

具备根据所述缩小处理决定单元的决定结果来进行所述缩小关联处理的缩小关联处理单元。

8.根据权利要求1或2所述的图像处理装置，其中，

具备根据所述缩小处理决定单元的决定结果来进行所述缩小处理的缩小处理单元。

9.根据权利要求1或2所述的图像处理装置，其中，

还具备对所述缩小处理决定单元的决定结果进行显示的显示单元。

10.根据权利要求9所述的图像处理装置，其中，

所述显示单元能够选择地显示关于所述缩小关联处理执行与否的所述缩小处理决定单元的决定结果的确定，

所述图像处理装置还具备接受与所述缩小处理决定单元的决定结果的确定相关的使用者的选择的选择单元，

所述缩小处理决定单元根据经由所述选择单元接受到的选择结果，来确定所述缩小关联处理执行与否。

11.根据权利要求9所述的图像处理装置，其中，

由所述缩小处理决定单元决定的所述缩小关联处理的处理参数及所述缩小处理的处理参数包含多个选择候补，

所述显示单元从所述多个选择候补之中能够选择地显示所述缩小关联处理的处理参数及所述缩小处理的处理参数，

所述图像处理装置还具备接受使用者从所述多个选择候补之中的选择的选择单元，

所述缩小处理决定单元根据经由所述选择单元接受到的选择结果，来确定所述缩小关联处理的处理参数及所述缩小处理的处理参数。

12.根据权利要求9所述的图像处理装置，其中，

具备根据确定出的所述缩小关联处理执行与否及所述缩小关联处理的处理参数而进行所述缩小关联处理的缩小关联处理单元。

13.根据权利要求9所述的图像处理装置，其中，

具备根据确定出的所述缩小处理的处理参数而进行所述缩小处理的缩小处理单元。

14.一种摄像装置，具备：

摄像单元，具有对包含摄像数据的图像摄影数据进行摄像生成的摄像部；及

权利要求1或2所述的图像处理装置。

15.一种摄像装置，具备：

摄像单元，具有至少包括第一摄像部及第二摄像部的多个摄像部；及

权利要求6所述的图像处理装置。

16.一种摄像装置，具备：

摄像单元，具有对包含摄像数据的图像摄影数据进行摄像生成的摄像部，摄像部能够从至少包括第一摄像部及第二摄像部的多个摄像部之中选择互换；及

权利要求6所述的图像处理装置。

17.一种计算机，具备权利要求1或2所述的图像处理装置。

18.一种图像处理方法，具备：

数据获取步骤，判别包含摄像数据的图像摄影数据是否包含摄影条件数据，且在判别为所输入的所述图像摄影数据包含摄影条件数据的情况下，获取摄影条件数据的内容；及

缩小处理决定步骤，基于所述摄影条件数据的获取结果，决定与根据所述摄像数据生成缩小图像数据的缩小处理关联的缩小关联处理执行与否及所述缩小关联处理的处理参数，进而决定所述缩小处理的处理参数，

所述摄影条件数据包含与所述摄像数据的摄像生成时所用的摄像部的滤色器的排列相关的信息及与所述摄像数据的摄像生成时的光学低通滤光器的有无相关的信息，

所述缩小处理决定步骤基于所述摄影条件数据的获取结果，在通过所述滤色器的排列在由所述摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况下，决定执行低通滤光处理作为所述缩小关联处理。

19.根据权利要求18所述的图像处理方法，其中，

通过所述滤色器的排列在由所述摄像数据表示的摄影图像中抑制了莫尔条纹而在对该摄像数据进行了缩小处理的缩小图像数据中产生莫尔条纹的情况是判断为所述摄像数据含有较多高频成分的可能性高的情况。