CN101626449A - 图像处理装置及图像处理方法 - Google Patents

Abstract

本发明涉及图像处理装置及图像处理方法。为防止图像打印物和/或图像浏览在视觉上单调，如果判定在相册的特定区域中排布的类似性判定目标图像之间存在类似性，则对这些类似性判定目标图像的双方或一方进行图像处理，以排除这些类似性判定目标图像之间的类似性。

Description

图像处理装置及图像处理方法

技术领域

本发明涉及一种图像处理装置及图像处理方法。

背景技术

近年来，使用诸如数码相机的数字化装置能够很容易地拍摄图像。将拍摄的图像打印作为相册并分发该相册也很普遍。

由于图像拍摄容易，所以会拍摄许多类似的图像。因此，当创建图像打印介质或图像浏览(例如，相册或图像列表)以使用户能够观看所拍摄的图像时，在该图像打印介质或图像浏览中经常排布有类似的照片。因此，图像打印介质或图像浏览在视觉上单调。日本专利特开第2007-019894号公报公开了一种方法，该方法将类似的图像排布在同一页中相互远离的位置，从而防止该页在视觉上单调。

然而，如果使用上述方法来改变图像的排布，则这些以用户期望的顺序排布的图像会以用户不期望的顺序重新排布。

发明内容

本发明提供一种能够防止图像打印物和/或图像浏览在视觉上单调的图像处理装置及图像处理方法。

根据本发明的实施例，提供一种图像处理装置，所述图像处理装置包括：判定单元，其被配置为判定在相册的特定区域中排布的图像之间是否存在类似性；以及图像处理单元，其被配置为对所述图像的双方或一方进行图像处理，以排除由所述判定单元判定出的所述图像之间的所述类似性。

根据本发明的实施例，提供一种图像处理装置的图像处理方法，所述图像处理方法包括：判定在相册的特定区域中排布的图像之间是否存在类似性；以及对所述图像中的双方或一方进行图像处理，以排除所述图像之间的所述类似性。

根据本发明的实施例，提供一种存储计算机可执行指令的计算机可读存储介质，所述计算机可执行指令用于：判定在相册的特定区域中排布的图像之间是否存在类似性；以及对所述图像的双方或一方进行图像处理，以排除所述图像之间的类似性。

根据本发明的实施例，能够防止图像打印物和/或图像浏览在视觉上单调。

从以下参照附图对示例性实施例的说明中，本发明的其他特征将变得明确。

附图说明

图1是例示作为图像处理装置的示例的图像布局装置的示例性功能结构的图。

图2是例示图像布局装置的示例性硬件结构的图。

图3是例示以期望的顺序排布图像的示例性图像布局的图。

图4是例示由图像布局装置进行的处理的示例的流程图。

图5是例示根据第一实施例的类似性判定/排除处理的详情的流程图。

图6是例示类似性排除处理的详情的流程图。

图7是例示经受了类似性排除处理的示例性图像布局的图。

图8是例示根据第一实施例的类似性排除图像控制处理的详情的流程图。

图9是例示以期望的顺序对顺序输入的图像进行排布的示例性图像布局的图。

图10是例示根据第二实施例的类似性判定/排除处理的详情的流程图。

图11是例示类似性排除处理的详情的流程图。

图12是例示经受了类似性排除处理的图像布局的图。

图13是例示根据第三实施例的类似性判定/排除处理的详情的流程图。

图14是例示类似性排除处理的详情的流程图。

图15是例示根据第二实施例的类似性排除图像控制处理的详情的流程图。

具体实施方式

将参照附图对本发明的实施例进行说明。

图1是例示作为图像处理装置的示例的图像布局装置的示例性功能结构的图。图像布局装置100包括类似性判定单元101、类似性排除单元102和类似性排除图像控制单元103。类似性判定单元101基于输入图像的顺序以及这些图像的位置来设置要相互比较的图像(类似性判定目标图像)，并判定这些图像之间是否存在类似性。类似性排除单元102对由类似性判定单元101判定为相互类似的图像的双方或一方进行处理，以使得这些图像不再相互类似。类似性排除图像控制单元103对由类似性排除单元102改变的图像的部分进行控制处理。

图2是例示图像布局装置的示例性硬件结构的图。CPU 201进行用于各种处理的计算、逻辑判断等，并控制连接到总线206的各种部件。图像布局装置包括存储器，所述存储器包括程序存储器202和数据存储器203。程序存储器202存储程序。如果CPU 201根据存储在程序存储器202中的程序进行处理，则上述功能和与下述的流程图相对应的处理得以执行。

程序存储器202可以是ROM或将程序从外部存储装置等载入到其中的RAM。网络I/F 204经由网络205与其它装置通信。图像数据可以经由网络从其它装置输入到图像布局装置，也可以经由网络输出到其它装置。输入单元207用于输入信息(数据)，并且可以是键盘、鼠标或对笔或手指施加的压力敏感的输入单元。

图3是例示以期望的顺序排布图像的示例性图像布局300的图。在图像布局300中，图像301和图像303纵向排布在一页上，而图像302和图像304纵向排布在另一页上。图像布局不限于图3所示的图像布局。如果以输入图像的顺序排布这些图像，则在各页中包含的图像的数量可以不是两个并可以逐页不同。输入图像可以是静态图像或动态图像。如果输入了动态图像，则图像布局装置100可以显示这些动态图像、从这些动态图像中剪切出来作为静态图像的帧，或表示这些动态图像的图像。

图4是例示由图像布局装置100进行的处理的示例的流程图。在步骤S401中，类似性判定单元101判定输入图像之间是否存在类似性，类似性排除单元102进行排除类似性的处理。在步骤S402中，类似性排除图像控制单元103进行用于控制排除了类似性的图像的处理。

以下，参照图5描述在步骤S401中进行的类似性判定/排除处理。图5是例示在步骤S401中进行的类似性判定/排除处理的详情的流程图(第一流程图)。在步骤S501中，类似性判定单元101从排布的图像中选择相互邻近的图像作为要相互比较的图像。在图3所示的图像布局中，类似性判定单元101选择图像301和302作为一组、图像301和303作为一组、图像302和304作为一组、图像303和304作为一组。

在步骤S502中，类似性判定单元101判定在所选择的图像组中是否存在还要对其进行类似性判定的图像组。如果在步骤S502中类似性判定单元101判定在所选择的图像组中存在还要对其进行类似性判定的图像组，则处理进入步骤S503。如果在步骤S502中类似性判定单元101判定在所选择的图像组中不存在还要对其进行类似性判定的图像组，则处理进入步骤S504。

在步骤S503中，类似性判定单元101将包括在所选择的图像组中的两个图像进行比较，以判定在这两个图像的类似位置是否存在具有类似大小的同一对象的图像，并将这两个图像(被判定为在类似位置包含具有类似大小的同一对象的图像)构成的组存储在数据存储器203中。随后，处理返回步骤S502。类似性判定单元101使用对象检测技术和对象识别技术来识别对象。具体地，如果对象是人，则类似性判定单元101可以检测并识别人脸。例如，类似性判定单元101从图像中检测对象，识别检测到的对象，并指定图像中所识别的对象的位置、大小和类型(例如，建筑或人)。类似性判定单元101将包含在类似性判定目标图像中的两个对象进行比较，并当类似性判定目标图像中的两个对象的位置之间的误差处于预定误差范围内时，判定这两个对象存在于类似性判定目标图像中的类似位置。此外，类似性判定单元101将包含在类似性判定目标图像中的两个对象进行比较，并当类似性判定目标图像中的两个对象的大小之间的误差处于预定误差范围内时，判定这两个对象具有类似的大小。

例如，类似性判定单元101判定在图3中的图像301和图像302之间存在类似性，并且在图像301和图像303之间存在类似性，因为在这些图像的左侧是具有相同大小(即，误差范围内的类似大小)的相同房子的图像。在步骤S504中，类似性排除单元102对在步骤S503中存储在数据存储器203中的图像组进行类似性排除处理。换句话说，可以将关于房子的信息从其中一个图像(301)中删除，因为该信息已经存在于相关联的另一图像(302)中。

接下来，参照图6所示的流程图来描述在步骤S504中进行的类似性排除处理的详情。图6是例示在步骤S504中进行的类似性排除处理的详情的流程图。在步骤S601中，类似性排除单元102对存储在数据存储器203中的各个图像组中所包含的任一图像进行修剪，以使得包含在该图像中的对象位于中心，由此完成类似性排除处理。作为位于中心的对象，类似性排除单元102优先选择被判定为与包含在另一图像中的对象相类似的对象以外的对象。

如果同一图像重复出现在相互之间检测到类似性的多个图像组中，则类似性排除单元102可以优先处理该图像。在第一实施例中，为了改变图像的状态，类似性排除单元102修剪图像以使得图像中包含的对象位于中心。然而，如果能够实现以下状态：在图像组中包含的图像的类似位置不存在具有类似大小的同一对象的图像，则可以对其中任一图像进行诸如模糊或图像倒置的图像处理。如果在图像组中包含的图像是动态图像，则类似性排除单元102可以改变所显示的动态图像的帧中的任一帧。即，类似性排除单元102可以暂时变换所显示的动态图像的帧中的任一帧。

在第一实施例中，类似性排除单元102对已相互比较的图像中的任意一个进行图像处理。然而，如果能实现以下状态：在进行比较的图像的类似位置不存在具有类似大小的同一对象的图像，则类似性排除单元102可以对两个图像都进行图像处理。为了在经受了图像处理的图像与未经受图像处理的图像之间进行区分，类似性排除单元102可以通过用框包围经受了图像处理的图像来突出该图像。例如，在步骤S601中，类似性排除单元102优先对图像301进行图像处理，该图像301重复出现于：在步骤S503中之间检测到类似性的图像301和图像302的组中以及在步骤S503中之间检测到类似性的图像301和图像303的组中。在第一实施例中，类似性排除单元102修剪图像301，以使得图像301中包含的人位于中心。

图7是例示经受了类似性排除处理的示例性图像布局700的图。在图像布局700中包含的图像701、702、703和704分别与图3所示的图像301、302、303和304相对应。通过对图像301进行修剪以使得图像301中包含的人位于中心，来获得图像701。滑块705和706被配置为显示作为放大图像的图像701的当前显示位置，并从输入单元207接收显示位置改变指令。放大按钮707和缩小按钮708被配置为接收改变图像701的缩放比例的指令，以分别允许用户放大和缩小图像701。

接下来，将参照图8所示的流程图来描述在步骤S402中进行的类似性排除图像控制处理的详情。图8是例示在步骤S402中进行的类似性排除图像控制处理的详情的流程图(第一流程图)。在步骤S801中，类似性排除图像控制单元103进入显示图像处理控制单元的图像控制模式，所述图像处理控制单元用于控制针对在类似性排除处理中经受了图像处理的图像的图像处理。所述图像处理控制单元与滑块705和706、放大按钮707以及缩小按钮708相对应。

在步骤S802中，如果类似性排除图像控制单元103接收到图像控制模式终止指令，则类似性排除图像控制处理结束。另一方面，在步骤S802中，如果类似性排除图像控制单元103未接收到图像控制模式终止指令，则处理进入步骤S803。在步骤S803中，类似性排除图像控制单元103从输入单元207接收由图像处理控制单元输入的指令，并更新图像的显示。随后，处理返回到步骤S802。在图7所示的示例中，类似性排除图像控制单元103接收由滑块705和706输入的图像位置改变指令以及由放大按钮707或缩小按钮708输入的图像缩放比例改变指令，并改变图像的位置和缩放比例。

因此，根据第一实施例，通过判定图像间的类似性、对图像的双方或一方进行处理并排除图像间的类似性，能够防止图像打印物和/或图像浏览在视觉上单调。此外，根据第一实施例，能够通过显示经受了图像处理的图像并允许用户改变所述图像，来提供用户期望的图像打印物和/或图像浏览。

以下将描述本发明的第二实施例。图9是例示以期望的顺序对顺序输入的图像进行排布的示例性图像布局900的图。在根据第二实施例的图像布局900中包含的图像901、902、903和904排布在模板上。如果以输入这些图像的顺序排布这些图像，则这些图像可以从页的顶部依次排布，或者这些图像的排布顺序可以由模板来确定。

除了在步骤S401中进行的类似性判定/排除处理以外，根据第二实施例的图像布局装置进行的处理与图4所示的根据第一实施例的图像布局装置进行的处理相同。以下参照图10所示的流程图来描述在步骤S401中进行的类似性判定/排除处理的详情。图10是例示根据第二实施例的在步骤S401中进行的类似性判定/排除处理的详情的流程图(第二流程图)。在步骤S1001中，类似性判定单元101选择包含在一页或跨页中的主要图像和非主要图像的图像作为要相互比较的图像。例如，类似性判定单元101获取(或选择)在排布有图像的一页或跨页中包含的不同显示大小的图像作为要相互比较的图像。

在图9所示的图像布局中，类似性判定单元101选择图像901作为主要图像，选择图像902、903和904作为要与图像901进行比较的图像。类似性判定单元101不仅可以将不同显示大小的图像相互比较，而且可以将具有不同属性的图像、用户指定的图像或由模板预先指定的图像相互比较。

在步骤S1002中，类似性判定单元101判定在所选择的图像组中是否存在还要对其进行类似性判定的图像组。如果在步骤S1002中判定存在还要对其进行类似性判定的图像组，则处理进入步骤S1003。如果在步骤S1002中判定不存在还要对其进行类似性判定的图像组，则处理进入步骤S1004。在步骤S1003中，类似性判定单元101将各个所选择的图像组中包含的图像相互比较。作为比较的结果，如果在所比较的图像的相对类似的位置存在具有类似大小的同一对象的图像，则类似性判定单元101将这些图像构成的组存储在数据存储器203中。随后，处理返回到步骤S1002。

在图9所示的图像布局中，由于在图像901和图像903的右侧存在具有类似大小的同一人的图像，因此判定图像901和图像903之间存在类似性。由于在图像901和图像904的左侧存在具有类似大小的同一房子的图像，因此判定图像901和图像904之间存在类似性。在步骤S1004中，类似性排除单元102对在步骤S1003中存储在数据存储器203中的图像组进行类似性排除处理。

接下来，参照图11所示的流程图来描述在步骤S1004中进行的类似性排除处理。图11是例示在步骤S1004中进行的类似排除处理的详情的流程图。在步骤S1101中，类似性排除单元102从存储在数据存储器203中的图像组中排除在类似性判定时被判定为包含作为同一对象的同一人的图像组。随后，处理进入步骤S1102。

在本实施例中，将描述以下这种情况：类似性排除单元102从存储在数据存储器203中的图像组中排除包含作为同一对象的同一人的所有图像组。然而，类似性排除单元102可以从存储在数据存储器203中的图像组中仅排除包含预先确定的特定人的图像组。由于在步骤S1003中被判定为相互类似的图像901和图像903包含作为同一对象的同一人，因此从存储在数据存储器203中的图像组中排除由图像901和图像903构成的组。另一方面，由于在步骤S1003中被判定为相互类似的图像901和图像904具有作为同一对象的同一房子，因此不将图像901和904构成的组从存储在数据存储器203中的图像组中排除。换句话说，根据先前图像的内容，图像中对象的重复可以区别对待。

如同根据第一实施例的图6所示的步骤S601，在步骤S1102中，类似性排除单元102对存储在数据存储器203中的各个图像组中所包含的任一图像进行修剪，以使得在该图像中包含的对象位于中心。随后，类似性排除处理结束。在修剪时，类似性排除单元102优先对显示大小相对较小的图像进行图像处理。因此，在步骤S1102中，类似性排除单元102对包含在图像901和图像904构成的组中的显示大小相对较小的图像904进行图像处理。

图像12是例示经受了类似性排除处理的图像布局1200的图。图像布局1200中包含的图像1201、1202、1203和1204分别与图9所示的图像901、902、903和904相对应。通过对图像904进行修剪以使得作为对象的房子位于中心，来获得图像1204。滑块1205和1206被配置为显示作为放大图像的图像1204的当前显示位置，并从输入单元207接收显示位置改变指令。放大按钮1207和缩小按钮1208被配置为接收改变图像1204的缩放比例的指令，以分别允许用户放大和缩小图像1204。

因此，根据第二实施例，使用任意模板通过判定图像间的类似性、对这些图像的双方或一方进行处理并排除图像间的类似性，能够防止图像打印物和/或图像浏览在视觉上单调。此外，根据第二实施例，通过从存储在数据存储器203中的图像组中排除被判定为包含作为同一对象的同一人的图像组，能够创建保留有作为重要对象的人的打印物和/或图像浏览。

以下描述本发明的第三实施例。除了在步骤S401中进行的类似性判定/排除处理以及在步骤S402中进行的类似性排除图像控制处理以外，根据第三实施例的图像布局装置进行的处理与图4所示的根据第一实施例的图像布局装置进行的处理相同。

参照图13所示的流程图来描述在步骤S401中进行的类似性判定/排除处理的详情。图13是例示参照第三实施例的在步骤S401中进行判定/排除处理的详情的流程图(第三流程图)。在步骤S1301中，类似性判定单元101选择按顺序输入的图像作为要相互比较的图像。作为另外一种选择，类似性判定单元101可以选择不是按顺序输入的图像或具有相同属性值的图像作为要相互比较的图像。

在步骤S1302中，类似性判定单元101判定在所选择的图像组中是否存在还要对其进行类似性判定的图像组。如果在步骤S1302中存在还要对其进行类似性判定的图像组，则处理进入步骤S1303。如果在步骤S1302中不存在还要对其进行类似性判定的图像组，则处理进入步骤S1304。在步骤S1303中，类似性判定单元101将所选择的图像组中包含的图像相互比较。如果这些图像(类似性判定目标图像)具有类似色调，则类似性判定单元101将这些图像构成的组存储在数据存储器203中。随后，处理返回到步骤S1302。例如，作为两个类似性判定目标图像的比较结果，如果这两个图像的色调间的误差处于预定的色调误差范围内，则类似性判定单元101判定这两个图像具有类似色调。在步骤S1304中，类似性排除单元102对在步骤S1303中存储在数据存储器203中的各个图像组进行类似性排除处理。

接下来，参照图14所示的流程图来描述在步骤S1304中进行的类似性排除处理的详情。图14是例示在步骤S1304中进行的类似性排除处理的详情的流程图。在步骤S1401中，类似性排除单元102对存储在数据存储器203中的各个图像组中包含的任一图像进行图像处理，以防止这些图像具有类似色调。作为另外一种选择，类似性排除单元102可以显示存储在数据存储器203中的各个图像组中所包含的具有类似色调的图像中的任一个，而不用对存储在数据存储器203中的各个图像组中所包含的任一图像进行图像处理。

接下来，参照图15所示的流程图来描述在步骤S402中进行的类似性排除图像控制处理的详情。图15是例示参照第二实施例(与如上参照图13所述的第三实施例相关联)的在步骤402中进行的类似性排除图像控制处理的详情的流程图(第二流程图)。在步骤S1501中，类似性排除图像控制单元103进入显示图像处理控制单元的图像控制模式，所述图像处理控制单元用于控制在类似性排除处理中经受了图像处理的图像的图像处理。如果在图14所示的步骤S1401中进行修剪，则类似性排除图像控制单元103显示用于接收图像显示位置改变指令的单元和用于接收图像缩放比例改变指令的单元。如果在图14所示的步骤S1401中改变图像的色调，则类似性排除图像控制单元103显示用于接收色调改变指令的单元。

在步骤S1502中，如果类似性排除图像控制单元103接收到图像控制模式终止指令，则处理结束。另一方面，在步骤S1502中，如果类似性排除图像控制单元103没有接收到图像控制模式终止指令，则处理进入步骤S1503。在步骤S1503中，类似性排除图像控制单元103从输入单元207接收由用于控制图像处理的单元输入的指令，并更新图像的显示。随后，处理返回到步骤S1502。

因此，根据第三实施例，通过基于这些图像的色调判定图像间的类似性、对这些图像的双方或一方进行处理、并排除这些图像之间的类似性，能够防止图像打印物和/或图像浏览在视觉上单调。

上述实施例的功能还可以通过如下实现。即，将记录有能够实现上述实施例的功能的软件程序代码的存储介质(或记录介质)提供给系统或装置。系统或装置的计算机(CPU或MPU)从所述存储介质中读出所述程序代码并执行所读取的程序代码。在此情况下，从存储介质中读取的程序代码本身实现上述实施例的功能。因此，本发明可以应用于记录有所述程序代码的存储介质。

在系统或装置上运行的OS(操作系统)等可以响应由系统或装置的计算机读取并执行的程序代码的指令来进行所述处理的部分或全部。

此外，可以将从存储介质中读取的程序代码写入插入在系统或装置中的功能扩展卡中或连接到系统或装置的功能扩展单元中的存储器中。在此情况下，包含在功能扩展卡或功能扩展单元中的CPU可以响应所述程序代码的指令进行部分或全部处理，以实现上述实施例的功能。

如果将本发明应用于上述存储介质，则将与上述流程图相对应的程序代码存储在存储介质(计算机可读存储介质)。

如前所述，根据上述实施例，能够防止图像打印物和/或图像浏览在视觉上单调。

虽然参照示例性实施例对本发明进行了描述，但是应当理解，本发明并不限于所公开的示例性实施例。应当对以下权利要求的范围给予最宽泛的解释，以使其涵盖所有变型、等同的结构和功能。

Claims (11)

1.一种图像处理装置，该图像处理装置包括：

判定单元，其被配置为：判定在相册的特定区域中排布的图像之间是否存在类似性；以及

图像处理单元，其被配置为：对所述图像中的至少一个进行图像处理，以排除由所述判定单元判定出的所述图像之间的所述类似性。

2.根据权利要求1所述的图像处理装置，其中，所述判定单元被配置为：将按照所输入的图像的顺序相邻的图像设置为类似性判定目标图像。

3.根据权利要求1所述的图像处理装置，其中，所述判定单元被配置为：将排布在特定位置的图像设置为类似性判定目标图像。

4.根据权利要求1到3中的任意一个所述的图像处理装置，其中，所述判定单元被配置为：在所述判定单元在所述类似性判定目标图像中的类似位置检测到具有类似大小的同一对象的情况下，判定在所述类似性判定目标图像之间存在类似性。

5.根据权利要求4所述的图像处理装置，其中，所述图像处理单元被配置为：通过对在类似位置检测到具有类似大小的所述同一对象的所述类似性判定目标图像中的至少一个进行处理，来排除所述类似性判定目标图像之间的类似性。

6.根据权利要求4或5所述的图像处理装置，其中，所述判定单元被配置为：在所述类似性判定目标图像中包含的所述同一对象是人的情况下，检测所述人的脸。

7.根据权利要求4、5或6所述的图像处理装置，其中，所述判定单元被配置为：在检测到所述同一对象的多个类似性判定目标图像组包括具有作为所述同一对象的预定特定对象的类似性判定目标图像组的情况下，从所述多个类似性判定目标图像组中排除具有所述预定特定对象的所述类似性判定目标图像组。

8.根据任一在先权利要求所述的图像处理装置，其中，所述判定单元被配置为：在所述判定单元检测到类似性判定目标图像具有类似色调的情况下，判定在所述类似性判定目标图像之间存在类似性。

9.根据权利要求8所述的图像处理装置，其中，所述图像处理单元被配置为：通过改变具有类似色调的所述类似性判定目标图像的至少一个色调，来排除所述类似性判定目标图像之间的类似性。

10.根据任一在先权利要求所述的图像处理装置，其中，所述图像处理单元被配置为：在之间检测到类似性的所述类似性判定目标图像是动态图像的情况下，通过变换所述动态图像的至少一个显示帧来排除所述类似性判定目标图像之间的类似性。

11.一种图像处理装置的图像处理方法，所述图像处理方法包括以下步骤：

判定在相册的特定区域中排布的图像之间是否存在类似性；以及

对所述图像中的至少一个进行图像处理，以排除所述图像之间的所述类似性。

Images