CN105787872A - 图像处理装置、图像处理装置的控制方法 - Google Patents

Abstract

图像处理装置、图像处理装置的控制方法。其能够取得包含对象图像的特征部分的裁剪图像、而不用使人们选择对象图像的特征部分。设定部(50)在对象图像内设定多个裁剪候选区域。计算部(52)针对多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值。决定部(54)根据多个裁剪候选区域中的各个裁剪候选区域的上述合计值，从多个裁剪候选区域中决定出裁剪区域。取得部(56)取得裁剪区域内的图像。

Description

图像处理装置、图像处理装置的控制方法

本申请是申请日为2012年7月19日，申请号为201280052560.0，发明名称为“图像处理装置、图像处理装置的控制方法”的发明专利申请的分案申请。

技术领域

本发明涉及图像处理装置、图像处理装置的控制方法。

背景技术

公知有采用并列显示多个图像的界面的Web服务。例如，公知有与食谱一起公开用户投稿的料理的图像的服务、公开用户投稿的汽车的图像的服务等。

在上述服务中并列显示多个图像的情况下，多数情况下使用通过裁剪原来图像的一部分而生成的缩略图像。以往，主要是手动生成这种缩略图像，但是，近年来，处理大量图像的Web服务增加，强烈期望用于高效生成大量图像的缩略图像的技术。

作为上述这种技术，例如，公知有通过在预定的固定位置进行裁剪而根据图像自动生成缩略图像的技术。

并且，例如，在专利文献1中公开了如下技术：进行裁剪，以得到使用户选择出的关键被摄体位于中心的裁剪图像。

现有技术文献

专利文献

专利文献1：日本特开2004-289706号公报

发明内容

发明要解决的课题

在根据图像生成缩略图像的情况下，优选将原来图像的特征部分包含在缩略图像中。但是，在通过在预定的固定位置进行裁剪而根据图像生成缩略图像的情况下，与原来图像的内容无关，在预定的固定位置进行裁剪，所以，有时原来图像的特征部分未包含在缩略图像中，有时无法得到期望的缩略图像。并且，根据专利文献1所记载的技术，虽然能够得到使关键被摄体位于中心的裁剪图像，但是，在专利文献1所记载的技术的情况下，人们必须选择关键被摄体。

本发明是鉴于上述课题而完成的，其目的在于，提供能够取得包含对象图像的特征部分的裁剪图像、而不用使人们选择对象图像的特征部分的图像处理装置、图像处理装置的控制方法、程序和信息存储介质。

用于解决课题的手段

为了解决上述课题，本发明的图像处理装置的特征在于，该图像处理装置包括：设定单元，其在对象图像内设定多个裁剪候选区域；计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；决定单元，其根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及取得单元，其取得所述裁剪区域内的图像。

并且，本发明的图像处理装置的控制方法的特征在于，该图像处理装置的控制方法包括：设定步骤，在对象图像内设定多个裁剪候选区域；计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；决定步骤，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及取得步骤，取得所述裁剪区域内的图像。

并且，本发明的程序用于使计算机作为以下单元进行工作：设定单元，其在对象图像内设定多个裁剪候选区域；计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；决定单元，其根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定裁剪区域；以及取得单元，其取得所述裁剪区域内的图像。

并且，本发明的计算机可读取的信息存储介质记录了用于使计算机作为以下单元进行工作的程序：设定单元，其在对象图像内设定多个裁剪候选区域；计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；决定单元，其根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及取得单元，其取得所述裁剪区域内的图像。

并且，在本发明的一个方式中，也可以是，所述决定单元包括将所述多个裁剪候选区域中的、所述合计值最大的裁剪候选区域决定为所述裁剪区域的单元。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括第2计算单元，该第2计算单元针对所述多个裁剪候选区域中的各个裁剪候选区域，计算除法值或其倒数，该除法值是对该裁剪候选区域的所述合计值除以该裁剪候选区域的至少一个边界部分的像素的边缘量的合计值而得到的，所述决定单元根据所述多个裁剪候选区域中的各个裁剪候选区域的所述除法值或所述倒数，从所述多个裁剪候选区域中决定出所述裁剪区域。

并且，在本发明的一个方式中，也可以是，所述决定单元包括将所述多个裁剪候选区域中的、所述除法值最大的裁剪候选区域或所述倒数最小的裁剪候选区域决定为所述裁剪区域的单元。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括如下单元：针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域的第1边界部分的像素的边缘量的合计值作为第1合计值；以及针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域中的与所述第1边界部分相对的第2边界部分的像素的边缘量的合计值作为第2合计值，所述第2计算单元针对所述多个裁剪候选区域中的各个裁剪候选区域，计算如下的除法值或其倒数，该除法值是对该裁剪候选区域的所述合计值除以该裁剪候选区域的所述第1合计值和所述2合计值中大的一方而得到的。

并且，在本发明的一个方式中，也可以是，所述计算单元计算所述裁剪候选区域内的像素的边缘量的加权合计值作为所述裁剪候选区域内的像素的边缘量的合计值，所述计算单元将所述裁剪候选区域的中央部分的像素的边缘量的权重设定得比所述裁剪候选区域的边界部分的像素的边缘量的权重高。

并且，在本发明的一个方式中，也可以是，所述边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量。

并且，在本发明的一个方式中，也可以是，所述边缘量是有关于所述像素与该像素的周边像素之间的色相差的量。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括从所述裁剪区域的图像的端部去除不存在具有基准量以上的所述边缘量的像素的部分的单元。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括存储关联数据的单元，该关联数据是将分布图案信息与多种裁剪区域决定处理中的各个裁剪区域决定处理关联起来的数据，该分布图案信息是与图像的边缘量的分布图案有关的信息，该多种裁剪区域决定处理是用于从所述多个裁剪候选区域中决定出所述裁剪区域的处理，所述决定单元通过与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域。

并且，在本发明的一个方式中，也可以是，所述决定单元包括如下单元：通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，所述图像处理装置还包括：显示控制单元，其使显示单元显示所述多个裁剪区域的图像；受理单元，其受理用户针对所述多个裁剪区域的图像中的至少一方的选择；以及更新单元，其根据所述用户的选择结果更新所述关联数据。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括存储关联数据的单元，该关联数据是将分布图案信息与多种裁剪区域决定处理中的各个裁剪区域决定处理关联起来的信息，该分布图案信息是与图像的边缘量的分布图案有关的信息，该多种裁剪区域决定处理是用于从所述多个裁剪候选区域中决定出所述裁剪区域的处理，所述决定单元包括如下单元：通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，所述图像处理装置还包括：显示控制单元，其使显示单元显示所述多个裁剪区域的图像；以及受理单元，其受理用户针对所述多个裁剪区域的图像中的至少一方的选择，所述显示控制单元优先显示或区别显示所述多个裁剪区域的图像中的、对应于与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理的裁剪区域的图像。

并且，在本发明的一个方式中，也可以是，所述图像处理装置包括根据所述用户的选择结果更新所述关联数据的更新单元。

并且，在本发明的一个方式中，也可以是，所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理，一种是：将所述多个裁剪候选区域中的、所述合计值最大的裁剪候选区域决定为所述裁剪区域；另一种是：将所述多个裁剪候选区域中的、对所述合计值除以该裁剪候选区域中的至少一个边界部分的像素的边缘量的合计值而得到的除法值最大的裁剪候选区域决定为所述裁剪区域。

并且，在本发明的一个方式中，也可以是，所述计算单元包括：第1计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第1边缘量的合计值作为第1合计值；以及第2计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第2边缘量的合计值作为第2合计值，所述第1边缘量是有关于所述像素与该像素的周边像素之间的色相差的量，所述第2边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量，所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第1合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及另一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第2合计值，从所述多个裁剪候选区域中决定出裁剪区域。

并且，在本发明的一个方式中，也可以是，所述设定单元将所述对象图像内的一部分区域设定为裁剪候选区域，通过使所述裁剪候选区域在所述对象图像内向纵向或/和横向移动，设定所述多个裁剪候选区域。

发明效果

根据本发明，能够取得包含对象图像的特征部分的裁剪图像，而不用使人们选择对象图像的特征部分。

附图说明

图1是示出本发明的实施方式的图像处理装置的硬件结构的一例的图。

图2是示出料理图像的一例的图。

图3是示出料理图像的另一例的图。

图4是示出裁剪图像的一例的图。

图5是示出裁剪图像的另一例的图。

图6是用于说明料理图像的像素的图。

图7是图像处理装置的功能框图。

图8是用于说明裁剪候选区域的图。

图9是用于说明裁剪候选区域的图。

图10是用于说明裁剪区域决定部的图。

图11是用于说明裁剪区域决定部的图。

图12是示出图像处理装置执行的处理的一例的流程图。

图13是示出图像处理装置执行的处理的一例的流程图。

图14是用于说明裁剪候选区域的边界部分的图。

图15是用于说明裁剪候选区域的边界部分的图。

图16是用于说明多种裁剪区域决定处理的图。

图17是示出裁剪图像选择画面的一例的图。

图18是示出图像处理装置执行的处理的另一例的流程图。

图19是示出裁剪区域决定处理数据的一例的图。

图20是示出图像处理装置执行的处理的另一例的流程图。

图21是示出选择结果数据的一例的图。

图22是示出图像处理装置执行的处理的另一例的流程图。

图23是示出图像处理装置执行的处理的另一例的流程图。

图24是示出裁剪候选区域的另一例的流程图。

图25是示出图像处理装置执行的处理的另一例的流程图。

图26是示出图像处理装置执行的处理的另一例的流程图。

图27是用于说明裁剪图像取得部的图。

具体实施方式

下面，根据附图对本发明的实施方式的例子进行详细说明。

[第1实施方式]首先，对本发明的第1实施方式进行说明。本发明的第1实施方式的图像处理装置例如通过台式计算机、笔记本型计算机、平板型计算机或服务器计算机等实现。图1示出第1实施方式的图像处理装置10的硬件结构的一例。

如图1所示，图像处理装置10包括控制部11、存储部12、光盘驱动部13、通信接口部14、操作部15、显示部16和声音输出部17。

控制部11例如包括1个或多个微处理器，按照存储部12中存储的操作系统或程序执行信息处理。存储部12例如包括RAM、硬盘或固态硬盘驱动。光盘驱动部13读取光盘(信息存储介质)中存储的程序和数据。

程序和数据经由光盘供给到存储部12。即，存储有程序和数据的光盘装配在光盘驱动部13上，通过光盘驱动部13从光盘中读出程序和数据，将其存储在存储部12中。另外，光盘驱动部13不是必须的结构要素。也可以代替光盘驱动部13而包括用于读取光盘以外的信息存储介质(例如存储卡)中存储的程序或数据的结构要素。而且，也可以经由光盘以外的信息存储介质将程序和数据供给到存储部12。

通信接口部14是用于使图像处理装置10与通信网络连接的接口。图像处理装置10能够经由通信网络而与其他装置(例如服务器等)授受数据。另外，也可以经由通信网络对存储部12供给程序和数据。

操作部15用于供用户进行操作。例如，键盘、触摸板、鼠标、触摸面板或棒(杆)等相当于操作部15。显示部16例如是液晶显示器等，声音输出部17例如是扬声器或耳机终端等。

图像处理装置10能够访问数据库20。数据库20可以在图像处理装置10以外的装置(例如服务器)中实现，也可以在图像处理装置10中实现。

在数据库20中存储有图像。例如，在数据库20中存储有由未图示的Web服务器提供的服务所公开的图像。例如，在提供公开投稿者投稿的料理图像的服务的情况下，在数据库20中存储有投稿者投稿的料理图像。并且，例如，在提供公开投稿者投稿的汽车图像的服务的情况下，在数据库20中存储有投稿者投稿的汽车图像。

另外，下面，设在数据库20中存储有投稿者投稿的料理图像来进行说明。图2和图3示出数据库20中存储的料理图像的例子。图2所示的料理图像30是纵边长度(像素数)比横边长度(像素数)长的纵长图像。另一方面，图3所示的料理图像30是横边长度比纵边长度长的横长图像。

下面，对用于通过裁剪投稿者投稿的料理图像30中的一部分而生成该料理图像30的裁剪图像(缩略图像)的技术进行说明。特别地，下面，对用于生成包含料理图像30的特征部分的裁剪图像、而不用使人们选择料理图像30的特征部分的技术进行说明。

另外，下面对根据料理图像30生成一边长度与料理图像的短边长度相等的正方形的裁剪图像的情况进行说明。图4示出图2所示的料理图像30的裁剪图像的一例，图5示出图3所示的料理图像30的裁剪图像的一例。图4所示的裁剪图像40的各边长度与图2所示的料理图像30的横边长度(w)相等。另一方面，图5所示的裁剪图像40的各边长度与图3所示的料理图像30的纵边长度(h)相等。

并且，下面，如图6所示，通过设料理图像30的左上像素为原点、右方向为X轴正方向、下方向为Y轴正方向的坐标系，如(x,y)那样表现料理图像30的各像素。例如，将料理图像30的左上像素记载为(0,0)，将右上像素记载为(w-1,0)。并且，例如，将料理图像30的左下像素记载为(0,h-1)，将右下像素记载为(w-1,h-1)。

图7是示出第1实施方式的图像处理装置10中实现的功能块中的与本发明相关联的功能块的功能框图。如图7所示，图像处理装置10包括裁剪候选区域设定部50、计算部52、裁剪区域决定部54和裁剪图像取得部56。

裁剪候选区域设定部50在对象图像内设定多个裁剪候选区域。“对象图像”是作为裁剪处理对象的图像，在本实施方式的情况下，投稿者投稿的料理图像30相当于“对象图像”。

图8和图9是用于说明裁剪候选区域的图。裁剪候选区域60的大小被设定为与要生成的裁剪图像40的大小相同的大小。例如，在生成一边长度与料理图像30(对象图像)的短边长度相等的正方形图像作为料理图像30的裁剪图像40的情况下，裁剪候选区域60被设定为一边长度与料理图像30的短边长度相等的正方形区域。

例如，在料理图像30为纵长图像的情况下，如图8所示，裁剪候选区域60是一边长度与料理图像30的横边长度(w)相等的正方形区域。另一方面，在料理图像30为横长图像的情况下，如图9所示，裁剪候选区域60是一边长度与料理图像30的纵边长度(h)相等的正方形区域。

裁剪候选区域设定部50将料理图像30内的一部分区域设定为裁剪候选区域60，通过使裁剪候选区域60在料理图像30内向纵向或/和横向移动，设定多个裁剪候选区域60。

例如，在料理图像30为纵长图像的情况下，如图8所示，裁剪候选区域设定部50以使裁剪候选区域60的左上像素与料理图像30的左上像素一致的方式，设定裁剪候选区域60的初始位置(参照图8(A))。换言之，裁剪候选区域设定部50以使裁剪候选区域60的上侧边界线62U与料理图像30的上边32U一致的方式，设定裁剪候选区域60的初始位置。

然后，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向下方移动1个像素(参照图8(B))。进而，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向下方移动1个像素(参照图8(C))。这样，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向下方逐个像素地移动，直到裁剪候选区域60的下侧边界线62D与料理图像30的下边32D一致为止(参照图8(D))。在裁剪候选区域60的下侧边界线62D与料理图像30的下边32D一致的情况下，裁剪候选区域60的左上像素与料理图像30的像素(0,h-w-1)一致。

另外，裁剪候选区域设定部50也可以以使裁剪候选区域60的左下像素与料理图像30的左下像素一致的方式，设定裁剪候选区域60的初始位置。换言之，裁剪候选区域设定部50也可以以使裁剪候选区域60的下侧边界线62D与料理图像30的下边32D一致的方式，设定裁剪候选区域60的初始位置。而且，裁剪候选区域设定部50也可以使裁剪候选区域60在料理图像30内向上方逐个像素地移动，直到裁剪候选区域60的上侧边界线62U与料理图像30的上边32U一致为止。

另一方面，在料理图像30为横长图像的情况下，如图9所示，裁剪候选区域设定部50以使裁剪候选区域60的左上像素与料理图像30的左上像素一致的方式，设定裁剪候选区域60的初始位置(参照图9(A))。换言之，裁剪候选区域设定部50以使裁剪候选区域60的左侧边界线62L与料理图像30的左边32L一致的方式，设定裁剪候选区域60的初始位置。

然后，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向右方移动1个像素(参照图9(B))。进而，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向右方移动1个像素(参照图9(C))。这样，裁剪候选区域设定部50使裁剪候选区域60在料理图像30内向右方逐个像素地移动，直到裁剪候选区域60的右侧边界线62R与料理图像30的右边32R一致为止(参照图9(D))。另外，在裁剪候选区域60的右侧边界线62R与料理图像30的右边32R一致的情况下，裁剪候选区域60的左上像素与料理图像30的像素(w-h-1,0)一致。

另外，裁剪候选区域设定部50也可以以使裁剪候选区域60的右上像素与料理图像30的右上像素一致的方式，设定裁剪候选区域60的初始位置。换言之，裁剪候选区域设定部50也可以以使裁剪候选区域60的右侧边界线62R与料理图像30的右边32R一致的方式，设定裁剪候选区域60的初始位置。而且，裁剪候选区域设定部50也可以使裁剪候选区域60在料理图像30内向左方逐个像素地移动，直到裁剪候选区域60的左侧边界线62L与料理图像30的左边32L一致为止。

计算部52针对多个裁剪候选区域60中的各个裁剪候选区域，计算该裁剪候选区域60内的像素的边缘量的合计值。这里，“边缘”是指对象图像中颜色变化的程度，“像素的边缘量”是有关于像素与该像素的周边像素之间的色相差的量。

作为用于计算像素的边缘量的手法，可以使用公知的手法。例如，可以使用Sobel滤波器。在设像素(x,y)中的像素值为I_x,y的情况下，通过下述式(1)～(3)计算像素(x,y)的边缘量S_x,y。

[数学式1]

$S_{x,yhorz.}=\underset{i\∈\{-1,0,1\}}{\Σ}(I_{x+1,y+i}-I_{x-1,y+i})\mathrm{...}\left(1\right)$

$S_{x,yvcrt.}=\underset{i\∈\{-1,0,1\}}{\Σ}(I_{x+i,y+1}-I_{x+i,y-1})\mathrm{...}\left(2\right)$

$S_{x,y}=\sqrt{S_{x,yhorz.}^2+S_{x,yvcrt.}^2}...\left(3\right)$

另外，通过将各像素的RGB值转换为YC_BC_R值，取得各像素的像素值I。通过下述式(4)从RGB值转换为YC_BC_R值。并且，这里，由于使用有关于像素与该像素的周边像素之间的色相差的量作为“像素的边缘量”，所以，根据各像素的C_B,C_R值计算各像素的像素值I。例如，通过下述式(5)计算各像素的像素值I。

[数学式2]

$\left[\begin{array}{c}Y\\ C_B\\ C_R\\ 1\end{array}\right]=\left[\begin{array}{cccc}65.481& 128.553& 24.966& 16\\ -37.797& -74.203& 112& 128\\ 112& -93.786& -18.214& 128\\ 0& 0& 0& 1\end{array}\right]\left[\begin{array}{c}R\\ G\\ B\\ 1\end{array}\right]\mathrm{...}\left(4\right)$

$I=\sqrt{C_B^2+C_H^2}...\left(5\right)$

计算部52根据以上计算出的料理图像30(对象图像)的各像素的边缘量S，计算裁剪候选区域60内的像素的边缘量S的合计值T。例如，在料理图像30为纵长图像的情况下，当设裁剪候选区域60的左上像素为(0,i)时，通过下述式(6)计算上述合计值T。另一方面，在料理图像30为横长图像的情况下，当设裁剪候选区域60的左上像素为(i,0)时，通过下述式(7)计算上述合计值T。

[数学式3]

$T=\underset{Y=i}{\overset{i+w-1}{\Σ}}\underset{X=0}{\overset{w-1}{\Σ}}{S}_{X,Y}...\left(6\right)$

$T=\underset{Y=0}{\overset{h-1}{\Σ}}\underset{X=i}{\overset{i+h-1}{\Σ}}{S}_{X,Y}...\left(7\right)$

裁剪区域决定部54根据多个裁剪候选区域60中的各个裁剪候选区域60的上述合计值T，从该多个裁剪候选区域60中决定出裁剪区域。

例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述合计值T最大的裁剪候选区域60决定为裁剪区域。图10和图11是用于说明裁剪区域决定部54的图。在图10和图11中，与各裁剪候选区域60的位置对应地表示各裁剪候选区域60的上述合计值T。

图10示出料理图像30(对象图像)为纵长图像的情况，在图10中，各裁剪候选区域60的上述合计值T对应于各裁剪候选区域60的左上像素的Y轴坐标。即，在图10中，与Y轴坐标(y)对应的合计值T表示左上像素为(0,y)的裁剪候选区域60内的像素的边缘量的合计值T。

在图10所示的例子的情况下，与Y轴坐标(p_y)对应的上述合计值T最大。该情况下，裁剪区域决定部54将左上像素为(0,p_y)的裁剪候选区域60决定为裁剪区域。即，裁剪区域决定部54将左上像素为(0,p_y)、且一边长度为“w”的正方形区域决定为裁剪区域。

图11示出料理图像30(对象图像)为横长图像的情况，在图11中，各裁剪候选区域60的上述合计值T对应于各裁剪候选区域60的左上像素的X轴坐标。即，在图11中，与X轴坐标(x)对应的合计值T表示左上像素为(x,0)的裁剪候选区域60内的像素的边缘量的合计值T。

在图11所示的例子的情况下，与X轴坐标(p_x)对应的上述合计值T最大。该情况下，裁剪区域决定部54将左上像素为(p_x,0)的裁剪候选区域60决定为裁剪区域。即，裁剪区域决定部54将左上像素为(p_x,0)、且一边长度为“h”的正方形区域决定为裁剪区域。

总之，裁剪区域决定部54将左上像素为下述式(8)和(9)所示的像素(p_x,p_y)、且一边长度为min{w,h}的正方形区域决定为裁剪区域。

[数学式4]

$p_x=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=0}{\overset{h-1}{\Σ}}\underset{X=i}{\overset{i+h-1}{\Σ}}{S}_{X,Y}& \begin{array}{cc}if& w>h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(8\right)$

$p_y=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,Y}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(9\right)$

裁剪图像取得部56取得裁剪图像40。裁剪图像40是对象图像(料理图像30)中的裁剪区域内的图像。即，裁剪图像取得部56通过从料理图像30中切出裁剪区域内的图像，取得裁剪图像40，将裁剪图像40与料理图像30对应起来保存在数据库20中。

接着，对为了实现上述说明的功能块而由图像处理装置10执行的处理进行说明。图12和图13是示出为了从对象图像(料理图像30)取得裁剪图像40而由图像处理装置10执行的处理的一例的流程图。另外，图12和图13所示的处理以对象图像(料理图像30)是长方形图像为前提。通过使控制部11按照程序执行图12和图13所示的处理，控制部11作为裁剪候选区域设定部50、计算部52、裁剪区域决定部54和裁剪图像取得部56进行工作。

如图12所示，首先，控制部11从数据库20中取得对象图像(S101)。然后，控制部11根据上述式(1)～(5)计算对象图像的各像素的边缘量(S102)。

并且，控制部11判定对象图像的纵边长度(h)是否比横边长度(w)长(S103)。然后，在判定为纵边长度(h)比横边长度(w)长的情况下，控制部11将变量i、p_x、p_y、E_max分别初始化为零(S104)。

在执行步骤S104的处理后，控制部11计算左上像素为(0,i)、且一边长度为“w”的正方形区域(裁剪候选区域60)的评价值E(S105)。在本实施方式的情况下，控制部11通过上述式(6)计算上述正方形区域内的像素的边缘量的合计值T，取得该合计值T作为上述正方形区域的评价值E。

在执行步骤S105的处理后，控制部11判定步骤S105中计算出的评价值E是否大于变量E_max(S106)。在评价值E大于变量E_max的情况下，控制部11将步骤S105中计算出的评价值E设置为变量E_max(S107)。并且，控制部11将变量i设置为变量p_y(S108)。通过步骤S106～S108的处理，变量E_max表示评价值E的最大值，变量p_y表示评价值E为最大值的情况下的变量i的值。

在执行了步骤S107、S108的处理的情况下、或在步骤S106中判定为评价值E不大于变量E_max的情况下，控制部11在变量i中加上1(S109)。然后，控制部11判定变量i是否为值(h-w-1)以下(S110)。在变量i为值(h-w-1)以下的情况下，控制部11再次执行步骤S105的处理。另一方面，在变量i不为值(h-w-1)以下的情况下，如图13所示，控制部11将左上像素为(p_x,p_y)、且一边长度为“w”的正方形区域决定为裁剪区域(S118)。

另外，在步骤S103中判定为纵边长度(h)不比横边长度(w)长的情况下，换言之，横边长度(w)比纵边长度(h)长的情况下，控制部11将变量i、p_x、p_y、E_max的值分别初始化为0(S111)。

在执行步骤S111的处理后，控制部11计算左上像素为(i,0)、且一边像素数为“h”的正方形区域(裁剪候选区域60)的评价值E(S112)。在本实施方式的情况下，控制部11通过上述式(7)计算上述正方形区域内的像素的边缘量的合计值T，取得该合计值T作为上述正方形区域的评价值E。

在执行步骤S112的处理后，控制部11判定步骤S112中计算出的评价值E是否大于变量E_max(S113)。在评价值E大于变量E_max的情况下，控制部11将步骤S112中计算出的评价值E设置为变量E_max(S114)。并且，控制部11将变量i设置为变量p_x(S115)。通过步骤S113～S115的处理，变量E_max表示评价值E的最大值，变量p_x表示评价值E为最大值的情况下的变量i的值。

在执行了步骤S114、S115的处理的情况下、或在步骤S113中判定为评价值E不大于变量E_max的情况下，控制部11在变量i中加上1(S116)。然后，控制部11判定变量i是否为值(w-h-1)以下(S117)。在变量i为值(w-h-1)以下的情况下，控制部11再次执行步骤S112的处理。另一方面，在变量i不为值(w-h-1)以下的情况下，如图13所示，控制部11将左上像素为(p_x,p_y)、且一边像素数为“h”的正方形区域决定为裁剪区域(S119)。

在执行步骤S118或S119的处理后，控制部11取得裁剪图像40(S120)。即，控制部11通过从对象图像中切出步骤S118或S119中决定的裁剪区域内的图像，取得裁剪图像40，将该裁剪图像40与对象图像对应起来保存在数据库20中。并且，控制部11在显示部16中显示步骤S120中取得的裁剪图像40(S121)。以上，结束图12和图13的处理的说明。

根据以上说明的第1实施方式的图像处理装置10，取得对象图像内的边缘量较高的部分作为裁剪图像40。即，取得对象图像内的色相变化较大的部分作为裁剪图像40。例如，在拍摄了放置在桌子等上的食器中盛放的料理的料理图像的情况下，在拍摄了料理的部分中，与其他部分(例如拍摄了桌子的部分等)相比，色相的变化较大。因此，根据第1实施方式的图像处理装置10，能够取得拍摄了料理的部分作为裁剪图像40。

[第2实施方式]接着，对本发明的第2实施方式进行说明。本发明的第2实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第2实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

在第1实施方式中，将上述式(8)和(9)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。与此相对，在第2实施方式中，将下述式(10)和(11)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。关于这点，第2实施方式的图像处理装置10与第1实施方式不同。

[数学式5]

$p_x=\left\{\begin{array}{cc}\underset{i}{\arg \max }\frac{\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}{S}_{X,Y}}{\underset{Y=0}{\overset{h-1}{\&Sigma;}}(S_{i,Y}+S_{i+h-1,Y})}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(10\right)$

$p_y=\left\{\begin{array}{cc}\underset{i}{\arg \max }\frac{\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,Y}}{\underset{X=0}{\overset{w-1}{\&Sigma;}}(S_{X,i}+S_{X,i+w-1})}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(11\right)$

第2实施方式的图像处理装置10包括与第1实施方式相同的功能块(参照图7)。裁剪候选区域设定部50、计算部52和裁剪图像取得部56的动作与第1实施方式相同。另一方面，关于裁剪区域决定部54的动作，根据多个裁剪候选区域60中的各个裁剪候选区域60的上述合计值T从该多个裁剪候选区域60中决定出裁剪区域这点与第1实施方式相同，但是，下述说明的点与第1实施方式不同。

在第2实施方式的情况下，裁剪区域决定部54针对多个裁剪候选区域60中的各个裁剪候选区域，计算该裁剪候选区域60的至少一个边界部分的像素的边缘量的合计值。

这里，“至少一个边界部分”是裁剪候选区域60的上侧边界部分、下侧边界部分、左侧边界部分和右侧边界部分中的至少一方。

图14是用于说明裁剪候选区域60的上侧边界部分和下侧边界部分的图。另外，图14示出料理图像30为纵长图像的情况。

上侧边界部分70U是包含与裁剪候选区域60的上侧边界线62U对应的像素行的1个或多个像素行。

例如，上侧边界部分70U是与裁剪候选区域60的上侧边界线62U对应的像素行。即，当设裁剪候选区域60的左上像素为(0,y)时，上侧边界部分70U是像素(0,y)～(w-1,y)的像素行。另外，上侧边界部分70U也可以是从像素(0,y)～(w-1,y)的像素行到像素(0,y+n)～(w-1,y+n)的像素行的多个像素行(n：1以上的自然数)。

同样，下侧边界部分70D是包含与裁剪候选区域60的下侧边界线62D对应的像素行的1个或多个像素行。

例如，下侧边界部分70D是与裁剪候选区域60的下侧边界线62D对应的像素行。即，当设裁剪候选区域60的左上像素为(0,y)时，下侧边界部分70D是像素(0,y+w-1)～(w-1,y+w-1)的像素行。另外，下侧边界部分70D也可以是从像素(0,y+w-1)～(w-1,y+w-1)的像素行到像素(0,y+w-1-n)～(w-1,y+w-1-n)的像素行的多个像素行(n：1以上的自然数)。

另外，下面，设与裁剪候选区域60的上侧边界线62U对应的像素行相当于上侧边界部分70U、与下侧边界线62D对应的像素行相当于下侧边界部分70D来进行说明。

图15是用于说明裁剪候选区域60的左侧边界部分和右侧边界部分的图。另外，图15示出料理图像30为横长图像的情况。

左侧边界部分70L是包含与裁剪候选区域60的左侧边界线62L对应的像素列的1个或多个像素列。

例如，左侧边界部分70L是与裁剪候选区域60的左侧边界线62L对应的像素列。即，当设裁剪候选区域60的左上像素为(x,0)时，左侧边界部分70L是像素(x,0)～(x,h-1)的像素列。另外，左侧边界部分70L也可以是从像素(x,0)～(x,h-1)的像素列到像素(x+n,0)～(x+n,h-1)的像素列的多个像素列(n：1以上的自然数)。

同样，右侧边界部分70R是包含与裁剪候选区域60的右侧边界线62R对应的像素列的1个或多个像素列。

例如，右侧边界部分70R是与裁剪候选区域60的右侧边界线62R对应的像素列。即，当设裁剪候选区域60的左上像素为(x,0)时，右侧边界部分70R是像素(x+h-1,0)～(x+h-1,h-1)的像素列。另外，右侧边界部分70R也可以是从像素(x+h-1,0)～(x+h-1,h-1)的像素列到像素(x+h-1-n,0)～(x+h-1-n,h-1)的像素列的多个像素列(n：1以上的自然数)。

另外，下面，设与裁剪候选区域60的左侧边界线62L对应的像素列相当于左侧边界部分70L、与右侧边界线62R对应的像素列相当于右侧边界部分70R来进行说明。

例如，在料理图像30为纵长图像的情况下，裁剪区域决定部54计算裁剪候选区域60的上侧边界部分70U和下侧边界部分70D的像素的边缘量的合计值Ta。当设裁剪候选区域60的左上像素为(0,i)时，通过下述式(12)计算上述合计值Ta。

另一方面，在料理图像30为横长图像的情况下，裁剪区域决定部54计算裁剪候选区域60的左侧边界部分70L和右侧边界部分70R的像素的边缘量的合计值Ta。当设裁剪候选区域60的左上像素为(i,0)时，通过下述式(13)计算上述合计值Ta。

[数学式6]

$Ta=\underset{X=0}{\overset{w-1}{\&Sigma;}}(S_{X,i}+S_{X,i+w-1})...\left(12\right)$

$Ta=\underset{Y=0}{\overset{h-1}{\&Sigma;}}(S_{i,Y}+S_{i+h-1,Y})...\left(13\right)$

裁剪区域决定部54(第2计算单元)针对多个裁剪候选区域60中的各个裁剪候选区域，计算对上述合计值T除以上述合计值Ta而得到的除法值(T/Ta)。然后，裁剪区域决定部54根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(T/Ta)，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述除法值(T/Ta)最大的裁剪候选区域60决定为裁剪区域。

另外，裁剪区域决定部54也可以针对多个裁剪候选区域60中的各个裁剪候选区域，计算对上述合计值Ta除以上述合计值T而得到的除法值(Ta/T)。然后，裁剪区域决定部54也可以根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(Ta/T)，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54也可以将多个裁剪候选区域60中的、上述除法值(Ta/T)最小的裁剪候选区域60决定为裁剪区域。

如上所述，在第2实施方式的图像处理装置10中，将上述式(10)和(11)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。

对第2实施方式的图像处理装置10中执行的处理进行说明。在第2实施方式的图像处理装置10中，也执行与第1实施方式相同的处理(参照图12和图13)。

但是，在第2实施方式的情况下，在图12的步骤S105中，控制部11取得对通过上述式(6)计算出的合计值T除以通过上述式(12)计算出的合计值Ta而计算出的除法值(T/Ta)，作为评价值E。

并且，在步骤S112中，控制部11取得对通过上述式(7)计算出的合计值T除以通过上述式(13)计算出的合计值Ta而计算出的除法值(T/Ta)，作为评价值E。

在以上说明的第2实施方式的图像处理装置10中，将上述除法值(T/Ta)最大的裁剪候选区域60决定为裁剪区域。在裁剪候选区域60全体的像素的边缘量的合计值T较大、且裁剪候选区域60的上侧边界部分70U和下侧边界部分70D的像素的边缘量的合计值Ta较小的情况下，上述除法值(T/Ta)较大。裁剪候选区域60全体的像素的边缘量的合计值T较大、且裁剪候选区域60的上侧边界部分70U和下侧边界部分70D的像素的边缘量的合计值Ta较小的情况是指，上侧边界部分70U和下侧边界部分70D以外的部分的像素的边缘量较大的情况。即，与上侧边界部分70U和下侧边界部分70D相比，中央部分的像素的边缘量较大的情况。

根据第2实施方式的图像处理装置10，能够取得对象图像内的边缘量较大的部分位于中央的裁剪图像40。即，能够取得对象图像内的色相变化较大的部分位于中央的裁剪图像40。其结果，能够取得料理图像30内的拍摄了料理的部分位于中央的裁剪图像40。

这里，对第2实施方式的变形例进行说明。

例如，裁剪区域决定部54也可以将下述式(14)和(15)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。

[数学式7]

$p_x=\left\{\begin{array}{cc}\underset{i}{\arg \max }\frac{\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}{S}_{X,Y}}{\max \left\{\underset{Y=0}{\overset{h-1}{\&Sigma;}}{S}_{i,Y},\underset{Y=0}{\overset{h-1}{\&Sigma;}}{S}_{i+h-1,Y}\right\}}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(14\right)$

$p_y=\left\{\begin{array}{cc}\underset{i}{\arg \max }\frac{\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,Y}}{\max \left\{\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,i},\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,i+w-1}\right\}}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(15\right)$

在该变形例中，在料理图像30为纵长图像的情况下，裁剪区域决定部54计算裁剪候选区域60的上侧边界部分70U的像素的边缘量的合计值Tu(第1合计值)和裁剪候选区域60的下侧边界部分70D的像素的边缘量的合计值Td(第2合计值)。当设裁剪候选区域60的左上像素为(0,i)时，通过下述式(16)计算上述合计值Tu，通过下述式(17)计算上述合计值Td。

[数学式8]

$Tu=\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,i}...\left(16\right)$

$Td=\underset{X=0}{\overset{w-1}{\&Sigma;}}{S}_{X,i+w-1}...\left(17\right)$

然后，裁剪区域决定部54针对多个裁剪候选区域60中的各个裁剪候选区域，计算将上述合计值T除以上述合计值Tu、Td中大的一方而得到的除法值(T/max{Tu,Td})。然后，裁剪区域决定部54根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(T/max{Tu,Td})，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述除法值(T/max{Tu,Td})最大的裁剪候选区域60决定为裁剪区域。

另外，裁剪区域决定部54也可以针对多个裁剪候选区域60中的各个裁剪候选区域，计算对上述合计值Tu、Td中大的一方除以上述合计值T而得到的除法值(max{Tu,Td}/T)。然后，裁剪区域决定部54也可以根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(max{Tu,Td}/T)，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54也可以将多个裁剪候选区域60中的、上述除法值(max{Tu,Td}/T)最小的裁剪候选区域60决定为裁剪区域。

另一方面，在料理图像30为横长图像的情况下，裁剪区域决定部54计算裁剪候选区域60的左侧边界部分70L的像素的边缘量的合计值Tl(第1合计值)和裁剪候选区域60的右侧边界部分70R的像素的边缘量的合计值Tr(第2合计值)。当设裁剪候选区域60的左上像素为(i,0)时，通过下述式(18)计算上述合计值Tl，通过下述式(19)计算上述合计值Tr。

[数学式9]

$Tl=\underset{Y=0}{\overset{h-1}{\&Sigma;}}{S}_{i,Y}...\left(18\right)$

$Tr=\underset{Y=0}{\overset{h-1}{\&Sigma;}}{S}_{i+h-1,Y}...\left(19\right)$

然后，裁剪区域决定部54针对多个裁剪候选区域60中的各个裁剪候选区域，计算对上述合计值T除以上述合计值Tl、Tr中大的一方而得到的除法值(T/max{Tl,Tr})。然后，裁剪区域决定部54根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(T/max{Tl,Tr})，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述除法值(T/max{Tl,Tr})最大的裁剪候选区域60决定为裁剪区域。

另外，裁剪区域决定部54也可以针对多个裁剪候选区域60中的各个裁剪候选区域，计算对上述合计值Tl、Tr中大的一方除以上述合计值T而得到的除法值(max{Tl,Tr}/T)。然后，裁剪区域决定部54也可以根据多个裁剪候选区域60中的各个裁剪候选区域60的上述除法值(max{Tl,Tr}/T)，从多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述除法值(max{Tl,Tr}/T)最小的裁剪候选区域60决定为裁剪区域。

在该变形例的情况下，在图12的步骤S105和S112中执行下述说明的处理。即，在步骤S105中，控制部11取得对通过上述式(6)计算出的合计值T除以通过上述式(16)和(17)计算出的合计值Tu、Td中大的一方而计算出的除法值(T/max{Tu,Td})，作为评价值E。

并且，在步骤S112中，控制部11取得对通过上述式(7)计算出的合计值T除以通过上述式(18)和(19)计算出的合计值Tl、Tr中大的一方而计算出的除法值(T/max{Tl,Tr})，作为评价值E。

如上所述，也能够取得对象图像内的边缘量大的部分位于中央的裁剪图像。即，能够取得对象图像内的色相变化大的部分位于中央的裁剪图像。其结果，能够取得料理图像30内的拍摄了料理的部分位于中央的裁剪图像。

[第3实施方式]接着，对本发明的第3实施方式进行说明。本发明的第3实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第3实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

在第1实施方式中，将上述式(8)和(9)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。与此相对，在第3实施方式中，将下述式(20)和(21)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。另外，在下述式(20)和(21)中，“G”表示下述式(22)所示的高斯函数。

[数学式10]

$p_x=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}G(X,i+\frac{h}{2},\frac{h}{6})G(Y,\frac{h}{2},\frac{h}{6})S_{X,Y}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(20\right)$

$p_y=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}G(X,\frac{w}{2},\frac{w}{6})G(Y,i+\frac{w}{2},\frac{w}{6})S_{X,Y}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(21\right)$

$G(x,\mathrm{\&mu;},\mathrm{\&sigma;})=\frac{1}{\sqrt{2{\mathrm{\&pi;\&sigma;}}^2}}\exp (-\frac{{(x-\mathrm{\&mu;})}^2}{2{\mathrm{\&sigma;}}^2})...\left(22\right)$

第3实施方式的图像处理装置10包括与第1实施方式相同的功能块(参照图7)。裁剪候选区域设定部50和裁剪图像取得部56的动作与第1实施方式相同。另一方面，关于计算部52和裁剪区域决定部54的动作，下述说明的点与第1实施方式不同。

第3实施方式的计算部52针对多个裁剪候选区域60中的各个裁剪候选区域，计算该裁剪候选区域60内的像素的边缘量的加权合计值。

例如，在料理图像30为纵长图像的情况下，当设裁剪候选区域60的左上像素为(0,i)时，通过下述式(23)计算上述加权合计值T。另一方面，在料理图像30为横长图像的情况下，当设裁剪候选区域60的左上像素为(i,0)时，通过下述式(24)计算上述加权合计值T。

另外，在下述式(23)和(24)中，高斯函数G发挥针对各像素的边缘量的权重的作用。该情况下，裁剪候选区域60的中央部分的像素的权重被设定为比裁剪候选区域60的边界部分的像素的权重高。因此，裁剪候选区域60的中央部分的像素的边缘量越大，加权合计值T越大。

[数学式11]

$T=\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}G(X,\frac{w}{2},\frac{w}{6})G(Y,i+\frac{w}{2},\frac{w}{6})S_{X,Y}...\left(23\right)$

$T=\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}G(X,i+\frac{h}{2},\frac{h}{6})G(Y,\frac{h}{2},\frac{h}{6})S_{X,Y}...\left(24\right)$

裁剪区域决定部54根据多个裁剪候选区域60中的各个裁剪候选区域60的上述加权合计值T，从该多个裁剪候选区域60中决定出裁剪区域。例如，裁剪区域决定部54将多个裁剪候选区域60中的、上述加权合计值T最大的裁剪候选区域60决定为裁剪区域。

对第3实施方式的图像处理装置10执行的处理进行说明。在第3实施方式的图像处理装置10中，也执行与第1实施方式相同的处理(参照图12和图13)。

但是，在第3实施方式的情况下，在图12的步骤S105中，控制部11取得通过上述式(23)计算出的加权合计值T作为评价值E。并且，在步骤S112中，控制部11取得通过上述式(24)计算出的加权合计值T作为评价值E。

在以上说明的第3实施方式的图像处理装置10中，将上述加权合计值T最大的裁剪候选区域60决定为裁剪区域。在裁剪候选区域60的中央部分的像素的边缘量较大的情况下，上述加权合计值T较大。因此，根据第3实施方式的图像处理装置10，将中央部分的像素的边缘量较大的裁剪候选区域60决定为裁剪区域。其结果，根据第3实施方式的图像处理装置10，能够取得对象图像内的边缘量较大的部分位于中央的裁剪图像40。即，能够取得对象图像内的色相变化较大的部分位于中央的裁剪图像40。其结果，能够取得料理图像30内的拍摄了料理的部分位于中央的裁剪图像40。

这里，对第3实施方式的变形例进行说明。

例如，裁剪区域决定部54也可以将下述式(25)和(26)所示的像素(p_x,p_y)为左上像素、且一边长度为min{w,h}的正方形区域决定为裁剪区域。

[数学式12]

$p_x=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}G(X,i+\frac{h}{2},\frac{h}{6})S_{X,Y}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(25\right)$

$p_y=\left\{\begin{array}{cc}\underset{i}{\arg \max }\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}G(Y,i+\frac{w}{2},\frac{w}{6})S_{X,Y}& \begin{array}{cc}if& w<h\end{array}\\ 0& otherwise\end{array}\right.\mathrm{...}\left(26\right)$

在该变形例中，在料理图像30为纵长图像的情况下，当设裁剪候选区域60的左上像素为(0,i)时，通过下述式(27)计算上述加权合计值T。

另外，在下述式(27)中，高斯函数G发挥针对各像素的边缘量的权重的作用。该情况下，与裁剪候选区域60的上侧边界部分70U和下侧边界部分70D的像素相比，裁剪候选区域60的中央部分的像素的权重设定为较高。因此，裁剪候选区域60的中央部分的像素的边缘量越大，加权合计值T越大。

另一方面，在料理图像30为横长图像的情况下，当设裁剪候选区域60的左上像素为(i,0)时，通过下述式(28)计算上述加权合计值T。

另外，在下述式(28)中，高斯函数G发挥针对各像素的边缘量的权重的作用。该情况下，与裁剪候选区域60的左侧边界部分70L和右侧边界部分70R的像素相比，裁剪候选区域60的中央部分的像素的权重设定为较高。因此，裁剪候选区域60的中央部分的像素的边缘量越大，加权合计值T越大。

[数学式13]

$T=\underset{Y=i}{\overset{i+w-1}{\&Sigma;}}\underset{X=0}{\overset{w-1}{\&Sigma;}}G(Y,i+\frac{w}{2},\frac{w}{6})S_{X,Y}...\left(27\right)$

$T=\underset{Y=0}{\overset{h-1}{\&Sigma;}}\underset{X=i}{\overset{i+h-1}{\&Sigma;}}G(X,i+\frac{h}{2},\frac{h}{6})S_{X,Y}...\left(28\right)$

在该变形例的情况下，在图12的步骤S105和S112中执行下述说明的处理。即，在步骤S105中，控制部11取得通过上述式(27)计算出的加权合计值T作为评价值E。并且，在步骤S112中，控制部11取得通过上述式(28)计算出的加权合计值T作为评价值E。

这样，将中央部分的像素的边缘量较大的裁剪候选区域60决定为裁剪区域。其结果，根据第3实施方式的图像处理装置10，能够取得对象图像内的边缘量较大的部分位于中央的裁剪图像40。即，能够取得对象图像内的色相变化较大的部分位于中央的裁剪图像40。其结果，能够取得料理图像30内的拍摄了料理的部分位于中央的裁剪图像40。

[第4实施方式]接着，对本发明的第4实施方式进行说明。本发明的第4实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第4实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

在第1实施方式中，“边缘”是指对象图像中颜色变化的程度，设“像素的边缘量”是有关于像素与该像素的周边像素之间的色相差的量来进行说明。与此相对，在第4实施方式中，“边缘”是指对象图像中亮度变化的程度，“像素的边缘量”是有关于像素与该像素的周边像素之间的亮度差的量，这点与第1实施方式不同。

即，在第4实施方式的图像处理装置10中，使用通过上述式(4)计算出的各像素的Y值作为各像素的像素值I。即，在第4实施方式中，通过将各像素的Y值作为各像素的像素值I而代入上述式(1)～(3)，计算各像素的边缘量S。

另外，该第4实施方式能够与第2实施方式和第3实施方式进行组合。即，在第2实施方式和第3实施方式中，也可以设“像素的边缘量”为有关于像素与该像素的周边像素之间的亮度差的量。

根据以上说明的第4实施方式的图像处理装置10，取得对象图像内的亮度变化较大的部分作为裁剪图像40。例如，在拍摄了放置在桌子等上的食器中盛放的料理的料理图像的情况下，在拍摄了料理的部分中，与其他部分(例如拍摄了桌子的部分等)相比，亮度的变化较大。因此，根据第4实施方式的图像处理装置10，能够取得拍摄了料理的部分作为裁剪图像40。

[第5实施方式]接着，对本发明的第5实施方式进行说明。本发明的第5实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第5实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

在第5实施方式的图像处理装置10中，作为用于决定裁剪区域的处理(以下称为“裁剪区域决定处理”。)，预先准备多种处理，通过这些多种裁剪区域决定处理决定多个裁剪区域。然后，对用户提示分别与这些多个裁剪区域对应的多个裁剪图像40，用户能够选择这些多个裁剪图像40中的任意一方。

图16示出多种裁剪区域决定处理的一例。在图16中示出8种裁剪区域决定处理(第1～第8裁剪区域决定处理)。第1～第8裁剪区域决定处理在下述方面不同。

(1)作为计算各像素的边缘量时的基础，使用色相还是亮度

(2)如何定义裁剪区域的左上像素(p_x,p_y)

第1裁剪区域决定处理对应于第1实施方式。即，第1裁剪区域决定处理是如下处理：根据各像素的C_B、C_R值(色相)计算各像素的边缘量S(参照上述式(5))，将设上述式(8)和(9)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第2裁剪区域决定处理对应于第2实施方式。即，第2裁剪区域决定处理是如下处理：根据各像素的C_B、C_R值(色相)计算各像素的边缘量S(参照上述式(5))，将设上述式(10)和(11)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第3裁剪区域决定处理对应于第2实施方式的变形例。即，第3裁剪区域决定处理是如下处理：根据各像素的C_B、C_R值(色相)计算各像素的边缘量S(参照上述式(5))，将设上述式(14)和(15)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第4裁剪区域决定处理对应于第3实施方式。即，第4裁剪区域决定处理是如下处理：根据各像素的C_B、C_R值(色相)计算各像素的边缘量S(参照上述式(5))，将设上述式(20)和(21)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

另外，第4裁剪区域决定处理也可以对应于第3实施方式的变形例。即，第4裁剪区域决定处理也可以是将设上述式(25)和(26)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域的处理。

第5裁剪区域决定处理对应于第4实施方式。即，第5裁剪区域决定处理是如下处理：根据各像素的Y值(亮度)计算各像素的边缘量S，将设上述式(8)和(9)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第6裁剪区域决定处理对应于第2实施方式和第4实施方式的组合。即，第6裁剪区域决定处理是如下处理：根据各像素的Y值(亮度)计算各像素的边缘量S，将设上述式(10)和(11)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第7裁剪区域决定处理对应于第2实施方式的变形例和第4实施方式的组合。即，第7裁剪区域决定处理是如下处理：根据各像素的Y值(亮度)计算各像素的边缘量S，将设上述式(14)和(15)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

第8裁剪区域决定处理对应于第3实施方式和第4实施方式的组合。即，第8裁剪区域决定处理是如下处理：根据各像素的Y值(亮度)计算各像素的边缘量S，将设上述式(20)和(21)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域。

另外，第8裁剪区域决定处理也可以对应于第3实施方式的变形例和第4实施方式的组合。即，第8裁剪区域决定处理也可以是将设上述式(25)和(26)所示的像素(p_x,p_y)为左上像素的正方形区域决定为裁剪区域的处理。

在第5实施方式的图像处理装置10中，通过分别执行第1～第8裁剪区域决定处理，决定第1～第8裁剪区域。然后，取得与第1～第8裁剪区域对应的第1～第8裁剪图像40。并且，在显示部16中显示用于选择第1～第8裁剪图像40中的任意一方的画面(裁剪图像选择画面)。

图17示出裁剪图像选择画面的一例。在裁剪图像选择画面中显示第1裁剪图像40a、第2裁剪图像40b、第3裁剪图像40c、第4裁剪图像40d、第5裁剪图像40e、第6裁剪图像40f、第7裁剪图像40g和第8裁剪图像40h。

并且，在裁剪图像选择画面中显示第1选择按钮80a、第2选择按钮80b、第3选择按钮80c、第4选择按钮80d、第5选择按钮80e、第6选择按钮80f、第7选择按钮80g和第8选择按钮80h。第1选择按钮80a与第1裁剪图像40a相关联。同样，第2选择按钮80b～第8选择按钮80h分别与第2裁剪图像40b～第8裁剪图像40h相关联。

用户通过点击第1选择按钮80a～第8选择按钮80h中的任意一方，选择第1裁剪图像40a～第8裁剪图像40h中的任意一方，点击决定按钮82。当点击决定按钮82后，将用户选择出的裁剪图像40与原来的料理图像30对应起来保存在数据库20中。

接着，对第5实施方式的图像处理装置10执行的处理进行说明。图18是示出第5实施方式的图像处理装置10执行的处理的一例的流程图。

如图18所示，首先，控制部11从数据库20中取得对象图像(S201)。然后，控制部11计算对象图像的各像素的第1边缘量和第2边缘量(S202)。

另外，“第1边缘量”是根据像素的C_B、C_R值(色相)计算出的边缘量，是根据上述式(5)所示的像素值I而通过上述式(1)～(3)计算出的边缘量S。

另一方面，“第2边缘量”是根据像素的Y值(亮度)计算出的边缘量，是使用像素的Y值作为像素值I而通过上述式(1)～(3)计算出的边缘量S。

并且，控制部11将变量k初始化为1(S203)。然后，控制部11通过执行第k裁剪区域决定处理，决定第k裁剪区域(S204)。该步骤S204的处理与图12和图13的步骤S103～S119的处理相同。

并且，控制部11通过从对象图像中裁剪步骤S204中决定的第k裁剪区域的图像，取得第k裁剪图像40(S205)。所取得的第k裁剪图像40被保存在存储部12中。

在执行步骤S205的处理后，控制部11在变量k中加上1(S206)。然后，控制部11判定变量k是否为8以下(S207)。这里，“8”表示裁剪区域决定处理的种类的总数。

在变量k为8以下的情况下，控制部11再次执行步骤S204的处理。另一方面，在变量k不为8以下的情况下，控制部11(显示控制单元)在显示部16中显示裁剪图像选择画面(S208)。如图17所示，在裁剪图像选择画面中显示第1裁剪图像40a～第8裁剪图像40h。

在显示裁剪图像选择画面的情况下，控制部11(受理单元)受理用户进行的第1裁剪图像40a～第8裁剪图像40h中的任意一方的选择。即，控制部11监视用户是否选择了第1裁剪图像40a～第8裁剪图像40h中的任意一方(S209)。在点击第1选择按钮80a～第8选择按钮80h中的任意一方、进而点击决定按钮82的情况下，控制部11判定为用户选择了第1裁剪图像40a～第8裁剪图像40h中的任意一方。

在用户选择了第1裁剪图像40a～第8裁剪图像40h中的任意一方的情况下，控制部11将用户选择出的裁剪图像40与步骤S201中取得的对象图像(料理图像30)对应起来保存在数据库20中(S210)。即，将用户选择出的裁剪图像40作为步骤S201中取得的对象图像(料理图像30)的缩略图像保存在数据库20中。以上，结束图18所示的处理的说明。

根据以上说明的第5实施方式的图像处理装置10，用户能够从根据多个裁剪区域决定处理取得的多个裁剪图像40中选择期望的裁剪图像40。

[第6实施方式]接着，对本发明的第6实施方式进行说明。第6实施方式相当于第5实施方式的变形例。本发明的第6实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第6实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

与第5实施方式同样，在第6实施方式的图像处理装置10中，也预先准备多种裁剪区域决定处理，通过这些多种裁剪区域决定处理决定多个裁剪区域。然后，对用户提示分别与这些多个裁剪区域对应的多个裁剪图像40，用户能够选择这些多个裁剪图像40中的任意一方。

但是，在第6实施方式的图像处理装置10中，从多种裁剪区域决定处理中选择与对象图像(料理图像30)的特征一致的裁剪区域决定处理，在裁剪图像选择画面中优先显示或区别显示根据该裁剪区域决定处理取得的裁剪图像40。关于这点，第6实施方式的图像处理装置10与第5实施方式不同。

在第6实施方式的图像处理装置10中，在存储部12中存储有例如图19所示的裁剪区域决定处理数据(关联数据)。图19所示的裁剪区域决定处理数据是将边缘量的分布图案信息和裁剪区域决定处理关联起来的数据。在图19所示的裁剪区域决定处理数据中，将边缘量的分布图案信息分别与第1～第8裁剪区域决定处理相关联。另外，第1～第8裁剪区域决定处理与图16相同。

边缘量的分布图案信息是与图像的边缘量的分布图案有关的信息。例如，分布图案信息是表示上述合计值T相对于图10、11所示的图像的纵方向或横方向的变化图案的信息。即，分布图案信息是表示在与各裁剪候选区域60的位置(例如左上像素的Y轴坐标或X轴坐标)对应地表现各裁剪候选区域60的上述合计值T的情况下的、上述合计值T的变化图案的信息。换言之，分布图案信息是表示以使与各裁剪候选区域60的位置有关的第1轴(图10、11中的Y轴或X轴)和与各裁剪候选区域60的上述合计值T有关的第2轴(图10、11中的T轴)相互正交的方式设定的平面上表现的上述合计值T的变化图案的信息。例如，分布图案信息是表示根据第1边缘量(即，根据像素的C_B、C_R值计算出的边缘量)计算出的上述合计值T的上述变化图案、根据第2边缘量(即，根据像素的Y值计算出的边缘量)计算出的上述合计值T的上述变化图案的信息。

并且，例如，分布图案信息也可以是表示图像的各像素行或各像素列的边缘量的合计值的图案的信息。例如，分布图案信息也可以是表示图像的各像素行或各像素列的每一个的第1边缘量(即，根据像素的C_B、C_R值(色相)计算出的边缘量)的合计值的图案、图像的各像素行或各像素列的每一个的第2边缘量(即，根据像素的Y值(亮度)计算出的边缘量)的合计值的图案的信息。

对第6实施方式的图像处理装置10执行的处理进行说明。第6实施方式的图像处理装置10执行的处理与第5实施方式相似。即，在第6实施方式的图像处理装置10中，也执行与图18所示的处理相同的处理。但是，在第6实施方式的图像处理装置10中，步骤S208的处理与第5实施方式不同。在第6实施方式的图像处理装置10中，在步骤S208中，例如执行图20所示的处理。

即，在步骤S208中，控制部11判定步骤S201中取得的对象图像的边缘量的分布图案是否相当于第1～第8分布图案信息中的任意一方所示的分布图案(S301)。例如，控制部11根据步骤S201中取得的对象图像的像素的边缘量，判定对象图像的边缘量的分布图案是否相当于第1～第8分布图案信息中的任意一方所示的分布图案。

在判定为对象图像的边缘量的分布图案相当于第1～第8分布图案信息中的任意一方所示的分布图案的情况下，控制部11(显示控制单元)在显示部16中显示裁剪图像选择画面(S302)。该情况下，控制部11在裁剪图像选择画面中优先显示与表示对象图像的边缘量的分布图案的分布图案信息对应的裁剪图像40。

这里，“与分布图案信息对应的裁剪图像40”是通过与分布图案信息相关联的裁剪区域决定处理决定的裁剪区域的图像。例如，在图19所示的裁剪区域决定处理数据中，第4分布图案信息和第4裁剪区域决定处理相关联。因此，“与第4分布图案信息对应的裁剪图像40”是通过第4裁剪区域决定处理决定的裁剪区域(第4裁剪区域)的图像、即第4裁剪图像40d。

例如，在判定为步骤S201中取得的对象图像的边缘量的分布图案相当于第4分布图案信息所示的分布图案的情况下，控制部11在裁剪图像选择画面中优先显示第4裁剪图像40d。

例如，控制部11在预先选择了第4裁剪图像40d的状态下显示裁剪图像选择画面。即，控制部11在预先选择了第4选择按钮80d的状态下显示裁剪图像选择画面。

并且，例如，如果是以基于顺序信息的显示顺序在裁剪图像选择画面中显示第1裁剪图像40a～第8裁剪图像40h的情况，则控制部11将第4裁剪图像40d的顺位设定为第1个。

另外，在判定为步骤S201中取得的对象图像的边缘量的分布图案相当于第4分布图案信息所示的分布图案的情况下，代替在裁剪图像选择画面中优先显示第4裁剪图像40d，控制部11也可以在裁剪图像选择画面中区别显示第4裁剪图像40d。即，控制部11也可以以使第4裁剪图像40d与其他裁剪图像40进行区别的方式显示裁剪图像选择画面。

例如，控制部11以与其他裁剪图像40不同的显示形式显示第4裁剪图像40d的显示形式。并且，例如，控制部11通过仅与第4裁剪图像40d相关联地显示规定图像(例如框图像、弹出图像或星图像等)，对第4裁剪图像40d和其他裁剪图像40进行区别显示。

另外，在判定为对象图像的边缘量的分布图案不相当于第1～第8分布图案信息所示的分布图案中的任意一方的情况下，控制部11在显示部16中显示裁剪图像选择画面(S303)。该情况下，控制部11不在裁剪图像选择画面中优先显示(区别显示)任意一个裁剪图像40。

在执行步骤S302或S303后，控制部11执行图18的步骤S209的处理。以上，结束图20所示的处理的说明。

根据以上说明的第6实施方式的图像处理装置10，选择与对象图像(料理图像30)的特征(边缘量的分布图案)一致的裁剪区域决定处理，在裁剪图像选择画面中优先显示或区别显示根据该裁剪区域决定处理取得的裁剪图像40。其结果，能够使用户容易选择根据与对象图像(料理图像30)的特征一致的裁剪区域决定处理取得的裁剪图像40。

另外，在第6实施方式的图像处理装置10中，也可以根据用户在裁剪图像选择画面中进行的选择结果，更新裁剪区域决定处理数据。下面，对这种更新裁剪区域决定处理数据的结构进行说明。

在该变形例的情况下，例如在存储部12(或数据库20)中存储有图21所示的选择结果数据。在图21所示的选择结果数据中，边缘量的分布图案信息和选择结果信息相关联。另外，“边缘量的分布图案信息”与图19相同。

“选择结果信息”表示第1～第8裁剪图像40的选择次数。在图21所示的选择结果数据中，与第1分布图案信息对应的选择结果信息表示对象图像的边缘量的分布图案相当于第1分布图案所示的分布图案的情况下的裁剪图像选择画面中用户分别选择第1～第8裁剪图像40的次数。与第2～第8分布图案信息对应的选择结果信息也同样。

并且，在该变形例的情况下，在执行图18的步骤S210的处理后，控制部11执行图22所示的处理。

即，控制部11判定步骤S201中取得的对象图像的边缘量的分布图案是否相当于第1～第8分布图案信息中的任意一方所示的分布图案(S401)。该步骤S401的处理与图20的步骤S301的处理相同。

在判定为对象图像的边缘量的分布图案相当于第1～第8分布图案信息中的任意一方所示的分布图案的情况下，控制部11对与该分布图案信息对应的选择结果信息进行更新(S402)。例如，在裁剪图像选择画面中用户选择出的裁剪图像40是第1裁剪图像40a、且在步骤S401中判定为对象图像的边缘量的分布图案相当于第4分布图案信息所示的分布图案的情况下，控制部11使与第4分布图案信息对应的“第1裁剪图像40a的选择次数”增加1。

在执行步骤S402的处理后，控制部11(更新单元)根据选择结果数据更新裁剪区域决定处理数据(S403)。

例如，在图21所示的例子中，由于对象图像的边缘量的分布图案相当于第7分布图案信息所示的分布图案的情况下的选择次数最多的裁剪图像40是第8裁剪图像40h，所以，控制部11更新裁剪区域决定处理数据，以使得与第7分布图案信息对应的裁剪区域决定处理成为与第8裁剪图像40h对应的裁剪区域决定处理(即第8裁剪区域决定处理)。

并且，例如，在图21所示的例子中，由于对象图像的边缘量的分布图案相当于第8分布图案信息所示的分布图案的情况下的选择次数最多的裁剪图像40是第7裁剪图像40g，所以，控制部11更新裁剪区域决定处理数据，以使得与第8分布图案信息对应的裁剪区域决定处理成为与第7裁剪图像40g对应的裁剪区域决定处理(即第7裁剪区域决定处理)。

另外，在步骤S401中判定为对象图像的边缘量的分布图案不相当于第1～第8分布图案信息所示的分布图案中的任意一方的情况下，控制部11不执行步骤S402、S403的处理，而结束本处理。以上，结束图22的处理的说明。

如上所述，能够考虑用户的选择结果，重新进行图像的边缘量的分布图案与裁剪区域决定处理的关联。

[第7实施方式]接着，对本发明的第7实施方式进行说明。第7实施方式相当于第5实施方式的变形例。本发明的第7实施方式的图像处理装置10的硬件结构与第1实施方式相同(参照图1)。在第7实施方式的图像处理装置10中，也生成数据库20中存储的图像(料理图像30)的裁剪图像40。

与第5实施方式同样，在第7实施方式的图像处理装置10中，也预先准备多种裁剪区域决定处理(参照图16、19)。但是，在第7实施方式的图像处理装置10中，从多种裁剪区域决定处理中选择与对象图像(料理图像30)的特征一致的裁剪区域决定处理，保存根据该裁剪区域决定处理取得的裁剪图像40作为对象图像的缩略图像。关于这点，第7实施方式的图像处理装置10与第5实施方式不同。

对第7实施方式的图像处理装置10执行的处理进行说明。图23是示出第7实施方式的图像处理装置10执行的处理的一例的流程图。与第5实施方式同样，在第7实施方式的图像处理装置10中，也存储图19所示的裁剪区域决定处理数据，根据图19所示的裁剪区域决定处理数据执行图23所示的处理。

如图23所示，控制部11从数据库20中取得对象图像(S501)。并且，控制部11计算对象图像的各像素的第1边缘量和第2边缘量(S502)。该步骤S502的处理与图18的步骤S202的处理相同。

然后，控制部11判定步骤S501中取得的对象图像的边缘量的分布图案是否相当于第1～第8分布图案信息中的任意一方所示的分布图案(S503)。该步骤S503的处理与图20的步骤S301的处理相同。

在对象图像的边缘量的分布图案相当于第1～第8分布图案信息中的任意一方所示的分布图案的情况下，控制部11通过执行与该分布图案信息相关联的裁剪区域决定处理，决定裁剪区域(S504)。该步骤S504的处理与图12和图13的步骤S103～S119的处理相同。

另一方面，在对象图像的边缘量的分布图案不相当于第1～第8分布图案信息所示的分布图案中的任意一方的情况下，控制部11通过执行第1～第8裁剪区域决定处理中的规定裁剪区域决定处理(例如第1裁剪区域决定处理)，决定裁剪区域(S505)。该步骤S505的处理与图12和图13的步骤S103～S119的处理相同。

在执行步骤S504或S505的处理后，控制部11通过从对象图像中裁剪步骤S504或S505中决定的裁剪区域的图像，取得裁剪图像40，将该裁剪图像40与对象图像对应起来保存在数据库20中(S506)。并且，控制部11在显示部16中显示裁剪图像40(S507)。以上，结束图23所示的处理的说明。

根据以上说明的第7实施方式的图像处理装置10，选择与对象图像(料理图像30)的特征(边缘量的分布图案)一致的裁剪区域决定处理，保存根据该裁剪区域决定处理取得的裁剪图像40作为对象图像的缩略图像。

另外，作为选择模式，第7实施方式的图像处理装置10也可以具有第5实施方式和第6实施方式中说明的结构。即，在第7实施方式的图像处理装置10中，用户可以选择图23所示的处理和图18所示的处理中的任意一方。而且，在用户选择了图18所示的处理的情况下，也可以执行图22所示的处理(即，裁剪区域决定处理数据的更新处理)。

另外，本发明不限于以上说明的第1～第7实施方式。

[1]例如，以上，作为对象图像的裁剪图像40，设取得一边长度与对象图像的短边长度相等的正方形图像来进行说明。即，将一边长度与对象图像的短边长度相等的正方形区域设定为裁剪候选区域60来进行说明。

但是，作为对象图像的裁剪图像40，也可以取得一边长度与对象图像的短边长度不同的正方形图像。即，也可以将一边长度与对象图像的短边长度不同的正方形区域设定为裁剪候选区域60。并且，作为对象图像的裁剪图像40，还可以取得长方形图像。即，还可以将长方形区域设定为裁剪候选区域60。

这里，对从对象图像取得纵边长度为ha、横边长度为wa的矩形图像作为裁剪图像40的情况进行说明。即，对将图24所示的纵边长度为ha、横边长度为wa的矩形区域设定为裁剪候选区域60的情况进行说明。图25和图26是示出取得上述矩形图像作为裁剪图像40的情况下图像处理装置10执行的处理的一例的流程图。

如图25所示，首先，控制部11从数据库20中取得对象图像(S601)。然后，控制部11计算对象图像的各像素的边缘量(S602)。步骤S601、S602的处理与图12的步骤S101、S102相同。

并且，控制部11将变量i、j、p_x、p_y、E_max分别初始化为零(S603)。然后，控制部11计算左上像素为(i,j)、且纵边和横边长度分别为ha、wa的矩形区域(裁剪候选区域60)的评价值E(S604)。步骤S604的处理与图12的步骤S105、S112相同。

在执行步骤S604的处理后，控制部11判定步骤S604中计算出的评价值E是否大于变量E_max(S605)。在评价值E大于变量E_max的情况下，控制部11将步骤S604中计算出的评价值E设置为变量E_max(S606)。并且，控制部11将变量i、j分别设置为变量p_x、p_y(S607)。通过步骤S605～S607的处理，变量E_max表示评价值E的最大值，变量p_x、p_y表示评价值E为最大值的情况下的变量i、j的值。

在执行了步骤S606、S607的处理的情况下、或在步骤S605中判定为评价值E不大于变量E_max的情况下，控制部11在变量j中加上1(S608)。然后，控制部11判定变量j是否为值(h-ha-1)以下(S609)。

在变量j为值(h-ha-1)以下的情况下，控制部11再次执行步骤S604的处理。另一方面，在变量j不为值(h-ha-1)以下的情况下，控制部11在变量i中加上1(S610)。然后，控制部11判定变量i是否为值(w-wa-1)以下(S611)。

在变量i为值(w-wa-1)以下的情况下，控制部11将变量j初始化为零(S612)，再次执行步骤S604的处理。另一方面，在变量i不为值(w-wa-1)以下的情况下，控制部11将左上像素为(p_x,p_y)、且纵边和横边分别为ha、wa的矩形区域决定为裁剪区域(S613)。

然后，控制部11取得裁剪图像40(S614)。即，控制部11通过从对象图像中切出步骤S613中决定的裁剪区域内的图像，取得裁剪图像40。然后，控制部11将裁剪图像40与对象图像对应起来保存在数据库20中。并且，控制部11在显示部16中显示步骤S614中取得的裁剪图像40(S615)。以上，结束图25和图26的处理的说明。

[2]并且，例如，在存在不存在具有基准量以上的边缘量的像素的部分的情况下，裁剪图像取得部56也可以从裁剪图像取得部56取得的裁剪图像40的端部去除该部分。

图27示出裁剪图像40的一例。在图27中，标号90a表示裁剪图像40的第1边。并且，标号90b、90c表示裁剪图像40的与第1边90a正交的第2边和第3边。并且，标号90d表示与第1边90a平行的直线、并且与第2边90b和第3边90c正交的直线。并且，裁剪图像40内的斜线区域92是由第1边90a、第2边90b、第3边90c、直线90d包围的区域。例如，在斜线区域92内不存在具有基准量以上的边缘量的像素的情况下，裁剪图像取得部56也可以从裁剪图像40中去除斜线区域92。

例如，在从料理图像30取得的裁剪图像40的斜线区域92内不存在具有基准量以上的边缘量的像素的情况下，多数情况下，斜线区域92不是拍摄了料理的区域，而是例如拍摄了桌子等的区域。因此，如上所述，能够去除不需要的区域。

[3]并且，例如，以上说明了在数据库20中存储有投稿者投稿的料理图像30的情况，数据库20中存储的图像不限于料理图像30。本发明还能够应用于根据料理图像30以外的图像生成裁剪图像(缩略图像)的情况。

Claims (14)

1.一种图像处理装置，其特征在于，该图像处理装置包括：

设定单元，其在对象图像内设定多个裁剪候选区域；

计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；

决定单元，其根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

取得单元，其取得所述裁剪区域内的图像，

所述图像处理装置还包括存储关联数据的单元，该关联数据是将分布图案信息与多种裁剪区域决定处理中的各个裁剪区域决定处理关联起来的数据，该分布图案信息是与图像的边缘量的分布图案有关的信息，该多种裁剪区域决定处理是用于从所述多个裁剪候选区域中决定出所述裁剪区域的处理，

所述决定单元通过与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域。

2.根据权利要求1所述的图像处理装置，其特征在于，

所述决定单元包括如下单元：通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，

所述图像处理装置还包括：

显示控制单元，其使显示单元显示所述多个裁剪区域的图像；

受理单元，其受理用户针对所述多个裁剪区域的图像中的至少一方的选择；以及更新单元，其根据所述用户的选择结果更新所述关联数据。

3.根据权利要求1所述的图像处理装置，其特征在于，

所述决定单元通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，

所述图像处理装置包括：

显示控制单元，其使显示单元显示所述多个裁剪区域的图像；以及

受理单元，其受理用户针对所述多个裁剪区域的图像中的至少一方的选择，

所述显示控制单元优先显示或区别显示所述多个裁剪区域的图像中的、对应于与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理的裁剪区域的图像。

4.根据权利要求3所述的图像处理装置，其特征在于，

所述图像处理装置包括更新单元，该更新单元根据所述用户的选择结果更新所述关联数据。

5.根据权利要求1～4中的任意一项所述的图像处理装置，其特征在于，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，将所述多个裁剪候选区域中的、所述合计值最大的裁剪候选区域决定为所述裁剪区域；以及

另一种是，将所述多个裁剪候选区域中的、对所述合计值除以该裁剪候选区域中的至少一个边界部分的像素的边缘量的合计值而得到的除法值最大的裁剪候选区域决定为所述裁剪区域，该至少一个边界部分是所述裁剪候选区域的上侧边界部分、下侧边界部分、左侧边界部分和右侧边界部分中的至少一方，并且，该上侧边界部分是包含与所述裁剪候选区域的上侧边界线对应的像素行的1个或多个像素行，该下侧边界部分是包含与所述裁剪候选区域的下侧边界线对应的像素行的1个或多个像素行，该左侧边界部分是包含与所述裁剪候选区域的左侧边界线对应的像素列的1个或多个像素列，该右侧边界部分是包含与所述裁剪候选区域的右侧边界线对应的像素列的1个或多个像素列。

6.根据权利要求1～4中的任意一项所述的图像处理装置，其特征在于，

所述计算单元包括：

第1计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第1边缘量的合计值作为第1合计值；以及

第2计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第2边缘量的合计值作为第2合计值，

所述第1边缘量是有关于所述像素与该像素的周边像素之间的色相差的量，

所述第2边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第1合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

另一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第2合计值，从所述多个裁剪候选区域中决定出裁剪区域。

7.根据权利要求5所述的图像处理装置，其特征在于，

所述计算单元包括：

第1计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第1边缘量的合计值作为第1合计值；以及

第2计算单元，其针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第2边缘量的合计值作为第2合计值，

所述第1边缘量是有关于所述像素与该像素的周边像素之间的色相差的量，

所述第2边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第1合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

另一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第2合计值，从所述多个裁剪候选区域中决定出裁剪区域。

8.一种图像处理装置的控制方法，其特征在于，该图像处理装置的控制方法包括：

设定步骤，在对象图像内设定多个裁剪候选区域；

计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的边缘量的合计值；

决定步骤，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

取得步骤，取得所述裁剪区域内的图像，

所述图像处理装置的控制方法还包括如下步骤，在该步骤中参照存储关联数据的单元的存储内容的至少一部分，该关联数据是将分布图案信息与多种裁剪区域决定处理中的各个裁剪区域决定处理关联起来的数据，该分布图案信息是与图像的边缘量的分布图案有关的信息，该多种裁剪区域决定处理是用于从所述多个裁剪候选区域中决定出所述裁剪区域的处理，

在所述决定步骤中，通过与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域。

9.根据权利要求8所述的图像处理装置的控制方法，其特征在于，

所述决定步骤包括如下步骤：通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，

所述图像处理装置的控制方法还包括：

显示控制步骤，使显示单元显示所述多个裁剪区域的图像；

受理步骤，受理用户针对所述多个裁剪区域的图像中的至少一方的选择；以及

更新步骤，根据所述用户的选择结果更新所述关联数据。

10.根据权利要求8所述的图像处理装置的控制方法，其特征在于，

在所述决定步骤中，通过所述多种裁剪区域决定处理中的各个裁剪区域决定处理，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述合计值从所述多个裁剪候选区域中决定出所述裁剪区域，由此，决定分别与所述多种裁剪区域决定处理对应的多个裁剪区域，

所述图像处理装置的控制方法包括：

显示控制步骤，使显示单元显示所述多个裁剪区域的图像；以及

受理步骤，受理用户针对所述多个裁剪区域的图像中的至少一方的选择，

在所述显示控制步骤中，优先显示或区别显示所述多个裁剪区域的图像中的、对应于与所述对象图像的边缘量的分布图案相关联的裁剪区域决定处理的裁剪区域的图像。

11.根据权利要求10所述的图像处理装置的控制方法，其特征在于，

所述控制方法包括更新步骤，在该更新步骤中，根据所述用户的选择结果更新所述关联数据。

12.根据权利要求8～11中的任意一项所述的图像处理装置的控制方法，其特征在于，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，将所述多个裁剪候选区域中的、所述合计值最大的裁剪候选区域决定为所述裁剪区域；以及

另一种是，将所述多个裁剪候选区域中的、对所述合计值除以该裁剪候选区域中的至少一个边界部分的像素的边缘量的合计值而得到的除法值最大的裁剪候选区域决定为所述裁剪区域，该至少一个边界部分是所述裁剪候选区域的上侧边界部分、下侧边界部分、左侧边界部分和右侧边界部分中的至少一方，并且，该上侧边界部分是包含与所述裁剪候选区域的上侧边界线对应的像素行的1个或多个像素行，该下侧边界部分是包含与所述裁剪候选区域的下侧边界线对应的像素行的1个或多个像素行，该左侧边界部分是包含与所述裁剪候选区域的左侧边界线对应的像素列的1个或多个像素列，该右侧边界部分是包含与所述裁剪候选区域的右侧边界线对应的像素列的1个或多个像素列。

13.根据权利要求8～11中的任意一项所述的图像处理装置的控制方法，其特征在于，

所述计算步骤包括：

第1计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第1边缘量的合计值作为第1合计值；以及

第2计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第2边缘量的合计值作为第2合计值，

所述第1边缘量是有关于所述像素与该像素的周边像素之间的色相差的量，

所述第2边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第1合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

另一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第2合计值，从所述多个裁剪候选区域中决定出裁剪区域。

14.根据权利要求12所述的图像处理装置的控制方法，其特征在于，

所述计算步骤包括：

第1计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第1边缘量的合计值作为第1合计值；以及

第2计算步骤，针对所述多个裁剪候选区域中的各个裁剪候选区域，计算该裁剪候选区域内的像素的第2边缘量的合计值作为第2合计值，

所述第1边缘量是有关于所述像素与该像素的周边像素之间的色相差的量，

所述第2边缘量是有关于所述像素与该像素的周边像素之间的亮度差的量，

所述多种裁剪区域决定处理包括如下两种裁剪区域决定处理：

一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第1合计值，从所述多个裁剪候选区域中决定出裁剪区域；以及

另一种是，根据所述多个裁剪候选区域中的各个裁剪候选区域的所述第2合计值，从所述多个裁剪候选区域中决定出裁剪区域。