CN100426830C - 用于对图像布局的方法、设备 - Google Patents

Abstract

本发明涉及根据其中成像的人物面部的大小来适当地布局图像。用户选择要在单一背景图像上布局的多个图像。布局确定部分从每个都具有一个或多个不同尺寸的图像插入区域的多个模板中，选择具有与由用户所选择的图像的数量相同数量的图像插入区域的模板。判断在图像中是否包括了面部。确定图像的布局，使得当代表性面部的尺寸较小时在模板的具有较大尺寸的图像插入区域中插入包括了面部的图像；将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。

Description

用于对图像布局的方法、设备

技术领域

本发明涉及用于在单一背景图像上布局(lay out)多个图像的方法、设备和程序。

背景技术

在包含人物作为主题的图像中，在图像中成像的人物的位置是非常重要的。尤其是对于用于护照等的ID照片来说，必须在预定尺寸的图像中的预定位置以预定尺寸拍摄面部。由于这个原因，已开发出了这样的技术，其用来从图像中抽取出面部、调整图像并改变其尺寸以便图像中的面部具有预定的尺寸并处于预定的位置(参见日本未审专利公开No.11(1999)-341272、2000-270198和2000-270199)。

在欧洲专利申请公开文本No.1005220中还提出了一种用来产生例如年鉴等的相簿的技术。在这项技术中，面部区域从拍照人获得的图像中抽取出来。抽取出的面部区域被标准化并粘贴到单一背景上。根据这项技术，包括在相簿中的多个人物的面部图像的尺寸是相同的，因此可以产生很吸引人的相簿。

但是，在很多情况，当在旅行、运动会等中拍摄获得图像时会有多个人而不是一个人成像。在这些情况下，在单一图像中成像的面部相比于在图像中只包括有一个人时的情况要小。此外，在由拍照的人在场景背景前捕获图像的情况下，主题并不是人物而是风景。因此，在这些图像中人物面部尺寸会非常小。由于这些原因，如果其中成像的人物面部很小的图像被布局到单一背景上，并且面部尺寸如前述的ID照片或相簿的情况而被标准化了，则必须要显著地放大图像。此外，如果在放大的图像中调整了人物成像的部分，则图像的意境就会损失很多。特别是在图像的主题是背景的情况下，其中成像的人物面部会非常小。因此，如果使面部尺寸标准化并关于面部区域来调整图像，背景就几乎不会包括在调整后的图像中，这导致了该图像与拍摄者想要的完全不同。此外，存在要将图像布局到其中的背景图像的图像插入区域大小不同的情况。在这些情况中，如果将其中成像的人物面部小的图像插入到很小的图像插入区域中，则必须要减小图像的尺寸。因此，辨别在图像中成像的是谁是很困难的。

发明内容

鉴于以上的情况而做出了本发明。本发明的一个目的是提供一种用来对图像进行布局的方法、设备和程序，其能根据其中成像的人物面部的尺寸而适当地对图像进行布局。

根据本发明的图像布局设备包括：

图像选择装置，其用来选择要在单一背景图像上布局的多个图像；和

布局确定装置，其通过如下来确定图像的布局：

从每个都具有一个或多个不同尺寸的图像插入区域的多个模板中，选择具有与由图像选择装置所选择的图像的数量相同数量的图像插入区域的模板；

判断在图像中是否包括面部；

当代表性面部的尺寸较小时将包括了面部的图像插入在模板的具有较大尺寸的图像插入区域中；和

将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。

在图像只包括了一张面部的情况下，“代表性面部”就是该单一面部。在图像包括了多张面部时，“代表性面部”是在这些面部中最大的面部。

可以采用如下的构造，其中：

将图像插入到模板的图像插入区域的顺序限定为按照从最大的图像插入区域到最小的图像插入区域的顺序；和

布局确定装置通过确定要插入的图像的顺序来确定多个图像的图像布局，以使得首先插入包括最小的面部的图像。

根据本发明的图像布局方法包括步骤：

选择要在单一背景图像上布局的多个图像；

从每个都具有一个或多个不同尺寸的图像插入区域的多个模板中，选择具有与由图像选择装置所选择的图像的数量相同数量的图像插入区域的模板；

判断在图像中是否包括面部；

当代表性面部尺寸较小时，将包括了面部的图像插入在模板的具有较大尺寸的图像插入区域中；和

将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。

要注意的是，本发明的图像布局方法可以是以让计算机执行该方法的程序的形式而提供。

还应注意的是，本发明的程序可以记录在计算机可读介质上而提供。本领域的技术人员应当明白的是，计算机可读介质并不限于任何具体类型的设备，包括但不限于：在其中可以存储和/或传输计算机指令的软盘、CD、RAM、ROM、硬盘、磁带和互联网下载。通过网络或无线传输装置进行的计算机指令的传输也包括在本发明的范围中。此外，计算机指令包括(但不限于)：源、目标、可执行代码，并且可以用任意语言，这包括较高级的语言、汇编语言和机器语言。

根据本发明，选择要在单一背景图像上布局的多个图像。接着，选择具有与所选择的图像的数量相同数量的图像插入区域的模板。随后，判断在图像中是否包括了面部，并确定图像的布局，使得当代表性面部的尺寸较小时在模板的具有较大尺寸的图像插入区域中插入该包括有面部的图像。同时，将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。从而，在较大的图像插入区域中插入其中成像的面部尺寸小的图像。因此，能克服辨别在图像中成像的是谁的困难。此外，由于面部尺寸不被标准化，因此在图像的主题是背景并且其中成像的人物面部的尺寸小的情况下，也能安排该图像以很明显的看出背景为主题。要注意的是，在较小的图像插入区域中插入其中成像的面部尺寸大的图像。但是，由于面部尺寸大，因此即便图像插入区域小，也能克服辨别成像的是谁的困难。因此能根据其中成像的面部的尺寸而适当地对图像进行布局。

附图说明

图1是显示根据本发明的实施例的图像布局设备的示意性构造的框图。

图2是显示由图1的图像布局设备所执行的处理的流程图。

图3显示了图像选择屏的实例。

图4显示了模板管理数据库的实例。

图5显示了所选择的模板的实例。

图6显示了插入顺序表的实例。

图7显示了布局图像的实例。

图8是显示集成了根据本发明的图像布局设备的订单接收设备(order reception apparatus)的示图。

具体实施方式

以下，将参考附图描述本发明的实施例。图1是显示根据本发明的实施例的图像布局设备1的示意性构造的框图。如图1所示，图像布局设备1包括：CPU 12，其用于控制表示图像的图像数据组的记录、显示以及其他方面；系统存储器14，其包括在其中记录有用于操作设备1的程序和各种常量的ROM，和在CPU执行处理时作为工作空间的RAM；输入部分，其由例如键盘和鼠标等构成，并用于给设备1发送命令；和显示部分18，其由LCD监视器等构成。

图像布局设备1还包括：卡槽20，其用来从记录有图像数据组的存储卡2中读取出图像数据组，以及将图像数据组记录到存储卡2中；压缩/解压缩部分22，其用来压缩诸如JPEG格式的图像数据组，以及对压缩的图像数据组解压缩；硬盘24，在其中记录有表示多个图像要被布局在其中的背景模板的模板数据组，和诸如用来浏览图像的浏览器软件等的由CPU执行的程序；存储控制部分26，其用来控制系统存储器14、卡槽20和硬盘24；显示控制部分28，其用来控制显示部分18的显示；和打印机接口30，其用来将打印机3连接到图像布局设备1。

图像布局设备1还包括：布局确定部分32，其用来确定要插入到模板中的图像的布局；和布局图像产生部分34，其用来根据由布局确定部分32所确定的布局而对图像进行布局，以产生布局图像。

以下，将结合由本实施例的设备1所执行的处理来描述布局确定部分32和布局图像产生部分34的功能。

图2是显示由本发明的图像布局设备1所执行的处理的流程图。当用户从输入部分16输入布局命令时，CPU 12开始处理。首先，在显示部分18上显示包括了存储在硬盘24中的图像的缩略图的图像选择屏(步骤ST1)。图3显示了图像选择屏40的一个实例。如图3中所示，图像选择屏40包括：缩略图区域40A，其中显示存储在硬盘24中的图像的缩略图；和输入区域40B，其用来执行各种类型的输入。在输入区域40B中显示的“确定”按钮40C用来确认要被布局的图像。

用户能够通过使用输入部分16从图像选择屏40中选择多个要被布局的图像。具体地，要被布局的图像可以通过在缩略图区域40A中点击想要的图像而选择。

接着，开始监控，以确定用户是否已经点击了“确定”按钮40C来表明他们已经选择了要被布局的图像(步骤ST2)。当点击“确定”按钮40C时，布局确定部分32从存储在硬盘24中的多个模板中选择相应于所选择的图像的数量的模板(步骤ST3)。

在本发明的实施例中，在硬盘24中存储有模板管理数据库DB1。模板管理数据库DB1将图像数与具有相应的图像插入区域数的模板的模板ID相关联。图4显示了模板管理数据库DB1的一个实例。如图4所示，在模板管理数据库DB1中，图像数与具有相应的图像插入区域数的模板数据组的模板ID彼此关联。要注意的是，包括在模板数据组的文件名中的数值可以用作模板ID。

在步骤ST2中判断出了用户已经点击了“确定”按钮40C后，布局确定装置参考模板数据库DB1，并选择相应于由用户所选择的图像数的模板ID。接着，从硬盘24中，通过读取由模板ID所指定的模板数据组而选择模板。例如，如图5所示，在用户已经选择了八个图像的情况下，选择具有八个不同尺寸的图像插入区域的模板。在本实施例中，限定了图像插入到模板的图像插入区域的顺序。具体地，插入顺序限定为从最大的图像插入区域到最小的图像插入区域。例如，在图5中所示的模板中，左上方的图像插入区域42A和右下方的图像插入区域42B是两个最大的图像插入区域。因此，将第1和第2插入顺序分别指定给这两个图像插入区域。将第3和第4插入顺序指定给接下来最大的图像插入区域42C和42D。要注意的是，在多个图像插入区域的尺寸相同的情况下，可以适当地在它们中指定顺序。在图5的实例中，图像插入区域42E、42F、42G和42H的尺寸相同，因此随机地在它们中指定第5到第8的插入顺序。

接着，将按文件名等分类的多个所选择的图像中的第一图像指定为处理目标(步骤ST4)，并对其进行面部检测处理以从中抽取面部区域(步骤ST5)。要注意的是，作为抽取面部区域的方法，在人的面部形状(例如，椭圆形)中的皮肤色区域可以从图像中检测并抽取出来作为面部区域。替换地，可以使用在日本未审专利公开8(1996)-153187、9(1997)-050528、2001-014474、2001-175868和2001-209795中公开的面部区域抽取方法或其他公知的方法。

随后，布局确定部分32判断所抽取处的面部数量(步骤ST6)。在判断出图像不包含面部的情况下，也就是说，抽取的面部数量为0，则该图像被指定为没有代表性面部的图像(步骤ST7)。接着，将该处理目标图像的文件名添加到插入顺序表的“没有成像的代表性面部”表中(步骤ST8)，其中所述插入顺序表限定了图像要被插入到模板的图像插入区域的顺序。插入顺序表将在后面详细描述。

同时，在抽取的面部区域数量为1的情况下，所抽取的面部区域的面部被指定为代表性面部(步骤ST9)，而在抽取的面部区域数量为二或更多的情况下，将抽取的最大的面部区域的面部指定为代表性面部(步骤ST10)。接着，将该图像添加到插入顺序表的“成像的代表性面部”表中，从而代表性面部的尺寸越小则在表中顺序越高(步骤ST11)。

接着，判断是否还有余下的要被处理的图像(步骤ST12)。在步骤ST12中的判断是肯定的情况下，将下一个图像指定为要处理的目标图像(步骤ST13)，处理返回到步骤ST5，并重复步骤ST5和后面的步骤。

在步骤ST12中的判断是否定的情况下，将“没有成像的代表性面部”表添加到“成像的代表性面部”表的末端以完成该插入顺序表，从而确定图像的布局(步骤ST14)。图6显示了插入顺序表的一个实例。如图6中所示，插入顺序表L0包括“成像的代表性面部”表L1和“没有成像的代表性面部”表L2。通过步骤ST14的处理将“没有成像的代表性面部”表添加到“成像的代表性面部”表的末端。由用户选择的图像的文件名按照代表性面部尺寸递增的顺序列在“成像的代表性面部”表L1中。在其中没有成像的面部的图像的文件名按照文件名的顺序列在“没有成像的代表性面部”表L2中。

要注意的是，由用户所选择的八个图像中的六个都具有面部，而两个没有。因此，六个图像的文件名按照代表性面部的尺寸递增的顺序列在“成像的代表性面部”表中，而两个图像的文件名按照文件名的顺序列在“没有成像的代表性面部”表中。这里，文件名“DSCF0013.jpg”、“DSCF0002.jpg”、“DSCF0054.jpg”、“DSCF0005.jpg”、“DSCF0023.jpg”和“DSCF0012.jpg”以这样的顺序列在“成像的代表性面部”表中。因此，具有文件名“DSCF0013.jpg”的图像中成像的代表性面部尺寸是最小的，而具有文件名“DSCF0012.jpg”的图像中成像的代表性面部尺寸是最大的。

随后，布局图像产生部分34参照插入顺序表L0，以列出的图像文件名的顺序将图像插入到模板的图像插入区域中，从而产生布局图像(步骤ST15)。布局图像由显示部分18显示(步骤ST16)，处理结束。要注意的是，布局图像可以由打印机3打印输出。

图7显示了布局图像的一个实例。如图7中所示，将图像按序插入到图像插入区域42A到42F，使得其中成像的面部的相对尺寸在开始时最小，随后依次增大。将其中没有成像人物的图像插入到图像插入区域42G和42H。

在本实施例中，确定图像的布局，使得当代表性面部尺寸较小时将包括了面部的图像插入在具有较大尺寸的模板的图像插入区域中。从而，使其中成像的面部尺寸小的图像插入到较大的图像插入区域中。因此，能克服辨别图像中成像的究竟是谁的困难。此外，由于面部尺寸不是标准化的，因此在图像的主题是背景并且其中成像的人物面部尺寸小的情况下，能排列图像以很明显的看出背景为主题。要注意的是，将其中成像的面部尺寸大的图像插入到较小的图像插入区域中。但是，由于面部尺寸大，因此即便图像插入区域小，也能克服区分是谁成像的困难。因此，能根据其中成像的面部尺寸而适当地对图像进行布局。

要注意的是，在上述实施例中，图像布局设备1以单机的方式使用。替换地，也可如图8所示，将图像布局设备1应用于安装在DPE店中的订单接收设备50。在这种情况下，用户可将存储卡插入到在订单接收设备50中所提供的卡槽52中，并从在存储卡中所记录的图像中选择多个图像来布局。要注意的是，订单接收设备50的监视器54包括触摸面板型输入部分，并且能够通过触摸监视器54而输入诸如图像选择等的命令。

订单接收设备50执行与以上的描述相同的处理，产生布局图像，并在监视器54上显示所产生的布局图像。接着，用户能够向订单接收设备50输入打印命令，来让与其连接的打印机56打印输出布局图像。

要注意的是，在上述的实施例中，将图像插入到模板的图像插入区域的顺序按照从最大的图像插入区域到最小的图像插入区域的顺序限定，并且确定图像布局以使包括了最小面部的图像首先被插入。替换地，将图像插入到模板的图像插入区域的顺序也可以按照从最小的图像插入区域到最大的图像插入区域的顺序限定。在这种情况下，确定图像布局以使包括了最大面部的图像首先被插入。

以上描述了根据本发明的实施例的图像布局设备。能使计算机具有布局确定部分32和布局图像产生部分34的功能以执行在图2中所示的处理的程序也是本发明的实施例。此外，其中记录有这样的程序的计算机可读介质也是本发明的实施例。

Claims (3)

1.一种图像布局设备，包括：

图像选择装置，其用来选择要在单一背景图像上布局的多个图像；和

布局确定装置，其用来通过以下确定图像的布局：

从每个都具有一个或多个不同尺寸的图像插入区域的多个模板中，选择具有与由所述图像选择装置所选择的图像的数量相同数量的图像插入区域的模板；

判断在图像中是否包括面部；

当图像的代表性面部的尺寸较小时，将该图像插入在模板中具有较大尺寸的图像插入区域中，其中图像的代表性面部是指在该图像中抽取的、具有最大面部区域的面部；和

将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。

2.根据权利要求1的图像布局设备，其中：

将图像插入到模板的图像插入区域的顺序限定为按照从最大的图像插入区域到最小的图像插入区域的顺序；和

所述布局确定装置通过确定要插入的图像的顺序来确定多个图像的图像布局，图像按照代表性面部的尺寸递增的顺序排列，以使得首先插入包括最小尺寸代表性面部的图像。

3.一种图像布局方法，包括步骤：

选择要在单一背景图像上布局的多个图像；

从每个都具有一个或多个不同尺寸的图像插入区域的多个模板中，选择具有与由图像选择装置所选择的图像的数量相同数量的图像插入区域的模板；

判断在图像中是否包括面部；

当图像的代表性面部的尺寸较小时，将该图像插入在模板中具有较大尺寸的图像插入区域中，其中图像的代表性面部是指在该图像中抽取的、具有最大面部区域的面部；和

将不包括面部的图像插入到模板的具有较小尺寸的图像插入区域中。

Images