CN104584081B - 信息处理设备、信息处理方法和程序 - Google Patents

信息处理设备、信息处理方法和程序 Download PDF

Info

Publication number
CN104584081B
CN104584081B CN201380044223.1A CN201380044223A CN104584081B CN 104584081 B CN104584081 B CN 104584081B CN 201380044223 A CN201380044223 A CN 201380044223A CN 104584081 B CN104584081 B CN 104584081B
Authority
CN
China
Prior art keywords
image
layout
information processing
page
processing equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201380044223.1A
Other languages
English (en)
Other versions
CN104584081A (zh
Inventor
村田诚
佐藤浩司
涩谷直树
冈村祐纪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104584081A publication Critical patent/CN104584081A/zh
Application granted granted Critical
Publication of CN104584081B publication Critical patent/CN104584081B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00132Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture in a digital photofinishing system, i.e. a system where digital photographic images undergo typical photofinishing processing, e.g. printing ordering
    • H04N1/00185Image output
    • H04N1/00196Creation of a photo-montage, e.g. photoalbum
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/387Composing, repositioning or otherwise geometrically modifying originals
    • H04N1/3872Repositioning or masking

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)
  • Editing Of Facsimile Originals (AREA)

Abstract

提供有一种信息处理设备,包括:评估值计算单元,其基于有关与作为选择的图像的候选的每个相应的候选图像对应的图像的信息,计算每个相应的候选图像的评估值;页分配单元,其基于有关布局的参数确定页的数量,并且基于所述有关布局的参数和所计算的评估值确定在每页中布置的图像的数量;图像选择单元,其基于所述有关布局的参数和所计算的评估值从候选图像中选择图像;以及布局生成单元,其基于所述有关布局的参数和对应于所选择的图像的评估值针对每页生成布置所选择的图像的布局。

Description

信息处理设备、信息处理方法和程序
技术领域
本公开内容涉及一种信息处理设备、信息处理方法及程序。
背景技术
存在从多个图像(静止图像或运动图像:这同样用于下文)生成照片书(或相册:这同样用于下文)的应用。应用的示例包括在预先定义了布局的模板中布置图像的应用和自动生成基于矩形网格的布局并且根据所生成的布局来布置图像的应用。
用于利用基于移动图像的动画布局来布置图像的技术已被开发。用于利用基于移动图像的动画布局来布置图像的技术包括例如下面的专利文献1中公开的技术。
引用列表
专利文献
专利文献1:JP 2010-191934A
发明内容
技术问题
如上文所述,例如,可以通过使用相关领域生成照片书的应用来生成照片书。
此处,例如,当如在模板中布置图像的应用中那样基于模板生成照片书时,取决于模板的构造可能生成高质量的照片书。然而,当基于模板生成照片书时,布局模式(或设计模式)被固定,并且布局模式是有限的。因此,用户可能很容易变得厌倦。此外,当基于模板生成照片书时,为了增加布局模式的数量,需要包括设计器的构造。
例如,当如在自动生成基于矩形网格的布局并且根据所生成的布局来布置图像的应用中那样动态生成布局时,布局模式是固定的这一问题很少发生,需要包括设计器的构造这一问题也不会像基于模板生成照片书的情况下那样发生。然而,由于相关领域的动态生成布局的应用生成基于矩形网格的布局,因此该布局可能很容易变得单调。为此,当相关领域的动态生成布局的应用被使用时,在某些情况下,需要用户手动地编辑布局。
因此,例如,如上所述,即使在相关领域的生成照片书的应用被使用的情况下,也难以期望能够自动生成高质量的照片书。
例如,在专利文献1的技术中,从运动图像中提取的有效图像和动画布局被布置为容易理解运动图像的内容。因此,例如,当专利文献1的技术被使用时,布局模式是固定的这一问题就很少发生,并且需要包括设计器的构造的问题也不会如在基于模板生成照片书的情况下那样发生。然而,例如,由于专利文献1的技术是用于方便理解运动图像的内容的技术,因此还没有考虑用于生成高质量的照片书。因此,例如,即使在专利文献1的技术被使用的情况下,高质量的照片书也可能不会被称为是自动生成的。
期望提供一种能够自动生成布局来生成高质量照片书的新颖的且改进的信息处理设备、新颖的且改进的信息处理方法,以及新颖的且改进的程序
问题的解决方案
根据本公开内容,提供一种信息处理设备,包括:评估值计算单元,其被配置为基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;页分配单元,其被配置为基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;图像选择单元,其被配置为基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及布局生成单元,其被配置为基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
根据本公开内容,提供一种信息处理方法,该方法包括步骤:基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
根据本公开内容,提供一种程序,该程序使计算机执行步骤:基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
发明的有益效果
根据本公开的实施例,可以自动生成布局以生成高质量的照片书。
附图说明
图1是例示根据实施例的高质量照片书的第一示例的说明图。
图2是例示根据实施例的高质量照片书的第二示例的说明图。
图3是例示根据实施例的高质量照片书的第三示例的说明图。
图4是例示根据实施例的高质量照片书的第四示例的说明图。
图5是例示根据实施例的高质量照片书的第五示例的说明图。
图6是例示根据实施例的高质量照片书的第六示例的说明图。
图7是例示根据实施例的高质量照片书的第七示例的说明图。
图8是例示根据实施例的高质量照片书的第八示例的说明图。
图9是例示根据实施例的高质量照片书的第九示例的说明图。
图10是例示根据实施例的高质量照片书的第十示例的说明图。
图11是例示与根据实施例的布局有关的参数的说明图。
图12是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第一示例的说明图。
图13是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第二示例的说明图。
图14是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第三示例的说明图。
图15是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第四示例的说明图。
图16是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第五示例的说明图。
图17是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第六示例的说明图。
图18是例示作为通过使用与根据实施例的布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果而生成的布局的第七示例的说明图。
图19是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图20是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图21是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图22是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图23是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图24是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图25是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图26是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图27是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图28是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图29是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图30是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图31是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图32是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图33是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图34是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图35是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图36是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图37是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图38是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图39是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图40是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图41是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图42是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图43是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图44是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图45是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图46是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图47是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图48是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图49是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图50是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图51是例示与根据实施例的信息处理方法有关的处理的示例的说明图。
图52是例示根据实施例的信息处理设备的配置的示例的框图。
图53是例示根据实施例的信息处理设备的硬件配置的示例的说明图。
具体实施方式
在下文中,将参照附图详细描述本发明的优选实施例。请注意:在本说明书和附图中,用相同的附图标记来表示具有基本相同功能和结构的元件,并且省略对这些元件的重复性说明。
在下文中,将按如下顺序进行描述。
1.根据实施例的信息处理方法
2.根据实施例的信息处理装置
3.根据实施例的程序
(根据实施例的信息处理方法)
在描述根据实施例的信息处理设备的配置之前,将首先描述根据实施例的信息处理方法。在下文中,将描述根据实施例的信息处理方法,以例示根据实施例的信息处理设备执行与根据实施例的信息处理方法有关的处理的情况。
[1]根据实施例的高质量的照片书的示例
在描述根据实施例的信息处理设备中的与根据实施例的信息处理方法有关的处理之前,将首先描述根据实施例的高质量的照片书的示例。
[A]高质量照片书的第一示例:余白
图1是例示根据实施例的高质量照片书的第一示例的说明图,并且是例示与余白有关的质量的说明图。图1所示的A和图1所示的B中的每个为根据实施例的高质量照片书的示例。
此处,根据实施例的余白例如是在布置有生成的布局的图像的页中图像未布置到的外围部分的区域。在下文中,例如,如图1的B所示,除了余白(图像未布置到的外围部分)之外,在布置有生成的布局的图像的页中图像未布置到的部分的区域被称为“空白”。
例如,如图1的A和图1的B所示,根据实施例的高质量照片书的示例包括上余白与下余白相同(或基本相同;这同样适用于下文)的照片书、右余白与左余白相同的照片书,以及在跨页的间隔中的余白(例如,图1的A中的图像之间的余白)相同的照片书。例如,当上余白与下余白、右余白与左余白以及在跨页的间隔中的余白被布置为相同时,用户可以具有整齐的印象,因此可以提高照片书的质量。
[B]高质量照片书的第二示例:稀疏性和稠密性
图2是例示根据实施例的高质量照片书的第二示例的说明图,并且是例示与稀疏性和稠密性有关的质量的说明图。图2中所示的A1至A3示出在布置的图像中的认为用户感兴趣的感兴趣区域。此外,根据实施例的感兴趣区域的示例包括图像中密度高的区域、图像中亮度变化大的区域、图像中颜色变化大的区域,以及图像中边缘方向的变化大的区域。
例如,如图2的A1至A3所示,根据实施例的高质量照片书的示例包括未将感兴趣区域布置在跨页页面的中心处的照片书和将感兴趣区域布置在跨页页面的各个地方以使得感兴趣区域不单调的照片书。通过不将感兴趣区域布置在跨页页面的中心,可以避免所谓的旭日旗构图。此外,通过将跨页页面中的感兴趣区域布置在各个地方,可以分散感兴趣区域。因此,例如通过生成如图2中的布局,可以提高照片书的质量。
[C]高质量照片书的第三示例:休息
图3是例示根据实施例的高质量照片书的第三示例的说明图,并且是例示有关休息的质量的说明图。图3所示的A和图3所示的B中的每个示出了根据实施例的高质量照片书的示例。
此处,根据实施例的休息图像的示例包括聚焦方式不强的图像、颜色不密集的图像、不具有表面精细的斑点的图像以及对象被分散的图像。
例如,如图3的A所示,根据实施例的高质量照片书的示例包括在跨页页面中的休息图像(如图3的A中被指示为“休息”的图像)和意在关注用户的图像(由图3的A中的“1”、“2”和“4”所指示的图像)被混合并被布置的照片书。例如,如图3的A所示,可以将跨页页面中意在关注用户的图像显示得更大,并且可以将休息图像布置得更小。此外,例如,如图3的A所示,可以将休息图像布置在跨页页面中,使得图像不彼此相邻。
例如,如图3的A所示,与仅在跨页页面中布置意在关注用户的图像相比,通过将休息图像和意在关注用户的图像布置在跨页页面中以使得图像被混合,可以减小施加在观看在跨页页面中布置的图像的用户的负担。例如,如图3所示,即使在休息图像和意在关注用户的图像被布置成混合在跨页页面中的情况下,可以将意在关注他或她的图像显示给用户。因此,例如,如图3的A所示,通过生成布局,可以提高照片书的质量。
根据实施例的实现关于休息的质量的方法不限于如图3的A所示的对休息图像的布置。例如,如果3的B所示,可以形成空白而不是布置休息图像。
[D]高质量照片书的第四示例:图像的方向性
图4是例示根据实施例的高质量照片书的第四示例的说明图,并且是例示与图像的方向性有关的质量的说明图。图4所示的箭头指示布置的图像的每个图像的方向性。
此处,根据实施例的图像的方向性是观看图像的用户的视线容易移动到的方向。根据实施例的图像的方向性的示例包括包括在图像中的人(对象的示例)面朝的方向、关注的人或点在图像中被布置的方向、在图像中从高密度区域到低密度区域定向的方向,以及包括在图像中的水平线或边界线的方向。
例如,如图4所示,根据实施例的高质量照片书的示例包括布置在跨页页面中的图像中的每个图像的方向性被分散的照片书。例如,如图4所示,用户例如观看图像变得疲劳的概率进一步降低,这是因为在跨页页面中具有相同方向性的图像不连续。此外,当用户观看图像的视线与布置在跨页页面中的图像的方向相同时,可以给用户提供进一步的舒适度。因此,例如,通过生成如图4中的布局,可以提高照片书的质量。
[E]高质量照片书的第五示例:图像所占用的区域的平衡性
图5是例示根据实施例的高质量照片书的第五示例的说明图,并且是例示与图像所占用的区域的平衡性有关的质量的说明图。此处,例如,图5例示由在跨页页面的每页中布置的图像所占用的区域为整页的70[%]的示例。
例如,如图5所示,根据实施例的高质量照片书的示例包括由在跨页页面的每页中布置的图像所占用的区域相同(或基本相同;这同样适用于下文)的照片书。例如,如图5所示,通过使由在跨页页面的每页中布置的图像所占用的区域相同,提高了整个跨页页面的平衡性。因此,例如,通过生成如图5中的布局,可以提高照片书的质量。
[F]高质量照片书的第六示例:布局
图6是例示根据实施例的高质量照片书的第六示例的说明图,并且是例示与布局有关的质量的说明图。图6所示的A1和图6所示的A2中的每个示出根据实施例的高质量照片书的示例,并且示出了例如照片书的第一页至第四页。图6所示的B1示出了图6的A1的比较示例以描述与根据实施例的布局有关的质量,并且图6所示的B2示出了图6的A2的比较示例以描述与根据实施例的布局有关的质量。
例如,如图6的A1和A2所示,根据实施例的高质量照片书的示例包括在连续页中布置的图像的布局或图像的数量不同的照片书。此处,例如,如图6的B1和B2所示,当在连续页中布置的图像的布局或图像的数量相同时,布局变得单调。相比之下,例如,如图6的A1和A2所示,当在连续页中布置的图像的布局不同时或当在连续页中布置的图像的数量不同时,防止布局变得单调,因此具有丰富变型的布局被实现。因此,例如,通过生成如图6中的布局,可以提高照片书的质量。即使有时在包括在照片书中的多个页中生成布局不同的页或图像的数量不同的页的情况下,可以有效地实现具有丰富变化的布局。
[G]高质量照片书的第七示例:图像处理
图7是例示根据实施例的高质量照片书的第七示例的说明图,并且是例示与图像处理有关的质量的说明图。图7所示的A、B、C2和D2中的每个示出了根据实施例的高质量照片书的示例。图7所示的C1示出了图7的C2的比较示例以描述根据实施例的图像处理的质量,并且图7所示的D1示出了图7的D2的比较示例以描述根据实施例的图像处理的质量。
此处,根据实施例的图像处理的示例包括加框和扩展加框的图像的处理。根据实施例的加框是指例如通过从布置目标图像剪裁出要布置的区域来从布置目标图像提取要布置的区域。
例如,如图7的A所示,根据实施例的高质量照片书的示例包括使用从图像中检测的对象(在图7的A中示出了人脸被检测的示例)作为标准进行加框,使得图像具有3个分割构图的照片书。例如,如图7的B所示,根据实施例的高质量照片书的示例包括从图像中检测的对象(在图7的B中示出了花等被检测的示例)被水平地或垂直地加框的照片书。例如,如图7的C2所示,根据实施例的高质量照片书的示例包括从图像中检测的对象(在图7的C2中示出的人脸被检测的示例)被加框以使得该对象不被布置在页的边界线中的照片书。例如,如图7的D2所示,根据实施例的高质量照片书的示例包括从图像中检测的对象(在图7的A中示出了人脸被检测的示例)被加框并且通过遵照布置有加框的图像的区域对该图像进行扩展而获得的图像被布置的照片书。
例如,如图7的A、B、C2和D2所示,通过将经受图像处理的图像布置在包含在照片书中的页中,例如可以布置具有更好构图的图像或布置可以容易地观看的图像。因此,例如,通过生成如图7的A、B、C2和D2中的布局,可以提高照片书的质量。
[H]高质量照片书的第八示例:框分割
图8是例示根据实施例的高质量照片书的说明图,并且是例示与框分割有关的质量的说明图。图8所示的A示出了根据实施例的高质量照片书的示例。图8所示的B示出了图8的A的比较示例以描述与根据实施例的框分割有关的质量。
此处,例如,根据实施例的框分割是指将布置图像的区域布置在包含在照片书中的每页中。在下文中,包括在照片书中的每页中布置图像的区域在一些情况下被称为“框”或者“图像框”。图8例示根据实施例的将图像布置在该图像被布置的区域的示例。
例如,如图8的A所示,根据实施例的高质量照片书的示例包括不存在非自然的框(诸如水平地或垂直地相当长的框或者相当小的框)的照片书,以及以较好的平衡性来布置空白以使得空白不相当大的照片书。此处,例如,如图8的B所示,当存在水平地或垂直地相当长的框或者存在相当小的框时或者存在相当大的空白时(当空白被硬化时),包括在照片书中的每页或整个跨页页面的平衡性很可能丧失。因此,例如,通过生成如图8的A中的布局,可以提高照片书的质量。
[I]高质量照片书的第九示例:框的旋转
图9是例示根据实施例的高质量照片书的第九示例的说明图,并且是例示与框的旋转有关的质量的说明图。图9所示的A1和图9所示的A2中的每个示出了根据实施例的高质量照片书的示例,并且示出了例如照片书的第一页至第四页。图9所示的B1示出图9的A1的比较示例以描述根据实施例的与框的旋转有关的质量,并且图9所示的B2示出了图9的A2的比较示例以描述根据实施例的与布局有关的质量。
例如,如图9的A1和A2所示,根据实施例的高质量照片书的示例包括框的旋转量和旋转方向被布置为均衡的照片书,以及未进行框的非自然旋转(例如较大框的旋转或相当小的旋转角度的旋转)的照片书。此处,例如,如图9的B1所示,当框的旋转方向或旋转量在整个跨页页面中相同(或基本相同)时,或者,例如如图9的B2所示,当较大的框被旋转或框的旋转很微小时,整个跨页页面的平衡性很可能会丧失。因此,例如,通过生成如图9的A1和A2所示的布局,可以提高照片书的质量。
[F]高质量照片书的第十示例:框的交叠
图10是例示根据实施例的高质量照片书的第十示例的说明图,并且是例示与框的交叠有关的质量的说明图。图10所示的A1和图10所示的A2中的每个示出了根据实施例的高质量照片书的示例,并且示出了例如照片书的第一页至第四页。图10所示的B1示出了图10的A1的比较示例以描述根据实施例的与框的交叠有关的质量,并且图10的B2示出了图10的A2的比较示例以描述根据实施例的与布局有关的质量。
例如,如图10的A1和A2所示,根据实施例的高质量照片书的示例包括避免共有框的细微的交叠状态或接触状态(例如,当框彼此细微地交叠或框彼此轻微地交叠时)的照片书。此处,例如,如图10的B1所示,当框彼此细微地交叠时或当框彼此轻微地交叠时,存在的问题是用户将该框感知为非自然的。因此,例如,通过生成如图9的A1和A2中的布局,可以提高照片书的质量。
在实施例中,例如,如图10的B1所示,大的框不可以以使得大的框位于小的框的之上的方式与小的框交叠,但是,例如,如图10的A1和A2所示,小的框可以以使得小的框位于大的框之上的方式与大的框交叠。例如,如图10的A1和A2所示,通过使小的框与大的框交叠,可以实现框之间更自然的交叠。
根据实施例的高质量照片书的示例包括在前述第一示例至第十示例中所描述的照片书。不用说,根据实施例的高质量照片书的示例不限于第一示例至第十示例。
[2]根据实施例的信息处理方法的概述
接下来,将描述与根据实施例的信息处理方法有关的处理,其中可以实现根据上述实施例的高质量照片书中的一个示例或者两个或更多个示例。
如上所述,例如,即使在使用相关领域的生成上述照片书的应用的情况下,不能期望自动生成高质量的照片书。此外,例如,即使在使用专利文献1所公开的技术的情况下,高质量照片书不可以被称作自动生成。
因此,例如,根据实施例的信息处理设备基于有关与候选图像中的每个对应的图像的信息,计算候选图像中的每个候选图像的评估值(评估值计算处理)。例如,根据实施例的信息处理设备基于与布局有关的参数来确定页的数量,并且基于在评估值计算处理中所计算的评估值来确定在每页中布置的图像的数量(页分配处理)。例如,根据实施例的信息处理设备基于与布局有关的参数和在评估值计算处理中所计算的评估值来从候选图像中选择图像(图像选择处理)。例如,根据实施例的信息处理设备生成布局,在该布局中,针对每页基于与布局有关的参数和与在图像选择处理中选择的图像对应的评估值来布置所选图像(布局生成处理)。
此处,根据实施例的候选图像是待在前述图像选择处理中选择的图像的候选。例如,根据实施例的信息处理设备将这样的图像设置为候选图像:该图像存储在包括在根据实施例的信息处理设备中的存储单元(在下面描述)中、连接至根据实施例的信息处理设备的外部记录介质中、包括在外部设备(诸如经由网络(或直接地)连接到根据实施例的信息处理设备的服务器)中的记录介质等。根据实施例的网络的示例包括有线网络,诸如局域网(LAN)或广域网(WAN)、经由基站的无线网络,诸如无线局域网(WLAN)或无线广域网(WWAN),以及使用通信协议(诸如传输控制协议/因特网协议(TCP/IP))的因特网。
根据实施例的有关图像的信息是可以通过分析图像获得的数据。根据实施例的有关图像的信息的示例包括指示包括从图像中检测的预定对象的区域的面积的数据、指示人(为预定对象的示例)的表情的数据、指示从图像检测的感兴趣区域的面积的数据、指示图像的模糊程度的数据,以及指示包含在图像中的颜色的种类的数据。
此处,例如,根据实施例的信息处理设备通过分析候选图像来获取根据实施例的有关与候选图像中的每个候选图像对应的图像的信息。根据实施例的与对候选图像的分析有关的处理的示例包括诸如脸部检测处理或物体检测处理的检测处理、检测候选图像中的亮度变化或颜色变化的检测处理、评估候选图像的模糊程度的处理,以及检测候选图像中的颜色的检测处理。
根据实施例的获取有关图像的信息的方法不限于前述方法。例如,根据实施例的信息处理设备可以通过参照与候选图像对应的并且指示外部设备中的候选图像的分析结果的元数据来获取有关与候选图像中的每个候选图像对应的图像的信息。此外,分析候选图像的设备(根据实施例的信息处理设备或外部设备)通过使用根据实施例的能够检测有关图像的信息的任何检测处理来分析根据实施例的候选图像。
根据实施例的与布局有关的参数指例如与布局生成条件对应的并且指示根据实施例的由信息处理设备生成的布局的方向性的参数。根据实施例的与布局有关的参数的示例包括各种参数,诸如“有关照片书的页的数目的参数(例如,指示跨页的最大数目的参数)”、“有关在照片书的每页中布置的图像的数量的参数(例如,指示最小图像数量、最大图像数量或平均图数量的参数)”、“指示照片书的跨页的纵横比或余白的参数”、“指示布置的图像之间的距离的参数”、“与照片书的每页中的空白有关的参数”,以及“与跨页布局的开/关有关的参数”。根据实施例的与布局有关的参数可以包括指示背景、框等的参数。不用说,根据实施例的与布局有关的参数不限于前述参数。
图11是例示根据实施例的与布局有关的参数的示例的说明图。图11例示与在A至C中示出的三个布局有关的参数的示例。
根据实施例的信息处理设备例如基于用户的操作来生成与布局有关的参数。根据实施例的信息处理设备使用生成的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理。
更具体地,用户例如通过“在用于设置与布局有关的参数的设置画面上输入值”(用户的操作的示例)、“移动用于设置与布局有关的参数的旋钮(下面要描述的操作单元的示例)”(用户的操作的示例),或“选择与布局有关的参数对应的主题”(用户的操作的示例)来设置与布局有关的参数。例如,如图11的A至C所示,根据实施例的信息处理设备基于根据前述用户的操作的操作信号来生成与布局有关的参数。
根据实施例的生成与布局有关的参数的方法不限于前述方法。例如,根据实施例的信息处理设备可以随机地生成与布局有关的参数。
例如,如图11所示,与在生成基于模板的照片书的生成时所需的设计模板时相比,根据实施例的与布局有关的参数可以更简单地生成。因此,根据实施例的与布局有关的参数可以为预先生成的参数(即,与布局有关的参数的模板)。当根据实施例的与布局有关的参数为预先生成的参数时,根据实施例的信息处理设备例如使用与布局有关的且预先生成的且基于用户的操作选择的参数、或者基于与布局有关的且预先生成的且由根据实施例的信息处理设备随机选择的参数,执行与根据实施例的信息处理方法有关的处理。
此处,将描述作为通过使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理而获得的结果生成的布局的示例。
[a]生成的布局的第一示例
图12是例示作为使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理的结果而生成的布局的第一示例的说明图。此处,图12例示的A和B示出在“跨页的最大数量=3”被设置为根据实施例的与布局有关的参数时生成的布局的示例。在图12的A和B中的跨页下方所示的数字指示跨页的数量。
例如,如图12的A所示,当“跨页的最大数量=3”被设置为根据实施例的与布局有关的参数时,在所生成的布局中跨页的数量为3(即,6页)。
当“跨页的最大数量=3”被设置为根据实施例的与布局有关的参数时,在与根据实施例的信息处理方法有关的处理中所生成的跨页的数量不限于3(所设置的跨页的最大数量)。例如,如图12的B所示,当候选图像的数量较小时,还可以生成小于所设置的跨页的最大数量的跨页数量。
[b]生成的布局的第二示例
图13是例示作为通过使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理而获得的结果的生成的布局的第二示例的说明图。此处,图13例示在“包括在跨页中的图像的平均数量=6、包括在跨页中的图像的最大数量=12,并且包括在跨页中的图像的最小数量=1”被设置为根据实施例的与布局有关的参数时生成的布局的示例。在图13所示的每个跨页的下方示出的数字指示包括在跨页中的图像的数量的示例。
例如,如图13所示,当“包括在跨页中的图像的平均数量=6、包括在跨页中的图像的最大数量=12,并且包括在跨页中的图像的最小数量=1”被设置为根据实施例的与布局有关的参数的情况下,布局被生成使得满足所设置的参数。
[c]生成的布局的第三示例
图14是例示作为使用根据实施例的与布局有关的参数进行与根据实施例的信息处理方法有关的处理而获得的结果生成的布局的第三示例的说明图。此处,图14所示的A和B示出在“跨页的纵横比=2.0、上余白=外余白=下余白=内余白=x(其中,x为正实数)”被设置为根据实施例的与布局有关的参数时生成的布局的示例。
例如,如图14的A所示,当“跨页的纵横比=2.0、上余白=外余白=下余白=内余白=x(其中,x为正实数)”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足所设置的参数。
根据实施例的与余白有关的参数不限于“上余白=外余白=下余白=内余白=x(其中,x为正实数)”。例如,“参数即当在包括在跨页中的一个页面中布置的图像的数量为1时被忽略的与设置的余白有关的参数”可以被包括在根据实施例的与余白有关的参数中。如图14的B所示,当“参数即当在包括在跨页中的一个页面中布置的图像的数量为1时被忽略的与设置余白有关的参数”被包括时,与设置余白有关的参数在包含在跨页中的一个页面中布置的图像的数量为1时被忽略的布局被生成。
[d]生成的布局的第四示例
图15是例示作为使用根据实施例的与布局有关的参数执行与根据实施例的信息处理方法有关的处理的结果生成的布局的第四示例的说明图。此处,图15例示“图像间在水平方向上的距离=x”被设置为根据实施例的与布局有关的参数时生成的布局的示例。
例如,如图15所示,当“图像间在水平方向上的距离=x”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置的参数。
根据实施例的限定图像间的距离的参数不限于指示图像间在水平方向上的距离的参数。例如,根据实施例的与布局有关的参数可以将指示图像间在垂直方向上的距离的参数包括为限定图像间的距离的参数。当指示图像间在垂直方向上的距离的参数被包括时,根据指示图像间在设置的垂直方向上的距离的参数来设置图像之间在垂直方向上的距离。
[e]生成的布局的第五示例
图16是例示作为使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理的结果生成的布局的第五示例的说明图。此处,图16所示的A示出在“空白=0[%]”被设置为根据实施例的与布局有关的参数时生成的布局的示例。此处,图16所示的B示出在“空白=50[%]”被设置为根据实施例的与布局有关的参数时生成的布局的示例。此处,图16所示的C示出在“空白=15[%]”被设置为根据实施例的与布局有关的参数时生成的布局的示例。
例如,如图16的A所示,当“空白=0[%]”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置的参数。例如,如图16的B所示,当“空白=50[%]”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置的参数。例如,如图16的C所示,当“空白=15[%]”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置的参数。
[f]生成的布局的第六示例
图17是例示作为使用根据实施例的与布局有关的参数进行与根据实施例的信息处理方法有关的处理所获得的结果而生成的布局的第六示例的说明图。此处,图17所示的A示出在“跨页布局=关”(用于不布局跨页的参数)被设置为根据实施例的与布局有关的参数时生成的布局的示例。此外,图17所示的B示出在“跨页布局=开”(用于布局跨页的参数)被设置为根据实施例的与布局有关的参数时生成的布局的示例。
例如,如图17的A所示,当“跨页布局=关”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置参数。例如,如图17的B所示,当“跨页布局=开”被设置为根据实施例的与布局有关的参数时,布局被生成使得满足设置参数。
[g]生成的布局的第七示例
图18是示例作为使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理的结果而生成的布局的第七示例的说明图。图18所示的A1示出与用于智能电话(作为显示在生成的布局中布置的图像的显示设备的示例)的布局有关的参数的示例。此外,图18所示的A2示出与用于电视接收器(作为显示在生成的布局中布置的图像的显示设备的示例)的布局有关的参数的示例。图18所示的B1示出基于根据与图18所示的A1示出的布局有关的参数生成的布局在显示屏上显示的图像的示例。此外,图18所示的B2示出基于根据与图18所示的A2示出的布局有关的参数生成的布局在显示屏上显示的图像的示例。
例如,如图18的A1和A2所示,根据实施例的与布局有关的参数可以包括“与显示在所生成的布局中布置的图像的显示设备的种类对应的参数”。例如,如图18的B1和B2所示,通过将“与显示在生成的布局中布置的图像的显示设备的种类对应的参数”包括在根据实施例的与布局有关的参数中,可以将适于显示在生成的布局中布置的图像的显示设备的种类的照片书显示在该显示设备的显示屏上。
[h]生成的布局的第八示例
在作为生成的布局的示例的第七示例中,已描述了“与显示在所生成的布局中布置的图像的显示设备的种类对应的参数”被包括在根据实施例的与布局有关的参数中的情况。然而,被包括在根据实施例的与布局有关的参数中的参数不限于与显示设备的种类对应的参数。例如,与根据实施例的与布局有关的参数可以包括“与用于打印在所生成的布局中布置的图像的打印设定的种类对应的参数”。
通过将“与用于打印在所生成的布局中布置的图像的打印设定的种类对应的参数”包括在根据实施例的与布局有关的参数中,可以根据打印方法将合适的照片书打印在传递介质诸如工作表上。
例如,通过使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理,生成前述第一示例至第八示例所示的布局。不用说,作为使用根据实施例的与布局有关的参数来进行与根据实施例的信息处理方法有关的处理获得的结果生成的布局的示例不限于前述第一示例至第八示例。
例如,作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备进行(1)评估值计算处理、(2)页分配处理、(3)图像选择处理,以及(4)布局生成处理。
此处,在前述(2)(页分配处理)的处理中,根据实施例的信息处理设备确定照片书的页的数量和待分配给每页的图像的数量。在前述(3)的处理(图像选择处理)中,根据实施例的信息处理设备基于根据实施例的与布局有关的参数和在前述(1)的处理(评估值计算处理)中计算的候选图像中的每个候选图像的评估值来选择待在每页中布置的图像。在前述(4)的处理(布局生成处理)中,根据实施例的信息处理设备基于根据实施例的与布局有关的参数和与在前述(3)的处理(图像选择处理)中选择的图像对应的评估值来生成每页的布局。
因此,例如,当根据实施例的信息处理设备进行前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)时,在以上所述的具有上述高质量的照片书的第一示例(余白)、第二示例(稀疏性和稠密性)、第三示例(休息)、第四示例(图像的方向性)、第五示例(由图像占用面积的平衡性)、第六示例(布局)、第八示例(框分割)中的一个示例或者二个或更多个示例被实现。此外,下面将描述前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)的具体示例。
根据实施例的信息处理设备基于根据实施例的与布局有关的参数来进行前述(3)的处理(图像选择处理)和前述(4)的处理(布局生成处理)。因此,根据实施例的信息处理设备可以基于与由用户的操作等设置的布局有关的参考通过进行处理来自动生成动态照片书的布局。
因此,例如,根据实施例的信息处理设备可以通过进行述前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)来自动地生成用于生成高质量照片书的布局。
通过自动生成用于生成高质量照片书的布局,根据实施例的信息处理设备可以基于在前述(4)的处理(布局生成处理)中生成的布局来自动生成高质量照片书。此处,例如,基于在前述(4)的处理(布局生成处理)中生成的布局来生成照片书的处理可以由根据实施例的信息处理设备或外部设备进行。
与根据实施例的信息处理方法有关的处理不限于前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)。
例如,作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备还可以进行调整在前述(4)的处理(布局生成处理)中生成的布局的处理(布局调整处理)。
根据实施例的信息处理设备可以例如通过进行(5)布局调整处理来实现如前述高质量照片书的第一示例(余白)、第九示例(框的旋转)或第十示例(框的交叠)中那样的高质量照片书。此外,下面将描述前述(5)的处理(布局调整处理)的具体示例。
作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备还可以进行对在前述(4)的处理(布局生成处理)中生成的布局中的或者在前述(5)的处理(布局调整处理)中调整的布局中的在前述(3)的处理(图像选择处理)中选择的图像进行布置的处理(图像处理)。
当根据实施例的信息处理设备进行(6)图像处理时,基于在前述(4)的处理(布局生成处理)中生成的布局或在前述(5)的处理(布局调整处理)中调整的布局来生成照片书。也就是说,前述(6)的处理(图像处理)与基于生成的布局或根据生成的布局调整的布局来生成照片书的处理对应。
因此,当根据实施例的信息处理设备进行前述(6)的处理(图像处理)时,可以在根据实施例的信息处理设备中自动地生成高质量照片书。
例如,在前述(6)的处理(图像处理)中,根据实施例的信息处理设备可以对在前述(3)的处理(图像选择处理)中选择的图像进行处理,并且将处理的图像布置在生成的布局或根据生成的布局调整的布局中。例如,通过在前述(6)的处理(图像处理)中对在前述(3)的处理(图像选择处理)中选择的图像进行处理,可以实现高质量照片书,诸如上述高质量照片书的第七示例(图像处理)。
作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备例如进行“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)”、“前述(1)的处理(评估值计算处理)至前述(5)的处理(布局调整处理)”、“前述(1)(评估值计算处理)的处理至前述(4)的处理(布局生成处理)以及前述(6)的处理(图像处理)”,或者“前述(1)的处理(评估值计算处理)至前述(6)的处理(图像处理)”。在下文中,将更具体地描述与根据实施例的信息处理方法有关的处理。
[3]与根据实施例的信息处理方法有关的处理的具体示例
(1)评估值计算处理
根据实施例的信息处理设备基于有关与候选图像中的每个候选图像对应的图像的信息来计算候选图像中的每个候选图像的评估值。
此处,根据实施例的信息处理设备例如通过将所有的候选图像视作一组来计算候选图像中的每个候选图像的评估值。
根据实施例的前述(1)的处理(评估值计算处理)不限于前述处理。例如,根据实施例的信息处理设备可以基于有关与候选图像中的每个候选图像对应的图像的信息来对候选图像进行分组,并且针对每个组计算评估值。
根据实施例的与候选图像的分组有关的处理的示例包括使用有关图像的信息的聚类处理。例如,通过使用有关图像的信息的聚类处理,基于由图像指示的事件、图像的相似度等来对候选图像进行分组。也就是说,通过使用有关图像的信息来进行聚类处理,从例如时间的角度或相似图像的角度来对候选图像进行分组。
此处,通过时间的角度进行聚类处理的示例包括使用在“日本专利4577173号”中公开的技术的处理,其中本说明书的申请人为“日本专利4577173号”的专利权人。通过相似图像的角度进行聚类处理的示例包括使用在“日本专利4811433号”中公开的技术的处理,其中本说明书的申请人为“日本专利4811433号”的专利权人。根据实施例的通过相似图像的角度进行的聚类处理和通过时间的角度进行的聚类处理不限于前述聚类处理。根据实施例的信息处理设备可以使用能够从时间的角度或相似图像的角度进行聚类的任何处理来进行分组。
例如,当在前述(1)的处理(评估值计算处理)中针对每个组计算评估值时,根据实施例的信息处理设备针对每个组进行与根据实施例的信息处理方法有关的处理,例如在下文要描述的(3)的处理(图像选择处理)或(4)的处理(布局生成处理)。例如,通过分组候选图像,并且针对每个组进行与根据实施例的信息处理方法有关的处理,按时间顺序的故事可以被传达给观看在照片书中布置的图像的用户。例如,通过针对每个组进行与根据实施例的信息处理方法有关的处理,经常可以防止相同的图像(相似图像)被布置在照片书中。
在下文中,将描述(1)的处理(评估值计算处理),主要例示根据实施例的信息处理设备对候选图像进行分组和进行处理的情况。
图19是例示与根据实施例的信息处理方法有关的处理的示例的说明图并且例示根据实施例的候选图像的示例。图19例示在运动会作为候选图像捕捉的44个捕获图像。
根据实施例的信息处理设备首先使用有关与图19所示的候选图像中的每个候选图像对应的图像的信息来对候选图像进行分组。
图20是例示与根据实施例的信息处理方法有关的处理的示例的说明图。图20例示通过从时间的角度对图19所示的候选图像进行分组和在每个组中对相似图像进行分组而获得的结果的示例。图20所示的A至H示出候选图像的组。图20所示的B1、E1和F1至F3示出相似图像的组。
例如,如图20所示,当候选图像被分组时,根据实施例的信息处理设备针对每个组进行与根据实施例的信息处理方法有关的处理,诸如(3)的处理(图像选择处理)或(4)的处理(布局生成处理)。
图21是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示由根据实施例的信息处理设备计算的评估值的示例。图21的A1至A7示出针对包括在图20所示的候选图像中的一些图像计算的评估值的示例。
例如,根据实施例的信息处理设备计算候选图像的落在为0.0至1.0的值的范围内的评估值。
更具体地,例如,根据实施例的信息处理设备从候选图像检测诸如脸部的预定对象。此处,例如,根据实施例的信息处理设备通过任何脸部检测处理、任何物体检测处理等来检测包括对象的区域。然后,根据实施例的信息处理设备确定与由包括检测的对象的区域(例如,矩形区域)所占用的整个图像的面积对应的评估值。例如,根据实施例的信息处理设备通过参照表等来确定与由包括检测的对象的区域所占用的整个图像的面积对应的评估值,在所述表中由包括检测的对象的区域所占用的整个图像的面积对应于评估值。
此外,根据实施例的信息处理设备可以分析包括检测对象的区域,并且还可以根据分析结果来加上或减去评估值。此处,与对包括检测的对象的区域的分析有关的处理的示例包括任何表情检测处理、任何脸部方向确定处理,以及任何模糊估计处理。
例如,当检测的对象是人的脸部时,根据实施例的信息处理设备根据表情或脸部的方向来加上或减去评估值。更具体地,例如,当检测的人的脸部(作为预定对象的示例)为笑脸时,根据实施例的信息处理设备将根据表情的预定值加到评估值。当检测的人的脸部(作为预定对象的示例)为愤怒的脸或哭脸时,根据实施例的信息处理设备从评估值减去根据表情的预定值。当检测的人的脸部(作为预定对象的示例)的方向为向前时,根据实施例的信息处理设备将根据脸部的方向的预定值加到评估值。当检测的人的脸部(作为预定对象的示例)的方向为侧面时,根据实施例的信息处理设备从评估值减去根据脸部的方向的预定值。当检测的人(作为预定对象的示例)的脸部是模糊的时,根据实施例的信息处理设备从评估值减去与模糊对应的预定值。此外,根据实施例的信息处理设备例如通过在其中分析结果对应于评估值的增加值和减小值的参照表等来指定与分析结果对应的评估值的增加值或减小值。
根据实施例的计算评估值的处理不限于基于从候选图像检测的预定对象来计算评估值的处理。
例如,根据实施例的信息处理设备可以检测候选图像的亮度变化或颜色变化、检测作为变化大于设定值的区域的感兴趣区域,并且确定评估值。更具体地,例如,根据实施例的信息处理设备确定与由所检测的感兴趣区域占用的整个图像的面积对应的评估值。
此外,根据实施例的信息处理设备例如通过其中评估值对应于由所检测的感兴趣区域占用的整个图像的面积的参照表等来确定与由所检测的感兴趣区域占用的整个图像的面积对应的评估值。例如,与由感兴趣区域占用的整个图像的面积对应的评估值被假定为小于与由包括上述对象的区域占用的整个图像的面积对应的评估值的值。与由感兴趣区域占用的整个图像的面积对应的评估值可以例如和与由包括上述对象的区域占用的整个图像的面积对应的评估值相同,或大于与由包括上述对象的区域所占用的整个图像的面积对应的评估值。
例如,根据实施例的信息处理设备可以从候选图像检测颜色,并且基于所检测的颜色的数量(对应于颜色变化)来确定评估值。更具体地,根据实施例的信息处理设备例如通过其中所检测的颜色的数量对应于评估值的参照表等来确定与所检测的颜色的数量对应的评估值。
例如,根据实施例的信息处理设备可以评估候选图像的模糊程度,并且基于所评估的模糊程度来调整评估值。更具体地,根据实施例的信息处理设备例如通过参照示出模糊程度与评估值之间的关系的表等来确定与所评估的模糊程度对应的评估值的调整值。此处,前述调整值的示例包括负值,该负值随着所评估的模糊程度更大而负地更大。
已描述了计算作为静止图像的候选图像的评估值的处理的示例,但是其评估值由根据实施例的信息处理设备计算的候选图像不限于静止图像。
例如,根据实施例的信息处理设备还可以例如通过使用如在由本说明书的申请人提交的“JP 2010-191934A”中所公开的用于从运动图像计算得分的技术来计算作为运动图像的候选图像的评估值。在下文中,将描述与根据实施例的信息处理方法有关的处理的示例,其例示了根据实施例的候选图像为静止图像的情况
(2)页分配处理
根据实施例的信息处理设备基于与根据实施例的与布局有关的参数来确定页的数量,并且基于在前述(1)的处理(评估值计算处理)中计算出的评估值来确定在每个页中布置的图像的数量。
(2-1)与页的数量的确定有关的处理
图22和图23是例示与根据实施例的信息处理方法有关的处理的示例的说明图。图22例示根据实施例的针对每个组进行的与页的数量的确定有关的处理的示例。图23例示针对每个组分配的页的图像。
例如,根据实施例的信息处理设备基于根据实施例的与布局有关的参数来确定页的数量。
更具体地,根据实施例的信息处理设备例如通过参照与页的最大值例如“页的最大值=30”(其为根据实施例的与布局有关的参数的示例)有关的参数来确定页的数量。根据实施例的信息处理设备可以例如通过将页的数量二等分来确定跨页的数量。
如参照图12所示,例如,当候选图像的数量很少时,根据实施例的信息处理设备可以确定页的数量小于根据实施例的由与布局有关的参数指示的最大数量。根据实施例的信息处理设备例如通过中页的数量对应于候选图像的数量的下限的参照表等来确定页的数量等于或小于由与布局有关的参数指示的并且与候选图像的数量对应的最大数量。
例如,如图20所示,当候选图像被分组时,根据实施例的信息处理设备针对每个组分配页的数量或跨页的数量。如图22所示,针对每个组分配页的数量或跨页的数量的方法的示例包括使用与页的最大数量(其为与根据实施例的布局有关的参数的示例)、包括在组中的候选图像的数量以及候选图像的总数量有关的参数来进行计算并且对计算结果进行舍入的方法。此处,图22例示确定针对每个组分配的跨页的数量的计算的示例。
(2-2)与图像的数量的确定有关的处理
图24至图26是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示根据实施例的与图像的数量的确定有关的处理的示例。此处,图24至图26例示在前述(1)的处理(评估值计算处理)中对图20所示的候选图像进行分组的情况。即使在前述(1)的处理(评估值计算处理)中未对候选图像进行分组的情况下,根据实施例的信息处理设备可以通过相同的处理来确定在每页或每个跨页中布置的图像的数量。
例如,如图24所示,根据实施例的信息处理设备针对每个页或跨页确定候选图像的数量,使得每个页或每个跨页中的图像的评估值的总和相等。例如,如图24所示,当候选图像的数量为100、评估值的总和为30.0分,并且所确定的页的数量为6(即,跨页的数量为3)时,根据实施例的信息处理设备确定每个跨页的候选图像的数量,以使得在一个跨页中图像的评估值的总和为“30.0/3=10.0[分]”。
当针对每个页或每个跨页确定候选图像的数量时,根据实施例的信息处理设备计算在每个页或跨页中图像的评估值的平方和。图25例示根据实施例的信息处理设备计算在每个跨页中图像的评估值的平方和的示例。此处,根据实施例的信息处理设备计算在每个页或每个跨页中图像的评估值的平方和,这是因为页或跨页之间的差被放大。例如,根据实施例的信息处理设备可以计算在每个页或跨页中的图像的评估值的立方和,并且可以将强高通滤波器施加到每个页或跨页中的图像的评估值。
当每个页或每个跨页中的图像的评估值的平方和被计算时,根据实施例的信息处理设备基于根据实施例的与布局有关的参数和所计算的在每个页或每个跨页中的图像的评估值的平方和来确定待分配给每个页或每个跨页的图像的数量。
更具体地,例如,根据实施例的信息处理设备基于“通过与前述页的数量的确定有关的处理所确定的页的数量或跨页的数量”和“指示每个页的图像的平均数量的参数(其为根据实施例的与布局有关的参数的示例)”或“指示每个跨页的图像的平均数量的参数(其为根据实施例的与布局有关的参数的示例)”来确定待布置在照片书中的图像的总数量。例如,当通过与确定页的数量有关的处理所确定的跨页的数量为3并且示每个跨页的图像的平均数量的参数为3时,根据实施例的信息处理设备将3×3个图像确定作为待布置在照片书中的图像的总数量。
当待布置在照片书中的图像的总数量被确定时,根据实施例的信息处理设备计算评估值的平方和的倒数,并且将图像的数量分配给每个页或每个跨页。
更具体地,例如,如图26所示,例如,根据实施例的信息处理设备计算评估值的平方和的倒数,并且通过使用待布置在照片书中的图像的总数量和评估值的平方和的倒数进行计算来确定待布置在每个页或每个跨页中的图像的数量。此处,图26例示根据实施例的信息处理设备确定待布置在每个跨页中的图像的数量的示例。
例如,如上所述,通过计算评估值的平方和的倒数并且将图像的数量成比例地分配给每个页或每个跨页,根据实施例的信息处理设备在页或跨页具有更大的评估值的总和时可以减小图像的数量。
例如,根据实施例的信息处理设备通过进行前述(2-1)的处理(与确定页的数量有关的处理)和(2-2)的处理(与确定图像的数量有关的处理)来确定页的数量(或跨页的数量)和待布置在每个页(或每个跨页)中的图像的数量。
根据实施例的(2)的处理(页分配处理)不限于前述示例。例如,当待布置在每个页或每个跨页中的图像的最小值或最大值被布置在与根据实施例的布局有关的参数中时,根据实施例的信息处理设备可以调整页的数量(或跨页的数量)和待布置在每个页(或每个跨页)中的图像的数量,以使得满足最小值或最大值。
例如,如上所示,根据实施例的信息处理设备可以通过确定页的数量(或跨页的数量)和待布置在每个页(或每个跨页)中的图像的数量来实现例如上述高质量照片书的第三示例(休息)和上述高质量照片书的第六示例(布局)。
(3)图像选择处理
例如,根据实施例的信息处理设备基于根据实施例的与布局有关的参数和在前述(1)的处理(评估值计算处理)中计算的评估值来从候选图像选择图像。当在前述(1)的处理(评估值计算处理)中对候选图像进行分组的情况下,根据实施例的信息处理设备针对每个组从候选图像选择图像。
更具体地,根据实施例的信息处理设备例如基于所计算的评估值与预定阈值之间的比较结果来对候选图像进行分类。然后,例如,根据实施例的信息处理设备针对分类的候选图像的每个组来选择图像。
此处,对候选图像进行分类的示例包括作为根据实施例的休息图像的候选的候选图像和不作为根据实施例的休息图像的候选的候选图像。在下文中,从为根据实施例的休息图像的候选的候选图像选择的图像在一些情况下被称为“根据实施例的休息图像”,或者被称为“休息”。在下文中,从不为根据实施例的休息图像的候选的候选图像选择的图像被称为在一些情况下“根据实施例的工作图像”,或者被称为“工作”。
根据实施例的预定阈值的示例包括候选图像的评估值的中间值。根据实施例的预定阈值不限于前述值。例如,根据实施例的预定阈值可以为预先布置的固定值,或可以为基于用户的操作等布置的可变值。
图27是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了在(3)的处理(图像选择处理)中选择的图像的示例。此处,图27例示预定值为候选图像的评估值的中间值的示例。在图27中,以条形图的形式来指示评估值。图27所示的数字“1”至数字“8”指示根据最大评估值的顺序。在图27中,所选择的图像由“工作”和“休息”指示。
例如,根据实施例的信息处理设备将在前述(2)的处理(页分配处理)中确定的图像的数量分配为第一图像数量,通过该第一图像数量来选择根据实施例的工作图像,并且将在前述(2)的处理(页分配处理)中确定的图像的数量分配为第二图像数量,通过该第二图像数量来选择根据实施例的休息图像。此处,例如,可以预先设定分配为第一图像数量和第二图像数量,或者可以在根据实施例的与布局有关的参数中设定分配为第一图像数量和第二图像数量。例如,对第一图像数量和第二图像数量的分配可以通过用户的操作等来设定。
例如,根据实施例的信息处理设备以根据最大评估值的顺序的从具有等于或大于预定阈值的值的候选图像(或具有大于预定阈值的值的候选图像;这同样适用于下文)中选择候选图像的第一图像数量作为根据实施例的工作图像。例如,图27例示根据实施例的信息处理设备将由数字“1”和数字“2”指示的候选图像选择作为根据实施例的工作图像的示例。此处,以根据最大评估值的顺序从具有等于或大于预定阈值的值的候选图像中选择的图像对应于根据实施例的工作图像。
例如,根据实施例的信息处理设备以根据最大评估值的顺序从具有小于预定阈值的候选图像(具有等于或小于预定阈值的值的候选图像;这同样适用于下文)中选择第二图像数量的候选图像作为根据实施例的休息图像。例如,图27例示根据实施例的信息处理设备将由数字“5”和数字“6”指示的候选图像选择作为根据实施例的休息图像的示例。此处,以根据最大评估值的顺序从具有小于预定阈值的值的候选图像中选择的图像对应于根据实施例的休息图像。
例如,如上所述,根据实施例的信息处理设备通过针对分类的候选图像的每个组选择图像来选择根据实施例的工作图像和根据实施例的休息图像。例如,如上所述,根据实施例的信息处理设备可以通过选择根据实施例的工作图像和根据实施例的休息图像来实现上述高质量照片书的第三示例(休息)。
根据实施例的(3)的处理(图像选择处理)不限于上述处理。例如,根据实施例的信息处理设备可以针对分类的候选图像的每个组确定候选图像中的图像的方向性,并且还可以基于所确定的图像的方向性来选择图像。
图28是例示根据实施例的信息处理方法有关的处理的示例的说明图,并且例示与基于图像的方向性来选择图像有关的处理的示例。图28所示的A示出了由根据实施例的信息处理设备选择的图像的方向性的示例(即,OK情况下的示例)。图28所示的B示出了未被根据实施例的信息处理设备选择的图像的方向性的示例(即,NG情况下的示例)。
如在上述高质量照片书的第四示例(图像的方向性)中所述,进一步提高照片书的质量的方法的示例包括改变所布置的图像中的每个图像的方向性。因此,例如,如图28的B所示,当根据实施例的信息处理设备选择图像时,避免选择图像的方向为恒定的图像。
更具体地,例如,当根据实施例的信息处理设备以根据最大评估值的顺序从具有等于或大于预定阈值的值的候选图像中选择图像或以根据最大评估值的顺序从具有小于预定阈值的值的候选图像中选择图像时,根据实施例的信息处理设备不选择方向性与紧接的前一个图像相同的图像(或方向性基本相同的图像),即使在所选择的图像为评估值很高的图像的情况下也是如此。
例如,如上所述,通过基于图像的方向性跳过待选择的图像,如图28的A所示,可以例如实现布置的图像中的每个图像的方向性的变化。当根据实施例的信息处理设备以根据最大评估值的顺序从具有等于或大于预定阈值的值的候选图像中选择图像或以根据最大评估值的顺序从具有小于预定阈值的值的候选图像中选择图像时,并且当所有的候选图像方向性相同(或基本相同)时,根据实施例的信息处理设备例如在不使用图像的方向性的情况下选择图像。
例如,根据实施例的信息处理设备可以例如通过基于如上所述确定的图像的方向性来选择图像以实现上述高质量照片书的第四示例(图像的方向性)。
(4)布局生成处理
根据实施例的信息处理设备基于根据实施例的与布局有关的参数和与在前述(3)的处理(图像选择处理)中选择的图像对应的评估值来针对每个页生成布局。当在前述(1)的处理(评估值计算处理)中对候选图像进行分组的情况下,根据实施例的信息处理设备针对每个分组生成布局。
更具体地,根据实施例的信息处理设备例如通过基于在前述(2)的处理(页分配处理)中确定的在页中布置的图像的数量或者基于所确定的在页中布置的图像的数量和与在前述(3)的处理(图像选择处理)中选择的图像对应的评估值将布置有图像的区域布置在页中来生成布局。此处,根据实施例的布置有图像的区域被布置的页的示例包括照片书的每个页,但是根据实施例的布置有图像的区域被布置的页不限于上述页。例如,根据实施例的布置有图像的区域被布置的页可以为包括两个页的跨页页面。
例如,根据实施例的信息处理设备可以基于根据实施例的与布局有关的参数和/或有关与选择的图像对应的图像的信息来生成布局。
此处,根据实施例的与基于与布局有关的参数来生成布局的处理有关的示例包括如将在下文描述的使用页的纵横比(为根据实施例的与布局有关的参数的示例)的区域布置处理,以及如将在下文描述的使用根据实施例的与页中的空白有关的参数(为根据实施例的与布局有关的参数的示例)的空白区域布置处理。根据实施例的与基于有关与所选择的图像对应的图像的信息来生成布局的处理有关的示例包括如下面将描述的使用图像的纵横比(根据实施例的有关图像的信息)的区域布置处理。
图29和图30是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示(4)(布局生成处理)的处理的示例。图29所示的A示出当布置有一个图像的区域被布置在页面中时生成的布局的示例。图29所示的B示出布置有在前述(3)(图像选择处理)的处理中选择的图像的区域被布置在生成的布局中的页的示例。图30所示的A1、A2以及B1至B3示出了当布置有四个图像的区域被布置在页中时生成的布局的示例。图30所示的A3和B4示出布置有在前述(3)(图像选择处理)的处理中选择的图像的区域被布置在生成的布局中的页的示例。
例如,如图29的A所示,当布置有一个图像的区域被布置在页中时,根据实施例的信息处理设备将网格号为“(X,Y)=(1,1)”的区域作为布置图像的区域布置在页中。
例如,如图30的A1和B1所示,当布置有两个或更多图像的区域被布置在页中时,根据实施例的信息处理设备基于所选择的图像的评估值来确定所选择的图像的尺寸在所生成的布局中的级别(在下文中,在一些情况下称为“框级”)(框级确定处理)。此处,例如当布置有图像的区域由网格指示时,根据实施例的选择的图像的生成的布局的大小的级别是指示所选择的图像所占用的网格的多少的索引。
然后,例如,如图30的A2、B2和B3所示,根据实施例的信息处理设备对布置有图像的区域进行布置,并且生成布局(区域布置处理)。
(4-1)框级确定处理
图31是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示根据实施例的框级确定处理的示例。此处,图31例示当根据实施例的信息处理设备将在前述(3)(图像选择处理)的处理中选择的图像分类为两个级别即框级1(例如,当布置有图像的区域由网格指示时,指示占用一个网格的级别)和框级2(例如,当布置有图像的区域由网格指示时,指示占用四个网格的级别)的时根据实施例的框级确定处理的示例。
根据实施例的信息处理设备例如通过使用预定的阈值(图31所示的Th)和选择的图像的评估值来进行阈值处理以确定每个图像的框级。
图31例示“Th=0.5”被设定为预定阈值的示例,但是根据实施例的在框级确定处理中使用的阈值不限于前述阈值。例如,根据实施例的信息处理设备可以使用预先布置的除0.5以外的阈值或基于用户的操作等布置的阈值来进行根据实施例的框级确定处理。
图31例示下述示例,其中根据实施例的信息处理设备通过将在前述(3)(图像选择处理)的处理中选择的图像分类为两个框级即框级1和框级2来确定每个图像的框级。然而,由根据实施例的信息处理设备确定的框级不限于前述框级。例如,根据实施例的信息处理设备可以通过将图像分类为三个或更多个框级例如三个框级即“框级1、框级2和框级3(例如,当布置有图像的区域由网格指示时,指示占用九个网格的级别)”来确定每个图像的框级。当所选择的图像分别被分类为三个或更多个框级时,通过使用多个预定阈值(其为当图像被分类为三个框级的情况下的预定阈值的示例)例如Th1=0.33,Th2=0.67等的阈值处理来确定每个图像的框级。
根据实施例的信息处理设备可以例如通过如上所述的那样确定框级来实现例如高质量照片书的第三示例(休息)。
(4-2)区域布置处理
图32和图33是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的区域布置处理的示例。此处,图32例示根据实施例的区域布置处理的概况,并且图33例示根据实施例的通过区域布置处理布置的并且布置有图像的区域的示例。在下文中,将描述根据实施例的区域布置处理的示例,例示,例如,如图32的A所示,在前述(3)(图像选择处理)的处理中选择的图像的框级为两个图像(例如,对应于根据实施例的休息图像)具有的框级1和两个图像(例如,对应于根据实施例的工作图像)具有的框级2的情况。
例如,根据实施例的信息处理设备对布置有图像的区域进行布置以使得根据实施例的休息图像不连续地被布置。例如,如上所述,例如通过对布置有图像的区域进行布置以使得根据实施例的休息图像不连续地被布置来实现根据上述实施例的高质量照片书的第三示例(休息)。
例如,根据实施例的信息处理设备使用网格来表示页中的布置有图像的区域,并且例如,如图32的B1至B3所示从页的左上侧到右下侧对布置有所选择的图像的区域进行布置。
此处,例如,如图32所示,当页中的布置有图像的区域由网格的数量“(X,Y)=(4,3)”的区域表示时,如图32的B2和B3所示,难以对布置有图32的A所示的所有图像的区域进行布置。因此,根据实施例的信息处理设备难以将页中的布置有图像的区域确定为网格数量“(X,Y)=(4,3)”的区域。
如上所述,当根据实施例的信息处理设备确定难以将页中的布置有图像的区域表示为一个网格(X,Y)的区域时,根据实施例的信息处理设备将页中的布置有图像的区域表示为另一数量的网格(X,Y)的区域,并且例如,如图33所示,再次从页的左上侧到右下侧对布置有所选择的图像的区域进行布置。此处,图33例示根据实施例的信息处理设备将页中的布置有图像的区域表示为网格的数量为“(X,Y)=(3,4)”的区域的情况。
例如,如图33的F所示,当可以对布置有图32的A所示的所有图像的区域进行布置时,根据实施例的信息处理设备生成下述区域,在该区域中在布置有所有的图像的区域被布置的情况下,图像被布置在页中。
此处,例如,如图33的B和C所示,根据实施例的信息处理设备可以将布置有图像的区域扩大成比与该图像的框级对应的区域大。例如,根据实施例的信息处理设备基于根据实施例的由与页的空白有关的参数(其为根据实施例的与布局有关的参数的示例)指示的空白度来将布置有图像的区域扩大成比与图像的框级对应的区域大。
如图33的D所示,当布置有所选择的图像的区域和根据实施例的休息图像被连续地布置时,如图33的E所示,布置有先前布置的所选择的图像的区域可以与布置有根据实施例的休息图像的区域交换。例如,当对应于空白的区域如图33的D所示的根据实施例的休息图像那样被连续地布置时,如图33的E所示,根据实施例的信息处理设备还可以将布置有先前布置的所选择的图像的区域与对应于空白的区域交换,如与布置有根据实施例的休息图像的区域的交换中那样。例如,如图33的D所示,当对应于空白的区域和根据实施例的休息图像如根据实施例的休息图像那样被连续地布置时,如图33的E所示,根据实施例的信息处理设备还可以将布置有先前布置的所选择的图像的区域与对应于空白的区域或布置有根据实施例的休息图像的区域进行交换,如根据实施例的休息图像的区域的交换中那样。
根据实施例的信息处理设备可以例如通过如上所述的那样对布置有图像的区域进行布置来实现例如上述高质量照片书的第三示例(休息)和上述高质量照片书的第六示例(布局)。
作为(4)(布局生成处理)的处理,根据实施例的信息处理设备例如进行前述(4-1)(框级确定处理)的处理和前述(4-2)(区域布置处理)的处理。作为(4)(布局生成处理)的处理,根据实施例的信息处理设备可以例如通过进行前述(4-1)(框级确定处理)的处理和前述(4-2)(区域布置处理)的处理来实现例如上述高质量照片书的第三示例(休息)和上述高质量照片书的第六示例(布局)。
在根据实施例的信息处理设备中(4)(布局生成处理)的处理不限于上述处理。例如,根据实施例的信息处理设备还可以使用根据实施例的与页中的空白有关的参数(其为根据实施例的布局的参数的示例)来进行空白区域布置处理。
(4-3)空白区域布置处理
图34至图36是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的空白区域布置处理的示例。此处,图34例示根据实施例的空白区域布置处理的概况,并且图35和图36示出了根据实施例的空白区域布置处理的示例。
如在根据实施例的高质量照片书的第三示例(休息)所述,例如,如图34的A1和B1所示,布置对应于空白的区域(在下文中,例如,在一些情况下被称为“空白框”或“空白”)的方法,可以被例示为实现高质量照片书的一种方法。因此,根据实施例的信息处理设备对例如,如图34的A2和B2所示的对应于空白的区域进行布置以实现例如,如图34的A1和B1所示的页。
更具体地,当页中的布置有图像的区域由网格指示时,根据实施例的信息处理设备首先确定由页中的空白框所占用的区域的网格的总数量(对应于由页中的空白框所占用的区域的总面积)。例如,当页中的布置有图像的区域由网格指示时,根据实施例的信息处理设备基于由在前述(3)(图像选择处理)的处理中选择的图像所占用的网格的数量和根据实施例的与页中的空白有关的参数(其为与根据实施例的布局有关的参数的示例)来确定由页中的空白框所占用的区域的网格的总数量。此处,布置有根据实施例的空白框的页例如可以为包括两个页的跨页。
例如,如图35所示,当由选择的图像占用的网格的数量为八并且页中的空白率(为根据实施例的与页中的空白有关的参数的示例)为50[%]时,例如通过计算“8×50/(100-50)=8”将8确定为由页中的空白框占用的区域的网格的总数量。
例如,如上所述,当由页中的空白框占用的区域的网格的总数量被确定时,根据实施例的信息处理设备确定空白框的数量和空白框在布置的布局中的尺寸的级别(在下文中,在一些情况下称为“空白框的框级”)。
此处,确定空白框的数量和空白框的框级的方法的示例包括确定空白框的数量和空白框的框级使得以下条件被满足的方法。此外,不用说,与确定空白框的数量和空白框的框级有关的条件不限于以下条件。
.空白框的数量等于或小于图像框的数量。
.空白框的最大框级小于图像框的最大框级。
.框级尽可能小的空白框被包括。
更具体地,例如,根据实施例的信息处理设备仅使用其为框级为1的空白框的空白框来生成空白框。页中由空白框占用的区域的网格的总数量为8。因此,当仅使用其为框级为1的空白框的空白框来生成空白框时,框级为1的八个空白框被生成。
此处,如上所述,当仅使用其为框级为1的空白框的空白框来生成空白框时,不满足前述条件,这是因为“8(空白框的数量)>2(图像框的数量)”。因此,根据实施例的信息处理设备确定满足前述条件的最大数量2作为空白框的数量,并且确定1作为空白框的框级。也就是说,例如,根据实施例的信息处理设备省略了生成的八个空白框中的六个空白框,以满足前述条件。
在根据实施例的信息处理设备中,与确定空白框的数量和空白框的框级有关的处理的示例不限于前述处理。例如,当信息处理设备仅使用其为框级为1的空白框的空白框来生成空白框并且不满足前述条件时,根据实施例的信息处理设备可以生成包含为框级为2的空白框的空白框的空白框并且确定是否满足前述条件。
此处,将给出根据实施例的空白区域布置处理的具体示例。
例如,如图36的A所示,当由选择的图像占用的网格的数量为5并且空白率(该空白率为根据实施例的与页中的空白有关的参数的示例)为20[%]时,例如通过计算“5×20/(100-20)=1.25”将1确定为由页中的空白框占用的区域的网格的总数量。
如图36的B1所示,当页中的布置有图像的区域被确定为网格的数量为“(X,Y)=(3,2),”时,例如,如图36的B2所示,通过前述(4-2)(区域布置处理)的处理将布置有图像的区域布置在页中。然后,根据实施例的信息处理设备例如通过进行前述(5)(布局调整处理)的处理和前述(6)(图像处理)的处理来生成例如图36的B中所示的照片书的页。例如,如图36的B2所示,当根据实施例的与空白和休息图像对应的区域被连续地布置时,根据实施例的信息处理设备可以将布置有先前布置的选择的图像的区域与对应于空白的区域或布置有根据实施例的休息图像的区域交换,如例如如图33的E所示对布置有根据实施例的休息图像的区域的交换中那样。如上所述,例如,当对应于空白的区域如图33的D所示的根据实施例的休息图像中那样被连续地布置时,根据实施例的信息处理设备还可以将布置有先前布置的选择的图像的区域与对应于空白的区域进行交换,如如图33的E所示对布置有根据实施例的休息图像的区域的交换中那样。
根据实施例的信息处理设备还可以通过进行例如前述(4-3)的处理(空白区域布置处理)作为(4)(布局生成处理)的处理来实现例如上述高质量照片书的第三示例(休息)、上述高质量照片书的第五示例(由图像所占用的面积的平衡性),以及上述高质量照片书的第八示例(框分割)。
(5)布局调整处理
根据实施例的信息处理设备对在前述(4)(布局生成处理)的处理中生成的布局进行调整。更具体地,根据实施例的信息处理设备进行下面要描述的例如(5-1)至(5-5)的处理中的一个处理或者两个或更多个处理。
(5-1)与余白调整有关的处理
当在前述(4)(布局生成处理)的处理中生成的布局包括一个页中布置一个图像的布局时,根据实施例的信息处理设备对布置有一个图像的页中的余白进行调整。
图37是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的与余白调整有关的处理的示例。此处,图37所示的A1和A2示出了在前述(4)(布局生成处理)的处理中生成的布局的示例。图37所示的B1至B3示出了通过根据实施例的与余白调整有关的处理调整的布局的示例。
根据实施例的信息处理设备例如基于与余白有关的参数(根据实施例的与布局有关的参数)例如“上余白=外余白=下余白=内余白=x(其中x为正实数)”或“指示余白的开/关的参数”来对在前述(4)(布局生成处理)的处理中生成的布局进行调整。
根据实施例的信息处理设备可通过进行(5-1)(与余白调整有关的处理)的处理作为(5)(布局调整处理)的处理来实现例如上述高质量照片书的第一示例(余白)和上述高质量照片书的第六示例(布局)。
(5-2)裁剪处理
根据实施例的信息处理设备基于在前述(4)(布局生成处理)的处理中生成的布局中布置的所选择的图像来裁剪布置有所选择的图像的区域。
图38和图39是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示根据实施例的裁剪处理的示例。此处,图38所示的A示出了在裁剪处理进行之前生成的布局的示例,并且图38所示的B示出了在裁剪处理进行之后调整的布局的示例。图38的B中所示的C1和C2示出了布置有被裁剪的选择的图像的区域。图39所示的A示出了在前述(3)(图像选择处理)的处理中选择的图像的示例。图39所示的B和C示出了当在一个页中布置一个图像时布置在裁剪的布局中的、待通过前述(6)(图像处理)的处理调整的图像的示例。
例如,根据实施例的信息处理设备根据由指示纵横比的约束的参数(该参数为与根据实施例的布局有关的参数的示例)所指示的纵横约束来裁剪框(布置有选择的图像的区域)。如上所述,通过根据纵横约束来裁剪框,例如可以抑制垂直较长或水平较长的框。
此处,根据实施例的裁剪处理的示例包括基于有关与布置在待裁剪的框中的选择的图像对应的图像的信息按布置在待裁剪的框中的选择的图像的纵横比的优先级来裁剪框的处理。更具体地,例如,如图39的A所示,当布置在待裁剪的框中的选择的图像的纵横比(该纵横比为根据实施例的有关图像的信息的示例)指示所选择的图像为水平较长的图像时,根据实施例的信息处理设备按图39的C而非图39的B所示的图像的布置的优先级来裁剪框(布置有所选择的图像的区域)。
例如,根据实施例的信息处理设备可以通过如上所述对布置有所选择的图像的区域进行裁剪来实现例如上述高质量照片书的第七示例(图像处理)和上述高质量照片书的第八示例(框分割)。
(5-3)旋转处理
根据实施例的信息处理设备旋转布置有以在前述(4)(布局生成处理)的处理中生成的布局布置的所选择的图像的区域。
(5-3-1)旋转处理的第一示例
例如,根据实施例的信息处理设备基于根据实施例的与布局有关的参数例如指示旋转角θ的最大值的参数来旋转布置有所选择的图像的区域。
更具体地,例如,根据实施例的信息处理设备针对布置在页(或跨页页面)中并且布置有所选择的图像的每个区域随机地设定旋转角θ和相对于参考方向(诸如页的水平方向)的旋转方向。例如,通过指示旋转角θ的最大值的参数将约束施加到旋转角θ上。根据实施例的信息处理设备即使在基于根据实施例的与布局有关的参数的约束没有施加到旋转角θ的情况下也可以进行根据实施例的旋转处理。
根据实施例的信息处理设备通过如下表达式1来计算布置有所选择的图像的区域的旋转角θ的平均值μ,并且通过如下表达式2来计算布置有所选择的图像的区域的旋转角θ的离散度σ。此处,表达式1和表达式2中的“N”指示布置在页(或跨页页面)中并且布置有所选择的图像的区域的数量。
[数学1]
…(表达式1)
[数学2]
...(表达式2)
然后,例如,基于所计算的旋转角的平均值μ和旋转角的离散度σ,根据实施例的信息处理设备确定在布置在页中并且布置有所选择的图像的每个区域中布置的旋转方向和旋转角θ是否非常均衡。
更具体地,根据实施例的信息处理设备例如当所计算的旋转角的平均值μ与和旋转角的平均值有关的阈值T1的比较结果以及所计算的旋转角的离散度σ与和旋转角的离散度有关的阈值T2的比较结果满足预定条件(例如,“|σ|<T1且μ>T2”)时确定所布置的旋转方向和旋转角θ非常均衡。此处,阈值T1和阈值T2中的每个可以为预先设定的固定值,或者可以为可以通过用户的操作等改变的可变值。
当根据实施例的信息处理设备确定所布置的旋转方向和旋转角θ非常均衡时,根据实施例的信息处理设备基于所布置的旋转方向和旋转角θ对布置有所选择的图像的区域进行旋转。相反地,当根据实施例的信息处理设备确定所布置的旋转方向和旋转角θ不非常均衡时,根据实施例的信息处理设备再次布置旋转方向和旋转角θ,并且确定重新布置的旋转方向和旋转角θ是否非常均衡。
根据实施例的信息处理设备可以例如通过如上所述对布置有所选择的图像的区域进行旋转来实现例如上述高质量照片书的第九示例(框的旋转)。
(5-3-2)旋转处理的第二示例
根据实施例的信息处理设备例如基于在前述(4)(布局生成处理)的处理中生成的布局中布置的所选择的图像在生成的布局中的大小来对布置有所选择的图像的区域进行旋转。
此处,根据实施例的在所生成的布局中的大小的示例包括根据实施例的框级和在页或跨页中由布置有所选择的图像的区域占用的面积(这同样适用于下文)。
图40是例示与根据实施例的信息处理方法有关的处理的示例的说明图,并且例示根据实施例的旋转处理的第二示例。此处,图40所示的A示出作为通过对第二示例进行根据实施例的旋转处理而获得的结果通过(6)(图像处理)的处理布置的图像的示例。图40所示的B示出图40的A的比较示例,以描述根据实施例的旋转处理的第二示例。
例如,如图40的B所示,当大框(布置有所选择的图像的区域)被大幅度地旋转或该框被稍微旋转时,存在的问题是用户将框的旋转感知为非自然的。因此,例如,如图40的A所示,根据实施例的信息处理设备不对大框进行旋转(或以较小的旋转角度进行旋转)或不对大框进行轻微的旋转,以使得防止用户将框的旋转感知为非自然的。
根据实施例的信息处理设备可以例如通过如上所述对布置有所选择的图像的区域进行旋转来实现例如上述高质量照片书的第九示例(框的旋转)。
根据实施例的旋转处理不限于与前述第一示例有关的处理以及与前述第二示例有关的处理。例如,除了与前述第一示例有关的处理以及与前述第二示例有关的处理之外,根据实施例的信息处理设备还可以进行与下面要描述的第三示例有关的处理。
(5-3-3)旋转处理的第三示例
例如,根据实施例的信息处理设备可以通过对布置有旋转后的所选择的图像的区域进行收缩和/或平行移动来调整余白。
图41是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的在旋转处理的第三示例中对余白的调整的示例。
例如,如图41所示,根据实施例的信息处理设备对布置有旋转后的所选择的图像的区域进行收缩和平行移动,以使得布置有旋转后的所选择的图像的区域不朝向布置的余白突出。图41示出了如图41的C所示的对布置有旋转后的所选择的图像的区域进行收缩和平行移动的示例。然而,在根据实施例的旋转处理的第三示例中对余白进行调整的方法的示例不限于图41所示的示例。例如,根据实施例的信息处理设备可以通过对布置有旋转后的所选择的图像的区域进行收缩或平行移动来调整余白。
根据实施例的信息处理设备可以例如通过如上所述对余白进行调整来实现例如上述高质量照片书的第一示例(余白)。
(5-4)空白调整处理
例如,根据实施例的信息处理设备通过对布置有在生成的布局中布置的所选择的图像的区域进行扩展和/或平行移动来调整在生成的布局中的空白。
图42和图43是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的空白调整处理的示例。
例如,如图42的A至D所示,根据实施例的信息处理设备使框(布置有所选择的图像的区域)在存在空白的方向上移动。此处,例如,根据实施例的信息处理设备针对每个框确定可移动的方向和可移动的距离。例如,根据实施例的信息处理设备使框从具有较少的可移动方向的候选的框按顺序在可移动距离更大的方向上移动。例如,根据实施例的信息处理设备将框的移动量布置成随着可移动距离更大即随着空白的大小更大而更大。
例如,如图43所示,当在框(布置有所选择的图像的区域)的外围存在空白时,根据实施例的信息处理设备对其外围存在空白的框进行扩展。例如,如图43所示,当在两个方向上存在空白时,根据实施例的信息处理设备可以倾斜地对其外围存在空白的框进行平行移动。
图43例示根据实施例的信息处理设备对“框2”(其为布置有所选择的图像的区域的示例)进行平行移动和扩展的示例。然而,在空白调整处理中调整空白的方法的示例不限于图43所示的示例。例如,根据实施例的信息处理设备可以仅通过扩展“框2”(其为布置有所选择的图像的区域的示例)来调整空白。
根据实施例的信息处理设备可以例如通过如上所述对生成的布局中的空白进行调整来实现例如上述高质量照片书的第八示例(框分割)。
(5-5)交叠调整处理
例如,根据实施例的信息处理设备基于布置在生成的布局中的所选择的图像在生成的布局中的大小来对布置有所选择的图像的区域交叠的方式进行调整。
图44是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的交叠调整处理的示例。此处,图44例示据实施例的交叠调整处理的示例。在图44中,根据实施例的在生成的布局中的大小被称为“面积”。
例如,根据实施例的信息处理设备按在生成的布局中的大小来重新布置框(布置有在所生成的布局中布置的所选择的图像的区域)。然后,例如,如图44所示,根据实施例的信息处理设备设定区域中的深度值Depth,以使得具有较小的大小的框与在生成的布局中具有较大的大小的框交叠。不用说,可以将深度值Depth布置在区域中使得在生成的布局中具有较大大小的框与具有较小大小的框交叠。
根据实施例的信息处理设备可以例如通过如上所述对布置有所选择的图像的区域交叠的方式进行调整来实现例如上述高质量照片书的第十示例(框的交叠)。
根据实施例的交叠调整处理不限于上述交叠调整处理。例如,根据实施例的信息处理设备可以例如通过对布置有在生成的布局中布置的所选择的图像的区域的交叠进行确定并且基于交叠确定结果对布置有所选择的图像的区域进行平行移动来对布置有所选择的图像的区域的交叠进行调整。
图45和图46是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的交叠调整处理的另一示例。此处,图45所示的A示出了在与和实施例的第十五示例有关的交叠调整处理的其他示例有关的处理进行之前布置有所选择的图像的区域的示例。图45所示的B示出了与根据实施例的交叠调整处理的其他示例有关的处理进行之后布置有所选择的图像的区域的示例。
如高质量照片书的第十示例(框的交叠)所述,通过避免例如,如图45的A所示的共有框的微小交叠状态或接触状态(例如,当框彼此微小交叠或框彼此稍微交叠时),可以实现更高质量的照片书。
因此,根据实施例的信息处理设备确定布置有旋转后的所选择的图像的共有区域的交叠。然后,根据实施例的信息处理设备通过基于确定结果对布置有所选择的图像的区域进行平行移动来对布置有所选择的图像的区域的交叠进行调整。
更具体地,例如,如图46所示,根据实施例的信息处理设备基于框(布置有所选择的图像的区域)是否交叠以及在对框进行扩展/收缩时框是否交叠这两个确定结果来确定交叠度(为前述确定结果的示例)。此处,如上所述,通过基于两个确定结果来确定交叠度,可以确定共有框的微小交叠状态或接触状态。
例如,如图46所示,根据实施例的信息处理设备根据所确定的交叠度对布置有所选择的图像的区域进行平行移动。此处,根据实施例的信息处理设备例如通过参照表等来根据所确定的交叠度对布置有所选择的图像的区域进行平行移动,在所述表中交叠度对应于处理的内容。
例如,根据实施例的信息处理设备可以通过如上所述对布置有所选择的图像的区域的交叠进行调整来实现例如上述高质量照片书的第十示例(框的交叠)。
(6)图像处理
根据实施例的信息处理设备将在前述(3)的处理(图像选择处理)中选择的图像布置在在前述(4)的处理(布局生成处理)中生成的布局或在前述(5)的处理(布局调整处理)中调整的布局中。
此处,根据实施例的信息处理设备将在前述(3)的处理(图像选择处理)中选择的图像布置在所生成的布局或所调整的布局中,但是根据实施例的(6)的处理(图像处理)不限于前述处理。例如,根据实施例的信息处理设备可以通过进行下述(6-1)至(6-3)的处理中的一个处理或者两个或更多个处理来将所处理的图像布置在所生成的布局或所调整的布局中。
(6-1)图像处理的第一示例:与组成变化有关的处理
例如,根据实施例的信息处理设备从在生成的布局或调整的布局中布置的所选图像中检测对象。然后,当信息处理设备检测出对象时,根据实施例的信息处理设备基于包含在所选择的图像中的对象来改变所选择的图像的组成,并且对组成改变的图像进行布置。
由根据实施例的信息处理设备从所选择的图像中检测的对象的示例包括人脸和诸如汽车的物体。根据实施例的信息处理设备例如通过进行任何脸检测处理或任何物体检测处理来从所选择的图像中检测对象。
图47是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了与根据实施例的第一示例有关的图像处理的示例。此处,图47示出了根据实施例的信息处理设备从所选择的图像中检测人脸以作为对象,并且将所选择的图像改变为具有3分割构图的图像的示例。
例如,根据实施例的信息处理设备从所选图像检测诸如人脸的对象。然后,当信息处理设备检测到对象时,根据实施例的信息处理设备通过进行加框来改变所选图像的构图,使得例如如图47所示在3分割点得到所检测的对象。此处,例如,根据实施例的信息处理设备在考虑到脸的方向的情况下设置3分割点。
例如,如图47所示,通过将所选择的图像改变为具有3分割构图的图像,例如可以将用类似日本国旗的构图捕捉的图像改变为具有更好构图的图像。例如,通过将该构图改变为更好的构图,根据实施例的信息处理设备可以实现例如具有高质量的照片书的第二示例(稀疏和稠密)和上述具有高质量的照片书的第七示例(图像处理)。
在与实施例的第一示例有关的图像处理中改变的构图不限于3分割构图。例如,根据实施例的信息处理设备还可以将所选择的图像的构图改变为图像的另一构图,例如倾斜2分割构图。
(6-2)图像处理的第二示例:与选择性加框有关的处理
例如,根据实施例的信息处理设备基于布置在生成的布局或调整的布局中的所选择的图像的大小从在生成的(或调整的)布局中的所选择的图像中选择性地检测预定对象。然后,当信息处理设备检测到预定对象时,根据实施例的信息处理设备对图像进行布置,其中包含在所选图像中的预定对象被扩展。
此处,由根据实施例的信息处理设备从所选择的图像中检测的预定对象的示例包括人脸。根据实施例的信息处理设备例如通过进行任何脸检测处理来从所选图像中检测预定对象。例如,根据实施例的信息处理设备不将景物、物体等检测为预定对象。这是因为,例如,当将景物、物体等检测为预定对象时,存在由于扩展预定对象而导致整个图像几乎不可见的问题。
例如,根据实施例的信息处理设备在大小等于或小于预定阈值的框(或大小小于预定阈值的框)(布置有所选图像的区域)的所生成的布局中,从该框中检测预定对象。此处,与第二示例有关的图像处理中的预定阈值的示例包括与框级有关的阈值以及在页或跨页中由框占用的面积有关的阈值。与第二示例有关的图像处理中的预定阈值可以是预先设定的固定值,或可以通过用户的操作等改变的可变值。
图48是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了与根据实施例的第二示例有关的图像处理的示例。此处,图48所示的A示出了作为通过进行根据实施例的图像处理的第二示例而获得的结果来布置的图像的示例。图48所示的B示出了图48的A的比较示例,以描述根据实施例的图像处理的第二示例。
例如,如在图48的B所示的B1中那样,当布置在小尺寸的框(布置有所选图像的区域)中的图像包括人时,存在由于人脸太小而导致人脸几乎不可被用户识别的问题。因此,例如,如在图48的A所示的A1中那样,当布置在小尺寸的框(布置有所选图像的区域)中的图像包括人时,根据实施例的信息处理设备对图像进行布置,其中人脸被扩展。
例如,如图48的A所示,根据实施例的信息处理设备可以通过对图像进行如下布置来防止人脸几乎不可被观看照片书的用户识别:对在小尺寸的框(布置有所选图像的区域)中布置的图像中包含的人脸进行扩展。根据实施例的信息处理设备可以例如通过对图像进行如下布置来实现例如上述具有高质量的照片书的第七示例(图像处理):对在小尺寸的框(布置有所选图像的区域)中布置的图像中包含的人脸进行扩展。
(6-3)图像处理的第三示例:与页扩展有关的处理
例如,当在布置在生成的布局或调整的布局中的所选择的图像中存在被布置成延伸跨过多个页的图像时,根据实施例的信息处理设备从被布置为延伸跨过多个页的图像中检测预定对象。例如,根据实施例的信息处理设备对被布置为延伸跨过多个页的图像进行处理以使得所检测的预定对象不位于所述多个页的边界线上。
由根据实施例的信息处理设备从所选择的图像中检测的对象的示例包括人脸和诸如汽车的物体。根据实施例的信息处理设备例如通过进行任何脸检测处理或任何物体检测处理从所选择的图像中检测对象。
根据实施例的第三示例的图像处理中被进行以使得所检测的预定对象不位于多个页的边界线上的处理的示例包括如在与前述第一示例有关的图像处理中那样改变所选择的图像的构图的处理,和对从所选择的图像中加框的区域进行平行移动的处理。
图49是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了与根据实施例的第三示例有关的图像处理的示例。此处,图49所示的A示出了作为通过进行根据实施例的图像处理的第三示例而获得的结果来布置的图像的示例。图49所示的B示出了图49的A的比较示例,以描述根据实施例的图像处理的第三示例。
例如,如在图49的B所示的B1中那样,当所布置的所选图像中包含的人脸位于页的边界线上时,存在人脸几乎不可被用户识别的问题。因此,例如,如在图49的A所示的A1中那样,根据实施例的信息处理设备对所布置的所选图像进行处理,使得所布置的所选图像中包含的人脸不位于页的边界线上,然后对所处理的图像进行布置。
例如,如图49的A所示,通过防止所布置的所选图像中包含的人脸(为预定对象的示例)位于页的边界线上,根据实施例的信息处理设备可以防止人脸几乎不可被观看照片书的用户识别。例如,通过防止所布置的所选图像中包含的人脸(为预定对象的示例)位于页的边界线上,根据实施例的信息处理设备可以实现例如前述具有高质量的照片书的第七示例(图像处理)。
作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备进行例如“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)”、“前述(1)的处理(评估值计算处理)至前述(5)的处理(布局调整处理)”、“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)以及前述(6)的处理(图像处理)”,或者“前述(1)的处理(评估值计算处理)至前述(6)的处理(图像处理)”。
此处,例如,当信息处理设备在前述(1)的处理(评估值计算处理)中对候选图像进行分组并且执行后面阶段的处理时,根据实施例的信息处理设备可以实现例如图像按时间顺序布置的照片书。因此,观看通过与根据实施例的信息处理方法有关的处理实现的照片书的用户可以阅读并理解在照片书中布置为按时间顺序的故事的图像。例如,当信息处理设备在前述(1)的处理(评估值计算处理)中对候选图像进行分组并且执行后面阶段的处理时,根据实施例的信息处理设备还可以防止类似的图像被布置。
在前述(3)的处理(图像选择处理)中,根据实施例的信息处理设备基于与根据实施例的布局有关的参数和在前述(1)的处理(评估值计算处理)中计算出的评估值从候选图像选择图像。因此,即使当存在多个候选图像时,根据实施例的信息处理设备可以自动地选择更好的图像(实现具有更高质量的照片书的图像)。
在前述(4)的处理(布局生成处理)中,根据实施例的信息处理设备基于与根据实施例的布局有关的参数和与在前述(3)的处理(图像选择处理)中选择的图像对应的评估值生成布局。因此,根据实施例的信息处理设备可以自动地生成具有良好质量的布局。基于与根据实施例的布局有关的参数进行该处理。因此,当与根据实施例的信息处理方法有关的处理被使用时,可以更容易地生成具有各种设计主题的布局的变型。
在前述(5)的处理(布局调整处理)中,根据实施例的信息处理设备对在前述(4)的处理(布局生成处理)中生成的布局进行调整。在前述(6)的处理(图像处理)中,根据实施例的信息处理设备在生成的布局或调整的布局中布置在前述(3)的处理(图像选择处理)中选择的图像,或经处理的图像,例如构图被改变的图像。因此,根据实施例的信息处理设备可以实现例如具有较高质量的照片书。
与根据实施例的信息处理方法有关的处理不限于在前述(1)的处理(评估值计算处理)至前述(6)的处理(图像处理)中描述的处理。
(7)评估处理
例如,根据实施例的信息处理设备还可以执行对生成的布局(包括调整的布局)进行评估的评估处理。更具体地,例如,根据实施例的信息处理设备通过对生成的布局进行评分来评估生成的布局。
在生成的布局被评分的情况下,例如当计算出的分数为低时,根据实施例的信息处理设备可以例如通过再次执行与根据实施例的信息处理方法有关的处理来再次生成所有页的布局或某些页的布局。因此,根据实施例的信息处理设备可以通过进一步执行根据实施例的评估处理来生成布局,以生成具有较高质量的照片书。
例如,根据实施例的信息处理设备还可以通过基于各种设置生成候选图像的布局并且对所生成的布局进行评估来选择候选图像中具有最佳分数的布局。此处,在实施例中,例如,通过改变与根据实施例的布局有关的参数、改变候选图像的数量和替代候选图像的设置来执行各种设置。
此处,例如,当计算的分数等于或小于设定的阈值(或者计算的分数小于设定的阈值)时,根据实施例的信息处理设备确定计算的分数为低。与分数确定有关的阈值可以是预先设定的固定值,或者可以是能够由用户等改变的可变值。
当信息处理设备确定计算的分数为低时,根据实施例的信息处理设备从第一处理(从前述(1)的处理(评估值计算处理))开始执行与根据实施例的信息处理方法有关的处理。然而,当确定计算的分数为低时执行的处理不限于前述处理。例如,根据实施例的信息处理设备可以再次仅执行处理中的一些处理,例如前述(5)的处理(布局调整处理)和前述(6)的处理(图像处理)。
根据实施例的信息处理设备例如通过从设定的标准点减去一个点并且计算得分的减法方案来计算生成的布局的分数。与分数计算有关的标准点可以是预先设定的值,或者可以是能够由用户等改变的值。显然,在根据实施例的信息处理设备中,与生成的布局的评分有关的处理不限于通过减法方案计算分数的处理。
图50是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了在根据实施例的评估处理中与对生成的布局的评分有关的处理的示例。此处,图50所示的A示出了在与生成的布局的评分有关的处理中的减法目标布局的示例,并且图50所示的B示出了计算减法分数的方法的示例。
例如,当生成的布局对应于图50的B所示的减法目标时,根据实施例的信息处理设备计算减法分数。然后,根据实施例的信息处理设备通过从设定的标准点减去计算的减法分数来计算生成的布局的分数。
(8)学习处理
根据实施例的信息处理设备还可以执行例如学习用户针对与根据实施例的布局有关的参数的偏好的学习处理。根据实施例的信息处理设备例如基于与布局有关的参数被使用的次数或者基于与布局有关的参数被使用的次数和生成的布局是否被确认,来学习用户针对与根据实施例的布局有关的参数的偏好。
例如,根据实施例的信息处理设备可以通过进一步执行学习处理来生成更适于用户的偏好的布局,而不使用与用户不喜欢的根据实施例的布局有关的参数。例如,根据实施例的信息处理设备还可以通过进一步执行学习处理来推荐与用户更喜欢的根据实施例的布局有关的参数。显然,使用根据实施例的学习处理的结果的根据实施例的处理不限于前述处理。
更具体地,例如,当与布局有关的参数在设定时段内被使用的次数等于或小于第一次数(或者与布局有关的参数在设定时段内被使用的次数小于第一次数;这同样适用于下文)时,根据实施例的信息处理设备将布局的参数存储为用户不喜欢的参数。这里,例如,在根据实施例的学习处理中的第一次数可以是预先设定的固定值,或者可以是能够由用户等改变的可变值。
例如,当与布局有关的参数被使用的次数超过第二次数(或者与布局有关的参数被使用的次数等于或大于第二次数;这同样适用于下文)时,根据实施例的信息处理设备确定是在不进行改变的情况下使用所生成的布局,还是对所生成的布局进行重新生成。此处,例如,在根据实施例的学习处理中的第二次数可以是预先设定的固定值,或者可以是能够由用户等改变的可变值。
例如,根据实施例的信息处理设备将与根据实施例的布局有关的参数作为指示学习结果的学习数据记录在存储单元(待在下文描述)、外部记录介质或诸如包含在外部设备中的记录介质的记录介质中。然而,在根据实施例的学习处理中记录的学习数据不限于前述数据。例如,根据实施例的信息处理设备可以将指示与根据实施例的布局有关的参数的数据作为学习数据记录在存储单元(待在下文描述)中。
例如,当在前述(7)的处理(评估处理)中计算的分数为低或检测到指示基于用户的操作的布局的重新生成的操作信号时,根据实施例的信息处理设备确定重新生成所生成的布局。例如,当在前述(7)的处理(评估处理)中计算的分数不为低或检测到指示基于用户的操作的布局被确认的操作信号时,根据实施例的信息处理设备确定所生成的布局不没有改变的情况下使用。
即使当在前述确定中确定所生成的布局在不进行改变的情况下使用时,根据实施例的信息处理设备将与布局有关并且对应于所生成的布局的参数作为用户喜欢的参数记录在存储单元(待在下文描述)等中。当在前述确定中确定所生成的布局被重新生成时,根据实施例的信息处理设备将与布局有关并且对应于所生成的布局的参数作为用户不喜欢的参数记录在存储单元(待在下文描述)等中。
图51是示出与根据实施例的信息处理方法有关的处理的示例的说明图,并且示出了根据实施例的学习处理的示例。图51示出了一个示例,其中与根据实施例的布局有关的参数对应于“主题”,以及当用户选择“主题”并且执行与根据实施例的信息处理方法有关的处理时,执行根据实施例的学习处理。
例如,如图51的A所示,当“主题”在选定时段内被选择的次数为零(这是与布局有关的参数被使用的次数等于或小于第一次数时的示例)时,根据实施例的信息处理设备将与对应于该“主题”的布局有关的参数作为用户不喜欢的参数记录在存储单元(待在下文描述)中。
例如,如图51的B所示,当与布局有关的参数被使用的次数为10次(这是与布局有关的参数被使用的次数超过第二次数时的示例)时,根据实施例的信息处理设备确定是在不进行改变的情况下使用所生成的布局,还是重新生成所生成的布局。例如,如图51的B所示,当新息处理设备确定在不进行改变的情况下使用所生成的布局时,根据实施例的信息处理设备将与布局有关的并且对应于所生成的布局的参数作为用户喜欢的参数记录在存储单元(待在下文描述)中。相反,例如,如图51的B所示,当信息处理设备确定重新生成所生成的布局时,根据实施例的信息处理设备将与布局有关的并且对应于所生成的布局的参数作为用户不喜欢的参数记录在存储单元(待在下文描述)中。
(根据实施例的信息处理设备)
接下来,将描述能够执行与上述根据实施例的信息处理方法有关的处理的根据实施例的信息处理设备的配置的示例。
图52是示出将描述的根据实施例的信息处理设备100的配置的示例的框图。信息处理设备100包括例如通信单元102和控制单元104。
信息处理设备100可以包括例如只读存储器(ROM;未示出)、随机存取存储器(RAM;未示出)、存储单元(未示出)、用户可以操作的操作单元(未示出),以及将各种画面显示在显示屏上的显示单元(未示出)。在信息处理设备100中,例如,前述组成部件通过用作为数据传输路径的总线进行连接。
此处,ROM(未示出)存储由控制单元104使用的程序或控制数据如算法参数。RAM(未示出)临时存储由控制单元104执行的程序。
存储单元(未示出)是包含在信息处理设备100中的存储单元,并且存储例如各种数据,诸如“图像数据”、“指示与根据实施例的布局有关的参数的数据”、“根据实施例的学习数据”,以及“应用程序”。此处,存储单元(未示出)的示例包括诸如硬盘的磁记录介质和诸如闪存的非易失性存储器。存储单元(未示出)可以可拆卸地安装在信息处理设备100上。
操作单元(未示出)的示例包括下面将描述的操作输入设备,并且显示单元(未示出)的示例包括下面将描述的显示设备。
[信息处理设备100的硬件配置的示例]
图53是示出根据实施例的信息处理设备100的硬件配置的示例的说明图。信息处理设备100包括例如MPU 150、ROM 152、RAM 154、记录介质156、输入和输出接口158、操作输入设备160、显示设备162,以及通信接口164。在信息处理设备100中,例如,组成部件通过用作为数据传输路径的总线166进行连接。
MPU 150包括例如微处理单元(MPU)以及各种处理电路和功能,诸如控制整个信息处理设备100的控制单元104。在信息处理设备100中,MPU150例如用作为下面要描述的评估值计算单元110、页分配单元112、图像选择单元114、布局生成单元116、布局调整单元118,以及图像处理单元120。
ROM 152存储控制数据,例如计算参数,和由MPU 150使用的程序。RAM 154临时存储例如由MPU 150执行的程序。
记录介质156用作为存储单元(未示出),并且存储例如各种数据,诸如“图像数据”和“指示与根据实施例的布局有关的参数的数据”。此处,记录介质156的示例包括诸如硬盘的磁记录介质和诸如闪存的非易失性存储器。记录介质156可以可拆卸地安装在信息处理设备100上。
输入和输出接口158例如连接操作输入设备160或显示设备162。操作输入设备160用作为操作单元(未示出),并且显示设备162用作为显示单元(未示出)。此处,输入和输出接口158的示例包括通用串行总线(USB)终端、数字视频接口(DVI)终端、高清晰度多媒体接口(HDMI)(注册商标)终端、以及各种处理电路。例如,操作输入设备160包含在信息处理设备100中,并且在信息处理设备100中连接至输入和输出接口158。操作输入设备160的示例包括按钮、方向键、诸如滚轮的旋转型选择器、及其组合。例如,显示设备162包含在信息处理设备100中,并且在信息处理设备100中连接至输入和输出接口158。显示设备162的示例包括液晶显示器(LCD)和有机电致发光(EL)显示器(也称为有机发光二极管(OLED)显示器)。
显然,输入和输出接口158可以连接至用作为信息处理设备100的外部设备的外部设备,例如操作输入设备(例如,键盘或鼠标)、显示设备等。显示设备162的示例可以是能够用来进行显示和用户的操作的设备,例如触摸屏。
通信接口164是包含在信息处理设备100中的通信单元,并且用作为经由网络(或直接地)与外部设备如服务器进行无线/有线通信的通信单元102。此处,通信接口164的示例包括通信天线和无线射频(RF)电路(无线通信)、IEEE 802.15.1端口及发送和接收电路(无线通信)、IEEE 802.11b端口及发送和接收电路(无线通信)、以及局域网(LAN)终端及发送和接收电路(有线通信)。
信息处理设备100例如包括图53所示的配置,并且进行与根据实施例的信息处理方法有关的处理。根据实施例的信息处理设备100的硬件配置不限于图53所示的配置。例如,信息处理设备100可以包括成像设备,该成像设备用作为捕捉静止图像或运动图像的成像单元(未示出)。当信息处理设备100包括成像设备时,例如,信息处理设备100可以将通过成像设备的成像而生成的所捕获图像处理为候选图像。
此处,根据实施例的成像设备的示例包括透镜和成像元件以及信号处理电路。透镜和成像元件例如包括光学系统的透镜和使用多个成像元件如互补金属氧化物半导体(CMOS)的图像传感器。信号处理电路例如包括自动增益控制(AGC)电路和将由成像元件生成的模拟信号变换为数字信号(图像数据)的模数变换器(ADC),并且进行各种信号处理。由信号处理电路进行的信号处理的示例包括白平衡校正处理、色调校正处理、伽玛校正处理、YCbCr变换处理、以及边缘增强处理。
例如,当信息处理设备100被配置为独立设备以进行处理时,信息处理设备100可以不包括通信设备164。信息处理设备100还可以被配置为不包括操作设备160或显示设备162。
再参照图52,将描述信息处理设备100的配置的示例。通信单元102包含在信息处理设备100中,并且经由网络(或直接地)与外部设备如服务器进行有线和无线通信。通信单元102的通信例如由控制单元104控制。此处,通信单元102的示例包括通信天线和RF电路,以及LAN终端及发送和接收电路。通信单元102的配置不限于前述配置。例如,通信单元102可以具有与能够进行通信的任何标准对应的配置,例如USB终端及发送和接收电路,或能够经由网络与外部设备进行通信的任何配置。
控制单元104例如包括MPU,并且用于控制整个信息处理设备100。控制单元104例如包括评估值计算单元110、页分配单元112、图像选择单元114、布局生成单元116、布局调整单元118,以及图像处理单元120,并且用于引导与根据实施例的信息处理方法有关的处理。
评估值计算单元110用于引导前述(1)的处理(评估值计算处理)。例如,评估值计算单元110基于有关与每个候选图像对应的图像的信息来计算每个候选图像的评估值。例如,评估值计算单元110还可以基于关于与每个候选图像对应的图像的信息来对候选图像进行分组,并且针对每个组计算评估值。
页分配单元112用于引导前述(2)的处理(页分配处理)。例如,页分配单元112基于与根据实施例的布局有关的参数来确定页的数量,并且基于与布局有关的参数和在评估值计算单元110中计算的评估值来确定待布置在每页中的图像的数量。
图像选择单元114用于引导前述(3)的处理(图像选择处理)。例如,图像选择单元114基于与根据实施例的布局有关的参数和在评估值计算单元110中计算的评估值来从候选图像中选择图像。此处,例如,在评估值计算单元110对候选图像进行分组时,图像选择单元114针对每个组选择图像。
布局生成单元116用于引导前述(4)的处理(布局生成处理)。例如,布局生成单元116基于与根据实施例的布局有关的参数和与由图像选择单元114选择的图像对应的评估值来针对每页生成布局。此处,例如,在评估值计算单元110对候选图像进行分组时,布局生成单元116针对每个组生成布局。
布局调整单元118用于引导前述(5)的处理(布局调整处理),以对在布局生成单元116中生成的布局进行调整。更具体地,例如,布局调整单元118通过进行前述(5-1)的处理至前述(5-5)的处理中的一个处理或者两个或更多个处理来对在布局生成单元116中生成的布局进行调整。
图像处理单元120用于引导前述(6)的处理(图像处理),并且将在图像选择单元114中选择的图像布置在布局生成单元116生成的布局或布局调整单元118调整的布局中。例如,图像处理单元120可以通过进行前述(6-1)的处理至前述(6-3)的处理中的一个处理或者两个或更多个处理来将处理的图像布置在生成的布局或调整的布局中。
控制单元104例如包括评估值计算单元110、页分配单元112、图像选择单元114、布局生成单元116、布局调整单元118,以及图像处理单元120,以使得控制单元104引导与根据实施例的信息处理方法有关的处理(例如,“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)”、“前述(1)的处理(评估值计算处理)至前述(5)的处理(布局调整处理)”“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)以及前述(6)的处理(图像处理)”,或者“前述(1)的处理(评估值计算处理)至(6)的处理(图像处理)”)。
根据实施例的控制单元的配置不限于图52所示的配置。
例如,根据实施例的控制单元可以不包括布局调整单元118和/或图像处理单元120。即使在根据实施例的控制单元不包括布局调整单元118和/或图像处理单元120的情况下,根据实施例的信息处理设备可以进行前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)。因此,例如,即使在根据实施例的控制单元不包括布局调整单元118和/或图像处理单元120的情况下,根据实施例的信息处理设备可以自动生成布局,以生成具有高质量的照片书。
根据实施例的控制单元可以包括进行前述(7)的处理(评估处理)的评估单元(未示出)。当控制单元包括评估单元(未示出)时,根据实施例的控制单元可以通过进行前述(7)的处理(评估处理)来生成布局以生成具有高质量的照片书,并且还可以选择候选图像中具有最佳分数的布局。
根据实施例的控制单元可以包括进行前述(8)的处理(学习处理)的学习单元(未示出)。当控制单元包括学习单元(未示出)时,根据实施例的控制单元可以通过进行前述(8)的处理(学习处理)来学习用户针对与根据实施例的布局有关的参数的偏好。因此,当控制单元包括学习单元(未示出)时,例如,根据实施例的控制单元可以生成更适于用户的偏好的布局,或者实现用户更偏好的并且与根据实施例的布局有关的参数的推荐等。
信息处理设备100例如具有图52所示的配置,使得信息处理设备100进行与根据实施例的信息处理方法有关的处理(例如,“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)”、“前述(1)的处理(评估值计算处理)至前述(5)的处理(布局调整处理)”“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)以及前述(6)的处理(图像处理)”,或者“前述(1)的处理(评估值计算处理)至(6)的处理(图像处理)”)。因此,信息处理设备100例如具有图52所示的配置,使得信息处理设备100可以自动生成布局以生成具有高质量的照片书。
根据实施例的信息处理设备的配置不限于图52所示的配置。
例如,根据实施例的信息处理设备可以单独包括图52所示的评估值计算单元110、页分配单元112、图像选择单元114、布局生成单元116、布局调整单元118、以及图像处理单元120。
例如,根据实施例的信息处理设备还可以被配置为不包括布局调整单元118和/或图像处理单元120。即使在根据实施例的信息处理设备不包括布局调整单元118和/或图像处理单元120的情况下,根据实施例的信息处理设备可以进行前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)。因此,例如,即使在根据实施例的信息处理设备不包括布局调整单元118和/或图像处理单元120的情况下,根据实施例的信息处理设备可以自动地生成布局,以生成具有高质量的照片书。
根据实施例的信息处理设备可以包括进行前述(7)的处理(评估处理)的评估单元(未示出)。当信息处理设备包括评估单元(未示出)时,根据实施例的信息处理设备可以通过进行前述(7)的处理(评估处理)来生成布局以生成具有高质量照片书,并且还可以选择候选图像中具有最佳分数的布局。
根据实施例的信息处理设备可以包括进行前述(8)的处理(学习处理)的学习单元(未示出)。当信息处理设备包括学习单元(未示出)时,根据实施例的信息处理设备通过进行前述(8)的处理(学习处理)来学习用户针对与根据实施例的布局有关的参数的偏好。因此,当信息处理设备包括学习单元(未示出)时,例如,根据实施例的信息处理设备可以生成更适于用户的偏好的布局,或者实现用户偏好的并且与根据实施例的布局有关的参数的推荐等。
根据实施例的信息处理设备可以包括例如成像单元(未示出)。当信息处理设备包括成像单元(未示出)时,根据实施例的信息处理设备可将通过成像单元(未示出)的成像生成的被捕获的图像处理为候选图像。成像单元(未示出)的示例包括根据实施例的上述成像设备。
例如,当根据实施例的信息处理设备被配置作为独立的设备来进行处理时,信息处理设备可以不包括通信单元102。
如上所述,作为与根据实施例的信息处理方法有关的处理,根据实施例的信息处理设备进行包括例如前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)。通过进行前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理),例如,上述具有高质量的照片书的第一示例(边缘)、第二示例(稀疏和稠密)、第三示例(休息)、第四示例(图像的方向性)、第五示例(由图像所占用的区域的平衡性)、第六示例(布局)和第八示例(框分割)中的一个示例或者两个或更多个示例被实现。
根据实施例的信息处理设备基于与根据实施例的布局有关的参数来进行前述(3)的处理(图像选择处理)和前述(4)的处理(布局生成处理)。因此,根据实施例的信息处理设备可以通过基于与经由用户操作等设置的布局有关的参数执行处理来自动生成动态照片书的布局。
因此,根据实施例的信息处理设备可以自动生成布局,以生成具有高质量的照片书。
根据实施例的信息处理设备例如可以通过进行与根据上述实施例的信息处理方法有关的处理来实现下面要描述的具有较高质量的照片书:
.实现候选图像的相似分组和时间的照片书;
.从候选图像选择更好图像的照片书;
.实现具有良好质量的布局的照片书;以及
.可以更容易地增加设计的变化的照片书。
以上在实施例中例示了信息处理设备,但是实施例不限于此。实施例例如可以适用于各种设备,例如诸如移动电话或智能手机的通信设备、诸如个人计算机(PC)或服务器的计算机、平板设备、视频或音乐再现设备(或视频或音乐记录和再现设备)、游戏设备,以及诸如数位静态相机或数字视频相机的成像设备。实施例还可以适用于例如可以嵌入在前述设备中的处理IC。
与根据实施例的信息处理方法有关的处理可以通过例如信息处理系统来实现,该信息处理系统包括如在云计算中那样假定(或者通过设备之间的通信)连接至网络的多个设备。更具体地,例如,当包含在信息处理系统中的多个设备以彼此协作的方式通过通信进行处理时,与根据实施例的信息处理方法有关的处理被实现。
(根据实施例的程序)
可以通过使得计算机执行下述程序来自动生成用于生成具有高质量照片书的布局,该程序是使得计算机用作为根据实施例的信息处理设备的程序(例如,能够执行与根据实施例的信息处理方法有关的处理例如“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)”、“前述(1)的处理(评估值计算处理)至前述(5)的处理(布局调整处理)”“前述(1)的处理(评估值计算处理)至前述(4)的处理(布局生成处理)以及前述(6)的处理(图像处理)”,或者“前述(1)的处理(评估值计算处理)至(6)的处理(图像处理)以及前述(7)的处理(评估处理)和/或前述(8)的处理(学习处理)”的程序)。
通过经由使得计算机用作为根据上述实施例的信息处理设备的程序执行与根据实施例的信息处理方法有关的处理,能够实现各种优点。
以上参照附图描述了本发明的优选的实施例,当然,本发明不限于上述示例。本领域的技术人员可以想到在所附权利要求范围内的各种变型和修改,并且应理解它们自然落在本发明的技术范围内。
例如,以上提供了使得计算机用作根据实施例的信息处理设备的程序(计算机程序)。然而,实施例还可以提供存储上述程序的记录介质。
上述配置是实施例的示例,并且当然属于本公开的实施例的技术范围。本公开还可以被配置为如下。
(1)一种信息处理设备,包括:
评估值计算单元,其被配置为基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;
页分配单元,其被配置为基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
图像选择单元,其被配置为基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及
布局生成单元,其被配置为基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
(2)根据(1)所述的信息处理设备,还包括:
布局调整单元,其被配置为调整所生成的布局。
(3)根据(2)所述的信息处理设备,其中,当所生成的布局包括在一页中布置一个图像的布局时,布局调整单元调整余白,余白是在布置一个图像的页中所选择的图像未被布置到的外围部分。
(4)根据(2)或(3)所述的信息处理设备,其中,布局调整单元基于在所生成的布局中布置的所选择的图像裁剪出布置所选择的图像的区域。
(5)根据(2)至(4)中任一项所述的信息处理设备,其中,布局调整单元旋转布置有以所生成的布局布置的所选择的图像的区域。
(6)根据(5)所述的信息处理设备,其中,布局调整单元基于有关布局的参数旋转布置有所选择的图像的区域。
(7)根据(5)所述的信息处理设备,其中,所述布局调整单元基于在生成的布局中布置的所选择的图像在所生成的布局中的尺寸旋转布置有所选择的图像的区域。
(8)根据(5)至(7)中任一项中所述的信息处理设备,其中,所述布局调整单元通过对布置有经旋转后的所选择的图像的区域进行收缩和/或平行移动调整余白,余白是布置有所选择的图像的页中所选择的图像未布置到的外围部分。
(9)根据(2)至(4)中任一项所述的信息处理设备,其中,布局调整单元通过对布置有以所生成的布局布置的所选择的图像的区域进行扩展和/或平行移动,来调整在所生成的布局中除外围部分之外的空白,空白是所选择的图像未被布置到的部分。
(10)根据(2)至(8)中任一项所述的信息处理设备,其中,布局调整单元基于以所生成的布局布置的所选择的图像在所生成的布局中的尺寸,来调整布置有所选择的图像的区域的交叠方式。
(11)根据(10)所述的信息处理设备,其中,所述布局调整单元确定布置有以所生成的布局布置的所选择的图像的区域的交叠,基于确定结果对布置有所选择的图像的区域进行平行移动,并且调整布置有所选择的图像的区域的交叠。
(12)根据(1)至(11)中任一项所述的信息处理设备,还包括:
图像处理单元,其被配置为将所选择的图像布置在所生成的布局或根据所生成的布局调整的布局中。
(13)根据(12)所述的信息处理设备,其中,
图像处理单元可以从以布局布置的所选择的图像中检测对象,以及
当图像处理单元检测到对象时,图像处理单元基于被包括在所选择的图像中的对象来改变所选择的图像的构图,并且布置构图被改变的图像。
(14)根据(12)所述的信息处理设备,其中,
图像处理单元基于在布局中布置的所选择的图像在所述布局中的尺寸从所选择的图像中选择性地检测预定对象,以及
当图像处理单元检测预定对象时,图像处理单元布置包括在所选择的图像中的预定对象被扩展的图像。
(15)根据(12)所述的信息处理设备,其中,当在布局中布置的所选择的图像中存在被布置成延伸过多页的图像时,图像处理单元从被布置成延伸过多页的图像中检测预定对象,并且处理被布置成延伸过多页的图像,使得检测的预定对象不位于该多页的边界线中。
(16)根据(1)至(15)中任一项所述的信息处理设备,其中,
评估值计算单元通过基于有关与候选图像中的每一个候选图像对应的图像的信息对候选图像进行分组,来计算每一组的评估值,
图像选择单元针对每一组选择图像,以及
布局生成单元针对每一组生成布局。
(17)根据(1)至(16)中任一项所述的信息处理设备,其中,图像选择单元基于所计算的评估值与预定阈值的比较结果对候选图像进行分类,并且针对所分类的候选图像的每一组选择图像。
(18)根据(17)所述的信息处理设备,其中,图像选择单元针对每组所分类的候选图像来确定候选图像的每个候选图像中的图像的方向性,并且基于进一步确定的图像的方向性来选择图像。
(19)根据(1)至(18)中任一项所述的信息处理设备,其中,布局生成单元通过基于所确定的页中布置的图像的数量、或基于所确定的页中布置的图像的数量和对应于所选择的图像的评估值而将布置有图像的区域布置在页中,来生成布局。
(20)根据(19)所述的信息处理设备,其中,布局生成单元还基于有关布局的参数和/或有关与所选择的图像对应的图像的信息来生成布局。
(21)根据(1)至(20)中任一项所述的信息处理设备,还包括评估单元,被配置为评估所生成的布局。
(22)根据(1)至(21)中任一项所述的信息处理设备,还包括:
学习单元,其被配置为基于使用有关布局的参数的次数、或基于使用有关布局的参数的次数和所生成的布局是否被确认,来学习用户对有关布局的参数的偏好。
(23)根据(1)至(22)中任一项所述的信息处理设备,其中,有关布局的参数包括与显示以所生成的布局布置的图像的显示设备的种类对应的参数。
(24)根据(1)至(22)中任一项所述的信息处理设备,其中,有关布局的参数包括与用于打印以所生成的布局布置的图像的打印设定的种类对应的参数。
(25)一种信息处理方法,包括步骤:
基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;
基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及
基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
(26)一种程序,所述程序使计算机执行步骤:
基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算候选图像中的每一个候选图像的评估值;
基于有关布局的参数确定页的数量,并且基于有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
基于有关布局的参数和所计算的评估值从候选图像中选择图像;以及
基于有关布局的参数和对应于所选择的图像的评估值,针对每一页生成布置所选择的图像的布局。
(27)一种信息处理系统,包括:
评估值计算设备,其被配置为基于有关与作为要选择的图像的候选的候选图像中的每一个候选图像对应的图像的信息,计算所述候选图像中的每一个候选图像的评估值;
页分配设备,其被配置为基于有关布局的参数确定页的数量,并且基于所述有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
图像选择设备,其被配置为基于所述有关布局的参数和所计算的评估值从所述候选图像中选择图像;以及
布局生成设备,其被配置为基于所述有关布局的参数和对应于所选择的图像的所述评估值,针对每一页生成布置所选择的图像的布局。
附图标记列表
100 信息处理设备
102 通信单元
104 控制单元
110 评估值计算单元
112 页分配单元
114 图像选择单元
116 布局生成单元
118 布局调整单元
120 图像处理单元

Claims (19)

1.一种信息处理设备,包括:
评估值计算单元,其被配置为基于有关与作为要选择的图像的候选的多个候选图像中的每一个候选图像对应的图像的信息,计算所述多个候选图像中的每一个候选图像的评估值;
页分配单元,其被配置为基于有关布局的参数确定照片书的页的数量,并且基于所述有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
图像选择单元,其被配置为基于所述有关布局的参数和所计算的评估值从所述多个候选图像中选择所述要选择的图像;以及
布局生成单元,其被配置为基于所述有关布局的参数和对应于所选择的图像的所述评估值,针对每一页生成布置所选择的图像的布局;
其中,计算所述多个候选图像中的每一个候选图像的评估值包括当所述信息处理设备在所述多个候选图像中的一个候选图像中检测到人的脸部时,根据所述脸部的表情或所述脸部的方向来增加或减小先前计算出的相应图像的评估值。
2.根据权利要求1所述的信息处理设备,还包括:
布局调整单元,其被配置为调整所生成的布局。
3.根据权利要求2所述的信息处理设备,其中,当所生成的布局包括在一页中布置一个图像的布局时,所述布局调整单元调整余白,所述余白是在布置所述一个图像的所述页中所选择的图像未被布置到的外围部分。
4.根据权利要求2所述的信息处理设备,其中,所述布局调整单元基于在所生成的布局中布置的所选择的图像裁剪出布置所选择的图像的区域。
5.根据权利要求2所述的信息处理设备,其中,所述布局调整单元旋转布置有以所生成的布局布置的所选择的图像的区域。
6.根据权利要求5所述的信息处理设备,其中,所述布局调整单元基于所述有关布局的参数旋转布置有所选择的图像的所述区域。
7.根据权利要求2所述的信息处理设备,其中,所述布局调整单元通过对布置有以所生成的布局布置的所选择的图像的区域进行扩展和/或平行移动,来调整在所生成的布局中除外围部分之外的空白,所述空白是所选择的图像未被布置到的部分。
8.根据权利要求2所述的信息处理设备,其中,所述布局调整单元基于以所生成的布局布置的所选择的图像在所生成的布局中的尺寸,来调整布置有所选择的图像的区域的交叠方式。
9.根据权利要求1所述的信息处理设备,还包括:
图像处理单元,其被配置为将所选择的图像布置在所生成的布局或根据所生成的布局调整的布局中。
10.根据权利要求1所述的信息处理设备,其中,
所述评估值计算单元通过基于有关与所述多个候选图像中的每一个候选图像对应的图像的所述信息对所述多个候选图像进行分组,来计算每一组的评估值,
所述图像选择单元针对每一组选择所述要选择的图像,以及
所述布局生成单元针对每一组生成所述布局。
11.根据权利要求1所述的信息处理设备,其中,所述图像选择单元基于所计算的评估值与预定阈值的比较结果对所述多个候选图像进行分类,并且针对所分类的候选图像的每一组选择所述要选择的图像。
12.根据权利要求1所述的信息处理设备,其中,所述布局生成单元通过基于所确定的在每一页中布置的图像的数量、或基于所确定的在每一页中布置的图像的数量和对应于所选择的图像的所述评估值而将布置有所选择的图像的区域布置在相应页中,来生成所述布局。
13.根据权利要求12所述的信息处理设备,其中,所述布局生成单元还基于所述有关布局的参数和/或有关与所选择的图像对应的图像的信息来生成所述布局。
14.根据权利要求1所述的信息处理设备,还包括评估单元,被配置为评估所生成的布局。
15.根据权利要求1所述的信息处理设备,还包括:
学习单元,其被配置为基于使用所述有关布局的参数的次数、或基于使用所述有关布局的参数的次数和所生成的布局是否被确认,来学习用户对所述有关布局的参数的偏好。
16.根据权利要求1所述的信息处理设备,其中,所述有关布局的参数包括与显示以所生成的布局布置的图像的显示设备的种类对应的参数。
17.根据权利要求1所述的信息处理设备,其中,所述有关布局的参数包括与用于打印以所生成的布局布置的图像的打印设定的种类对应的参数。
18.一种信息处理方法,包括步骤:
基于有关与作为要选择的图像的候选的多个候选图像中的每一个候选图像对应的图像的信息,计算所述多个候选图像中的每一个候选图像的评估值;
基于有关布局的参数确定照片书的页的数量,并且基于所述有关布局的参数和所计算的评估值确定在每一页中布置的图像的数量;
基于所述有关布局的参数和所计算的评估值从所述多个候选图像中选择图像;以及
基于所述有关布局的参数和对应于所选择的图像的所述评估值,针对每一页生成布置所选择的图像的布局;
其中,计算所述多个候选图像中的每一个候选图像的评估值包括当在所述多个候选图像中的一个候选图像中检测到人的脸部时,根据所述脸部的表情或所述脸部的方向来增加或减小先前计算出的相应图像的评估值。
19.一种记录介质,其上存储有用于执行权利要求18所述的信息处理方法的程序。
CN201380044223.1A 2012-09-03 2013-07-04 信息处理设备、信息处理方法和程序 Active CN104584081B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012193229 2012-09-03
JP2012-193229 2012-09-03
PCT/JP2013/068426 WO2014034266A1 (ja) 2012-09-03 2013-07-04 情報処理装置、情報処理方法、およびプログラム

Publications (2)

Publication Number Publication Date
CN104584081A CN104584081A (zh) 2015-04-29
CN104584081B true CN104584081B (zh) 2018-04-27

Family

ID=50183088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380044223.1A Active CN104584081B (zh) 2012-09-03 2013-07-04 信息处理设备、信息处理方法和程序

Country Status (5)

Country Link
US (1) US9813566B2 (zh)
EP (1) EP2894605A4 (zh)
JP (1) JP6065913B2 (zh)
CN (1) CN104584081B (zh)
WO (1) WO2014034266A1 (zh)

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9489104B2 (en) 2013-11-14 2016-11-08 Apple Inc. Viewable frame identification
US9582160B2 (en) * 2013-11-14 2017-02-28 Apple Inc. Semi-automatic organic layout for media streams
JP6463996B2 (ja) * 2015-03-06 2019-02-06 キヤノン株式会社 情報処理装置、方法およびプログラム
US20160321810A1 (en) * 2015-04-28 2016-11-03 Pixart Imaging (Penang) Sdn. Bhd. Optical navigation sensor, electronic device with optical navigation function and operation method thereof
US20160357713A1 (en) * 2015-06-04 2016-12-08 Dan Tocchini System and Method for Enrichment of Content Using Color Topography Engine
US20170024404A1 (en) * 2015-06-21 2017-01-26 Dan Tocchini System and Method for Dynamic Predictive Analytics for Pattern Search and Publishing Engine for with Constraint Satisfaction
US20170024363A1 (en) * 2015-06-21 2017-01-26 Dan Tocchini System and Method for Dynamic Predictive Analytics for Pattern Search and Publishing Engine
US10628628B2 (en) * 2015-07-24 2020-04-21 Collage.Com, Inc. Method, system, and computer program product for arranging content in a plurality of regions to obtain a content-aware layout
JP6532398B2 (ja) * 2015-08-07 2019-06-19 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
US9665963B1 (en) * 2015-10-27 2017-05-30 Google Inc. Dynamic collage layout generation
JP6559609B2 (ja) * 2016-04-25 2019-08-14 富士フイルム株式会社 画像合成装置、画像合成方法および画像合成プログラム
JP6595956B2 (ja) * 2016-07-04 2019-10-23 富士フイルム株式会社 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP6942464B2 (ja) * 2016-12-09 2021-09-29 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
US11182837B2 (en) 2017-08-24 2021-11-23 Shutterfly, Llc System and method for automatically generating a new portion of a photo product design based on user input portion
JP6821536B2 (ja) * 2017-10-03 2021-01-27 キヤノン株式会社 画像処理装置、制御方法及びプログラム
JP6936958B2 (ja) * 2017-11-08 2021-09-22 オムロン株式会社 データ生成装置、データ生成方法及びデータ生成プログラム
KR102054300B1 (ko) * 2017-11-22 2019-12-10 (주)스냅스 맞춤형 포토북 서비스를 추천하는 포토북 제작 장치 및 그 방법
JP7086630B2 (ja) * 2018-02-09 2022-06-20 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
JP2020057381A (ja) * 2018-09-28 2020-04-09 大日本印刷株式会社 情報処理装置、情報処理方法及びプログラム
JP7341677B2 (ja) * 2019-02-28 2023-09-11 キヤノン株式会社 装置、方法、及びプログラム
JP7414409B2 (ja) 2019-06-07 2024-01-16 キヤノン株式会社 学習方法
WO2023079702A1 (ja) * 2021-11-05 2023-05-11 楽天グループ株式会社 情報処理装置、情報処理方法及び情報処理プログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102265598A (zh) * 2008-10-26 2011-11-30 惠普开发有限公司 使用基于内容的过滤和基于主题的聚类将图像布置到页面中

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3922396B2 (ja) * 1995-03-16 2007-05-30 ソニー株式会社 レイアウト装置および表示装置
US6222947B1 (en) * 1997-02-19 2001-04-24 Canon Kabushiki Kaisha Image editing apparatus and method and medium on which programs are recorded
US20020040375A1 (en) 2000-04-27 2002-04-04 Simon Richard A. Method of organizing digital images on a page
US7340676B2 (en) * 2000-12-29 2008-03-04 Eastman Kodak Company System and method for automatic layout of images in digital albums
JP4165042B2 (ja) * 2001-07-13 2008-10-15 セイコーエプソン株式会社 画像レイアウト評価方法および画像レイアウト評価システムならびに画像レイアウト評価処理プログラム
JP4029636B2 (ja) * 2002-03-14 2008-01-09 セイコーエプソン株式会社 オブジェクトレイアウト装置、画像レイアウト装置、オブジェクトレイアウトプログラム及び画像レイアウトプログラム、並びにオブジェクトレイアウト方法及び画像レイアウト方法
JP4168793B2 (ja) * 2003-03-17 2008-10-22 セイコーエプソン株式会社 レイアウト評価システム及びレイアウト評価プログラム、並びにレイアウト評価方法
JP4321549B2 (ja) * 2005-09-28 2009-08-26 セイコーエプソン株式会社 文書作成システム、文書作成方法、プログラムおよび記憶媒体
JP4577173B2 (ja) 2005-09-29 2010-11-10 ソニー株式会社 情報処理装置および方法、並びにプログラム
JP4345737B2 (ja) * 2005-11-14 2009-10-14 セイコーエプソン株式会社 デジタルコンテンツ作成システム、デジタルコンテンツ作成方法およびプログラム
US7865841B2 (en) * 2005-11-29 2011-01-04 Panasonic Corporation Input/output device, input/output method, and program
JP4642695B2 (ja) * 2006-05-18 2011-03-02 富士フイルム株式会社 アルバム作成システム、アルバム作成方法、プログラムおよびアルバム作成装置
JP4437999B2 (ja) * 2006-05-30 2010-03-24 富士フイルム株式会社 インデックスアルバム冊子作成方法および装置ならびにプログラム
JP5098506B2 (ja) * 2007-08-10 2012-12-12 セイコーエプソン株式会社 印刷装置およびその制御方法並びにプログラム
US8732611B2 (en) * 2007-09-04 2014-05-20 Apple Inc. Graphical user interface for mobile electronic device
JP4811433B2 (ja) 2007-09-05 2011-11-09 ソニー株式会社 画像選択装置、画像選択方法、およびプログラム
JP5326910B2 (ja) 2009-01-20 2013-10-30 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
US8320667B2 (en) * 2009-02-25 2012-11-27 Hewlett-Packard Development Company, L.P. Automatic and scalable image selection

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102265598A (zh) * 2008-10-26 2011-11-30 惠普开发有限公司 使用基于内容的过滤和基于主题的聚类将图像布置到页面中

Also Published As

Publication number Publication date
WO2014034266A1 (ja) 2014-03-06
US9813566B2 (en) 2017-11-07
JP6065913B2 (ja) 2017-01-25
US20150189107A1 (en) 2015-07-02
CN104584081A (zh) 2015-04-29
EP2894605A1 (en) 2015-07-15
JPWO2014034266A1 (ja) 2016-08-08
EP2894605A4 (en) 2016-04-27

Similar Documents

Publication Publication Date Title
CN104584081B (zh) 信息处理设备、信息处理方法和程序
CN101685542B (zh) 电子设备、模糊图像分拣方法
US7908547B2 (en) Album creating apparatus, album creating method and program
CN102855906B (zh) 图像处理设备和图像处理方法
US9025836B2 (en) Image recomposition from face detection and facial features
US9311961B2 (en) Image extracting device, image extracting method, and recording medium
CN102741879B (zh) 由单眼图像产生深度图的方法及其系统
US20120249571A1 (en) Image display method, server, and image display system
US20160078904A1 (en) Content management system, management content generating method, management content play back method, and recording medium
US9008436B2 (en) Image recomposition from face detection and facial features
EP2525561B1 (en) Data-generating device, data-generating method, data-generating program, and recording medium
US20130108168A1 (en) Image Recomposition From Face Detection And Facial Features
US8213741B2 (en) Method to generate thumbnails for digital images
US20100253807A1 (en) Display Apparatus
JP4029636B2 (ja) オブジェクトレイアウト装置、画像レイアウト装置、オブジェクトレイアウトプログラム及び画像レイアウトプログラム、並びにオブジェクトレイアウト方法及び画像レイアウト方法
US20130108119A1 (en) Image Recomposition From Face Detection And Facial Features
CN103685877B (zh) 打印对象数据处理装置及打印对象数据处理方法
CN102346914A (zh) 图像处理装置、图像处理方法
US20130108166A1 (en) Image Recomposition From Face Detection And Facial Features
US20130108170A1 (en) Image Recomposition From Face Detection And Facial Features
TWI408945B (zh) A data generating apparatus, a data generating method, and a recording medium
JP2007249434A (ja) アルバム作成システム、アルバム作成方法、及びプログラム
Obrador et al. The role of tags and image aesthetics in social image search
US10026201B2 (en) Image classifying method and image displaying method
US20160189412A1 (en) Image processing apparatus for generating a new moving image from a moving image

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant