CN115804081A - 信息处理装置、信息处理方法和程序 - Google Patents

Abstract

一种信息处理装置包括存储管理单元，该存储管理单元将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

Description

信息处理装置、信息处理方法和程序

技术领域

本技术涉及信息处理装置、信息处理方法和程序，尤其涉及使用图像和音频自动制作内容的技术领域。

背景技术

下面描述的专利文献1公开了一种通过合并单位视频作为素材来制作活动图像内容的技术。

引文列表

专利文献

专利文献1：日本专利申请特许公开No.2009-130597

发明内容

本发明要解决的问题

近年来，由于诸如成像设备和录音设备之类的记录设备的小型化、便携设备上的安装或各种设备的普及等，图像(图像被统称为活动图像和静止图像)的成像和音频的记录已得到促进和普遍化。此外，由于诸如存储卡之类的记录介质的多样化、使用网络通信的云存储的普及等，诸如照片、活动图像和音频之类的数据的存储方式也多样化。在这种环境下，例如，服务器装置获取客户用户的图像等变得相对容易，并且可以想象制作诸如短片之类的内容作为服务，其中客户用户是主角。而且，随着AI处理等的最新进展，可以想象准确地收集图像等作为素材并自动制作客户用户期望的内容。

在此，考虑到执行服务的服务器设备自动制作内容并将内容提供给客户，还假设在故事配置方面对用户来说要求负面场景。另一方面，存在用户自己不想观看或保存对用户来说是负面场景的图像素材等的情况。

因此，本技术的目的是使得具有对用户来说负面的内容的素材内容能够被用于自动制作，同时适当地管理素材内容。

问题的解决方案

根据本技术的信息处理装置包括存储管理单元，该存储管理单元将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

考虑使用多个素材内容自动制作具有某个故事的内容。素材内容是构成故事的每个场景的图像(活动图像或静止图像)、音频等。在素材内容中，负面内容被分类。例如，将被确定为具有诸如悲观、否定或落后之类的场景内容的素材内容定义为负面内容。这种负面内容与其它素材内容分开存储和管理。

在根据本技术的上述信息处理装置中，可以想到存储管理单元通过区分负面内容与被确定为正面场景内容的正面内容来执行存储素材内容的处理。

素材内容被分类为正面内容和负面内容。例如，将被确定为具有乐观、肯定或前进之类的场景内容的素材内容定义为正面内容。正面内容和负面内容分开存储和管理。

在根据本技术的上述信息处理装置中，可以想到存储管理单元将被确定为负面内容的素材内容存储在与对除负面内容以外的素材内容进行存储和管理的第一存储设备不同的第二存储设备中。

例如，使用与管理素材内容的服务器的存储设备不同的存储设备来存储负面内容。

在根据本技术的上述信息处理装置中，可以想到第一存储设备包括在允许用户访问素材内容的状态下被管理的存储设备，并且第二存储设备包括在仅允许特定管理员访问素材内容的状态下被管理的存储设备。

例如，假设第一存储设备和第二存储设备具有不同的访问许可。

在根据本技术的上述信息处理装置中，可以想到第二存储设备包括其中从存储管理单元的访问速度比第一存储设备的访问速度慢的存储设备。

例如，假设第一存储设备和第二存储设备由于网络内和外、通信方法等的不同而具有不同的访问速度。

在根据本技术的上述信息处理装置中，可以想到存储管理单元可以经由第一网络访问第一存储设备，并且存储管理单元可以经由第二网络访问第二存储设备。

例如，假设第一存储设备和第二存储设备经由不同的网络被访问。

在根据本技术的上述信息处理装置中，可以想到存储管理单元使被确定为负面内容的素材内容和除负面内容以外的素材内容以不同层级管理状态存储在存储设备中。

例如，管理素材内容的服务器的存储设备被用于管理不同层级的文件夹中的负面内容和除负面内容以外的素材内容。可替代地，在使用不同存储装置的情况下，使层级管理状态不同。

在根据本技术的上述信息处理装置中，可以想到存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关，执行使存储管理单元的访问变得容易的处理。

负面内容通常在可访问性降低的状态下被存储和管理，但是响应于确认相关正面内容的存在而在可访问性被提高的状态下被管理。

在根据本技术的上述信息处理装置中，可以想到存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关而将负面内容设置为可以被用作用于内容自动制作处理的候选内容的素材内容。

即，通常，负面内容不是用于自动制作的内容的候选。

根据本技术的信息处理方法包括存储管理处理，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储，其中信息处理装置执行存储管理处理。因而，适当地管理负面内容。

根据本技术的程序是使信息处理装置执行这种信息处理方法的程序。因此，促进了本技术的信息处理装置的实施方式。

附图说明

图1是根据本技术的实施例的系统配置的解释图。

图2是根据实施例的与内容自动制作相关的功能配置的解释图。

图3是根据实施例的信息处理装置的配置的框图。

图4是根据实施例的自动制作的内容的故事配置示例的解释图。

图5是实施例的服务器装置中与内容自动制作相关的功能的操作的解释图。

图6是其中执行实施例的系统的工作流程的示例的解释图。

图7是根据实施例的关联呈现信息的示例的解释图。

图8是根据实施例的关联呈现信息的示例的解释图。

图9是根据实施例的关联呈现信息的示例的解释图。

图10是根据实施例的关联呈现信息的示例的解释图。

图11是根据实施例的自动制作处理的流程图。

图12是根据实施例的故事设置处理的流程图。

图13是根据实施例的素材内容补充处理的流程图。

图14是根据实施例的素材内容补充处理的流程图。

图15是根据实施例的素材内容补充处理的流程图。

图16是根据实施例的预先执行的素材内容请求处理的流程图。

图17是根据实施例的素材内容补充处理的流程图。

图18是根据实施例的素材内容补充处理的流程图。

图19是根据实施例的素材内容评估处理的流程图。

图20是根据实施例的反馈处理的流程图。

图21是实施例的故事设置时的处理的流程图。

图22是根据实施例的反馈处置处理的流程图。

图23是根据实施例的素材内容管理处理的流程图。

图24是根据实施例的素材内容管理处理的流程图。

图25是根据实施例的素材内容管理处理的流程图。

具体实施方式

在下文中，将按以下次序描述实施例。

<1.系统配置>

<2.自动制作的内容的概述>

<3.内容制作的流程>

<4.自动制作处理，包括内容补充>

<5.制作之前的推荐/补充处理>

<6.素材内容的评估和反馈>

<7.负面/正面内容的管理>

<8.结论及修改示例>

注意的是，在本公开中，使用以下术语来区分“内容”。

·自动制作的内容

在本公开中，例如，要提供给作为客户的用户的内容由信息处理装置自动制作。虽然将用户自动制作并观看的内容称为“自动制作的内容”，但在实施例中，为了便于描述，主要将“自动制作的内容”称为“印象深刻的内容”，因为为了给客户的用户留下深刻印象而自动制作的内容等被例示为“自动制作的内容”。“印象深刻的内容”是“自动制作的内容”的一个具体示例。

自动制作的内容有各种形式，诸如包括活动图像和音频的内容、诸如通过静止图像的幻灯片放映的内容、包括静止图像和音频的内容、仅通过音频的内容、包括活动图像、静止图像和音频的内容，以及包括文本数据的内容。

·素材内容

通过组合多个活动图像素材、静止图像素材、音频素材、文本素材等来制作自动制作的内容。作为每个素材的活动图像、静止图像、音频、文本等的内容数据被称为“素材内容”。任何内容都可以是素材内容。

·候选内容

在素材内容中，内容是指在自动制作的内容的制作中作为某个场景的图像或音频的候选的素材内容。例如，从大量素材内容中提取某些可以适应某个场景的候选内容，并从候选内容中选择要作为场景的素材内容。

·负面内容和正面内容

在素材内容当中，例如，被确定为具有诸如乐观、肯定或前进之类的场景内容的内容被称为“正面内容”。

在素材内容当中，例如，被确定为具有诸如悲观、否定或落后之类的场景内容的内容被称为“负面内容”。

但是，“正面内容”和“负面内容”并不是绝对的分类，并且可以通过根据场景内容类型、根据客户用户、根据时间/时段或根据常识、社会状况等确定一些确定准则来确定。在本技术中，被确定为至少“负面内容”的素材内容与其它素材内容分开管理。

此外，在本公开中，“图像”可以是或者活动图像或者静止图像，并且是用作它们的总称的术语。

<1.系统配置>

图1图示了包括服务器装置10的系统配置示例。

在实施例中，将描述其中构成服务器装置10的信息处理装置通过使用大量用户的大量图像素材等为客户用户自动制作印象深刻的内容并将印象深刻的内容提供给用户的示例。

此外，将描述其中素材内容主要是活动图像数据(包括音频)的示例。即，假设自动制作的印象深刻的内容是诸如通过编辑多个活动图像而制作的电影的示例。

图1中的服务器装置10是例如能够经由诸如互联网之类的网络11与各种设备通信的信息处理装置，并且例如用作所谓的云服务器。

服务器装置10可以在管理下将大量素材内容和制作的印象深刻的内容存储在存储装置10a中。

注意的是，存储装置10a表示服务器装置10可以访问的存储装置，并且可以是安装在作为服务器装置10的信息处理装置内部的存储装置，或者可以是通过局域网(LAN)等连接的存储设备。此外，位置远离服务器装置10的存储装置或用户侧的存储设备可以用作本文的存储装置10a。

即，如果服务器装置10是可以从其收集素材内容以自动生成印象深刻的内容的目标存储装置，那么它有可能与这里所示的存储装置10a对应。

此外，服务器装置10还可以将素材内容等存储在远程存储装置12中。

远程存储装置12被示为具有比存储装置10a低的可访问性的存储设备。远程存储装置12可以是服务器装置10中的存储设备或者可以是外部存储设备。稍后将描述详细示例。

远程存储装置12可以是从用户侧设备(例如图中所示的计算机设备3、平板终端4、移动终端5等)物理上不可访问的存储设备，或者通过访问权威等的管理访问。

这种服务器装置10可以是在网络上提供云存储服务的服务器、提供社交联网服务(SNS)的服务器或提供综合服务的平台服务器。

作为网络11，例如，假设为互联网、家庭网络、LAN、卫星通信网络和各种其它网络。

各种设备可以经由网络11将图像数据等上传到服务器装置10，并从服务器装置10下载各种信息。

此外，例如，可以采用通过文件传输协议(FTP)等的通信作为网络11的一部分或全部。此外，可以采用诸如蓝牙(注册商标)、无线保真(WI-FI：注册商标)、近场通信(NFC：注册商标)、红外线通信等的短距离无线通信。

在任何情况下，任何能够进行数据通信的网络都可以被假设为网络11。

图1图示了相机2、计算机设备3、平板终端4、移动终端5、配备有相机的飞行物体6、配备有相机的车辆7、代理设备8和监视相机9作为能够在用户侧进行成像和记录的设备。这些仅仅是能够成像和记录的设备的示例，并且可以存在其它设备。

相机2是能够拍摄静止图像或活动图像并将静止图像或活动图像作为图像数据记录或传送并输出的成像设备。假设相机2被大量用户使用，并且拍摄的图像数据(活动图像或静止图像)被存储在存储装置10a等中，因此服务器装置10可以将图像数据用作素材内容。

计算机设备3的示例包括笔记本个人计算机、台式个人计算机等。平板终端4和诸如智能电话之类的移动终端5也可以说是计算机设备的一方面。

在计算机设备3、平板终端4、移动终端5等的情况下，例如，由内置相机拍摄的图像数据、从诸如相机2之类的另一个设备传送的图像数据、生成为合成图像的图像数据、计算机图形(CG)等、作为视频聊天的图像的图像数据、与家人或朋友共享的图像数据等存储在存储装置10a等中，并且可以由服务器装置10访问。

配备有相机的飞行物体6例如被假设是诸如无人机之类的配备有相机的飞行物体。假设通过配备有相机的飞行物体6成像获得的图像数据存储在存储装置10a等中，并且可以由服务器装置10访问。

假设无人机等为用户所有，是公共物体，或者由印象深刻的内容提供服务的经营者所有，并用于对客户的用户进行成像以用于素材内容收集。

配备有相机的车辆7例如是诸如普通汽车之类的车辆，并且是其中安装有诸如行车记录仪之类的相机的车辆。例如，通过将用户拥有的车辆的行车记录仪的图像提供给服务器装置10，假设通过配备有相机的车辆7的成像获得的图像数据存储在存储装置10a等中并且可以由服务器装置10访问。

代理设备8例如是用于执行诸如在家中的信息提供和家电控制等服务的接口设备，并且假设能够通过安装相机来进行成像。假设通过代理设备8成像获得的图像数据被存储在存储装置10a等中并且可以由服务器装置10访问。

在此，以代理设备8为例，但是例如，假设在家中使用的家务支持机器人、宠物型机器人等也具有成像功能，因此通过其成像获得的图像数据被存储在存储装置10a等，并且可以由服务器装置10访问。

监视相机9例如安装在公共场所或由一般用户安装在私人空间中。假设监视相机9拍摄的这种图像数据被存储在存储装置10a等中并且可以由服务器装置10访问。

如上所述的各种设备是能够获得由服务器装置10使用的素材内容的设备或者能够具有用户接口的设备。

图2图示了服务器装置10和各种设备之间的关系。

图1中所示的各种设备可以用作图2中的素材内容提供单元20或者可以用作用户接口(UI)单元22。

上述每个设备，诸如相机2、计算机设备3和监视相机9等，例如可以将内容成像或生成为活动图像数据，因此可以成为可以被服务器装置10使用的素材内容的源。

即，通过各种设备获得的图像可以是用于制作作为客户用户的个人电影的印象深刻的内容的素材内容。

可以作为素材内容的图像如下，虽然这仅仅是示例并且可以考虑除以下图像之外的图像。

·由客户用户拍摄并记录并上传到云端的图像

·由承包商基于服务请求拍摄的图像

·由客户用户通过打开本地数据而提供的图像

·由客户用户的朋友、家人等拍摄并上传的图像

·由机器人、无人机、车载相机等拍摄的图像。

·本地相机、监控相机等的图像。

·诸如用户/朋友/关注者等的SNS的图像。

·诸如视频聊天之类的通信期间的图像

·通过图像处理制作的图像，诸如CG图像和假图像

·允许免费使用的公共图像和图像图片

例如，这些图像在可以作为与各个用户对应的图像进行管理的状态下存储在存储装置10a或远程存储装置12中。

在某个用户A是客户并且制作印象深刻的内容的情况下，与用户A相关联的图像是可用的素材内容。

可以将每条图像数据与个体用户的标识信息相关联地集中存储，或者可以将多条用户标识信息指派给一个图像，并且可以将一个图像用于多个用户。

此外，相机2、计算机设备3、移动终端5等是具有诸如显示和操作输入之类的UI功能的设备。因此，在向用户显示由服务器装置10提供的印象深刻的内容和各种图像的情况下或者在接收到用户操作的情况下，这些设备可以用作UI单元22。

此外，图2图示了在服务器装置10中提供的功能配置示例。

服务器装置10包括评估单元15、故事生成单元16、学习单元17和存储管理单元18作为与印象深刻的内容的自动制作处理相关的功能。

评估单元15是为存储在例如存储装置10a中并且可由服务器装置10访问的每个素材内容设置评估值的处理功能。

故事生成单元16是通过为客户用户执行印象深刻的内容的故事设置处理、根据故事设置处理的素材内容选择处理、所选择素材内容的编辑处理等来自动制作印象深刻的内容的功能。

学习单元17是响应于来自用户的反馈而执行适于个体用户的学习处理的功能。

存储管理单元18执行素材内容的存储管理，特别是负面内容和正面内容的存储管理。

虽然稍后将描述这些功能的具体处理示例，但是通过例如执行AI处理作为每个功能来实现高质量处理。

此外，图2还图示了作为用户信息提供单元21的功能。

用户信息提供单元21可以是结合在相机2、计算机设备3、平板终端4、移动终端5等中的功能，或者可以是分离的设备或传感器设备。作为可穿戴设备，用户信息提供单元可以是能够在每个时间点获取用户信息(指示用户行踪的位置信息、生命信息等)的设备。

然后，作为用户信息，例如，假设为诸如属性信息(诸如用户的年龄和性别、爱好、用户面部的信息、家庭结构、家庭的年龄、朋友等)、日程信息、事件信息(日程、参与历史、SNS信息等)、用户的相机历史、生命信息、位置信息等各种类型的信息。

这种用户信息可以与个体用户相关联地进行管理，或者可以与诸如图像数据之类的材料内容相关联。例如，存在作为元数据添加到图像数据并与图像数据相关联的数据。

例如，属性信息(诸如用户的年龄和性别、爱好、用户的面部、家庭结构、诸如家庭成员和朋友的年龄之类的信息)、日程信息、事件信息、相机历史等可以与个体用户相关联。服务器装置10管理用于每个用户的这种用户信息，作为用于为用户执行适当的印象深刻的内容制作的信息。

此外，在成像时的信息的意义上，成像时用户的年龄、成像时的家庭结构、朋友的信息等，与成像内容对应的日程信息和事件信息(关于图像是在什么事件中的信息)、成像时的生命信息、成像时的位置信息等可以是与图像相关联的用户信息。例如，用户信息作为用于每个素材内容的元数据被存储，或者作为与素材内容对应的信息文件等被单独管理。因此，服务器装置10可以使用与每个素材内容对应的用户信息。

此外，用户信息提供单元21的用户信息不仅可以包括直接检测到的信息，而且还可以包括例如通过图像分析结果、对多条感测数据的分析等获得的信息。

例如，通过分析拍摄的图像数据，存在用户的面部特征、面部表情和肤色，以及从中估计的情绪信息。

此外，在测量心率、大脑感测信息、血压值、出汗量等作为生命体传感器的情况下，可以从它们估计用户的情绪并将其用作用户信息。

此外，成像时的人际关系信息也是有用的。例如，诸如要处理的由客户用户本人拍摄的图像、由朋友拍摄的客户用户的图像、由家庭成员拍摄的客户用户的图像以及由监视相机客观拍摄的图像之类的类型信息也可以是与图像相关联的用户信息。

如上所述由用户信息提供单元21获得的用户信息被提供给用作素材内容提供单元20的设备并且作为元数据被添加到图像数据，或者被提供给服务器装置10并且与用户个人或素材内容相关联地被管理。

接下来，图3图示了信息处理装置70的硬件配置的示例，该信息处理装置70可以被配置为服务器装置10、计算机设备3、平板终端4、移动终端5等。

信息处理装置70的中央处理单元(CPU)71根据存储在只读存储器(ROM)72中的程序或从存储单元79加载到随机存取存储器(RAM)73中的程序来执行各种类型的处理。RAM73还适当地存储CPU 71执行各种处理所必需的数据等。

CPU 71、ROM 72和RAM 73经由总线74彼此连接。输入/输出接口75也连接到总线74。

包括操作器和操作设备的输入单元76连接到输入/输出接口75。

例如，作为输入单元76，假设有诸如键盘、鼠标、键、拨盘、触摸面板、触摸垫和遥控器之类的各种操作器和操作设备。

用户的操作由输入单元76检测，并且与输入操作对应的信号由CPU 71解释。

此外，包括液晶显示器(LCD)、有机电致发光(EL)显示器等的显示单元77和包括扬声器等的音频输出单元78一体地或单独地连接到输入/输出接口75。

显示单元77是执行各种显示的显示单元，并且包括例如在信息处理装置70的壳体中提供的显示设备、连接到信息处理装置70的分离的显示设备等。

显示单元77基于来自CPU 71的指令在显示屏幕上执行用于各种类型的图像处理的图像、要处理的活动图像等的显示。此外，显示单元77显示各种操作菜单、图标、消息等，即，基于来自CPU 71的指令显示为图形用户界面(GUI)。

输入/输出接口75可以连接到包括硬盘、固态存储器等的存储单元79，以及使用各种通信方法执行通信的通信单元80。

通信单元80经由诸如互联网、与各种设备的有线/无线通信、总线通信等传输路径执行通信处理。

在信息处理装置70被认为是服务器装置10的情况下，通信单元80至少具有经由网络11执行通信的功能。

驱动器82也在必要时连接到输入/输出接口75，并且适当地安装诸如磁盘、光盘、磁光盘或半导体存储器之类的可移动记录介质81。

通过驱动器82，可以从可移动记录介质81读取诸如图像文件、各种计算机程序等的数据文件。所读取的数据文件存储在存储单元79中，并且包括在数据文件中的图像和音频由显示单元77和音频输出单元78输出。此外，从可移动记录介质81读取的计算机程序等在必要时安装在存储单元79中。

在信息处理装置70中，例如，用于本公开的处理的软件可以通过通信单元80或可移动记录介质81经由网络通信来安装。可替代地，软件可以预先存储在ROM 72，存储单元79等中。

在服务器装置10被假设为信息处理装置70的情况下，在信息处理装置70中，图2中描述的功能配置通过软件(应用程序)在CPU71中构造。

<2.自动制作的内容的概述>

服务器装置10将某个客户用户作为自动制作的内容的目标，并且将印象深刻的内容制作为客户用户的个人电影。

将描述作为印象深刻的内容的故事配置的概述。

图4图示了印象深刻的内容的故事配置的示例以及与其对应的变体。

在此，描述其中故事配置包括以下章节CH1、CH2、CH3、CH4和CH5，同时在内容方面包括开头、结尾和结论的示例。

章节CH1：过去的例程

在此，布置指示用户每天都在做的场景。其示例包括棒球练习、钢琴练习、公司通勤和友谊。

章节CH2：事件发生

布置指示不做(或不能做)曾经每天做的事情的触发器、发生改变的事件等的场景。

例如，存在诸如受伤、新友谊、调动和毕业之类的事件。

章节CH3：消化直到恢复日常生活

例如，布置负面内容。

指示伤病康复期间的痛苦、糟糕的比赛、困难时期、独处的日子等适用的场景。

章节CH4：当前例程

布置指示已经从负面状态逃脱的当前日常生活的场景。

例如，重返棒球练习、打入钢琴练习、再次调动、与朋友重聚等。

章节CH5：主要场景

布置关于故事的精彩场景(动人场景)。

例如，回归比赛并发挥积极作用、钢琴演奏会、工作中取得的成就、友谊的发展等的场景。

虽然以上是示例，但是可以想到通过以这样的方式在包括开头、结尾和结论的同时具有动人场景的特征来生成客户用户的个人动人内容。

<3.内容制作的流程>

例如，将描述自动制作具有这种故事配置的印象深刻的内容的流程。

图5图示了作为服务器装置10的功能的评估单元15、学习单元17和故事生成单元16的处理流程的概述。此外，与素材内容提供单元20、用户信息提供单元21和UI单元22的关系也被示出。

如上所述，可以是素材内容的图像和音频以及伴随图像和音频的元数据(包括与素材内容相关联的用户信息)从素材内容提供单元20提供给服务器装置10。

此外，用户信息是从用户信息提供单元21提供的。

素材内容和用户信息例如通过服务器装置10中图2中所示的存储管理单元18的功能与每个个体用户相关联地被存储和管理，并且由评估单元15为存储的素材内容执行评估值设置处理。

评估单元15为每个素材内容设置指示素材内容之间的关联的评估值，并且单独为素材内容设置个体评估值。

某个素材内容中的关联评估值是指示该素材内容与另一个素材内容之间的关联的值，并且是例如通过量化诸如因果关系和时序关系之类的关联的大小所获得的值。

个体评估值是用于单独评估图像本身或素材内容本身的场景的值、内容的重要性的值等。

例如，对表达高兴、愤怒、悲伤和愉快中的任何一种情绪的图像内容设置高评估值。

此外，将作为跟踪目标被拍摄的物体设置为作为该物体的用户的素材内容的高评估值。

此外，在突发事件、日常生活中不存在的事件等的图像的情况下，将高评估值设置为对故事配置有用的素材内容。

具有正面元素的图像或具有负面元素的图像是在构造故事时作为正面内容或负面内容有用的素材内容，因此具有高评估值。

用户的观看历史、用户是否喜欢并多次观看了观看历史或根本不再现观看历史的信息表示对个体用户的重要性、喜爱度等，从而可以设置根据观看历史的评估值。

评估单元15例如针对作为客户的每个用户针对与用户相关联的每个素材内容设置如上所述的关联评估值和个体评估值。

这些设置可以通过综合反映经由图像分析的场景内容的确定结果、图像质量、用户信息等来进行。

此类评估值被提供给故事生成单元16。

故事生成单元16基于某个触发器执行为某个用户生成个人印象深刻的内容的处理。

例如，故事生成单元16以客户用户自己、他/她的家庭等作为主角执行故事设置，并且收集可以被用作构成故事的每个场景的素材内容作为候选内容。然后，针对每个候选内容执行使用评估值的计算(评估函数计算)，并且选择要实际用作印象深刻的内容的素材内容。

然后，使用所选择的素材内容执行编辑处理，并且例如，生成其中以客户用户、家庭等作为主角的诸如电影之类的印象深刻的内容。

以这种方式制作的印象深刻的内容被提供给用户侧，并且可以由用户通过UI单元22观看。

以上是内容自动制作的基本流程，并且自动制作的时间线的示例在图6中图示。

时序过程如下。

·步骤ST1：拍摄活动图像、静止图像等作为素材内容

·步骤ST2：将素材内容从用户侧传送到服务器装置10(允许服务器装置10使用)

·步骤ST3：在服务器装置10侧的素材内容的存储和管理

·步骤ST10：印象深刻的内容的故事的构思

·步骤ST20：根据设定的故事选择素材内容

·步骤ST30：对素材内容进行诸如图像质量处理和场景剪辑之类的后处理，以及诸如联接经过那些处理的素材内容之类的编辑

·步骤ST40：向用户侧提供印象深刻的内容(在用户侧观看)

在此，步骤ST10、ST20和ST30是故事生成单元16的内容自动制作处理。

图6图示了各种工作流程示例。

工作流程WF1和WF2显示为材料内容的收集。

工作流程WF1是其中例如由用户执行使用相机2等的活动图像拍摄等，将活动图像数据传送到服务器装置10，并且用于用户的数据库(下文中，数据库被称为“DB”)被生成并记录在DB中以便可以使用用于用户的素材内容的示例。

工作流程WF2是其中通过用户的图像拍摄以外的方法收集某个用户的图像并在服务器装置10中由用于用户的DB管理以便可以将工作流程WF2用作用于用户的素材内容的示例。

在这种情况下，假设要收集的图像被其他用户拍摄或作为公共数据收集。这是不仅收集由用户简单拍摄的素材内容，而且还收集更广泛的素材内容的示例。

工作流程WF3至WF8图示了故事生成单元16的内容自动制作的示例。

工作流程WF3以用户对制作印象深刻的内容的请求、预定素材内容的状态等作为触发器开始。

首先，为某个用户展开故事的构思，然后参考该用户的DB根据故事的组成提取素材内容。然后，选择要使用的素材内容，并执行编辑处理以生成印象深刻的内容。

作为用于印象深刻的内容的自动制作的触发器，假设了来自用户的制作请求。例如，它是一种模式，其中指示期望什么样的内容的信息(诸如印象深刻的内容的主题、标题、特定的素材内容等的指定)从用户那里呈现，并且服务器装置10基于该呈现自动生成印象深刻的内容。

例如，还可以想到，用户仅指定用户想要用于印象深刻的内容的素材内容的一部分，服务器装置10相应地设置故事，并选择前后场景的素材内容以制作印象深刻的内容。

此外，作为印象深刻的内容的自动制作的触发器，除了如上所述来自用户侧的主动指令之外，还可以想到在例如“您想制作像○○这样的内容吗？”通过来自服务器装置10侧的消息向用户推荐并且响应于该推荐做出请求的情况下开始制作。

例如，在从素材内容的收集状态收集用户的孩子的运动会的素材内容的情况下，可以想到传输消息“制作孩子的运动会的电影怎么样？”。

此外，在存在某个负面内容的情况下，在可以获取与某个负面内容对应的正面内容的情况下，可以配置如上述图4中所示的故事。因此，在这种情况下，可以想到向用户推荐内容制作，并且根据用户的响应开始自动制作。

此外，在存在用户忘记的素材内容的情况下，例如在旧日期拍摄的图像或用户几乎看不到的图像，可以想到根据图像的内容推荐用户制作内容并根据用户的响应开始自动制作。

类似地，在存在用户开始新活动时的图像、在用户第一次去过的地方拍摄的图像、在用户长时间没有去过的地方拍摄的图像等的情况下，可以想到向用户推荐根据图像的内容的内容制作，并根据用户的响应开始自动制作。

注意的是，可以想到，这些消息的传输可以通过电子邮件、SNS消息等向在服务中注册的用户执行，显示在安装了用于服务提供的应用、推送通知等的用户的终端设备(计算机设备3、平板终端4、移动终端5等)的应用屏幕上。

而且，作为印象深刻的内容的自动制作的触发器，可以想到例如从素材内容的内容自动设置主题或标题，并且无需等待用户的请求就自动开始印象深刻的内容的制作。

工作流程WF4是以下情况的示例，其中响应于诸如来自用户的请求之类的触发器而类似地展开针对某个用户的故事的构思，然后参考用户的DB根据故事的组成提取素材内容，但素材内容不足。

在这种情况下，作为素材内容补充处理，通过对用户执行拍摄指令、某个自动拍摄等来收集不足场景的图像。此后，当准备好必要的素材内容时，执行编辑处理以生成印象深刻的内容。作为对用户的拍摄指示，例如，可以想到通过消息向用户给出诸如“请拍摄像○○那样的场景”之类的通知。此外，自动拍摄指令可以是对用户拥有的机器人、家用电器等的拍摄预定场景的指令，或者是对拍摄公司的设备的指令。

工作流程WF5是基于事件信息自动制作印象深刻的内容的示例。检查用户的属性信息、日程数据、SNS信息等，并且检测到存在特定事件，并且展开故事的构思。然后，参考用户的DB根据故事的组成提取素材内容，选择要使用的素材内容，并执行编辑处理以生成印象深刻的内容。

可以通过从作为用户的属性信息的例如生日、性别、偏好等中检测假设的事件(例如，生日聚会、母亲节、举办感兴趣的事件的日期等)来确定基于事件信息的自动制作的开始。

此外，可以基于用户的日程数据来检测特定事件的发生，例如，诸如回家、旅行或约会之类的事件。

此外，有可能从关于用户的SNS信息中基于用户的行为来确定事件的发生。

而且，可以通过对作为素材内容提供的图像的图像分析来执行诸如运动会之类的事件确定。

工作流程WF6是基于事件信息自动制作印象深刻的内容的示例，但是图示了素材内容不足的情况。检查用户的日程数据、SNS信息等，并且检测到存在特定事件，并且展开故事的构思。接下来，参考用户的DB根据故事的组成提取素材内容，并且在素材内容不足的情况下，作为素材内容补充处理执行给用户的图像拍摄指令或某个自动拍摄，使得收集不足场景的图像。此后，当准备好必要的素材内容时，执行编辑处理以生成印象深刻的内容。

与工作流程WF4(或WF6)类似，工作流程WF7图示了在素材内容不足的情况下的素材内容补充处理的另一个示例。

在这个示例中，在与设定的故事对应的素材内容不足的情况下，从另一个DB等收集素材内容或者制作必要的图像而不是指示新拍摄。例如，参考目标用户的家庭的DB、朋友的DB、公共DB等来搜索素材内容，或生成作为图像合成/假图像等所必需的场景的图像。

例如，工作流程WF8是其中对工作流程WF3添加反馈观看时用户的评估的处理的示例。

作为印象深刻的内容的观看，在内容实际上作为作品被递送的情况下或者在允许用户在最终递送之前执行试看的情况下，用户可以执行某种评估操作。根据操作的反馈信息反映在诸如故事构思、素材内容的选择和编辑(场景排序等)之类的内容自动制作处理中。

图5图示了学习单元17对反馈信息dFB执行学习并将学习结果反映在故事生成单元16的处理中。

这可以反映在本次校正印象深刻的内容的工作中，或者可以在印象深刻的内容的后续制作中学习并反映用户的偏好。即，这是其中通过使用来自用户的反馈为用户专门化故事构思、素材内容选择和编辑方法的示例。

上述每个工作流程都仅仅是示例，并且假设有各种其它示例。当然，也可以想到根据情况或用户有选择地使用工作流程。

顺便说一下，作为工作流程WF8，已经描述了反馈在观看印象深刻的内容的情况下的用户评估，但是也可以想到反馈评估和素材内容的关系。

如上所述，在评估单元15的处理中为每个素材内容设置关联评估值和个体评估值，但是可以想到评估单元15还设置用于向用户呈现个体素材与另一个素材内容的关联的关联呈现信息以及评估值。

图7、8、9和10图示了基于关联呈现信息的显示内容的示例。

这些是在素材内容(CT1、CT2···)作为在DB中注册的针对某个用户的素材内容存在的情况下的一种显示模式，并且素材内容的关联和评估值被指示给用户。

在图7中，首先显示素材内容CT1、CT2、···。在图中，每个素材内容由圆圈中的“CT1”和“CT2”表示，但实际上，可以想到布置指示每个素材内容的图像内容的缩略图。此外，例如，可以响应于鼠标悬停或点击来再现活动图像。在任何情况下，都期望显示每个素材内容的图像内容，以便用户可以容易地识别图像内容。

显示每个素材内容，以便可以识别个体评估值，例如，以10级的数值。例如，在图7的示例中，将诸如“10”之类数值指派给素材内容CT1并将“7”指派给素材内容CT2，从而可以识别为每个素材内容设置的个体评估值。

当然，不限于数值，并且可以通过表示素材内容的图像的尺寸、形式、颜色、亮度、布置位置等的差异来识别每个素材内容的个体评估值。

此外，在素材内容之间，通过诸如线的数量、线的颜色、线的粗细、线的类型之类的显示模式的差异来指示关联评估值。可以想到，具有更高关联的素材内容被表达以便更紧密地连接。

在图7的示例中，素材内容CT1与CT2具有高关联，素材内容CT4与CT8具有低关联，并且素材内容CT9与其它素材内容没有关联。这种关联由指示连接的线的数量和类型、线的存在或不存在等来表达。

当然，关联评估值可以通过将数值加到指示相应素材内容的布置位置的透视、方向或连接的线上来表示。

例如，评估单元15生成用于显示这种图像的关联呈现信息并将该关联呈现信息提供给故事生成单元16。

故事生成单元16可以将这种关联呈现信息提供给用户侧并通过UI单元22将其呈现给用户。

用户可以通过UI单元22检查如图7中所示的显示内容，并且还可以通过操作校正评估。

例如，有可能执行诸如将作为重要场景的图像或用户自己的喜欢图像的素材内容的个体评估值校正为高值之类的操作，执行对具有关联但被评估为关联较低的素材内容获得更高关联评估值的操作，或将没有关联但被评估为关联的线切断。

这种操作信息作为图5中所示的反馈信息dFB反馈到服务器装置10侧，从而可以校正评估单元15的评估信息。此外，这种反馈信息dFB也被输入到学习单元17并由学习单元17学习，并且反映在例如故事生成单元16选择素材内容的功能中。

在图7的示例中，针对每个素材内容表达个体评估值和关联评估值，但也可以仅表达基于关联评估值的关联，或者可以呈现每个体评估值。

即，关联呈现信息可以是任何信息，只要它可以向用户呈现诸如关于素材内容的评估和关联之类的一些信息即可。此外，期望形成允许用户执行用于提供所有或部分呈现内容的反馈信息dFB的操作的用户接口。

虽然上述图7是图示素材内容之间的关联的示例，但是可以考虑关联的各种显示模式。

图8是呈现关键元素并图示与其相关联的材料内容的示例。

在图8的情况下，素材内容CT1和CT2与“愉快”对应，素材内容CT7和CT8与“愤怒”对应，素材内容CT3与“悲伤”对应，并且素材内容CT4、CT5和CT6与“舒适”对应，并且分别以“愉快”、“愤怒”、“悲伤”和“快乐”为关键元素呈现。

图9也是呈现关键元素的示例。在这种情况下，以某个事件(如钢琴演奏会)为关键元素，为该事件呈现相关的素材内容CT1、CT2、CT3、CT4和CT5。在这个示例中，虽然不直接与事件对应，但也呈现与和事件相关的素材内容CT4和CT5相关的素材内容CT6、CT7和CT8。

图10图示了使用复合关键元素的示例。在这个示例中，与用户A有私人关系的“家人”、“朋友”等作为关键元素被呈现，同时还呈现作为用户A的爱好的“足球”，并且呈现与个人关系和关键元素以及素材内容之间的关联相关的素材内容。

如上所述，可以考虑基于关联呈现信息的各种呈现示例，但是期望用户可以容易地识别每个素材内容的关联。当然，在图8、9和10中所示的示例中，也可以如图7中所示那样显示个体评估值，并且可以用不同的模式表达关联。

<4.自动制作处理，包括内容补充>

将描述具体由服务器装置10中的故事生成单元16的功能执行的内容自动制作处理的具体示例。

图11图示了作为服务器装置10的信息处理装置对印象深刻的内容的自动制作处理。

在步骤S101中，服务器装置10根据触发器执行制作开始确定。这个触发器是响应于图6的工作流程WF3中描述的来自用户的请求接收而开始确定处理或者响应于工作流程WF5中描述的事件等而开始确定处理。

在步骤S102中，服务器装置10执行本次制作的印象深刻的内容的故事设置处理。

故事设置处理的详细示例在图12中示出。

在图12的步骤S120中，服务器装置10执行例如图4中所示的故事组装处理，并执行要应用于构成故事的每个场景的素材内容选择处理。

故事的组装是将用于事件的过渡设置为某个主题并组装如图4中的章节CH1到章节CH5的设置的处理。

此外，选择要用于每个章节的一个或多个素材内容。

例如，从与作为印象深刻的内容制作对象的用户对应的DB中存储的素材内容中，提取可以应用于每个章节(例如，包括一个或多个场景的章节)的场景的候选内容。在这种情况下，例如，在可以从用户信息中确定用户的爱好或偏好、家庭等的情况下，将素材内容提取为与用户的爱好等相匹配的图像是有效的。

然后，从候选内容中选择要用于每个场景的素材内容。当然，期望在这个选择中反映用户的偏好等。

稍后将参考图21描述这种步骤S120的更具体的处理示例。

在步骤S120的处理中执行故事的设置和与之对应的素材内容的选择之后，服务器装置10在步骤S121中确定素材内容是否不足。

当确定在步骤S120的处理中可以设置故事并且已经准备好所有必要的素材内容的情况下，处理进行到步骤S124，并且确定不需要内容补充(例如，补充标志关闭)，并且图12的处理结束。即，处理从图11中的步骤S102进行到步骤S103。

在这种情况下，当补充标志关闭时，服务器装置10在步骤S103中确定素材内容补充是不必要的，进行到步骤S105，并且执行编辑处理。

在这个编辑处理中，服务器装置10使用在故事设置处理中设置的章节配置和选择的素材内容来生成构成一系列故事的印象深刻的内容。例如，作为每个所选择的素材内容，从活动图像中挖剪出必要的场景，执行图像质量调整，添加图像效果，然后根据章节的进度连接素材内容。

当通过这种编辑处理完成了印象深刻的内容时，服务器装置10在步骤S106中执行将印象深刻的内容提供给用户侧的处理。

例如，用户可以通过下载或流传输作为印象深刻的内容的电影来观看电影。

上面已经描述了图6的工作流程WF3和WF5中所示的情况下的处理过程。

另一方面，在图12的步骤S121中，可以确定为素材内容不足。

例如，没有要应用于某个场景的素材内容。可替代地，虽然作为内容存在适合于某个场景的素材内容，但也可以通过评估值(个体评估值或关联评估值)低且不适合使用或图像质量低等来确定为不存在合适的素材内容。

但是，即使有一部分素材内容不足，例如，即使删除了场景，故事的组成也没有显著的改变，或者该场景不是很重要的场景，可以允许该素材内容的不足。此外，用户可以有意地输入用于确定场景的素材内容不必要的信息。即使在这种情况下，也允许短缺。换句话说，在这种情况下，允许短缺，即，故意不包括某个场景被认为更符合用户的意图。

在服务器装置10确定素材内容的短缺在允许范围内的情况下，处理从步骤S122进行到步骤S124，并且处理以与上述类似的方式进行到图11中的步骤S105。

但是，在重要素材内容不足的情况下，或者在采用不允许场景配置所需的素材内容不足的逻辑的情况下，服务器装置10进行到图12中的步骤S123，并且确定故事改变是否是可能的。

例如，服务器装置10评估素材内容不足的场景对故事的重要性、章节中故事的部分改变的可能性等，并确定故事改变是否是可能的。可以将基于学习的用户的偏好添加到确定元素。例如，在当前用户的情况下，如果有可能评估这样的场景是不重要的，那么有可能改变故事。

当故事可以被改变时，处理从步骤S123返回到步骤S120，并且再次执行故事的组装和素材内容的选择。

当确定素材内容不足、在当前故事中不允许不足以及故事改变不合适时，服务器装置10从步骤S123进行到步骤S125，确定素材内容补充处理是必要的(例如，将补充标志设置为打开)，并结束图12的处理。即，图11的步骤S102结束，并且过程进行到步骤S103。

在这种情况下，当补充标志打开时，服务器装置10在步骤S103中确定素材内容补充是必要的，进行到步骤S104，并且执行素材内容补充处理。

即，这种情况是图6的工作流程WF4和WF6中描述的情况。

将描述在图11的步骤S104中执行的素材内容补充处理的示例。

图13图示了其中请求外部设备记录构成故事的素材内容的处理作为素材内容补充处理被执行的示例。

在步骤S140中，服务器装置10执行请求外部设备记录素材内容(即，通过拍摄来记录图像等)的处理。

外部设备是图1中所示的各种设备，并且是与图2中的素材内容提供单元20对应的设备。

例如，服务器装置10将诸如“请拍摄○○的场景的视频”之类的请求内容作为对用户的消息传输到作为外部设备的移动终端5等。

也可以想到向用户家人的移动终端5、朋友的移动终端5等传输“请拍摄A-san的○○场景的视频”的请求消息。

可替代地，服务器装置10可以传输指示应用移动终端5、代理设备8、机器人、监视相机9等以拍摄或提供目标场景的控制信息。

即，步骤S140中的素材内容请求处理是请求或指示某个外部设备记录必要场景的素材内容并将素材内容传送到服务器装置10(以能够用作用于制作印象深刻的内容的素材内容)的处理。

在步骤S140中执行请求处理之后，服务器装置10在步骤S141中等待素材内容的输入。

在等待输入素材内容的同时，服务器装置10在步骤S142检查超时或素材内容的输入，并在步骤S143等待再次请求的定时。

例如，从请求开始的一周超时，并且在超时发生之前的预定定时再次发出请求。

在是超时到期之前的重新请求定时的情况下，服务器装置10返回到步骤S140并再次执行素材内容请求处理。在这种情况下，可以执行与先前的请求过程相同的请求过程，或者可以想到改变请求目的地的外部设备或改变所请求的内容。

在响应于对素材内容的请求而输入素材内容的情况下，或者在即使在超时时段之后也没有输入素材内容的情况下，服务器装置10从步骤S142结束素材内容补充处理。

在如图13中所示的素材内容补充处理作为例如图11中的步骤S104被执行之后，处理返回到步骤S102中的故事设置处理。

在这种情况下，再次执行参考图12描述的处理，但是在可以获取必要的素材内容的情况下，服务器装置10可以在步骤S120中针对素材内容不足的场景执行满足新获取的素材内容的处理。

此外，在素材内容补充处理超时的情况下、在质量方面不能应用输入的素材内容的情况下，或者在确定输入的素材内容不适合作为场景内容的情况下，可以想到从故事的组装重新开始。

例如，作为通过如图13中所示的素材内容补充处理执行图12的步骤S120的处理的结果，在处理从步骤S121或步骤S122进行到步骤S124的情况下，处理进行到步骤S105的编辑处理作为图11的处理，并生成印象深刻的内容。

图14图示了素材内容补充处理的另一个示例。

这是在向外部设备请求素材内容之前扩大用于提取素材内容的目标的示例。

在步骤S150中，服务器装置10基于用户信息参考与适合当前制作目标用户的另一个人相关联的DB或公共DB来执行搜索适用于素材内容不足的场景的素材内容的处理。

例如，基本上假设在图12的步骤S120中从与用户相关联的DB中提取素材内容以进行制作。当素材内容不足时，将搜索素材内容的目标扩展到用于其他人的DB或公共DB。

基于用户信息，其他人为目标用户的家人、朋友、同事等。与其他人相关联的DB是管理与服务中的这些“其他人”对应的人拍摄的图像等的DB。

此外，考虑到用户的爱好/偏好，例如用户或他/她的家人喜欢什么样的图像的观点，可以想到搜索素材内容。

例如，在可以从用户信息中确定用户或用户的家庭的爱好或品味的情况下，搜索与用户的爱好相匹配的图像或被确定或估计为用户偏爱的场景或图像内容的素材内容。

在步骤S151中，服务器装置10确定是否可以从与另一个人相关联的DB或公共DB中找到当前必要的素材内容，并且在可以找到当前必要的素材内容的情况下，素材内容补充处理结束，并且处理进行到图11的步骤S102。

在图14的步骤S151中确定没有找到必要的素材内容的情况下，服务器装置10进行到步骤S152并且对外部设备执行素材内容请求处理。

然后，执行步骤S153中的输入待机、步骤S154中的素材内容的输入或超时，以及步骤S155中的重新请求待机的处理。步骤S152至S155中的处理基本上与图13中的步骤S140至S143中的处理相似。

但是，同样在步骤S152的素材内容请求处理中，可以想到考虑用户或家庭的爱好/偏好(例如，用户偏爱什么样的图像)来请求素材内容。

例如，在可以从用户信息中确定用户或用户的家庭的爱好或品味的情况下，请求拍摄被确定或估计为用户偏爱的或与用户的爱好相匹配的场景或图像内容。

例如，向喜欢慢跑并被确定或估计喜欢在他/她的孩子的运动会上跑步的用户发送诸如“请拍摄接力赛”或“我推荐在球门附近拍摄”之类的推荐的消息。

因此，有可能容易地获得具有用户偏爱的内容的素材内容。

如上所述，通过在对外部设备执行素材内容请求处理之前扩展用于搜索素材内容的DB的范围，有可能增加可以快速满足素材内容的可能性。

例如，通过使用由其他人拍摄的图像等，可以将具有用户自己不想要的视角的图像插入到印象深刻的内容中，并且可以预期内容的宽度加宽。

图15是素材内容补充处理的另一个示例。

在步骤S160中，服务器装置10基于用户信息执行参考与适合当前用户的其他人相关联的DB或公共DB搜索适用于素材内容不足的场景的素材内容以进行制作的处理。该处理与图14中的步骤S150相似。

在步骤S161中，服务器装置10确定是否可以从与其他人相关联的DB或公共DB中找到当前必要的素材内容，并且在可以找到当前必要的素材内容的情况下，素材内容补充处理结束，并且处理进行到图11的步骤S102。

在确定无法找到必要的素材内容的情况下，服务器装置10从步骤S161进行到步骤S162，并且执行假图像和抠图图像的获取处理。

如本文使用的“假图像”是指不是实际拍摄被摄体而获得的图像，是指合成图像、CG图像、动画图像等。

服务器装置10通过图像合成处理、CG处理等生成场景所必需的图像。可替代地，服务器装置10指示外部设备执行这种图像生成，并获取所生成的图像。

可替代地，服务器装置10将另一个素材内容的图像挖剪出一部分，以获得适合该场景的素材内容。例如，还假设从监视相机的视频、其他人的拍摄的图像等中挖剪出对应用户被拍摄的场景。

通过执行这些处理，服务器装置10生成不足的素材内容并将素材内容用于对应的场景。

服务器装置10通过步骤S162中的处理结束素材内容补充处理，并进行到图11中的步骤S102。

注意的是，例如，当在图13或14中执行对外部设备的素材内容请求处理的情况下发生超时时，可以执行图15中的步骤S162中的处理。

<5.制作之前的推荐/补充处理>

图11至15中的处理已被描述为在开始制作印象深刻的内容之后的处理。但是，服务器侧也有可能借机制作印象深刻的内容并推荐用户拍摄图像等。将描述这种情况下的处理示例。

图16图示了服务器装置10基于用户信息确定对用户的推荐时间并执行素材内容补充处理的示例。

在步骤S201中，服务器装置10根据未来发生的事件对印象深刻的内容执行素材获取的推荐时间确定。

例如，与在图6的工作流程WF5和WF6中描述的制作触发器类似，基于事件信息、日程信息等检查将成为制作印象深刻的内容的机会的事件。然后，确定是否已成为拍摄用于制作这种印象深刻的内容的图像等的推荐机会。

此外，即使不是事件等，也可以根据用户的人生阶段来确定推荐机会。例如，检查诸如年龄的进展、家庭结构的改变或结婚或出生之类的信息，并且将人生阶段的转折点等设置为制作印象深刻的内容的机会作为其记忆，并将与其接近的定时确定为推荐机会。

例如，对于某个目标用户，服务器装置10将可以作为素材的事件之前的时间点(诸如孩子的运动会前一周或目标用户的婚礼前三天)确定为推荐时间。

当被确定为推荐时间时，服务器装置10从步骤S202进行到步骤S203，并且为将来的印象深刻的内容制作执行素材内容补充处理。

这个素材内容补充处理基本上是在用户参与的事件等中请求用户“拍摄这种场景”的处理。

图17图示了步骤S203中的素材内容补充处理的示例。

在步骤S220中，服务器装置10参考要推荐的用户信息并参考其他人或公众的DB来搜索合适的内容(素材内容或印象深刻的内容)。

例如，在下周是针对目标用户的孩子的运动会的情况下，提取其他人的运动会的内容。这种情况下的“其他人”不必是用户的相关的人，并且可以是泛指完全不相关的人的DB的目标。

在步骤S221中，服务器装置10分析提取出的其他人的内容中评估高的场景、图像内容等，并指定印象深刻的元素。对于评估，例如，可以使用印象深刻的内容的反馈信息dFB、素材内容的评估值等，或者在类似事件(例如，运动会)中经常使用的场景、视角等可以在一般基础上得到高度评估。

例如，对于目标用户，在下周是孩子的运动会的情况下，参考另一个人的运动会的内容，指定评估高的场景、图像内容等，并且指定的场景，图像内容等被设置为印象深刻的元素。

在步骤S222中，服务器装置10基于步骤S221中的分析生成拍摄推荐数据。例如，拍摄推荐数据是根据具有高评估的场景、角度等使用文本和图像数据作为包括拍摄技术、建议等的信息来生成的。

然后，在步骤S223中，服务器装置10执行素材内容请求处理。在这种情况下，拍摄推荐数据与推荐内容一起被传输到用户的移动终端5等。

例如，连同推荐信息，“下周是您孩子的运动会。

要制作内容吗？”，作为运动会上的拍摄的方法，传输参考其他人的内容生成的拍摄推荐数据。

通过在事件之前执行这种推荐，预期用户可以容易地提供更期望的素材内容，并且之后要制作的印象深刻的内容的内容也非常令人满意。

特别地，由于存在可以参考其他人如何成像图片的元素，因此即使对于通常不习惯成像的用户等也有可能提供有用的信息。

图18图示了图16的步骤S203的处理示例。

在步骤S230中，服务器装置10基于用于推荐的事件信息执行组装临时故事的处理。

然后，在步骤S231中，服务器装置10将要求什么样的素材内容设置为与所设定的临时故事对应的场景，并生成指示这种场景的内容的拍摄推荐数据。

然后，在步骤S232中，服务器装置10执行素材内容请求处理。在这种情况下，该处理是与推荐内容一起传送用于向用户的移动终端5等呈现场景的内容的信息作为拍摄推荐数据的处理。

例如，连同推荐消息“下周是你的直播舞台。你为什么不创作内容？”，根据设定的故事，呈现诸如“场地风景”、“舞台拍摄”、“后台场景”和“结束场景”之类的期望场景的内容。

通过在事件之前执行这种推荐，用户变得容易根据故事提供素材内容，并且因此，预期之后制作的印象深刻的内容的内容也具有高满意度。

<6.素材内容的评估和反馈>

接下来，将描述服务器装置10中的素材内容评估和反馈处理。

如上面参考图5所描述的，评估单元15设置用于素材内容的关联评估值和个体评估值。此外，根据来自用户的反馈信息dFB执行响应处理，即，评估值更新处理。

以这种方式设置和更新评估值的一个原因是当考虑保存和管理大量内容(回忆活动图像和照片)作为用于大量用户的大量素材内容时，使得服务器装置10能够适当地用于内容制作。例如，由于每个素材内容都是零散的并且没有故事，因此素材内容很可能仅通过存储而被掩埋。

因此，通过经由AI处理将不同视点的分析结果转换成挖掘图，有可能从重要程序或关联程度来表达明确程度或故事情节高的内容组合作为评估值。因此，在生成印象深刻的内容时容易选择有价值的素材内容，并且提高了自动生成的印象深刻的内容的质量。

此外，不仅设置评估值，而且还将关联评估值和个体评估值可视化为关联呈现信息并且能够由用户进行反馈，从而执行关联评估值和个体评估值的校正、用于制作印象深刻的内容的评估函数的更新等，以便更适合个体用户。

首先，图19图示了由服务器装置10基于评估单元15的功能执行的素材内容评估处理。

在步骤S300中，服务器装置10确认与素材内容相关的反馈信息dFB的输入。当存在反馈信息dFB时，在步骤S320中执行反馈处置处理。这将在后面描述。

在没有输入反馈信息dFB的情况下，服务器装置10进行到步骤S301并指定要处理的素材内容。例如，诸如新上传的素材内容之类的被保存但未进行评估处理的素材内容被指定为当前评估处理的目标。但是，可以将已经设置了评估值的素材内容设置为处理目标，以便根据时间的流逝等再次执行评估处理。

在步骤S302中，服务器装置10计算针对作为评估处理的目标的素材内容的个体评估值。如上所述，个体评估值是用于单独评估图像本身或素材内容本身的场景的价值、内容的重要性等的值。因此，服务器装置10执行图像分析、用户信息的分析等，并通过使用与高兴、愤怒、悲伤、愉快等、图像在成像时是否已设置为跟踪目标(焦点目标)、图像内容是否是意外事件、图像是否具有正面元素，图像是否具有负面元素、作为用户的观看历史的再现次数等的关联作为指标的预定计算，来计算个体评估值。

此外，在可以从用户信息中确定用户的爱好/偏好、家庭等的情况下，期望将用户的爱好/偏好、家庭等反映在评估值上。例如，对与爱好匹配的图像或被确定或估计为用户偏爱的场景或图像内容的图像设置高个体评估值。

在步骤S303中，服务器装置10设置用于素材内容的关键元素。例如，设置诸如特定情绪、相关人员的类型和事件标题之类的关键元素。这些可以参考图像内容的分析结果、用户信息、添加到图像的元数据等来设置。

在步骤S304，服务器装置10使用关键元素来提取相关素材内容。例如，提取在与作为评估处理目标的素材内容相同的事件中拍摄的另一个素材内容、为作为评估处理目标的素材内容的同一个特定人(例如，孩子)拍摄的另一个素材内容等。

在步骤S305中，服务器装置10针对作为评估处理目标的素材内容计算关联评估值。

例如，对关键元素与常见素材内容之间的关联程度进行量化，以计算关联评估值。

关联的程度可以根据诸如事件的因果关系、时序关系以及与该事件相关的人或物品的存在之类的图像内容来确定或估计。

此外，在可以从用户信息中确定用户、家庭等的爱好/偏好的情况下，期望将用户、家庭等的爱好/偏好反映在评估值上。而且对于具有因果关系的素材内容，在被确定或估计为与用户的爱好相关的图像或者包括用户偏爱的场景或图像内容的素材内容之间设置高关联评估值。

在步骤S306中，服务器装置10生成或更新关联呈现信息。即，例如，执行如参考图7至10所描述的新生成关联呈现信息的处理、将本次要评估的素材内容结合到现有关联呈现信息中的处理等。

在步骤S307中，服务器装置10存储计算出的个体评估值、关联评估值和要处理的素材内容的关键元素。因而，评估处理结束。

在输入关于素材内容的反馈信息dFB的情况下，服务器装置10例如执行图20的处理作为步骤S320的反馈处置处理。

在步骤S321中，服务器装置10指定要反馈的素材内容。

在步骤S322中，服务器装置10基于被指定为反馈对的素材内容的反馈信息dFB来确定是否需要校正个体评估值。

如果有必要，那么服务器装置10进行到步骤S323并且执行更新个体评估值的处理。

在步骤S324中，服务器装置10基于反馈信息dFB确定是否有必要针对被指定为反馈目标的素材内容校正个体评估值。

如果有必要，那么服务器装置10进行到步骤S325并执行更新为素材内容设置的关键元素的处理。

在步骤S326中，服务器装置10基于反馈信息dFB确定是否有必要针对被指定为反馈目标的素材内容校正关联评估值。

如果有必要，那么服务器装置10进行到步骤S327，并且为素材内容重置相关的素材内容。即，是关联呈现信息呈现其关联的另一个素材内容。

在步骤S328中，服务器装置10计算并更新与另一个新设置的相关的素材内容的关联评估值。

在步骤S329中，服务器装置10根据相关的其它素材内容以及与其它素材内容的关联评估值的更新来更新关联呈现信息。

通过执行如图20中所示的处理，由服务器装置10的评估单元15设置的评估值根据来自用户的反馈信息dFB被顺序更新。

同时，如上所述，来自用户的反馈信息dFB不仅反映在素材内容的评估值中，而且还反映在印象深刻的内容的制作中。

参考图21和22，将详细描述以上参考图12描述的故事设置处理中的步骤S120的处理，并且将描述其中反映反馈信息dFB的示例。

虽然已经描述了在图12的步骤S120中执行故事的组装和根据故事的素材内容的选择，但是，例如，服务器装置10具体地执行如图21中所示的处理。

在步骤S401，服务器装置10组装故事。

假设如图4的示例中那样组装故事。例如，执行其中布置了与过渡对应的配置的故事组装。

此外，例如，在图18的步骤S230中为某个事件组装临时故事的情况下，可以基于临时故事组装故事。特别地，这是因为假设用户提供了适合于事件场景的素材内容的可能性。

在步骤S402中，服务器装置10收集候选内容。即，对于构成故事的每个章节，从作为制作目标的用户的DB等中收集要使用的一个或多个候选内容。此时，可以将多个素材内容设置为候选内容，该候选内容是要用于一个场景的候选。例如，无论评估值如何，都基于场景内容、用户信息、元数据等收集候选内容。

在步骤S403，选择要用于构成故事的每个场景的素材内容。例如，从大量候选内容中选择具有高个体评估值的素材内容的方法可以用于一个场景，但是期望更多维地反映关联等。例如，除了针对每个场景选择具有高个体评估值的素材内容之外，还反映每个选择的素材内容之间的关联评估值以优化多个素材内容作为选择结果。此外，素材内容的组合、次序、时间长度等也被用作选择元素。

用于构成故事的每个场景的素材内容的选择处理是使用包括诸如个体评估值、关联评估值、时间长度和次序之类的元素的评估函数来执行的。

注意的是，基本上，变得容易选择具有高个体评估值或关联评估值的素材内容。但是，由于如参考图19和20所述的那样基于用户操作根据反馈信息dFB来更新评估值，因此变得容易选择适合用户偏好的素材内容。

此外，首先，在设置图19中的个体评估值和关联评估值时，通过设置可以从用户信息中确定或估计的反映用户家庭的偏好(喜欢什么样的图像、场景等)的评估值，用户的偏好容易被反映为要应用于场景的素材内容。

在步骤S404中，服务器装置10基于步骤S403中素材内容的选择结果来生成编辑数据。

编辑数据包括所选择的素材内容的信息、素材内容的联接次序的信息、每个素材内容的处理的信息(图像质量调整、抠图、效果等)等。即，它是印象深刻的内容制作的设计信息。

例如，作为图12的步骤S120执行这种处理，然后在图11的步骤S105中执行基于编辑信息的编辑处理。

在此，在输入基于用户操作的反馈信息dFB的情况下，可以通过学习单元17和故事生成单元16的功能来执行图22的处理。

在输入反馈信息dFB的情况下，服务器装置10使图22的处理从步骤S420前进到步骤S421。

在反馈信息dFB要请求改变关于当前正在制作的印象深刻的内容的故事的情况下，过程从图21中的步骤S421进行到步骤S401，并且再次执行故事的构造。例如，假设基于反馈信息dFB对一些场景进行剪切或替换。

注意的是，假设正在制作的印象深刻的内容的反馈信息dFB响应于用户操作而被传输，例如，在服务器装置10使用户在印象深刻的内容的实际递送之前临时观看印象深刻的内容的情况下。

在此时反馈信息dFB是要求改变素材内容的内容的情况下，服务器装置10从图22中的步骤S422进行到图21中的步骤S403。

因此，在步骤S403中再次选择素材内容。

反馈信息dFB不一定反映在正在制作的印象深刻的内容中。例如，也存在通过关联呈现信息呈现反馈信息dFB的情况。但是，由于用户的操作也会影响故事的组成，因此期望使用户学习以供将来的故事生成。例如，在内容要反映在将来的内容制作中的情况下，服务器装置10从步骤S423进行到步骤S424，并且执行评估函数的学习/更新处理。

例如，更新为用户制作印象深刻的内容时使用的评估函数的一些系数和变量元素。因此，例如，校正图21的步骤S403中的素材内容选择的方向性和要强调的元素。即，素材内容选择处理也根据用户的偏好进行调整。

注意的是，在以上描述中，已经描述了其中通过执行作为评估单元15和学习单元17的功能的评估函数的生成和学习/更新处理来使要生成的印象深刻的内容适合用户的示例。但是，也可以想到通过使用使用机器学习和深度学习进行学习的学习模型而不是如上所述的处理来使要生成的印象深刻的内容适合用户。

例如，故事生成单元16包括替代评估单元15的功能，并且在评估、分类和提取素材内容的同时生成印象深刻的内容。

具体而言，故事生成单元16基于关于用户的各种类型的信息执行深度学习，并且生成适合用户的学习模型。

然后，通过应用学习模型对素材内容进行分类和提取，并确定素材内容是否是适用于故事的素材内容，然后使用被确定为相关的素材内容生成印象深刻的内容。

以这种方式，提供学习模型生成功能和使用学习模型的内容生成功能作为评估单元和故事生成单元16。

此外，作为学习单元17，基于用户的反馈信息dFB执行再学习并更新学习模型，这适于更期望的印象深刻的内容生成。

<7.负面/正面内容的管理>

一些素材内容可以被分类为负面内容或正面内容。

通常，假设负面内容不是用户想要观看的内容。但是，如参考图4所描述的，将故事的构造考虑为个人内容等，负面内容可以是对增强观看时的印象有用的材料内容。

另一方面，例如，考虑到服务器装置10用作云存储装置并在存储装置10a中提供个体用户的存储区域的形式，用户可以容易地观看负面内容以及其它素材内容，这可能是不期望的。

因此，在服务器装置10中，通过存储管理单元18的功能，将负面内容与其它素材内容分开存储和管理。

例如，不保证用户的可访问性，或者甚至服务器装置10的可访问性，准备具有比存储装置10a低的可访问性的远程存储装置12，并且在其中存储负面内容。

图23图示了由服务器装置10通过存储管理单元18的功能执行的素材内容管理处理。

在步骤S501中，服务器装置10指定要处理的素材内容。

在步骤S502中，服务器装置10确定要处理的素材内容是否为负面内容。

内容是否为负面内容可以通过某种处理来确定。例如，如果在成像时存在用户的生命信息作为伴随图像的元数据，那么可以基于生命信息确定是否发生负面情绪，或者可以通过图像分析根据用户的面部表情、行为、手势等进行估计。

没有被用户浏览可以被视为负面因素并添加到确定因素中。

此外，可以将与其它日常图像不同的特征视为否定元素并添加到确定元素中。

此外，在日常图像与日常图像之间存在间隔的情况下，也可以想到估计发生了一些负面事件，并在假设负面元素可能以这种间隔时间存在于图像中的情况下将负面元素添加到估计元素中。

注意的是，也有可能通过与负面内容的这种确定类似的方法来确定正面内容。

在步骤S502中确定内容不是负面内容的情况下，服务器装置10进行到步骤S503并且正常存储素材内容。例如，用户被存储在存储装置10a中，以便由与用户相关联的DB管理。

在步骤S502中确定素材内容是负面内容的情况下，服务器装置10进行到步骤S504并且针对素材内容执行与负面内容对应的存储处理。例如，负面内容存储在远程存储装置12中，以便在与用户相关联的DB中进行管理。

以这种方式，在负面内容的情况下，内容与其它素材内容分开存储。

注意的是，远程存储装置12中的存储装置已经被描述为步骤S504中的负面内容对应存储装置的示例，但是以下存储装置可以被认为是远程存储装置12。

·与存储装置10a分开部署在远程位置的存储设备

·与存储装置10a相比，从服务器装置10的访问性更低的存储设备

·被管理为限制用户访问的存储设备

·可通过具有低传输率的通信路径访问的存储设备

·连接到独立设备的存储设备

·存储装置10a经由第一网络从服务器装置10连接，而远程存储装置12经由通信速度低于第一网络的第二网络从服务器装置连接。

虽然以上是示例，但可以想到假设作为远程存储装置12不通常被执行访问。

此外，步骤S504的过程不必限于在远程存储装置12中记录。例如，负面内容可以与其它素材内容类似地存储在存储装置10a中。但是，可访问性是通过执行使访问变得困难的分级管理、执行加密、设置仅特定授权人的访问许可等来区分的。

上述图23的处理是其中与其它素材内容分开存储和管理负面内容的示例，但是可以分开管理负面内容、正面内容和其它素材内容。

在这种情况下，通过分开存储等降低了负面内容的可访问性，但正面内容的可访问性与其它素材内容的可访问性可以是等同的。例如，正面内容和其它素材内容类似地存储在存储装置10a中的对应用户的DB中，但是在正面内容的情况下，可以设置指示该内容是正面内容的标志。

此外，所有素材内容都可以被划分为负面内容和正面内容。例如，不与负面内容对应的内容可以被管理为正面内容。

虽然如上所述分开管理负面内容，但由于负面内容在期望将负面内容用作制作印象深刻的内容的材料的情况下是有用的，因此期望根据情况改变管理状态。

因此，可以想到执行如图24所示的处理。

步骤S520中的顺序存储处理例如指示其中服务器装置10响应于素材内容被上传而通过例如图23中的处理顺序地存储素材内容的处理。

在此，在步骤S521中，服务器装置10确认本次存储的素材内容是否为正面内容。

在内容不是正面内容的情况下，即，在内容是负面内容或既不是负面内容也不是正面内容的素材内容的情况下，图24的处理结束。

在内容是正面内容的情况下，服务器装置10使处理进行到步骤S522，并搜索与当前正面内容相关的负面内容。

例如，在本次的正面内容具有用户在棒球比赛中发挥积极作用的内容的情况下，执行搜索用户在过去练习中受伤的场景的负面内容的处理。

当找不到对应的负面内容时，处理从步骤S523结束，但是当找到对应的负面内容时，服务器装置10在步骤S524中执行改变负面内容的管理状态的处理。例如，执行提高服务器装置10的可访问性的处理，诸如将存储设备从远程存储装置12移动到存储装置10a。

注意的是，服务器装置10可以通过故事生成单元16的处理确定在图23的步骤S504中作为负面内容对应存储被管理的负面内容没有作为候选内容被录入。

即，假设负面内容不是无条件地用于制作印象深刻的内容。但是，作为步骤S524的处理，在存在对应的正面内容的情况下，可以想到改变负面内容的管理状态，使得负面内容有资格成为候选内容。即，由于在增强正面内容的故事中出现了重要性，因此有可能第一次用于印象深刻的内容的制作。

在步骤S525中，服务器装置10响应于负面内容与本次存储的正面内容的关联而更新负面内容的评估值。即，重新计算并更新关联评估值和个体评估值。

通过上述处理，可以生成或增加与正面内容对应的负面内容被应用于制作印象深刻的内容的特定场景的可能性。因此，可以预期使用适当的负面内容自动制作的印象深刻的内容的故事被增强。

图25是具有类似目的的处理示例。

步骤S530中的顺序存储处理例如指示服务器装置10响应于素材内容被上传而通过例如图23中的处理顺序地存储素材内容的处理。

在此，在步骤S531中，服务器装置10确认本次存储的素材内容是否为负面内容。

在内容是负面内容的情况下，在步骤S532中执行登记负面事件的处理。例如，指示某个用户何时以及发生了何种负面事件的信息被登记为一条用户信息。

在步骤S531中确定内容不是负面内容的情况下，服务器装置10在步骤S533中确定这次存储的素材内容是否是与过去登记的负面事件对应的正面内容。

在这次存储的素材内容是与过去在步骤S532的处理中登记的负面事件相关的正面内容的情况下，服务器装置10进行到步骤S534并执行改变与登记的负面事件相关的负面内容的管理状态的处理。

例如，执行提高服务器装置10的可访问性的处理，诸如将存储设备从远程存储装置12移动到存储装置10a。

而且在这种情况下，可以想到服务器装置10改变管理状态，使得负面内容可以有资格成为候选内容。

在步骤S535中，服务器装置10根据负面内容与本次存储的正面内容的关联来更新负面内容的评估值。即，重新计算并更新关联评估值和个体评估值。

而且，通过上述处理，可以生成或增加与正面内容对应的负面内容应用于制作印象深刻的内容中的特定场景的可能性。

<8.结论和修改示例>

根据上述实施例，可以获得以下效果。

作为根据实施例的信息处理装置的服务器装置10包括故事生成单元16，该故事生成单元16执行请求外部设备记录构成用于自动制作的印象深刻的内容的故事的素材内容的处理(参见图11至18)。

这个处理是对采集印象深刻的内容的素材有用的处理，其中客户的用户的个人行为、经历等被描述在故事中。特别地，通过提出特定的请求(诸如期望拍摄什么场景)，它适于素材内容的收集。

在实施例中，已经描述了其中故事生成单元16执行印象深刻的内容的故事设置、选择要使用的素材内容、执行确定素材内容的短缺的故事设置处理以及执行响应于确定素材内容短缺而请求外部设备记录素材内容的处理(参见图11、12、13和14)。

通过根据故事收集素材内容并在素材内容不足时请求外部设备记录素材内容，可以在自动制作的内容的制作中高效地执行素材内容补充处理。

在实施例中，已经描述了其中故事生成单元16执行与作为客户的用户相关的推荐时间确定处理，并根据推荐的时间确定处理请求外部设备记录素材内容的示例(参见图16)。

即，与作为内容自动制作服务的客户的用户相关的内容自动制作的机会由用户的事件日程、人生阶段等确定。然后，根据所确定的时段执行请求记录素材内容的处理。

通过根据作为客户的用户未来会发生的事件、生活的改变等拍摄用户或者向各种设备请求记录来推荐图像记录等，容易获得素材内容以便有机会为用户留下记忆和印象。通过使用这种素材内容，有可能增加提供具有高用户满意度的自动制作的内容的可能性。

注意的是，与作为客户的用户相关的时段不仅包括用户本人，而且还包括基于与家人和朋友相关的各种事件或人生阶段的期间。

在实施例中，已经描述了其中故事生成单元16基于用户信息确定用户的偏好并基于确定的偏好信息执行请求记录素材内容的处理的示例。例如，基于关于作为客户的用户本人、他/她的家人和朋友的用户信息执行偏好确定，并且基于偏好确定执行素材内容的记录请求(参见图14)。

通过基于关于作为客户的用户的用户本人、家庭成员、亲戚、朋友等的用户信息请求记录，变得容易收集在观看者侧符合用户偏好的素材内容，并且可以增加实现匹配偏好的自动制作的内容的可能性。

在实施例中，已经描述了其中故事生成单元16基于用户信息确定用户的偏好并且使用所确定的偏好信息作为选择元素来执行选择素材内容的处理的示例。例如，基于关于作为客户的用户本人、他/她的家人和朋友的用户信息来确定或估计偏好。通过设置这种反映偏好的评估值，执行使用偏好信息作为选择元素来选择素材内容的处理(参见图19和21中的步骤S403)。

基于关于作为客户的用户的用户本人、家人、亲戚、朋友等的用户信息，有可能根据故事在观看者侧选择与用户的偏好相匹配的素材内容。因此，有可能增加可以实现与用户的偏好相匹配的自动制作的内容的可能性。

在实施例中，已经描述了其中故事生成单元16基于关于用户的事件信息执行请求记录素材内容的处理的示例(参见图16和18)。例如，根据作为客户的用户的事件信息的类型确定合适的场景等，并执行适当素材内容的记录请求。

存在各种类型的事件，诸如体育比赛、演讲、婚礼、孩子的运动会以及表演和戏剧的舞台。可以根据事件想到期望的场景等。通过请求拍摄这样的场景，可以增加实现更完美的自动制作的内容的可能性。

在实施例中，故事生成单元16可以基于关于用户的事件信息来执行选择素材内容的处理。

在与事件对应的故事在图18的步骤S230中被临时组装并且故事基于图21的步骤S201中组装的故事被组装的情况下，在步骤S403中选择的素材内容是基于事件信息选择的。即，根据作为客户的用户的事件信息的类型，选择适合于适当场景等的素材内容。

因此，有可能增加实现根据事件高度完美的自动制作的内容的可能性。

在实施例中，已经描述了其中执行基于用户的人生阶段的时间确定作为推荐时间确定处理的示例(参见图16)。例如，作为用户的人生阶段，执行诸如出生、入学、毕业、就业、结婚、生子、孩子成长、退休之类的时间确定，并根据时间确定执行适合该时间的素材内容的选择和记录请求。

用户的人生阶段的进展或改变是有故事的，并且适合作为自动制作的内容的机会。因此，通过根据人生阶段执行时段确定，可以在适合收集适于自动制作的内容的素材内容的定时请求拍摄等。因此，这使得容易收集自动制作所期望的材料内容。

在实施例中，已经描述了其中故事生成单元16基于被确定为请求在时段确定处理中记录的时间的因素的事件来生成指示被请求记录的素材内容的内容和另一个用户对同一事件的内容的推荐数据的示例(参见图17)。

例如，作为在时间确定处理中请求记录的时间的确定原因的事件是例如用户的人生阶段(入学、毕业、工作、结婚等)的事件、各种事件等。在由于这种事件而确定是请求记录的时间的情况下，在另一个人有同样的事件的情况下，基于内容生成用于推荐要拍摄的场景的内容等的数据。

在用户的事件、人生阶段等中，服务器装置10参考另一个人同一事件或人生阶段中的内容(素材内容或自动制作的内容)来生成指示推荐内容的拍摄推荐数据。然后，该信息被传输到用户的终端设备并呈现给用户。因此，用户可以知道在这种事件中应该进行什么样的拍摄，并且因此，变得容易获得适合自动制作的内容的素材内容，并且容易实现用户满意度高的自动制作的内容。

在实施例中，故事生成单元16为作为客户的用户执行要自动制作的内容的故事设置，从与用户对应的DB中选择要使用的素材内容，并执行确定素材内容的短缺的故事设置处理。然后，在确定素材内容不足的情况下，从另一个DB(例如，与另一个用户对应的DB、公共DB等)中搜索素材内容，并且在确定素材内容不足的情况下，执行请求外部设备记录素材内容的处理(参见图14)。

因此，除了由客户用户简单上传的静止图像或活动图像之外，还有可能广泛搜索材料内容，诸如由亲近的人(诸如另一个人(例如，朋友或家人))拍摄的图像、由完全不同的人拍摄的图像或公共图像。因此，可以使用更多种类的图像库自动制作内容。此外，通过尽可能少地提出记录请求，有可能增加可以快速制作内容的可能性，而无需用户花费时间和精力。即，可以提高素材内容补充处理的效率。

作为根据实施例的信息处理装置的服务器装置10包括：评估单元15，其执行为以可访问状态记录的素材内容设置评估值的处理；以及故事生成单元16，其参考评估值在故事设置过程中选择构成故事集的素材内容并通过使用所选择的素材内容的编辑处理执行自动内容制作(参见图19至22)。

当在自动制作内容的制作处理中参考评估值(个体评估值或关联评估值)选择素材内容时，可以增加使用用户更期望的素材内容的可能性，并且可以提供用户满意度高的自动制作的内容。

在实施例中，已经描述了故事生成单元16根据设定的故事执行作为使用候选的素材内容的收集处理，并且使用作为候选收集的素材内容当中的评估值执行选择要用于自动内容制作的素材内容的处理的示例(参见图21)。

通过赋予每个素材内容的评估值，有可能容易且适当地从候选内容当中选择适合当前自动制作的素材内容。

例如，可以基于场景内容收集与设定的场景对应的候选内容，但是难以选择对于当前自动制作的内容最优的素材内容，或者仅用图像内容给当前用户留下深刻印象的素材内容。因此，考虑反映素材内容的关系的评估值、素材内容本身的重要性等进行选择。因此，这被认为使得能够进行更期望的内容制作。

在实施例中，已经描述了其中评估单元15设置指示素材内容与另一个素材内容的关联的关联评估值的示例(参见图19)。

例如，在素材内容与其它素材内容具有诸如因果关系之类的关联的情况下，设置指示与其它素材内容的关联的评估值。

认为通过不单独评估每个素材内容而评估与其它内容的关联，有可能优化匹配作为要在一条自动制作的内容中使用的内容并且自动制作给人更多印象的内容。

在实施例中，已经描述了其中评估单元15为单个素材内容设置个体评估值的示例(参见图19)。

即使作为每个素材内容有大量的内容，其重要性不同。作为一般场景质量的重要性与取决于用户情绪出现的场景的重要性不同。然后，在自动制作时从每个候选内容确定这种重要性具有大的处理负荷。因此，内容本身的评估值被预先设置，并且可以使用评估值来选择内容。因此，认为可以容易且适当地选择要在自动制作的内容中使用的素材内容，并且可以执行给人更多印象的内容自动制作。

在实施例中，已经描述了其中评估单元15设置用于呈现素材内容与另一个素材内容的关联的关联呈现信息的示例(参见图19和7至10)。

例如，如图7至10中所示，通过生成指示每个素材内容的相关性的关联呈现信息，可以将素材内容的存在和关联呈现给用户。用户可以容易地识别素材内容的类型、不足等。

在实施例中，已经描述了其中根据用户操作更新关联呈现信息和关联评估值的示例(参见图20)。

例如，通过以图7至10中所示的形式呈现关联呈现信息，用户可以确认素材内容之间的关联的适当性/不适当性。然后，可以执行诸如降低实际上不太相关的素材内容之间的关联的操作，并且有可能通过根据反馈信息dFB执行更新处理来校正关联的信息。因此，可以将关联评估值和关联呈现信息收敛到更适合用户的适当的值。

注意的是，个体评估值也根据反馈信息dFB被更新以收敛到反映用户的爱好和偏好的状态。

根据实施例的关联呈现信息通过将一个素材内容与另一个素材内容直接相关联来指示素材内容之间的关联。

例如，内容片段之间的关联通过连接素材内容片段的图像呈现在用户接口上(参见图7至10)。因此，用户可以容易地确认素材内容之间的关联的适当性/不适当性。

在实施例中，已经描述了其中关联呈现信息以素材内容与关键元素组合的形式指示素材内容的关联的示例(参见图8和9)。例如，将指示情绪的词语或事件用作关键元素，并将内容的关联以诸如与某种情绪对应的素材内容或与某个事件相关的素材内容之类的形式呈现在用户接口上。

如图8中所示，用户可以根据自己的情绪、事件等容易地确认素材内容的关联，以及通过使用高兴、愤怒、悲伤和愉快的情绪作为关键元素来指示素材内容的关系来确定素材内容的适当性/不适当性，或以某个事件作为关键元素来提供指示素材内容的关系的图像，如图9中所示。

此外，还可以考虑诸如人生阶段、特定关键词、行为类型、时段、季节、地点和用户年龄之类的各种关键要素。

在实施例中，已经描述了其中关联呈现信息以素材内容与用户的个人关系组合的形式指示素材内容的关联的示例(参见图10)。

例如，如图10中所示，将与家庭相关的素材内容、与朋友相关的素材内容等呈现给用户A。因此，用户可以根据他/她的个人关系及其适当性/不适当性容易地确认素材内容的关联。

此外，从用户A的观点来看，诸如父母、孩子、某个圈子的成员、同学、工作场所的人、爱好朋友和邻居之类的各种因素都可以作为人际关系元素来呈现相关的素材内容。

根据实施例的服务器装置10包括学习单元17，该学习单元17输入对关联呈现信息的用户操作并执行学习处理。

学习单元17执行学习处理以便将来自用户的针对关联呈现信息的反馈信息dFB反映在故事设置中。因此，将来可以进行反映用户意图、素材内容的重要性和关联等的故事设置，或者可以校正当前正在制作的自动制作的内容的故事。

在实施例中，已经描述了其中将学习单元17的学习内容反映在故事校正中的示例。

在处理从图22的步骤S421进行到图21的步骤S401的情况下，根据学习结果执行当前正被制作的自动制作的内容的故事校正。因此，可以增加可以制作适合用户的内容的可能性。

在实施例中，已经描述了其中将学习单元17的学习内容反映在素材内容的选择中的示例。

在过程从图22的步骤S422进行到图21的步骤S403的情况下，基于学习结果根据当前正被制作的印象深刻的内容的故事重新选择要采用的素材内容。因此，有可能增加用户可以使用更合适的素材内容来制作自动制作的内容的可能性。

在实施例中，已经描述了其中将学习单元17的学习内容反映在未来的内容自动制作中的示例。

例如，在图20的步骤S324和S329中，指示个体评估值和关联评估值被更新。此外，在图22的步骤S424中，指示更新评估函数，使得学习内容反映在未来的自动制作中。因此，学习内容被反映在未来的内容自动制作中。有可能开发用于印象深刻的内容的自动制作系统，以便用户可以制作更期望的自动制作的内容。

作为根据实施例的信息处理装置的服务器装置10包括存储管理单元18，该存储管理单元18将在构成要被自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储(参见图23至25)。

在印象深刻的内容的制作处理中，根据设定的场景选择素材内容，但考虑通过适当地选择负面内容并在故事配置上布置负面内容，可以生成印象更深的内容。由于负面内容与其它素材内容分开存储和管理，因此在制作这种自动制作的内容时可以容易且适当地选择负面内容。

注意的是，在实施例中，已经描述了其中区分和管理负面内容与正面内容的示例。但是，可以确定负面内容，并且可以划分和管理负面内容与其它素材内容。

在实施例中，已经描述了存储管理单元18针对素材内容执行有区别地存储负面内容与被确定为正面场景内容的正面内容的处理的示例(参见图23至25)。

在印象深刻的内容的制作处理中设置的场景中，期望适当地选择正面内容和负面内容。由于负面内容和正面内容被分开存储和管理，因此在制作这种自动制作的内容时可以容易且适当地选择负面内容和正面内容。

在实施例中，已经描述了其中存储管理单元18将被确定为负面内容的素材内容存储在与存储和管理负面内容以外的素材内容的存储装置10a(第一存储设备)不同的远程存储装置12(第二存储设备)中的示例。

通过将负面内容和其它(正面内容)存储在另一个存储设备中，有可能适当地区分负面内容并使用户等难以正常示出负面内容。

例如，假设由云服务器管理的素材内容除了用于自动制作的内容之外还可以简单地被视为由用户存储的活动图像、静止图像等，但也假设用户通常不想太多地回顾负面内容，并且在一些情况下想要忘记负面内容。此外，还存在图像是由浏览图像的用户(机器人等)以外的人拍摄的用户图像的情况。在这种情况下，用户可能不想被他/她自己或其他人看到。因此，存储在分离的存储装置中使得可以进行通常不可见的管理。

在实施例中，假设存储装置10a是在允许用户访问素材内容的状态下被管理的存储设备，并且远程存储装置12是在仅允许特定管理员访问素材内容的状态下被管理的存储设备。

例如，假设存储装置10a和远程存储装置12具有不同的访问权限。

以这种方式，有可能设置不向用户正常示出负面内容的状态。

在实施例中，已经描述了其中远程存储装置12是从存储管理单元18的访问速度比存储装置10a的慢的存储设备的示例。

例如，假设存储装置10a和远程存储装置12由于网络内外的差异、通信方法等而具有不同的访问速度。以这种方式，有可能使得难以让一般用户看到负面内容。

为了减慢通信速度，例如，在存储装置10a是服务器装置10的装置中的存储设备、连接到LAN的存储设备、连接到通常使用的网络的存储设备等的情况下，假设远程存储装置12是连接到以低传输速率执行通信的网络的存储设备、部署在地球之外(诸如市区以外的沙漠地区或月球表面)的存储设备、连接到独立计算机的存储设备等。在任何情况下，都可以假设是不方便正常观看的存储设备。

在实施例中，假设其中存储管理单元18可以经由第一网络访问存储装置10a并且存储管理单元18可以经由第二网络访问远程存储装置12的示例。

网络差异可以使负面内容的可访问性不同于其它素材内容。

在实施例中，已经描述了其中存储管理单元18将被确定为负面内容的素材内容和除负面内容以外的素材内容以不同的层级管理状态存储在存储设备中的示例。

例如，管理素材内容的服务器的存储设备被用于管理不同层级中的文件夹中的负面内容和除负面内容以外的素材内容。可替代地，在使用不同存储装置的情况下，使层级管理状态不同。

层级管理还可以与其它内容(正面内容)相比降低对负面内容的可访问性。

在实施例中，已经描述了其中存储管理单元18响应于确定负面内容与正面内容相关而执行使存储管理单元18得访问变得容易的处理的示例(参见图24和25)。

例如，负面内容通常在可访问性降低的状态下被存储和管理，但是响应于确认相关正面内容的存在而在可访问性提高的状态下被管理。

假设其中存在相关正面内容的负面内容很可能被选择为构成印象深刻的内容的场景之一，并且假设促进访问服务器装置10并且容易提供负面内容作为制作自动制作的内容时的候选内容。因此，有可能使通常在难以观看的状态下被管理的负面内容易于在印象深刻的内容中使用。

在实施例中，已经描述了其中存储管理单元18响应于确定负面内容与正面内容相关而将负面内容设置为可以被设置为在内容自动制作过程中使用的候选内容的素材内容。

即，通常，负面内容不是自动制作的内容中的使用候选，但是可以响应于确认相关正面内容的存在而使负面内容成为候选内容。因此，有可能防止负面内容被不必要地用于印象深刻的内容。

此外，通过仅在存在与负面内容对应的正面内容的情况下允许该内容首次用于内容自动制作，该内容不仅用作简单的负面场景，而且还用作导致后续正面事件的用于故事的内容。因此，可以有效地使用负面内容。

在实施例中，已经主要描述了其中使用素材内容作为活动图像来自动制作诸如电影之类的印象深刻的内容的示例。但是，当然假设静止图像数据、音频数据、文本数据等被用作素材内容，或者这些数据被组合使用。作为自动制作的内容的示例，客户用户的个人电影被描述为“印象深刻的内容”。但是，内容并不一定限于这种个人印象深刻的内容，并且在本公开中诸如关于团体或组织的内容之类的各种内容的内容以及诸如素材视频和学术视频之类的内容可以被广泛认为是“自动制作的内容”。

实施例的程序是用于使CPU、DSP或包括CPU和DSP的设备执行实施例中描述的处理的程序。

根据实施例的程序是用于使信息处理装置执行请求外部设备记录构成要自动制作的内容的故事的素材内容的处理的程序。

此外，根据实施例的程序是使信息处理装置执行为以可访问状态记录的素材内容设置评估值的处理以及参考评估值选择构成故事设置处理中设置的故事的素材内容并通过使用所选择的素材内容的编辑处理来执行自动内容制作的故事生成处理的程序。

此外，实施例的程序是使信息处理装置执行存储管理处理的程序，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

利用这种程序，可以在能够执行信息处理的计算机设备或其它装备中实现上述服务器装置10。

用于实现这种服务器装置10的程序可以预先记录在作为内置于诸如计算机设备之类的设备中的记录介质的HDD中、具有CPU的微型计算机中的ROM等中。

可替代地，程序可以暂时或永久地存储(记录)在可移动记录介质中，诸如软盘、光盘只读存储器(CD-ROM)、磁光(MO)盘、数字多功能盘(DVD)、蓝光光盘(注册商标)、磁盘、半导体存储器或存储卡。这种可移动记录介质可以作为所谓的软件包软件提供。

此外，这种程序可以从可移动的记录介质安装到个人计算机等，或者可以经由诸如局域网(LAN)或互联网之类的网络从下载站点下载。

此外，这种程序适于根据实施例的服务器装置10的广泛提供。例如，通过将程序下载到诸如智能电话或平板电脑、移动电话、个人计算机、游戏设备、视频设备、个人数字助理(PDA)等便携式终端设备，可以使智能电话等用作本公开的服务器装置10。

注意的是，在本说明书中描述的效果仅仅是示例并且不受限制，并且可以提供其它效果。

注意的是，本技术还可以采用以下配置。

(1)

一种信息处理装置

包括存储管理单元，该存储管理单元将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

(2)

根据上述(1)的信息处理装置，其中

存储管理单元通过区分负面内容与被确定为正面场景内容的正面内容来执行存储素材内容的处理。

(3)

根据上述(1)或(2)的信息处理装置，其中

存储管理单元将被确定为负面内容的素材内容存储在与对除负面内容以外的素材内容进行存储和管理的第一存储设备不同的第二存储设备中。

(4)

根据上述(3)的信息处理装置，其中

第一存储设备包括在允许用户访问素材内容的状态下被管理的存储设备，以及

第二存储设备包括在仅允许特定管理员访问素材内容的状态下被管理的存储设备。

(5)

根据上述(3)或(4)的信息处理装置，其中

第二存储设备包括其中从存储管理单元的访问速度比第一存储设备的访问速度慢的存储设备。

(6)

根据上述(3)至(5)中的任一项的信息处理装置，其中

第一存储设备能够被存储管理单元经由第一网络访问，并且第二存储设备能够被存储管理单元经由第二网络访问。

(7)

根据上述(1)至(6)中的任一项的信息处理装置，其中

存储管理单元使被确定为负面内容的素材内容和除负面内容以外的素材内容以不同层级管理状态存储在存储设备中。

(8)

根据上述(1)至(7)中的任一项的信息处理装置，其中

存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关，执行使存储管理单元的访问变得容易的处理。

(9)

根据上述(1)至(8)中的任一项的信息处理装置，其中

存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关，将负面内容设置为能够用作内容自动制作处理的候选内容的素材内容。

(10)

一种信息处理方法，包括存储管理处理，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储，

其中信息处理装置执行存储管理处理。

(11)

一种程序，使信息处理装置执行

存储管理处理，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

附图标记列表

2相机

3计算机设备

4平板终端

5移动终端

6配备有相机的飞行物体

7配备有相机的车辆

8代理设备

9监视相机

10服务器装置

10a存储装置

11网络

12远程存储装置

15评估单元

16故事生成单元

17学习单元

18存储管理单元

20素材内容提供单元

21用户信息提供单元

22UI单元。

Claims (11)

1.一种信息处理装置，包括存储管理单元，该存储管理单元将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

2.根据权利要求1所述的信息处理装置，其中

存储管理单元通过区分负面内容和被确定为正面场景内容的正面内容来执行存储素材内容的处理。

3.根据权利要求1所述的信息处理装置，其中

存储管理单元将被确定为负面内容的素材内容存储在与对除负面内容以外的素材内容进行存储和管理的第一存储设备不同的第二存储设备中。

4.根据权利要求3所述的信息处理装置，其中

第一存储设备包括在允许用户访问素材内容的状态下被管理的存储设备，以及

第二存储设备包括在仅允许特定管理员访问素材内容的状态下被管理的存储设备。

5.根据权利要求3所述的信息处理装置，其中

第二存储设备包括其中从存储管理单元的访问速度比第一存储设备的访问速度慢的存储设备。

6.根据权利要求3所述的信息处理装置，其中

第一存储设备能够被存储管理单元经由第一网络访问，并且第二存储设备能够被存储管理单元经由第二网络访问。

7.根据权利要求1所述的信息处理装置，其中

存储管理单元使被确定为负面内容的素材内容和除负面内容以外的素材内容以不同层级管理状态存储在存储设备中。

8.根据权利要求1所述的信息处理装置，其中

存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关，执行使存储管理单元进行的访问变得容易的处理。

9.根据权利要求1所述的信息处理装置，其中

存储管理单元响应于确定负面内容与被确定为正面场景内容的正面内容相关，将负面内容设置为能够用作内容自动制作处理的候选内容的素材内容。

10.一种信息处理方法，包括存储管理处理，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储，

其中信息处理装置执行存储管理处理。

11.一种程序，使信息处理装置执行

存储管理处理，该存储管理处理将在构成要自动制作的内容的故事的素材内容当中被确定为负面场景内容的负面内容在与其它素材内容可区分的状态下进行存储。

Images