CN103258557B - 显示控制装置及显示控制方法 - Google Patents

显示控制装置及显示控制方法 Download PDF

Info

Publication number
CN103258557B
CN103258557B CN201310050767.0A CN201310050767A CN103258557B CN 103258557 B CN103258557 B CN 103258557B CN 201310050767 A CN201310050767 A CN 201310050767A CN 103258557 B CN103258557 B CN 103258557B
Authority
CN
China
Prior art keywords
content
display control
image
control unit
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310050767.0A
Other languages
English (en)
Other versions
CN103258557A (zh
Inventor
安齐博之
青木俊介
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2012033871A external-priority patent/JP5870742B2/ja
Priority claimed from JP2012033872A external-priority patent/JP2013171599A/ja
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN103258557A publication Critical patent/CN103258557A/zh
Application granted granted Critical
Publication of CN103258557B publication Critical patent/CN103258557B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/02Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
    • G11B27/031Electronic editing of digitised analogue information signals, e.g. audio or video signals
    • G11B27/034Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/22Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of characters or indicia using display control signals derived from coded signals representing the characters or indicia, e.g. with a character-code memory
    • GPHYSICS
    • G11INFORMATION STORAGE
    • G11BINFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34Indicating arrangements 

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Information Transfer Between Computers (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

提供一种显示控制装置和方法,该显示控制装置包括显示控制单元,该显示控制单元使包括第一片段和第二片段的内容的再现图像和指示该内容的再现状态的再现状态显示显示在显示单元上,其中,再现状态显示包括:指示第一片段的第一条,延续第一条显示并且指示第二片段的第二条,或第一图标,该第一图标代替第二条被显示在第一条上,以指示第二片段没有被再现。其中,当第一图标被选择时,显示控制单元使第二条被显示来代替第一图标。

Description

显示控制装置及显示控制方法
技术领域
本公开内容涉及一种显示控制装置以及一种显示控制方法。
背景技术
已知下述技术:当用户观看内容时,再现状态显示例如进度条连同再现图像一起显示,以便容易地确定正在被再现的场景是哪部分内容。例如,日本未经审查的专利申请公开No.2008-67207公开了一种在这样的进度条上显示记录在内容中的部分的技术。
发明内容
然而,近年来,用户观看的内容的种类已经多样化,并且,通过提取要观看的原始内容的部分(或通过剪辑掉另一部分)来获得的内容也不少见。在这样的情况下,例如,如在日本未经审查的专利申请公开No.2008-67207中所公开的显示进度条已不足以满足用户的需要。
因此,本公开内容提出一种新颖的并且改进的显示控制装置以及显示控制方法,该显示控制装置以及显示控制方法使用户能够舒适地观看包括被剪辑的部分的内容。
根据本公开内容的实施方式,提供一种显示控制装置,其包括显示控制单元,该显示控制单元使包括第一片段和第二片段的内容的再现图像和指示该内容的再现状态的再现状态显示显示在显示单元上。再现状态显示包括指示第一片段的第一条,延续第一条显示并且指示第二片段的第二条,或第一图标,该第一图标代替第二条显示在第一条上,以便指示第二片段没有被再现。其中,当第一图标被选择时,显示控制单元使第二条被显示来代替第一图标。
此外,根据本公开内容的实施方式,提供一种显示控制方法,其包括:将包括第一片段和第二片段的内容的再现图像和指示该内容的再现状态的再现状态显示显示在显示单元上。再现状态显示包括指示第一片段的第一条和延续第一条显示并且指示第二片段的第二条或第一图标,该第一图标代替第二条显示在第一条上,以便指示第二片段没有被再现。其中,当第一图标被选择时,使第二条被显示来代替第一图标。
根据以上配置,由于被剪辑的第二片段被显示为第一图标,因此第一条的显示是简洁的。另外,通过使第二片段显示为第二条,也可以再现第二片段。换言之,可以使用直观的操作来再现被剪辑的部分。
根据如上所述的本公开内容,可以使得用户能够更舒适地观看包括被剪辑的部分的内容。
附图说明
图1是示出根据本公开内容的实施方式的系统的功能配置的示意性框图;
图2是用于描述根据本公开内容的实施方式的系统的操作的图;
图3A是示出根据本公开内容的实施方式的共享设置的示例的图;
图3B是示出根据本公开内容的实施方式的共享设置的示例的图;
图3C是示出根据本公开内容的实施方式的共享设置的示例的图;
图3D是示出根据本公开内容的实施方式的共享设置的示例的图;
图4是用于描述根据本公开内容的实施方式的事件信息的图;
图5A是用于描述根据本公开内容的实施方式的脚本(scenario)信息的图;
图5B是用于描述根据本公开内容的实施方式的脚本信息的图;
图6是用于描述使用根据本公开内容的实施方式的脚本信息对内容进行再现的图;
图7是用于描述根据本公开内容的实施方式生成脚本信息和缩略图像(thumbnailimage)的图;
图8是用于描述根据本公开内容的实施方式选择目标内容的图;
图9A是用于描述根据本公开内容的实施方式生成缩略图像和缩略脚本的图;
图9B是用于描述根据本公开内容的实施方式生成缩略图像和缩略脚本的图;
图9C是用于描述根据本公开内容的实施方式生成缩略图像和缩略脚本的图;
图9D是用于描述根据本公开内容的实施方式生成缩略图像和缩略脚本的图;
图10A是用于描述根据本公开内容的实施方式生成亮点脚本的图;
图10B是用于描述根据本公开内容的实施方式生成亮点脚本的图;
图10C是用于描述根据本公开内容的实施方式生成亮点脚本的图;
图11是用于描述根据本公开内容的实施方式的内容观看期间的整体显示的图;
图12是示出根据本公开内容的实施方式的普通模式再现画面的示例的图;
图13A是示出根据本公开内容的实施方式的亮点模式再现画面的示例的图;
图13B是示出根据本公开内容的实施方式的亮点模式再现画面的示例的图;
图13C是示出根据本公开内容的实施方式的亮点模式再现画面的示例的图;
图13D是示出根据本公开内容的实施方式的亮点模式再现画面的示例的图;
图14是用于描述根据本公开内容的实施方式的系统操作的图;以及
图15是用于描述信息处理装置的硬件配置的框图。
具体实施方式
在下文中,将参照附图详细描述本公开内容的优选实施方式。注意的是,在本说明书以及附图中,用相同的附图标记表示具有基本相同功能和结构的结构要素,并且省略了对这些结构要素的重复说明。
注意的是,将按照以下顺序来进行描述。
1.引言
2.整体配置
3.内容提供用户的操作
4.共享服务器中的处理
4-1.概述
4-2.详述
5.内容观看期间的显示
6.补充
(1.引言)
在对本公开内容的实施方式进行描述之前,将首先对其相关事项进行描述。
本公开内容的实施方式涉及一种系统,其中,用户将包括由其拍摄的图像(静态图像)或动态图像的内容上传到服务器,以使得用户自己观看该内容或与其他用户共享该内容。
在本文中,所生成的内容例如是在运动会、旅行等事件中使用数码相机等拍摄的图像或者动态图像。这样的内容被存储为具有例如基于图像被拍摄的日期的文件名的图像文件或者动态图像文件。不具有高水平的IT素养的用户或懒惰的用户在不进行改变的情况下以原始格式存储或共享内容。即使其他用户通常也仅改变文件名,以便包括事件的标题或以文件为单位放入事件的标题的标签。
当与其他用户共享上述这样的内容时,未必易于用户去观看所共享的内容。例如,当使用直接基于图像被拍摄的日期的文件名的内容被共享时,其他用户不知道该文件被拍摄于什么事件中(当拍摄内容的用户自己在经过一段时间之后再观看内容时也是一样的)。另外,即使文件名等使得可以知道内容被拍摄于什么事件中,也不能知道其细节。
例如,假设存在由父母在他们的孩子的运动会中拍摄的内容。在该内容中,有显示他们的孩子的部分、显示他们的孩子的朋友的部分以及仅显示比赛结果的部分。当要与祖父母共享内容时,祖父母只想看显示他们的孙子/孙女(孩子)的内容。然而,难以从不基于例如文件名的内容中区分显示孙子/孙女的内容。另外,例如,即使通过插入到文件中的标签已知了显示他们的孙子/孙女的内容,在例如动态图像内容的情况下,也需要进行使用快进观看其中孙子/孙女没有出现的场景的笨拙的工作。
在这样的情况下,提供内容的父母也可以考虑对内容进行选择,以与祖父母进行共享,但是为此,首先他们应该回顾内容以了解它,这需要大量时间和精力。此外,例如,当内容是动态图像时,存在下述情况:显示孙子/孙女的部分和没有显示孙子/孙女的部分混合在一个文件中,因此对许多用户来说,即便通过编辑动态图像来准备用于共享的内容也是不现实的。此外,取决于观看内容的用户,内容中的感兴趣的部分也不同(例如,对于祖父母,这样的部分是孙子/孙女(孩子),对于他或她的朋友,这样的部分是孩子和他的或她的朋友,对于孩子自己,这样的部分是朋友和比赛结果)。
因此,考虑到上述情形,根据本公开内容的实施方式,在通过从由用户生成的内容中自动提取适于共享的内容来减少提供内容的用户的精力的同时,对于观看内容的用户来说,实现了舒适的观看体验。
(2.整体配置)
在下文中,将参照图1和图2来描述本公开内容的实施方式的整体配置。图1是示出根据本公开内容的实施方式的系统的功能配置的示意性框图。图2是用于描述根据本公开内容的实施方式的系统的操作的图。
(2-1.系统的功能配置)
参照图1,根据本公开内容的实施方式的系统10包括:共享服务器100、内容提供客户端200、内容观看客户端300以及内容服务器400。
(共享服务器)
共享服务器100是安装在网络上的服务器,并且例如实现为下文将描述的信息处理装置。共享服务器100包括内容信息获取单元110、内容分类单元120、共享关联信息获取单元130、内容提取单元140、事件信息生成单元150、帧/场景提取单元160、缩略图像提取单元170以及脚本信息生成单元180,作为功能配置要素。例如,通过根据存储在存储装置中或可移除的记录介质中的程序对CPU(中央处理器)、RAM(随机存取存储器)以及ROM(只读存储器)进行操作,来实现功能配置要素中的每个。
注意的是,共享服务器100可以不必实现为单个装置。例如,可以通过使多个装置的资源通过网络进行协作来实现共享服务器100的功能。
内容信息获取单元110从内容服务器400的内容分析单元420获取内容的信息。内容分析单元420对由提供内容的用户上传的内容进行分析,并且例如获取其内容被拍摄的事件的信息、出现在作为内容的图像或动态图像中的人物的信息等,来作为例如内容的元信息。
内容分类单元120基于由内容信息获取单元110获取的信息来对内容进行分类。在该实施方式中,对内容进行分类包括针对要拍摄的每个事件对内容进行分类。使用以下述方式获得的结果来执行针对每个事件的内容的分类,该方式为,内容服务器400的内容分析单元420基于拍摄日期的分布对内容进行聚类(如下文将描述的)。
共享关联信息获取单元130从内容提供客户端200获取作为内容的共享伙伴的目标用户以及作为与每个目标用户相关联的对象的目标对象的信息。目标对象是指被假定为是当目标用户观看内容时感兴趣的目标的对象。在以上所描述的示例中,目标用户是祖父母,目标对象是孙子/孙女(孩子)。注意的是,稍后将详细描述目标用户和目标对象。
此外,共享关联信息获取单元130可以获取允许对每个目标用户公开的事件的信息。因此,即使没有细致地设置允许对每个目标用户共享的内容,也可以设置是否要将内容以事件为单位与相应用户共享。这样的设置可以用于下述共享设置的情况,其中与祖父母旅行期间拍摄的内容只与祖父母共享,而在运动会期间拍摄的内容不但与祖父母共享,还与孩子的朋友共享,即使同一孩子出现在两种情况下的内容中也是如此。
内容提取单元140基于由共享关联信息获取单元130获取的信息,从由用户提供的内容(其信息被内容信息获取单元110获取的内容)中提取其中目标对象出现的内容。在此提取的内容在下文也称为目标内容。例如,当指定目标用户时,内容提取单元140提取其中与目标用户相关联的目标对象出现的内容作为目标内容。因此,例如,当存在多个目标用户时,取决于指定的目标用户,由内容提取单元140提取的目标内容可能不同。
此外,基于由内容分类单元120进行的对内容的分类,内容提取单元140可以针对每个事件来提取目标内容。因此,例如,可以在稍后将描述的脚本的生成期间针对每个事件生成脚本。另外,在事件信息生成单元150中,可以生成以事件为单位的展示内容的信息。当共享关联信息获取单元130获取用于指定允许对每个目标用户公开的事件的信息时,内容提取单元140可以提取关于对应于例如指定的目标用户的事件的目标内容。
事件信息生成单元150基于以下述方式获得的结果来生成事件信息,该方式为:内容提取单元140针对每个事件提取目标内容,然后将信息输出到内容观看客户端300。事件信息是用于将包括其中出现与目标用户相关联的目标对象的内容的事件(换言之,可以根据其由下文将描述的脚本信息生成单元180生成脚本的事件)呈现给观看内容的目标用户的信息。如以上所描述的,根据其提取目标内容的事件可以受限于通过共享关联信息获取单元130获取的信息。
帧/场景提取单元160从包括在目标内容中的动态图像提取满足预定条件的帧或场景。这里,帧是指以连续的方式构成动态图像的图像中的每个。另外,场景是指构成目标内容的部分或全部的一系列帧。例如,帧/场景提取单元160从包括在目标内容中的动态图像中提取其中出现目标对象的部分,以作为目标场景。此外,帧/场景提取单元160可以针对每个动态图像,从目标场景中选择代表场景。
另外,帧/场景提取单元160可以从包括在目标内容中的动态图像中提取其中出现目标对象的帧作为目标帧,并且针对每个动态图像从目标帧中选择代表帧。注意的是,包括在目标内容中的图像(静态图像)可以在不经历帧/场景提取单元160中的处理的情况下按原样提供给脚本信息生成单元180和缩略图像提取单元170。稍后将描述帧/场景提取单元160的相应处理的细节。
缩略图像提取单元170提取下述缩略图像,该缩略图像针对由内容提取单元140针对每个事件提取的目标内容,使用由帧/场景提取单元160对帧的提取结果,以简短形式总结事件的内容。这样的缩略图像例如可以是一个图像或一个帧(在下文中,也称为事件代表图像)或者通过组合多个图像或多个帧而制作的动画(在下文中,也称为翻动(flip)缩略图)。注意的是,也可以生成由图像和动态图像的代表场景组成的动态图像(在下文中,也称为缩略动态图像)作为缩略图,但是该图像是通过稍后将描述的脚本信息生成单元180的功能生成的。
这里,当缩略图像提取单元170提取事件代表图像时,缩略图像提取单元170也可以被称为代表图像选择单元,其从由帧/场景提取单元160提取的代表帧以及包括在目标内容中的图像(静态图像)中选择事件代表图像。注意的是,例如当内容仅包括动态图像时,从代表帧中选择事件代表图像。
另一方面,当缩略图像提取单元170生成翻动缩略图时,缩略图像提取单元170也可以被称为动画生成单元,其通过将由帧/场景提取单元160提取的代表帧与包括在目标图像中的图像(静态图像)进行组合来生成摘要(digest)动画(翻动缩略图)。注意的是,例如当内容仅包括动态图像时,通过组合代表帧来生成翻动缩略图。
由缩略图像提取单元170提取的缩略图像例如以图像数据的形式提供给事件信息生成单元150,并连同事件信息一起输出到内容观看客户端300。在内容观看客户端300中,缩略内容连同事件信息一起呈现给观看内容的目标用户,以使得易于理解例如针对每个事件分类的内容的细节。
脚本信息生成单元180针对由内容提取单元140提取的目标内容,通过将内容进行组合来生成用于再现摘要内容的脚本,并且将该脚本输出到内容观看客户端300,以作为脚本信息。如稍后将描述的,当内容观看客户端300的内容获取单元310访问内容服务器400以获取内容,然后将内容再现为摘要内容时,使用脚本信息。脚本信息生成单元180在生成脚本信息时可以使用通过帧/场景提取单元160获得的帧或场景的提取结果。
另外,脚本信息生成单元180可以在通过共享关联信息获取单元130获取信息之前或之后,生成关于被设置为要共享的内容的脚本。换言之,当设置共享时,脚本信息生成单元180在设置之前生成关于被设置为要共享的内容的脚本,并且还在设置之后生成关于附加地被设置为要共享的内容的脚本。
这里,摘要内容例如包括:亮点(highlight)动态图像和缩略动态图像两者。亮点动态图像是将由帧/场景提取单元160从包括在目标内容中的动态图像中提取的目标场景与包括在目标内容中的图像(静态图像)进行组合而再现的动态图像。注意的是,例如,当目标内容仅包括动态图像时,亮点动态图像是使用动态图像中的每个的连续的目标帧部分所再现的动态图像。在下文中,用于再现这种亮点图像的脚本也被称为亮点脚本。在内容观看客户端300中使用亮点脚本再现的亮点动态图像被提供给例如目标用户以用于观看。
另一方面,缩略动态图像是通过对从目标场景中选择的代表场景和包括在目标内容中的图像(静态图像)进行组合而获得的动态图像,该目标场景是帧/场景提取单元160从包括在目标内容中的动态图像中提取的。注意的是,例如,当目标内容仅包括动态图像时,缩略动态图像是使用每个动态图像的连续的代表帧部分再现的图像。在下文中,用于构成这样的缩略动态图像的脚本也被称为缩略脚本。在内容观看客户端300中,例如当目标用户在观看事件信息的同时选择要观看的内容时,使用缩略脚本再现的缩略动态图像与事件信息一起显示。
注意的是,如上所述,在本实施方式中,内容分类单元120针对每个事件对内容进行分类,内容提取单元140针对每个事件提取目标内容。因此,脚本信息生成单元180也针对每个事件生成脚本。
(内容提供客户端)
内容提供客户端200是经由网络连接到共享服务器100的客户端,并且例如实现为稍后将描述的信息处理装置。内容提供客户端200包括操作单元210、显示控制单元220以及显示单元230,作为功能配置要素。更具体地,内容提供客户端200例如可以是用户拥有的桌上型PC、笔记本PC或者平板式PC;具有网络通信功能的电视接收机、录像机、智能手机或者移动媒体播放器等,但是并不限于这些,并且可以是能够具有上述功能配置的各种装置中的任意装置。
通过在内容提供客户端200中设置的或者作为外部连接装置连接的各种输入装置来实现操作单元210,并且操作单元210获取针对内容提供客户端200的用户操作。操作单元210例如包括定点装置(pointing device)例如触摸板或鼠标,并且可以与稍后将描述的显示控制单元220和显示单元230协作来给用户提供用GUI(图形用户界面)进行的操作。
这里,操作单元210所获取的用户操作包括:用于设置作为共享内容的目标的目标用户以及设置与每个目标用户相关联的目标对象的操作。注意的是,对内容提供客户端200进行操作的用户是提供内容的用户,并且在许多情况下也是拍摄内容的用户。在以上所描述的示例中,操作单元210获取由父母指定祖父母为目标用户并且将作为目标对象的孙子/孙女(孩子)与作为目标用户的祖父母相关联的操作。下文将与GUI组件的示例一起来描述这样的操作的示例。
例如,通过依照存储在存储装置或者可移除的记录介质中的程序对CPU、RAM和ROM进行操作来实现显示控制单元220,并且显示控制单元220控制显示单元230的显示。如以上所描述的,显示控制单元220可以使显示单元230显示经由操作单元210操作的GUI组件。注意的是,稍后将描述GUI组件的示例。
例如,显示单元230实现为内容提供客户端200所具有的作为输出装置的或者作为外部连接装置连接到内容提供客户端200的显示装置,例如LCD(液晶显示器)或有机EL(电发光)显示器。显示单元230根据显示控制单元220的控制来显示各种图像。
(内容观看客户端)
内容观看客户端300是经由网络连接到共享服务器100和内容服务器400的客户端,并且例如通过稍后将描述的信息处理装置来实现。内容观看客户端300包括:内容获取单元310、显示控制单元320、显示单元330以及操作单元340,以作为功能配置要素。更具体地,内容观看客户端300例如可以是用户拥有的桌上型PC、笔记本PC或平板式PC;具有网络通信功能的电视接收机、录像机、智能手机或移动媒体播放器等,但是并不限于这些,内容观看客户端300可以是能够具有上述功能配置的各种装置中的任意装置。
例如,通过根据存储在存储装置或者可移除的记录介质中的程序对CPU、RAM和ROM进行操作来实现内容获取单元310。内容获取单元310获取从共享服务器100的脚本信息生成单元180输出的脚本信息,并且基于该脚本信息从内容服务器400获取用于再现例如用户期望的亮点动态图像、缩略动态图像等所需的内容。另外,内容获取单元310使用基于脚本信息获取的内容来再现这样的亮点动态图像和缩略动态图像。例如,内容获取单元310可以以基于脚本信息定义的顺序来再现这样的所获取的内容,或者以在仅查找目标场景或代表场景之后再现动态图像的方式来再现亮点动态图像和缩略动态图像。另外,内容获取单元310可以以基于脚本信息定义的顺序来设置所获取的内容,使用其中在动态图像的情况下只有目标场景或代表场景被剪辑出来的编辑处理来生成亮点动态图像以及缩略动态图像,然后再现亮点动态图像和缩略动态图像。内容获取单元310将所再现的动态图像数据提供给显示控制单元320。
例如,通过根据存储在存储装置或者可移除的记录介质中的程序对CPU、RAM和ROM进行操作来实现显示控制单元320,并且显示控制单元320控制显示单元330的显示。显示控制单元320使显示单元330显示从内容获取单元310提供的亮点动态图像。另外,显示控制单元320获取从共享服务器100的事件信息生成单元150输出的事件信息,并且基于该事件信息,使显示单元330显示例如其上存在内容块(content piece)的事件目录。这里,与事件信息一起输出的事件代表图像或翻动缩略图与事件目录一起显示。另外,当针对事件来生成缩略动态图像时,显示控制单元320使由内容获取单元310获取的缩略动态图像与事件目录一起显示。注意的是,稍后将描述显示亮点动态图像和事件目录的示例。另外,显示控制单元320可以使显示单元330显示经由操作单元340操作的GUI组件。GUI组件的示例也将在下文描述。
例如,显示单元330实现为内容观看客户端300所具有的作为输出装置的或者作为外部连接装置连接到内容观看客户端300的显示装置,例如LCD或者有机EL显示器。显示单元330根据显示控制单元320的控制来显示各种图像。
通过在内容观看客户端300中设置的或者作为外部连接装置连接的各种输入装置来实现操作单元340,并且操作单元340获取针对内容观看客户端300的用户操作。操作单元340例如包括定点装置如触摸板或鼠标,并且可以与如上所述的显示控制单元320和显示单元330协作来给用户提供用GUI进行的操作。
(内容服务器)
内容服务器400是安装在网络上的服务器,并且例如实现为以下将描述的信息处理装置。内容服务器400包括内容数据库(DB)410和内容分析单元420,以作为功能配置要素。
注意的是,可以不必通过单个装置来实现内容服务器400。例如,可以通过经由网络结合多个装置具有的资源来实现内容服务器400的功能。另外,内容服务器400可以不是与共享服务器100独立的本体,或者可以由至少某些功能与共享服务器100的功能相同的装置来实现内容服务器400。
例如通过存储装置来实现内容DB 410,并且内容DB 410存储由提供内容的用户上传的内容。例如由内容分析单元420对所存储的内容进行分析,并且内容观看客户端300的内容获取单元310可以访问该内容。
例如,通过根据存储在存储装置或者可移除的记录介质中的程序对CPU、RAM和ROM进行操作来实现内容分析单元420,并且内容分析单元420对存储在内容DB 410中的内容进行分析。内容分析单元420例如通过分析图像的特征量来检测出现在内容的图像或动态图像中的人物以作为对象。另外,内容分析单元420可以基于例如内容被拍摄的日期的分布来对内容进行聚类,并且指定内容被拍摄时所处的事件。内容分析单元420将分析结果例如作为内容的元信息而提供给共享服务器100的内容信息获取单元110。
(2-2系统的操作)
接下来,将参照图2进一步描述根据以上描述的本公开内容的实施方式的系统10的操作的示例。在下文中,将在示出与步骤S1至S11的操作中的每个相对应的图1的功能配置要素的同时来进行描述。
首先,提供内容的用户使用预定的应用将图像或动态图像上传到存储器(S1)。注意的是,由于用于上传的应用可以与以往内容上传中使用的应用具有相同的配置,所以未示出与以上描述的图1中的功能配置要素对应的功能配置要素。例如可以在内容提供客户端200中以与共享设置(S2)中相同的方式来执行应用,或者可以在与客户端分离的装置,例如获取内容的数码相机中执行应用。存储器对应于内容服务器400的内容DB 410。
接下来,提供内容的用户使用共享设置应用在客户端装置中执行共享设置(S2)。例如,通过该共享设置,内容被共享给其的目标用户以及与每个目标用户相关联的目标对象被设置。这里,在本实施方式中,目标对象是在到那时为止捕获和积聚的内容块的图像分析(对脸进行聚类)中生成脸聚类的人。注意的是,共享设置应用是例如经由内容提供客户端200的操作单元210、显示控制单元220和显示单元230提供的应用。
共享设置的结果反映在服务器侧的用户DB以及组DB中。这里,用户DB存储例如由用户设置的目标用户的信息。另外,组DB存储与稍后将描述的由用户设置的目标用户的每个组相关联的目标对象的信息。注意的是,可以在上传图像和动态图像以及内容分析之后执行以上所描述的共享设置。
另一方面,在服务器侧针对上传的图像或动态图像执行内容分析(S3)。此处执行的内容分析例如可以包括:基于对图像的特征量的分析来检测对象,以及通过基于内容被拍摄的日期的分布将它们聚类来指定事件。例如,内容分析对应于内容服务器400的内容分析单元420的功能。
以上所描述的内容分析(S3)的结果作为内容的元信息被输入到内容DB(S4)。例如,该元信息的输入对应于共享服务器100的内容信息获取单元110的功能。
这里,内容DB例如存储每个内容块的元信息。例如使用提供内容的用户的标识(ID)作为键(key),对到那时为止存储在内容DB、用户DB以及组DB中的信息进行组合,并且由脚本创建模块来使用(S5)。脚本创建模块例如对应于共享服务器100的内容分类单元120、内容提取单元140、事件信息生成单元150、帧/场景提取单元160、缩略图像提取单元170以及脚本信息生成单元180的功能。
首先,脚本创建模块生成事件信息(S6)。如以上所描述的,事件信息是这样的信息:将包括出现与目标用户相关联的目标对象的内容的事件呈现给查看内容的目标用户。观看内容的目标用户使用脚本播放器应用来获取事件信息(S7)。注意的是,脚本播放器应用是例如经由内容观看客户端300的内容获取单元310、显示控制单元320、显示单元330以及操作单元340而提供的应用。
关于这点,观看内容的目标用户使用脚本播放器应用从事件信息中选择期望的事件。脚本创建模块生成例如亮点动态图像的脚本(S8)。脚本播放器应用获取所生成的脚本(S9),并且基于该脚本访问存储在存储器中的内容(S10)。此外,脚本播放器应用根据所访问的内容生成用户期望的动态图像如亮点动态图像,并且再现该动态图像(S11)。
(3.共享设置)
接下来,将参照图3A至图3D来描述根据本公开内容的实施方式的共享设置。图3A至图3D是示出根据本公开内容的实施方式的共享设置的示例的图。
使用经由例如参照图1描述的系统10中的内容提供客户端200的操作单元210、显示控制单元220以及显示单元230提供的共享设置应用来执行共享设置。因此,在以下的示例中描述的共享设置的过程例如可以使用下述GUI,该GUI通过显示控制单元220显示在显示单元230上,并且经由操作单元210来操作。另外,在此所描述的共享设置对应于参照图2描述的操作中的共享设置(S2)。
图3A示出了用于设置内容被共享给其的目标用户的过程的示例。在图中所示的示例中,包括在目标用户列表L1上的用户U被设置为目标用户。首先,如图3A的(a)所示,用户U1(祖父母)、用户U2(父亲的朋友A)以及用户U3(父亲的朋友B)被添加到目标用户列表L1(父亲的朋友列表)上。在该实施方式中,对于添加到目标用户列表L1上,换言之,设置为目标用户,需要待添加的用户的认可。因此,如图3A的(b)中所示,紧接在添加之后,将目标用户列表上的用户U1至用户U3的全部用户显示为未经认可的用户。然后,当用户U1(祖父母)和用户U3(父亲的朋友B)认可被添加到目标用户列表L1上时,如图3A的(c)中所示,目标用户列表L1上的用户U1(祖父母)和用户U3(父亲的朋友B)被显示为已认可的用户。
图3B示出了对目标用户进行设置和分组的过程的示例。在图中所示的示例中,首先,用户U0(父亲=执行共享设置的用户)和用户U3(父亲的朋友B)中的每个创建其中提供内容的共享的服务账户。接下来,如参照图3A所描述的,用户U0显示目标用户列表L1(父亲的朋友列表),并且将用户U3添加到目标用户列表L1上。此时,目标用户列表L1上的用户U3被显示为未经认可的用户。
另一方面,共享设置应用将用户U3已经被用户U0添加到目标用户列表L1的通知(邀请)发送给用户U3。用户U3使用适当的应用来接收该邀请并且接受该邀请。接收到接受通知的共享设置应用使添加到目标用户列表L1上的用户U3有效。换言之,目标用户列表L1上的用户U3被显示为已认可的用户。
接下来,用户U0创建目标用户组G1(高尔夫好友Gp),并且将用户U3从目标用户列表L1添加到该组G1。因此,用户U3被分类到目标用户组G1。另外,用户U0将人物F1(父亲的朋友B,即,用户U3)的信息添加到目标用户组G1。注意的是,在此添加的人物信息对应于与被分类在目标用户组G1中的目标用户相关联的目标对象。因此,用户U3(父亲的朋友B)可以使用适当的应用在由用户U0(父亲)设置为共享的内容中共享其中出现人物F1(即用户U3自己)的内容。
注意的是,例如通过应用其他应用可以适当地修改以上所描述的过程。例如,可以由以上所描述的用户来创建目标用户列表L1,或者也可以通过导入其他服务的朋友设置来创建目标用户列表L1,该其他服务例如SNS(社交网络服务)等。因此,共享设置应用可以不必执行如以上示例中所示的有关目标用户的设置的所有处理。
图3C示出了将人物的信息与目标用户的组相关联的过程的示例。在图中所示的示例中,根据如以上在图3A和图3B中所示的过程,设置了用户U1(祖父母)被分类到其中的目标用户组G2(祖父母组)。共享设置应用提供下述GUI,该GUI将来自人物列表FL(人物目录)的期望的人物F的信息与例如目标用户组G2相关联。在图中所示的示例中,人物F2至F7被显示在人物列表FL上。执行共享设置的用户例如通过将期望的人物F从人物列表FL拖到目标用户组G2的区域来将人物F的信息与目标用户组G2相关联。
在图中所示的示例中,人物F2(花子)和人物F3(太郎)被拖到目标用户组G2(祖父母组)的区域。因此,人物F2(花子)和人物F3(太郎)被与分类到目标用户组G2的用户U1(祖父母)关联为目标对象。因此,用户U1(祖父母)可以共享其中出现人物F2(花子)和人物F3(太郎)的内容。以这种方式,通过将目标用户分组,易于设置要与多个目标用户共享的对象。另外,以与目标用户相同的方式,可以将对象分组。
图3D示出了将人物的信息与目标用户的组相关联的过程的另一个示例。在图中所示的示例中,根据如在上述的图3A和图3B中所示的过程,设置目标用户组G1至G4。在共享设置应用中,也可以如上所述设置多个目标用户组G。在这样的情况下,例如也可以将目标用户组G1至G4设置在人物列表FL(人物目录)周围,并且执行共享设置的用户执行下述操作,将人物列表FL上的期望的人物F拖到目标用户组G中的任一个的区域。
在图中所示的示例中,以与图3C的示例中相同的方式,通过将人物F2(花子)和人物F3(太郎)拖到目标用户组G2(祖父母组),作为目标对象的人物F2(花子)和人物F3(太郎)与作为目标用户的用户U1(祖父母)相关联。执行共享设置的用户以类似的方式将人物F5(父亲的朋友A)拖到例如目标用户组G1(父亲的朋友组)。另外,人物F2(花子)和人物F3(太郎)被拖到目标用户组G4(家庭组)。以这种方式,取决于目标用户组G,作为目标对象的人物F的设置可能不同,或者其全部或部分可能重叠。
(4.共享服务器中的处理)
(4-1概述)
接下来,将参照图4至图6描述根据本公开内容的实施方式的共享服务器100中的处理的概述。图4是用于描述根据本公开内容的实施方式的事件信息的图。图5A和图5B是用于描述根据本公开内容的实施方式的脚本信息的图。图6是用于描述使用根据本公开内容的实施方式的脚本信息对内容进行再现的图。
(与事件信息有关的处理)
图4示出了与事件信息有关的处理。图中所示的处理对应于参照图1描述的系统10中的共享服务器100的内容分类单元120、内容提取单元140以及事件信息生成单元150的功能。另外,在图中所示的处理对应于参照图2描述的操作中的事件信息的生成(S6)以及事件信息的获取(S7)。
在图中所示的示例中,生成针对用户U1(祖父母)的事件信息。人物F2(花子)和人物F3(太郎)被与用户U1所属的目标用户组G2(祖父母组)相关联。换言之,人物F2和人物F3被与作为目标用户的用户U1相关联以作为目标对象。在共享服务器100中,共享关联信息获取单元130获取这样的信息。人物F2和人物F3的这样的信息(目标对象的信息)可以作为用于生成事件信息的第一输入。
另一方面,例如,由用户U0(父亲=执行共享设置的用户)提供的内容例如被图1中所描述的内容分析单元420聚类。在图4所示的示例中,内容被聚类到三个事件I1至I3中。在共享服务器100中,内容分类单元120根据聚类结果对内容进行分类。如上被分类到事件I1至I3中的内容可以作为用于生成事件信息的第二输入。
使用这些输入,生成针对用户U1(祖父母)的事件信息Iinfo。在共享服务器100中,首先,内容提取单元140从被分类到事件I1至I3中的内容中提取其中包括作为对象的人物F2(花子)和人物F3(太郎)的内容块。因此,其中包括作为对象的人物F2(花子)和人物(F3)的内容块被从事件I1(运动会)和I2(家庭旅行)中提取出来。另一方面,从事件I3(高尔夫)中仅提取了其中包括作为对象的人物F0(父亲)和人物F5(父亲的朋友A)的内容块。
接收该结果,事件信息生成单元150生成包括事件I1(运动会)和事件I2(家庭旅行)的信息的事件信息Iinfo,并将该信息经由内容观看客户端300呈现给用户U1(祖父母)。因此,用户U1可以通过以事件为单位容易地进行选择来观看其中出现所关心的对象(花子和太郎)的内容。
注意的是,如上所述,通过例如用户U0(父亲=执行共享设置的用户)的设置,可以对包括在事件信息Iinfo中的事件I进行限制。例如当对于用户U1(祖父母)而言事件I2(家庭旅行)是秘密事件时,用户U0也可以进行设置,以使得呈现给用户U1的事件信息Iinfo不包括事件I2。为了达到这样的设置,在内容提供客户端200中,例如可以提供针对每个目标用户的事件信息的预览功能。
(与脚本信息有关的处理)
图5A示出了与脚本信息有关的处理。图中所示的处理对应于参照图1描述的系统10中的共享服务器100的内容提取单元140、帧/场景提取单元160以及脚本信息生成单元180的功能。另外,图中所示的处理对应于参照图2描述的操作中的脚本的生成(S8)以及脚本的获取(S9)。
在图5A所示的示例中,作为以上所描述的事件信息的示例的延续,生成针对用户U1(祖父母)的脚本信息。人物F2和人物F3被与作为目标用户的用户U1(祖父母)相关联以作为目标对象。在共享服务器100中,共享关联信息获取单元130获取这样的信息。人物F2和人物F3的这样的信息(目标对象的信息)可以作为用于生成脚本信息的第一输入。
另一方面,例如,假定事件I1(运动会)和事件I2(家庭旅行)作为事件信息Iinfo被呈现给其的用户U1(祖父母)从事件中选择事件I1(运动会)。在这种情况下,内容提取单元140以及帧/场景提取单元160执行针对属于事件I1的内容的处理。在图中所示的示例中,动态图像A和动态图像B被示出为属于事件I1的两个内容块。属于事件I1的这样的内容块可以作为用于生成脚本信息的第二输入。
使用这些输入,帧/场景提取单元160从动态图像A和动态图像B中提取其中出现人物F2和人物F3中的至少任意一个的场景。如图中所示,分别从动态图像A和动态图像B中提取了场景A-2、A-3和A-5,以及场景B-2。脚本信息生成单元180通过组合这些场景来构成亮点动态图像。
然而,在图中所示的示例中,脚本信息生成单元180将该亮点动态图像输出为亮点脚本HS,而不是照原样输出。亮点脚本HS是如下文将描述的由内容观看客户端300使用以便通过访问内容来获得亮点动态图像的信息。在图中所示的示例中,亮点脚本HS被示出为xml格式的文件,其指示内容的地址以及场景的起始位置和结束位置,但是亮点脚本HS的格式可以是任何种类。
图5B更详细地示出了与图5A中示出的脚本信息相关的处理。同样地,如同图5A,用于生成脚本信息的第一输入是人物F2和人物F3的信息(目标对象的信息)。另外,第二输入是属于事件I1(运动会)的内容。然而,不同于图5A的示例,在图5B的示例中,图像A、图像B和图像C,以及动态图像D、动态图像E和动态图像F六个内容块属于事件I1。
使用这些输入,首先,内容提取单元140从属于事件I1的内容块中提取包括作为对象的人物F2和人物F3的内容块。在图中所示的示例中,作为对象的人物F2和人物F3包括在图像A和图像C、以及动态图像D、动态图像E和动态图像F中。因此,内容提取单元140提取图像A和图像C、以及动态图像D、动态图像E和动态图像F作为目标内容块。另一方面,在以下与脚本信息生成有关的处理中不使用没有包括作为对象的人物F2和人物F3的图像B。
接下来,帧/场景提取单元160针对动态图像D、动态图像E和动态图像F提取其中出现人物F2和人物F3的场景。在图中所示的示例中,分别从动态图像D、动态图像E和动态图像F中提取场景D-2、场景D-3、场景D-5和场景D-8、场景E-2以及场景F-1和场景F-4。
在图中所示的示例中,脚本信息生成单元180根据上述的所提取的图像和场景生成两种脚本信息。一种是上文在图5A中也描述过的亮点脚本HS。亮点脚本HS是用于获得亮点动态图像的脚本,在该亮点动态图像中,被提取的图像和场景全部按顺序例如按时间序列等排列。
另一种是缩略脚本TS。缩略脚本TS是用于通过从以上所提取的图像和场景中进一步提取满足预定条件的图像和场景并将它们排列来获得缩略动态图像的脚本。在图中所示的示例中,从所提取的图像和场景中提取场景D-3和场景E-2以及图像D以构成缩略动态图像,场景D-3和场景E-2以及图像D是其中出现的人物F2和人物F3微笑程度高的图像和场景(被微笑符号标记)。
(使用脚本信息再现内容)
图6示出了使用例如图5A所示的处理中输出的脚本信息对内容进行再现的处理。图6所示的处理对应于参照图1描述的系统10中的内容观看客户端300的内容获取单元310的功能。另外,图中所示的处理对应于参照图2描述的操作中的访问内容(S10)和再现(S11)。
在图6所示的示例中,基于作为脚本信息的亮点脚本HS,定义了包括动态图像A的场景A-2、场景A-3和场景A-5以及动态图像B的场景B-2的亮点动态图像。获取亮点脚本HS的内容获取单元310对存储在例如内容服务器400中的动态图像A和动态图像B的内容实体进行访问,以获取包括由亮点脚本HS指定的场景的动态图像。此外,内容获取单元310将下述动态图像提供给显示控制单元320,该动态图像是通过经由查找和再现指定的场景、将所获取的场景如图中所示地在时间轴上排列而获得的,因此,亮点动态图像被显示在显示单元330上。
注意的是,这里,内容获取单元310可以通过例如从内容服务器400将动态图像A和动态图像B作为整体获取,并且通过在客户端侧执行动态图像的编辑处理,来再现亮点动态图像。或者,内容获取单元310可以将亮点脚本HS发送到内容服务器400,以使得在内容服务器400侧基于脚本来编辑动态图像,并且然后使用例如流媒体将动态图像提供到内容观看客户端300。
(4-2详述)
接下来,将参照图7至图10C来描述根据本公开内容的实施方式的共享服务器100中的处理的细节。图7是用于描述根据本公开内容的实施方式生成脚本信息以及缩略图像的图。图8是用于描述根据本公开内容的实施方式选择目标内容的图。图9A至图9D是用于描述根据本公开内容的实施方式生成缩略图像以及缩略脚本的图。图10A至图10C是用于描述根据本公开内容的实施方式生成亮点脚本的图。
(关于缩略图像和脚本信息的生成)
图7示出了下文中参照图8至图10C描述的全部处理的流程,并且图7的处理的附图标记(S101至S108)对应于图8至图10C中的每个处理的附图标记。
参照图7,首先,当一个图像或帧(事件代表图像)将被输出为缩略图像时,内容提取单元140选择目标内容(S101),并且帧/场景提取单元160提取所提取的目标内容的得分(score)(S102)。基于结果,缩略图像提取单元170选择事件代表图像(S103)。
另外,当由多个图像或帧组成的动画(翻动缩略图)将被输出为缩略图像时,帧/场景提取单元160以与在事件代表图像的情况下相同的方式提取目标内容的得分(S102),并且然后缩略图像提取单元170生成翻动缩略图(S104)。
另一方面,当要生成缩略脚本时,帧/场景提取单元160以与在上述两种情况下相同的方式提取目标内容的得分(S102),并且然后进一步执行场景剪辑A的处理(S105)。基于结果,脚本信息生成单元180生成缩略脚本(S106)。
另外,当要生成亮点脚本时,内容提取单元140选择目标内容(S101),并且然后帧/场景提取单元160执行场景剪辑B的处理(S107)。基于结果,脚本信息生成单元180生成亮点脚本(S108)。
(关于目标内容的选择)
图8是更详细地示出由内容提取单元140选择目标内容(S101)的示例的图。在图中所示的示例中,以与以上图5B的示例中相同的方式,将作为第一输入的人物F2和人物F3的信息(目标内容的信息)分别给予作为第二输入的属于事件I1的六个内容块:图像A至图像C以及动态图像D至动态图像F。
在目标内容的选择(S101)中,从作为输入给予的内容中获得其中出现作为对象的人物F2和人物F3的内容块。内容提取单元140从例如内容信息获取单元110获取出现在图像A至图像C中的每个图像中的对象的信息块,并且检测作为对象出现的人物F2(花子)和人物F3(太郎)。在图中所示的示例中,检测出:人物F2(花子)出现在图像A中,并且人物F2(花子)和人物F3(太郎)两者都出现在图像C中。
另一方面,内容提取单元140从动态图像D至动态图像F的每个中获取预定帧率的捕获的图像(帧),从例如内容信息获取单元110获取帧中的每个中出现的对象的信息块,并且检测作为对象出现的人物F2和人物F3。在图中所示的示例中,作为以1fps(帧/秒)的帧率获取所捕获的图像的结果,检测出:人物F2(花子)出现在动态图像D的帧D#1中,人物F3(太郎)出现在帧D#3中,并且人物2(花子)和人物F3(太郎)两者都出现在帧D#9和帧D#10中。另外,检测出:人物F2(花子)出现在动态图像F的帧F#1和帧F#5中。
作为以上所描述的检测的结果,内容提取单元140选择其中出现人物F2(花子)和人物F3(太郎)中的至少任意一个的图像A和图像C以及动态图像D和动态图像F四个来作为内容块。另一方面,其中人物F2(花子)和人物F3(太郎)均未出现的图像B和动态图像E不被用于后续的缩略图像和脚本信息的生成。然而,不必将图像B和动态图像E限制为不必要的内容块。例如,当另一个对象(例如,花子的朋友)出现在动态图像E中,并且目标用户是花子的朋友或花子自己时,可以通过内容提取单元140选择动态图像E。
(关于缩略图像和缩略脚本的生成)
图9A是更详细示出由帧/场景提取单元160提取得分(S102)的示例的图。在图中所示的示例中,作为上述图8的示例的继续,由内容提取单元140选择的图像A和图像C以及动态图像D和动态图像F被作为输入给出。
在得分提取(S102)中,针对作为输入给出的内容块,通过预定的标准设置以内容块为单位的得分。在图中所示的示例中,所包括的作为目标对象的人物F2(花子)和人物F3(太郎)的微笑程度(由带有微笑符号的数字指示)被提取,以作为每个内容块的得分。注意的是,为了检测微笑程度,相关技术中的所有技术都是适用的,例如在日本未经审查的专利申请公开No.2008-311819中公开的技术。
在图中所示的示例中,帧/场景提取单元160针对图像A和图像C,照原样检测微笑程度,并且将微笑程度设置为内容块的得分。另一方面,针对动态图像D和动态图像F,以与在内容提取单元140中的处理相同的方式来获取以预定帧率捕获的图像(帧),并且针对其中出现目标对象的帧执行微笑程度的检测。换言之,在图中所示的示例中,在以1fps的帧率获取的捕获的图像中,针对动态图像D的帧D#1、帧D#3、帧D#9和帧D#10以及动态图像F的帧F#1和帧F#5执行微笑程度的检测。帧/场景提取单元160将帧中的每个帧中获取的微笑程度中最高的程度设置为每个动态图像的内容块的得分。
另外,在图中所示的示例中,当目标对象是多个时,帧/场景提取单元160针对目标对象中的每个来执行微笑程度的检测。换言之,针对其中人物F2(花子)和人物F3(太郎)都出现的图像C以及动态图像D的帧D#9和帧D#10,帧/场景提取单元160检测人物F2(花子)和人物F3(太郎)两者的微笑程度。以这种方式检测的微笑程度例如被表示为图像C的“70/30”。这表示人物F2(花子)的微笑程度为70而人物F3(太郎)的微笑程度为30。
基于如上所描述的得分提取的结果,帧/场景提取单元160决定内容块中的每个的得分。另外,当内容块是动态图像时,帧/场景提取单元160可以将对应于得分的帧设置为内容块的代表帧。在图中所示的示例中,帧/场景提取单元160分别作如下设置:针对图像A设置人物F2(花子)的微笑程度为10;针对图像C设置人物F2(花子)/人物F3(太郎)的微笑程度为70/30;针对动态图像D设置人物F2(花子)以及代表帧D#1的微笑程度为100;以及针对动态图像F设置人物F3(太郎)以及代表帧F#5的微笑程度为80。
注意的是,由于在此提取的得分和代表帧影响显示为例如缩略图的图像和动态图像的选择,因此,帧/场景提取单元160可以例如考虑到对象之间的平衡来调整设置。例如,帧/场景提取单元160可以优先地选择其中包括人物F2(花子)和人物F3(太郎)两者的帧作为代表帧。在这种情况下,例如在动态图像D中,其中人物F2(花子)和人物F3(太郎)都出现的帧D#9或帧D#10,而不是具有高微笑程度的其中人物F2(花子)单独出现的帧D#1,被设置为代表帧,并且人物F2(花子)/人物F3(太郎)的微笑程度50/90被设置为该内容块的得分。
图9B是更详细地示出由缩略图像提取单元170选择事件代表图像(S103)以及生成翻动缩略图(S104)的示例的图。在图中所示的示例中,作为以上所描述的图9A的示例的继续,由帧/场景提取单元160设置的内容块(图像A和图像C、以及动态图像D和动态图像F)的得分和代表帧的信息被作为输入给出。
在事件代表图像的选择(S103)中,具有由帧/场景提取单元160设置的最高得分的图像或动态图像的帧被设置为事件的代表图像。在图中所示的示例中,动态图像D的代表帧D#1中的人物F2(花子)的微笑程度100是最高得分。因此,缩略图像提取单元170选择该帧D#1作为事件I1(运动会)的代表图像。如上所述,这样的事件代表图像可以在例如内容观看客户端300中与事件信息一起显示。
另一方面,在翻动缩略图的生成(S104)中,下述动画被生成,通过该动画,由帧/场景提取单元160设置得分的动态图像的代表帧和图像按顺序地显示。在图中所示的示例中,在翻动缩略图中,图像A、动态图像D的帧D#1(代表帧)、图像C以及动态图像F的帧F#5(代表帧)每5秒按顺序地显示。注意的是,图像中的每个被显示的时间可以不必为5秒。另外,这些图像可以重复地显示。以与事件代表图像相同的方式,翻动缩略图也可以在例如内容观看客户端300中与事件信息一起显示。
图9C是更详细地示出由帧/场景提取单元160进行场景剪辑A的处理(S105)的示例的图。在图中所示的示例中,作为以上所描述的图9A的示例的继续,由帧/场景提取单元160设置的内容块(图像A和图像C、以及动态图像D和动态图像F)的得分和代表帧的信息被作为输入给出。
在场景剪辑A的处理(S105)中,针对动态图像(动态图像D和动态图像F)的内容,代表帧之前和之后的片段被剪辑出来作为代表场景。在图中所示的示例中,例如,设置以下作为场景剪辑的规则。
●当其中出现目标对象的帧是连续的时,这些帧被看做整体的帧群。
●当其中出现目标对象的帧与其中出现目标对象(可以出现不同的目标对象)的下一帧之间的时间间隔短于或等于2秒时,这些帧可以被看做作整体的帧群。
●包括其中出现目标对象的帧或帧群之前和之后1秒的片段被剪辑出来作为一个场景。
●当一个场景的时间被设置为最小是三秒,并且其中出现目标对象的帧是首帧或尾帧时,包括帧之前和之后两秒的片段被剪辑出来。
在图中所示的示例中,由于场景剪辑的单位被设置为一秒,所以可以以与在上述目标内容的选择等中相同的方式,使用以1fps的帧率获取的被捕获图像来确定场景剪辑。例如,当场景剪辑的单位被设置为0.1秒时,可以使用以10fps的帧率获取的被捕获图像来执行场景剪辑的确定。
对于动态图像D,由于首帧D#1为代表帧,所以从帧D#1开始三秒的片段,换言之,帧D#1至帧D#3被设置为代表场景D#1。另外,对于动态图像F,由于中间的帧F#5是代表帧,所以包括帧F#5之前一秒和之后一秒的三秒的片段,换言之,帧F#4至帧F#6被设置为代表场景F#5。
注意的是,如上所述使用预定帧率的被捕获图像来设置代表场景的范围,但是实际的代表场景是对应于被捕获图像的动态图像的片段。换言之,代表场景D#1不被当作三个帧,而是例如由从帧D#1至帧D#3的一连串帧的整体组成的动态图像的部分。
通过将如上所述的在场景剪辑A的处理中获取的动态图像D和动态图像F的各自的代表场景D#1和代表场景F#5,以及在目标内容的选择(S101)中选择的图像A和图像C,以例如时间序列进行排列来获得缩略动态图像。
图9D是更详细地示出由脚本信息生成单元180生成缩略脚本(S106)的示例的图。在图中所示的示例中,作为以上所描述的图9C的示例的继续,图像A和图像C以及动态图像D和动态图像F各自的代表场景D#1和代表场景F#5被作为输入给出。
脚本信息生成单元180通过将这些内容块例如以时间序列进行排列来定义缩略动态图像。另外,脚本信息生成单元180生成对应于缩略动态图像的缩略脚本TS。与例如上述亮点脚本HS的示例同样地,缩略脚本TS可以是xml格式的文件,其指示内容的地址以及场景的开始位置和结束位置,但是文件的格式并不限于此。
生成的缩略脚本TS被输出到内容观看客户端300。通过由内容观看客户端300的内容获取单元310根据缩略脚本TS来获取内容,如图中所示地再现了缩略动态图像。
在图中所示的缩略动态图像的示例中,在图像A被显示了三秒之后,场景D#1被再现,进一步图像C被显示了三秒,最后场景F#5被再现。注意的是,在缩略动态图像中,图像被显示的时间可以不必为三秒,但是在图中所示的示例中,因为场景D#1和场景F#5的长度都为三秒,所以根据时间图像A和图像C也显示三秒。另外,缩略图像可以被重复再现。
另外,如图中所示,缩略图像例如可以在内容观看客户端300中与事件信息(事件细节)一起显示,但是此时,包括在内容中的对象(出现的人物)的信息可以一起显示。在图中所示的示例中,显示了人物F2和人物F3的脸。
(关于亮点脚本的生成)
图10A是更详细地示出由帧/场景提取单元160进行场景剪辑B的处理(S107)的示例的图。在图中所示的示例中,作为以上所描述的图8的示例的继续,由内容提取单元140选择的图像A和图像C以及动态图像D和动态图像F被作为输入给出。
在场景剪辑B的处理(S107)中,针对动态图像(动态图像D和动态图像F)的内容,其中出现目标对象的片段被剪辑出来作为代表场景。在图中所示的示例中,例如,设置以下作为剪辑场景的规则(与场景剪辑A中的规则之间的不同点用括号<>示出)。
●当其中出现目标对象的帧是连续的时,这些帧被看做整体的帧群。
●当其中出现目标对象的帧与其中出现目标对象(可以出现不同的目标对象)的下一帧之间的时间间隔短于或等于<5秒>时,这些帧可以被看做整体的帧群。
●包括其中出现目标对象的帧或帧群之前和之后<2秒>的片段被剪辑出来作为一个场景。
不同于为了简略地组织内容而生成的缩略动态图像,亮点动态图像被生成作为用户观看的对象。出于该原因,期望亮点动态图像包括足够的令观看内容的用户感兴趣的部分。因此,如以上示例中所描述的,场景剪辑的标准可以不同于缩略动态图像的场景剪辑的标准。
例如,在动态图像中,如果仅其中出现目标对象的帧被剪辑为场景,则存在下述可能性:生成断续的(fragmented)不自然的亮点动态图像。因此,在针对亮点动态图像的场景剪辑B的处理中,用于将其中出现目标对象的帧作为整体的帧群进行处理的帧的间隔以及一个场景的最短长度可以被设置成比在缩略动态图像中的长。因此,其中出现目标对象但没有被识别为人物的部分,例如,其中出现目标对象但在图像分析中未被识别的情况或者其中目标对象面朝后的情况等,可以被包括在待剪辑出的场景中。
在图中所示的示例中,根据以上所描述的规则,在动态图像D中,帧D#1和帧D#3被看做整体的帧群,而从帧D#1到帧D#3之后两秒的帧D#5的片段被剪辑为场景D#1。另外,帧D#9和帧D#10被看做整体的帧群,而从帧D#9之前两秒的帧D#7到帧D#10的片段被剪辑出来作为场景D#2。另一方面,在动态图像F中,帧F#1和帧F#5被看做整体的帧群,而从帧F#1到帧F#5之后两秒的帧F#7的片段被剪辑出来作为场景F#1。
注意的是,在此要被剪辑出来的场景的范围是通过如上所描述的预定帧率的被捕获图像来设置的,但是实际的场景是对应于被捕获图像的动态图像的片段。换言之,场景D#1不被视为是五个帧,而是例如由从帧D#1至帧D#5的一连串的帧的全体所组成的动态图像的部分。
图10B和图10C是更详细地示出由脚本信息生成单元180生成亮点脚本(S108)的示例的图。在图中所示的示例中,作为以上所描述的图10A的示例的继续,图像A和图像C、从动态图像D剪辑出来的场景D#1和场景D#2以及从动态图像F剪辑出来的场景F#1被作为输入给出。
如图10B所示,脚本信息生成单元180通过将内容块例如以时间序列进行排列来定义亮点动态图像。另外,脚本信息生成单元180生成对应于亮点动态图像的亮点脚本HS。亮点脚本HS例如可以是xml格式的文件,其指示内容的地址以及场景的开始位置和结束位置,但是文件格式不限于此。
如图10C所示,所生成的亮点脚本HS被输出到内容观看客户端300。内容观看客户端300的内容获取单元310通过根据亮点脚本HS获取内容来生成如图中所示的亮点动态图像。
在如图中所示的亮点动态图像的示例中,在图像A显示了三秒之后,再现场景D#1,然后再现场景D#2,图像C显示三秒,最后再现场景F#1。注意的是,在亮点动态图像中,图像被显示的时间可以不必为三秒。例如可以根据要包括在一起的动态图像的场景的长度或者整个亮点动态图像的长度来动态地设置图像被显示的时间。注意的是,由于亮点动态图像是在例如由用户基于自身的意愿选择之后被观看的,因此不同于缩略动态图像,在许多情况下亮点动态图像是不被重复再现的。
(5.内容观看期间的显示)
接下来,将参照图11至图13D描述根据本公开内容的实施方式的内容观看期间的显示。图11是用于描述根据本公开内容的实施方式的内容观看期间的整体显示的图。图12是示出根据本公开内容的实施方式的普通模式再现画面的示例的图。图13A至图13D是示出根据本公开内容的实施方式的亮点模式再现画面的示例的图。
参照图11,在本公开内容的实施方式中,例如,登录画面1100、事件目录画面1200、普通模式再现画面1300以及亮点模式再现画面1400在内容观看期间被显示。例如可以通过内容观看客户端300和显示控制单元320来将这些显示显示在显示单元330上。
例如,当用户开始在内容观看客户端300观看共享内容时,首先显示控制单元320使显示单元330显示登录画面1100。例如,如图中所示,登录画面1100具有ID和密码的输入区域。使用登录画面,用户登录到提供例如内容共享的服务的账户。因此,例如共享服务器100可以识别哪个目标用户正在使用内容观看客户端300。
当用户成功登录时,显示事件目录画面1200。事件目录画面1200例如是将由共享服务器100的事件信息生成单元150生成的事件信息作为列表显示的画面。事件目录画面例如可以将由缩略图像提取单元170生成的事件代表图像或翻动缩略图、或者根据由脚本信息生成单元180生成的缩略脚本获取的缩略动态图像,连同事件信息一起显示。在这种情况下,可以基于例如内容观看客户端300的描绘性能来决定要显示事件代表图像翻动缩略图或者缩略动态图像中的哪个。
在此,显示在事件目录画面1200上的事件可以对应于具体事件,例如,如图中所示的“运动会”、“生日”、“家庭旅行”等,或者可以简单地对应于拍照日期的范围,如“2008年5月8日至2008年5月9日”。由于内容不必限于在具体事件期间拍摄的内容,所以在图中所示的示例中,可以由拍照日期的范围来定义事件。
另外,在事件目录画面1200上,用于识别提供内容的用户的信息可以与事件名称(或日期)一起显示。在图中所示的示例中,作为用于识别提供内容的用户的信息,显示了电子邮箱地址,如aaa@bb.cc,但是该信息不限于此,例如,可以显示用户ID、昵称等。
当用户使用操作单元340在事件目录画面1200上选择任意事件时开始对应于该事件的内容的再现。这里被再现的内容例如是根据由共享服务器100的脚本信息生成单元180生成的亮点脚本获取的亮点动态图像。
在图中所示的示例中,首先,内容被再现在普通模式再现画面1300上。在此,当用户使用操作单元340执行例如模式切换的操作时,在继续再现内容的同时,显示变成亮点模式再现画面1400。在此,通过其显示内容的进度的进度条的显示在普通模式再现画面1300与亮点模式再现画面1400之间是不同的。将在以下部分中更详细地描述该进度条的显示。
当用户使用操作单元340在普通模式再现画面1300或亮点模式再现画面1400上指示例如再现结束时,内容的再现结束,并且显示返回到事件目录画面1200。
(普通模式再现画面)
图12示出了普通模式再现画面的示例。在普通模式再现画面1300上,显示一般的进度条1310。注意的是,对于进度条1310,相关技术中的所有技术都是适用的,如在例如日本未经审查的专利申请公开No.2008-67207中公开的技术。在图中所示的示例中,进度条1310显示整个再现内容。在进度条1310中,以不同的颜色来显示已经被再现的部分和还没有被再现的部分。不同颜色的界线对应于目前正在再现的部分。用户可以通过使用操作单元340选择进度条1310的任意位置来跳到内容中的任意位置。
(亮点模式再现画面)
图13A示出了亮点模式再现画面的示例。在亮点模式再现画面1400上显示进度条1410,进度条1410特别适合于再现亮点内容,例如亮点动态图像。在此,亮点内容是下述内容:其包括原始内容中所包括的片段中的被再现的部分(第一片段)和未被再现的其他部分(第二片段)。
当这样的亮点内容被再现时,例如,存在下述情况:用户也期望观看被剪辑的部分。在这样的情况下,例如,如果被剪辑的部分没有显示在进度条上,则用户难以识别被剪辑的部分(难以确定用户期望观看的部分是已经被剪辑掉还是本来就没有被包括)。然而,如果进度条被显示为包括所有被剪辑的部分,则进度条变得包括许多无意义的部分(除非用户期望观看它们否则将不会被再现的部分),并且显示变得不方便。
因此,在该实施方式中,通过显示特别适合于再现亮点内容的进度条1410,即使在这样的情况下,用户也能够更加舒适地观看内容。
进度条1410包括+按钮1411和-按钮1412。另外,在亮点模式再现画面1400上,还显示了再现位置显示1420和人物显示1430。
首先,进度条1410与显示在普通模式的画面上的进度条1310的不同在于:前者不必显示待显示的全部内容。进度条1410随着内容的再现从右向左流动,以使得目前正在被再现的部分与再现位置显示1420(该位置被固定)一致(中心聚焦)。因此,稍后将描述的设置在进度条1410上的+按钮1411和-按钮1412从进度条1410的右端出现,经过再现位置显示1420的位置,流动到进度条1410的左端,然后消失,除非用户在再现内容的状态下特别地操作它们。
(+按钮和-按钮)
接下来,将参照图13B进一步描述显示在进度条1410上的+按钮1411和-按钮1412。
+按钮1411是指示在再现内容中存在剪辑部分的按钮。如上所述,在图中所示的示例中再现的内容例如是根据由脚本信息生成单元180生成的亮点脚本获取的亮点动态图像。亮点动态图像例如包括如图10B的示例中所示的没有在动态图像中被提取为场景的部分。
在此,假定用户使用操作单元340按下例如+按钮1411。然后,+按钮1411变为-按钮1412,并且显示由+按钮1411指示的内容的被剪辑部分CUT。在图13A和图13B中,-按钮1412的两侧上的以不同于其他部分的颜色显示的部分是被剪辑部分CUT。被剪辑部分CUT指示在原始内容中没有被再现为亮点动态图像的部分(第二片段)。为此,用不同于进度条1410的其他部分的外观,例如以不同的颜色,来显示被剪辑部分CUT。
因此,在进度条1410中,除了被剪辑部分CUT之外的部分可以由指示内容的第一片段的第一条来表示,而被剪辑部分CUT可以由延续第一条显示并且指示第二片段的第二条来表示。因此,+按钮1411也被称为图标,该图标代替第二条显示在第一条上,来指示第二片段没有被再现。
与-按钮1412一起显示的被剪辑部分CUT不仅被显示,而且实际上也被再现。例如,当按下位于进度条1410上的再现位置显示1420的右侧的+按钮1411时,对应于该+按钮1411的被剪辑部分被显示为被剪辑部分CUT,并且当被剪辑部分CUT到达再现位置显示1420的位置时,内容被再现成包括起初已经被剪辑的部分。
以上操作根据下述方式是可能的,例如,由内容观看客户端300的内容获取单元310根据经由操作单元340获取的按下+按钮1411的操作,从内容服务器400中新获取已经被剪辑的内容的部分的数据,使得该数据被提供给显示控制单元320。
通过以上所描述的操作,要被再现的内容的总长度延长。然而,进度条1410的整体本来不对应于内容的总长度,并且是中心聚焦的。由于该原因,在图13A的示例中,例如,即使再现位置显示1420的左侧的+按钮1411变为-按钮1412,并且被剪辑部分CUT附加地显示在-按钮1412的两侧,仅进度条1410上的被剪辑部分CUT的左侧的部分(未被剪辑的部分)的一些没有被显示,并且显示位置,例如显示在再现位置显示1420的右侧的另一个+按钮1411没有改变。
另一方面,例如,当用户使用操作单元340按下-按钮1412时,-按钮1412变为+按钮1411,并且显示在-按钮1412的两侧的被剪辑部分CUT不再显示。在这种情况下,被剪辑部分没有被再现为例如原始亮点动态图像。另外,在这种情况下,待再现的内容的总长度缩短。然而,如上所述,由于进度条1410的整体本来不对应于内容的总长度,并且是中心聚焦的,所以-按钮1412到+按钮1411的变化不影响例如进度条1410上的再现位置显示1420的相对侧的区域的显示。
注意的是,在以上所描述的示例中,由于亮点动态图像被设置为以初始设置进行再现,因此在再现的开始期间,不包括被剪辑部分的内容预定被再现。此时,在进度条1410上,没有显示被剪辑部分CUT以及-按钮1412,并且针对内容的全部被剪辑部分显示+按钮1411。
(人物显示)
接下来,将还参照图13C进一步描述显示在亮点模式再现画面1400上的人物显示1430的示例。人物显示1430指示在内容共享设置中与目标用户(图中所示的示例中观看内容的用户)相关联的目标对象(人物)出现的内容的位置。
在图13C的示例中,人物显示1430被显示在人物中的每个开始出现的内容的位置。例如,人物显示1430a被显示在人物P1(花子)和人物P2(太郎)第一次出现的位置。由于该原因,人物显示1430a包括人物P1(花子)的显示和人物P2(太郎)的显示。另外,人物显示1430b被显示在人物P3(次郎)第一次出现并且人物P1(花子)和人物P2(太郎)先消失然后再次开始出现的位置。由于该原因,人物显示1430b包括人物P1(花子)的显示、人物P2(太郎)的显示以及人物P3(次郎)的显示。
另一方面,人物显示1430c被显示在人物P1(花子)先消失然后再次开始出现的位置。在此,由于人物P2(太郎)和人物P3(次郎)从前一个人物显示1430b被显示的时间点处连续出现,所以他们没有被包括在人物显示1430c中。因此,人物显示1430c仅包括人物P1(花子)的显示。另外,人物显示1430d被显示在人物P2(太郎)和人物P3(次郎)先消失然后再次开始出现的位置。在此,由于P1(花子)从前一个人物显示1430c被显示的时间点处连续出现,所以她没有被包括在人物显示1430d中。因此,人物显示1430d仅包括人物P2(太郎)的显示和人物P3(次郎)的显示。
使用如上所描述的人物显示1430,例如,观看内容的用户能够识别人物中的每个开始出现的时刻。以这种方式,通过显示出现的时刻,而不是出现的片段,可以在例如当用户观看内容并且人物P从内容中消失而用户想要找到人物P再次出现的位置的情况下满足用户的需要。
作为另一个示例,人物显示1430可以被显示在组成正在被再现的亮点动态图像的每个场景或静态图像中。如上所述,亮点动态图像是由其中出现目标对象的场景或静态图像组成的。因此,在许多情况下,出现的目标对象在每个场景或静态图像中是变化的。由于该原因,通过在由+按钮1411划界的每个场景或静态图像中显示人物显示1430,用户能够得知在每个场景或静态图像的显示中出现哪个目标对象。在场景的情况下,例如,人物显示1430可以显示在场景的开始位置(+按钮1411的位置),或者显示在场景的中间位置(前侧和后侧的+按钮1411的中间)。
注意的是,通过设置例如脚本播放器应用(参照图2),可以对人物显示1430的显示或者不显示进行切换。另外,当用户经由操作单元340选择人物显示1430时,例如,再现片段可以跳到所选择的人物显示1430的位置。
另外,作为人物显示1430的另一个示例,如图13D所示,当经由操作单元340等选择进度条1410上的任意位置时,可以显示下述人物显示1430:其包括在对应于内容的该位置的部分中出现的人物P的显示。即使例如当通过设置脚本播放器应用将人物显示1430设置为不显示时,这种显示也是可能的。
(6.补充)
(另一个实施方式)
注意的是,以上参照图2描述的系统的操作在例如以下参照图14描述的另一个实施方式中也是可能的。图14是用于描述根据本公开内容的另一个实施方式的系统的操作的图。注意的是,在该实施方式中,由于系统的功能配置与上述的实施方式中的功能配置相同,因此将不在重复其详细描述。
图14示出了与图2中所描述的步骤S1至步骤S11相同的操作。然而,在该实施方式中,以多个服务器的分布式方式来执行操作中的每个。在图中所示的示例中,在应用服务器上执行关于客户端侧的应用的处理。另外,执行内容分析(S3)的分析服务器和执行脚本创建(S8)的脚本创建服务器等是独立的服务器。在这种情况下,可以设置分析连接器服务器以用于服务器之间的元信息的输入(S4)。
注意的是,以上参照图2和图14所描述的所有操作仅是本公开内容的实施方式的示例。换言之,图2和图14两者都仅示出了例如如图1所示的本公开内容的功能配置的安装示例。如上所述,本公开内容的功能配置可以由例如包括一个或多个服务器装置以及类似地一个或多个客户端装置的任意系统配置来实现。
(硬件配置)
接下来,将参照图15描述可以实现根据本公开内容的实施方式的共享服务器100、内容提供客户端200、内容观看客户端300、内容服务器400等的信息处理装置900的硬件配置。图15是用于描述信息处理装置的硬件配置的框图。
信息处理装置900包括CPU(中央处理单元)901、ROM(只读存储器)903以及RAM(随机存取存储器)905。另外,信息处理装置900可以包括主机总线907、桥接器909、外部总线911、接口913、输入装置915、输出装置917、存储装置919、驱动器921、连接端口923以及通信装置925。信息处理装置900可以具有处理电路例如DSP(数字信号处理器)来替代CPU 901,或者与CPU 901一起使用。
CPU 901用作算术处理装置以及控制装置,并且根据记录在ROM903、RAM 905、存储装置919或可移除的记录介质927上的各种程序对信息处理装置900中的操作中的所有操作或部分操作进行控制。ROM 903存储CPU 901所使用的程序、算术运算参数等。RAM 905主要存储用在CPU 901的执行中使用的程序、在执行中适当地改变的参数等。CPU 901、ROM 903和RAM 905经由使用CPU总线等的内部总线所配置的主机总线907而相互连接。主机总线907经由桥接器909连接到外部总线911,例如PCI(外围组件互连/接口)总线等。
输入装置915是由用户操作的装置,例如鼠标、键盘、触摸面板、按钮、开关、操纵杆等。输入装置915可以是例如使用红外线或另一种无线电波的遥控装置,或者可以是外部连接装置929,如跟随信息处理装置900的操作的移动电话。输入装置915包括基于由用户输入的信息生成输入信号并且将信号输出到CPU 901的输入控制电路。用户通过操作输入装置915向信息处理装置900输入各种数据或者指示处理操作。
输出装置917被配置成下述装置,该装置能够视觉地或听觉地将所获取的信息通知给用户。输出装置917例如可以是包括LCD(液晶显示器)、PDP(等离子体显示板)、有机EL(电发光)显示器等的显示装置;包括扬声器、耳机等的声音输出装置;打印机装置等。输出装置917能够将从信息处理装置900的处理中获得的结果输出为文本或视频例如图像、或输出为声音或包括音响的声音等。
存储装置919是用于存储数据的装置,被配置成是信息处理装置900的存储单元的示例。存储装置919被配置成例如是磁存储装置如HDD(硬盘驱动器)、半导体存储装置、光存储装置或磁光存储装置等。该存储装置919存储CPU 901执行的程序、各种数据以及外部获取的各种数据。
驱动器921是用于可移除的记录介质927例如磁盘、光盘、磁光盘、半导体存储器等的读取器/写入器,并且驱动器921被内置或外连到信息处理装置900。驱动器921读取记录在安装的可移除记录介质927上的信息并且将信息输出到RAM 905。另外,驱动器921对安装的可移除记录介质927进行写入。
连接端口923是用于直接将装置连接到信息处理装置900的端口。连接端口923例如可以是USB(通用串行总线)端口、IEEE 1394端口、SCSI(小型计算机系统接口)端口等。另外,连接端口923可以是RS-232C端口、光学音频终端、HDMI(高清晰度多媒体接口)端口等。通过将外部连接装置929连接到连接端口923,可以在信息处理装置900与外部连接装置929之间交换各种数据。
通信装置925是被配置成是例如用于连接到通信网络931的通信装置的通信接口。通信装置925例如可以是有线或无线LAN(局域网)、蓝牙(注册商标)、或用于WUSB(无线USB)的通信卡等。另外,通信装置925可以是用于光通信的路由器、用于ADSL(非对称数字用户线路)的路由器、或用于各种通信的调制解调器。通信装置925使用预定协议如TCP/IP等在例如因特网或其他通信装置之间发送或接收信号等。另外,连接到通信装置925的通信网络931是以有线或无线方式连接的网络,并且例如是因特网、家用LAN、红外通信、无线电通信、卫星通信等。
成像装置933是下述装置:其使用各种构件,例如成像元件如CCD(电荷耦合装置)或CMOS(互补金属氧化物半导体)、用于控制对象到成像元件上的图像形成的镜头等,对实际空间进行成像以生成所捕获的图像。成像装置933可以是对静态图像或动态图像进行成像的装置。
传感器935包括各种传感器,例如,加速度传感器、陀螺仪传感器、地磁传感器、光学传感器、声音传感器等。传感器935例如获取关于信息处理装置900自身的状态如信息处理装置900的壳体的姿态的信息、以及关于信息处理装置900的外围环境如信息处理装置900外围的亮度、噪声等的信息。另外,传感器935可以包括通过接收GPS(全球定位系统)信号来对装置的纬度、经度和海拔高度进行测量的GPS传感器。
在上文中,示出了信息处理装置900的硬件配置的示例。以上所描述的每个组元都可以使用通用的构件来配置,或者通过专用于每个组元的功能的硬件来配置。根据每次执行时的技术水平,配置可以被适当修改。
(实施方式的总结)
在本公开内容的实施方式中,针对内容的每个共享伙伴,设置可以是例如共享伙伴的感兴趣的目标的对象。根据该设置,共享服务器自动生成用于组成摘要内容的脚本。该摘要内容是通过组合例如对于共享伙伴有意义的场景或图像而获得的内容,并且在以上实施方式中例示为亮点动态图像。针对在上述设置完成后所添加的内容,共享服务器可以执行脚本的自动生成等。因此,在共享设置完成一次之后,提供内容的用户可以仅添加内容到共享目标,不需要特别的附加操作。
另外,可以生成缩略动态图像作为摘要内容。缩略动态图像是通过进一步总结对于共享伙伴有意义的场景或图像而获得的内容。亮点动态图像主要被提供用于共享伙伴的观看,而缩略动态图像例如与指示内容被拍摄的事件的信息一起呈现给共享伙伴,作为所谓的亮点动态图像的缩略,由此使得易于选择观看目标。
作为用于使得易于选择观看目标的信息,也可以显示缩略图像。在以上所描述的实施方式中,缩略图像已经被例示为内容代表图像和翻动缩略图。由于缩略图像是由单个图像(静态图像)或多个静态图像组成的动画,因此即使例如当客户端装置的图像处理能力低时,也能够被显示。
在以上所描述的实施方式中,共享服务器给客户端提供脚本信息,并且根据客户端侧的脚本生成摘要内容,例如亮点动态图像。然而,当客户端装置的图像处理能力低时或者通信状态稳定时,共享服务器或内容服务器可以根据脚本生成摘要内容,并且将内容提供给客户端。
另外,可以使用例如如上述的实施方式中示出的GUI来获取用于设置共享伙伴或与共享伙伴相关联的对象的操作。例如可以以下述方式来执行共享伙伴与对象的关联:共享伙伴和对象被显示为图标,并且进行用于关联图标中的每个图标的拖曳操作。因此,用户可以使用直观的操作来进行共享设置。
另外,当通过提取原始内容的部分(通过剪辑掉另外的部分)获得的内容如亮点动态图像等被观看时,例如,存在下述情况:用户观看被作为亮点动态图像提供的部分之后,还期望观看所提取内容之前和之后被剪辑的部分。在这样的情况下,如果可以提供下述GUI则用户可以舒适地体验观看内容,该GUI可以使用+按钮和-按钮等直观地显示被提取部分和被剪辑部分,并且通过操作这样的按钮做出改变以再现被剪辑的部分。
注意的是,在以上描述中,介绍了本公开内容的主要与信息处理装置有关的实施方式,但是,例如,这样的信息处理装置中的执行方法、用于实现信息处理装置中的功能的程序以及在其上记录这样的程序的记录介质也可以被实现为本公开内容的实施方式。
本领域的技术人员应该理解,取决于设计要求和其他因素,可以出现各种修改、组合、子组合及替换,只要各种修改、组合、子组合及替换在所附权利要求或者权利要求的等同方案的范围之内。
(1)一种显示控制装置,包括:
显示控制单元,其使包括第一片段和第二片段的内容的再现图像和指示内容的再现状态的再现状态显示显示在显示单元上,
其中,所述再现状态显示包括:指示所述第一片段的第一条,延续所述第一条显示并且指示所述第二片段的第二条,或第一图标,所述第一图标代替所述第二条被显示在所述第一条上,以指示所述第二片段没有被再现。
(2)根据(1)所述的显示控制装置,其中,当所述第一图标被选择时,所述显示控制单元使所述第二条被显示来代替所述第一图标。
(3)根据(2)所述的显示控制装置,其中,所述显示控制单元使不同于所述第一图标的第二图标显示在所述第二条上。
(4)根据(3)所述的显示控制装置,其中,当所述第二图标被选择时,所述显示控制单元使所述第一图标被显示来代替所述第二条。
(5)根据(2)至(4)中任一项所述的显示控制装置,还包括:
内容获取单元,当所述第一图标被选择时,所述内容获取单元新获取用于再现所述第二片段的数据,并且将所述数据提供给所述显示控制单元。
(6)根据(5)所述的显示控制装置,
其中,当所述内容的再现开始时,所述内容获取单元获取用于再现所述第一片段的数据,并且将所述数据提供给所述显示控制单元,以及
其中,当所述内容的再现开始时,所述显示控制单元使所述第一条和所述第一图标被显示。
(7)根据(1)至(6)中任一项所述的显示控制装置,其中,所述第一条和所述第二条不显示全部的所述内容。
(8)根据(1)至(7)中任一项所述的显示控制装置,其中,所述显示控制单元使所述第二条以与所述第一条不同的外观来显示。
(9)根据(8)所述的显示控制装置,其中,所述显示控制单元使所述第二条以与所述第一条不同的颜色来显示。
(10)根据(1)至(9)中任一项所述的显示控制装置,其中,所述再现状态显示还被显示在所述第一条上的至少第一位置处,并且包括对象显示,所述对象显示显示在对应于所述第一位置的部分处的所述内容中出现的对象。
(11)根据(10)所述的显示控制装置,其中,所述第一位置对应于所述对象开始出现的部分。
(12)根据(10)所述的显示控制装置,其中,所述第一位置对应于所述第一片段的开始位置。
(13)根据(10)所述的显示控制装置,其中,根据用户的操作来确定所述第一位置。
(14)一种显示控制方法,包括:
将包括第一片段和第二片段的内容的再现图像和指示所述内容的再现状态的再现状态显示显示在显示单元上,
其中,所述再现状态显示包括:第一条,其指示所述第一片段;第二条,其延续所述第一条显示,并且指示所述第二片段;或第一图标,其代替所述第二条被显示在所述第一条上,以指示所述第二片段没有被再现。
(15)一种信息处理装置,包括:
共享关联信息获取单元,其获取目标用户和目标对象的信息,所述目标用户是包括静态图像或动态图像的内容的共享伙伴,所述目标对象是与所述目标用户相关联的对象;
内容提取单元,其从所述内容中提取出现所述目标对象的内容,以作为目标内容;以及
脚本生成单元,其生成用于通过组合所述目标内容来组成摘要内容的脚本。
(16)根据(15)所述的信息处理装置,还包括:
场景提取单元,其从包括在所述目标内容中的动态图像中提取出现所述目标对象的部分,以作为目标场景,
其中,所述脚本生成单元生成用于通过组合所述目标场景来组成摘要内容的脚本。
(17)根据(16)所述的信息处理装置,其中,所述脚本生成单元生成用于通过组合所述目标场景和包括在所述目标内容中的静态图像来组成摘要内容的脚本。
(18)根据(16)或(17)所述的信息处理装置,
其中,所述场景提取单元从所述目标场景中选择相应动态图像的代表场景,以及
其中,所述脚本生成单元生成用于通过组合所述代表场景来组成摘要内容的脚本。
(19)根据(18)所述的信息处理装置,
其中,所述目标对象是人物,以及
其中,所述场景提取单元基于所述人物的微笑程度来选择所述代表场景。
(20)根据(15)至(19)中任一项所述的信息处理装置,还包括:
帧提取单元,其从包括在所述目标内容中的动态图像中提取出现所述目标对象的帧作为目标帧,并且从所述目标帧中选择相应动态图像的代表帧;以及
动画生成单元,其通过组合所述代表帧来生成所述目标内容的摘要动画。
(21)根据(20)所述的信息处理装置,其中,所述动画生成单元通过组合所述代表帧和包括在所述目标内容中的静态图像来生成所述摘要动画。
(22)根据(15)至(19)中任一项所述的信息处理装置,还包括:
帧提取单元,其从包括在所述目标内容中的动态图像中提取出现所述目标对象的帧作为目标帧,并且从所述目标帧中选择所述动态图像的代表帧;以及
代表图像选择单元,其从所述代表帧中选择所述目标内容的代表图像。
(23)根据(22)所述的信息处理装置,其中,所述代表图像选择单元从所述代表帧和包括在所述目标内容中的静态图像中选择所述代表图像。
(24)根据(15)至(23)中任一项所述的信息处理装置,还包括:
内容分类单元,其针对拍摄目标的每个事件来将所述内容分类,
其中,所述脚本生成单元针对所述事件中的每个生成所述脚本。
(25)根据(24)所述的信息处理装置,还包括:
事件信息生成单元,其生成事件信息,所述事件信息包括根据其生成所述脚本的事件的信息。
(26)根据(24)或(25)所述的信息处理装置,其中,所述共享关联信息获取单元还获取允许对所述目标用户公开的事件的信息。
(27)根据(15)至(26)中任一项所述的信息处理装置,其中,所述共享关联信息获取单元获取所述目标用户的组的信息以及与每个组相关联的所述目标对象的信息。
(28)根据(15)至(27)中任一项所述的信息处理装置,其中,所述脚本生成单元在获取所述目标用户和所述目标对象的信息之前,针对被设置为要共享的目标的内容生成所述脚本,并且在获取所述目标用户和所述目标对象的信息之后,针对被添加为要共享的目标的内容生成所述脚本。
(29)根据(15)至(28)中任一项所述的信息处理装置,其中,所述脚本生成单元将所述脚本输出到所述目标用户通过其观看所述摘要内容的外部装置。
(30)一种系统,包括:
第一客户端装置,其包括操作单元,通过所述操作单元,提供包括静态图像或动态图像的内容的第一用户获取设置作为所述内容的共享伙伴的第二用户和作为与所述第二用户相关联的对象的目标对象的操作;
服务器装置,其包括共享关联信息获取单元、内容提取单元以及脚本生成单元,其中所述共享关联信息获取单元获取所述第二用户和所述目标对象的信息,所述内容提取单元从所述内容中提取出现所述目标对象的内容作为目标内容,所述脚本生成单元生成并输出用于通过组合所述目标内容来组成摘要内容的脚本;以及
第二客户端装置,其包括内容获取单元,所述内容获取单元获取所输出的脚本,并且根据所述脚本从所述内容生成所述摘要内容以提供给所述第二用户。
(31)根据(30)所述的系统,
其中,所述第一客户端装置还包括显示控制单元,所述显示控制单元使指示候选对象的图标被显示在显示单元上,所述候选对象是所述目标对象的候选者,以及
其中,所述操作单元获取所述第一用户的操作以通过从所述图标中选择对应于期望的对象的图标来设置所述目标对象。
(32)一种信息处理方法,包括:
获取目标用户和目标对象的信息,所述目标用户是包括静态图像或动态图像的内容的共享伙伴,所述目标对象是与所述目标用户相关联的对象;
从所述内容中提取出现所述目标对象的内容作为目标内容;以及
生成用于通过组合所述目标内容来组成摘要内容的脚本。
本公开内容包含与2012年2月20日提交到日本专利局的日本优先权专利申请JP2012-033871,以及2012年2月20日提交到日本专利局的日本优先权专利申请JP2012-033872中公开的主题相关的主题,其全部内容通过引用合并到本文中。

Claims (13)

1.一种显示控制装置,包括:
显示控制单元,其使包括第一片段和第二片段的内容的再现图像和指示所述内容的再现状态的再现状态显示显示在显示单元上,
其中,所述再现状态显示包括:指示所述第一片段的第一条,延续所述第一条显示并且指示所述第二片段的第二条,或第一图标,所述第一图标代替所述第二条被显示在所述第一条上,以指示所述第二片段没有被再现,
其中,当所述第一图标被选择时,所述显示控制单元使所述第二条被显示来代替所述第一图标。
2.根据权利要求1所述的显示控制装置,其中,所述显示控制单元使不同于所述第一图标的第二图标显示在所述第二条上。
3.根据权利要求2所述的显示控制装置,其中,当所述第二图标被选择时,所述显示控制单元使所述第一图标被显示来代替所述第二条。
4.根据权利要求1所述的显示控制装置,还包括:
内容获取单元,当所述第一图标被选择时,所述内容获取单元新获取用于再现所述第二片段的数据,并且将该数据提供给所述显示控制单元。
5.根据权利要求4所述的显示控制装置,
其中,当所述内容的再现开始时,所述内容获取单元获取用于再现所述第一片段的数据,并且将该数据提供给所述显示控制单元,以及
其中,当所述内容的再现开始时,所述显示控制单元使所述第一条和所述第一图标被显示。
6.根据权利要求1所述的显示控制装置,其中,所述第一条和所述第二条不显示全部的所述内容。
7.根据权利要求1所述的显示控制装置,其中,所述显示控制单元使所述第二条以与所述第一条的外观不同的外观来显示。
8.根据权利要求7所述的显示控制装置,其中,所述显示控制单元使所述第二条以与所述第一条的颜色不同的颜色来显示。
9.根据权利要求1所述的显示控制装置,其中,所述再现状态显示还被显示在所述第一条上的至少第一位置处,并且包括对象显示,所述对象显示显示所述内容中对应于所述第一位置的部分处出现的对象。
10.根据权利要求9所述的显示控制装置,其中,所述第一位置对应于所述对象开始出现的部分。
11.根据权利要求9所述的显示控制装置,其中,所述第一位置对应于所述第一片段的开始位置。
12.根据权利要求9所述的显示控制装置,其中,根据用户的操作来确定所述第一位置。
13.一种显示控制方法,包括:
在显示单元上显示包括第一片段和第二片段的内容的再现图像和指示所述内容的再现状态的再现状态显示,
其中,所述再现状态显示包括:第一条,其指示所述第一片段;第二条,其延续所述第一条显示,并且指示所述第二片段;或第一图标,其代替所述第二条被显示在所述第一条上,以指示所述第二片段没有被再现,
其中,当所述第一图标被选择时,显示所述第二条来代替所述第一图标。
CN201310050767.0A 2012-02-20 2013-02-08 显示控制装置及显示控制方法 Expired - Fee Related CN103258557B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2012-033871 2012-02-20
JP2012033871A JP5870742B2 (ja) 2012-02-20 2012-02-20 情報処理装置、システムおよび情報処理方法
JP2012033872A JP2013171599A (ja) 2012-02-20 2012-02-20 表示制御装置および表示制御方法
JP2012-033872 2012-02-20

Publications (2)

Publication Number Publication Date
CN103258557A CN103258557A (zh) 2013-08-21
CN103258557B true CN103258557B (zh) 2017-08-15

Family

ID=48962426

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310050767.0A Expired - Fee Related CN103258557B (zh) 2012-02-20 2013-02-08 显示控制装置及显示控制方法

Country Status (2)

Country Link
US (1) US20130215144A1 (zh)
CN (1) CN103258557B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013003631A (ja) * 2011-06-13 2013-01-07 Sony Corp 情報処理装置、情報処理方法、情報処理システム、及びプログラム
JP6535323B2 (ja) * 2014-04-07 2019-06-26 株式会社ソニー・インタラクティブエンタテインメント ゲーム動画配信装置、ゲーム動画配信方法、ゲーム動画配信プログラム
KR20150122510A (ko) 2014-04-23 2015-11-02 엘지전자 주식회사 영상 표시 장치 및 그것의 제어방법
JP6687638B2 (ja) 2015-10-27 2020-04-22 任天堂株式会社 情報処理システム、サーバ、情報処理装置、情報処理プログラム、および、情報処理方法
WO2017072856A1 (ja) 2015-10-27 2017-05-04 任天堂株式会社 情報処理システム、サーバ、情報処理装置、情報処理プログラム、および、情報処理方法
KR20200101048A (ko) * 2019-02-19 2020-08-27 삼성전자주식회사 영상을 처리하는 전자 장치 및 그 영상 처리 방법
JP7295333B2 (ja) 2020-03-09 2023-06-20 オリンパス株式会社 画像記録システム、画像記録方法及びraw画像データ作成プログラム

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101681665A (zh) * 2006-12-22 2010-03-24 苹果公司 视频段的快速创建

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004505363A (ja) * 2000-07-25 2004-02-19 アメリカ オンライン インコーポレーテッド ビデオ・メッセージング
JP4765155B2 (ja) * 2000-09-28 2011-09-07 ソニー株式会社 オーサリング・システム及びオーサリング方法、並びに記憶媒体
US20060098941A1 (en) * 2003-04-04 2006-05-11 Sony Corporation 7-35 Kitashinagawa Video editor and editing method, recording medium, and program
JP4894252B2 (ja) * 2005-12-09 2012-03-14 ソニー株式会社 データ表示装置、データ表示方法及びデータ表示プログラム
US9773525B2 (en) * 2007-08-16 2017-09-26 Adobe Systems Incorporated Timeline management
JP4466724B2 (ja) * 2007-11-22 2010-05-26 ソニー株式会社 単位映像表現装置、編集卓装置
JP5066037B2 (ja) * 2008-09-02 2012-11-07 株式会社日立製作所 情報処理装置
US8666223B2 (en) * 2008-09-25 2014-03-04 Kabushiki Kaisha Toshiba Electronic apparatus and image data management method
US9852761B2 (en) * 2009-03-16 2017-12-26 Apple Inc. Device, method, and graphical user interface for editing an audio or video attachment in an electronic message
US8562403B2 (en) * 2010-06-11 2013-10-22 Harmonix Music Systems, Inc. Prompting a player of a dance game

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101681665A (zh) * 2006-12-22 2010-03-24 苹果公司 视频段的快速创建

Also Published As

Publication number Publication date
CN103258557A (zh) 2013-08-21
US20130215144A1 (en) 2013-08-22

Similar Documents

Publication Publication Date Title
CN103258557B (zh) 显示控制装置及显示控制方法
JP5870742B2 (ja) 情報処理装置、システムおよび情報処理方法
CN102595228B (zh) 内容同步设备和方法
JP5903187B1 (ja) 映像コンテンツ自動生成システム
US20100042926A1 (en) Theme-based slideshows
US20060039674A1 (en) Image editing apparatus, method, and program
WO2021135334A1 (zh) 处理直播内容的方法、装置、系统
US20120249575A1 (en) Display device for displaying related digital images
JP2004357272A (ja) ネットワーク拡張可能・再構成可能メディア装置
US8943020B2 (en) Techniques for intelligent media show across multiple devices
US20060050166A1 (en) Digital still camera
KR20170011177A (ko) 디스플레이 장치 및 그 제어 방법
US20110305437A1 (en) Electronic apparatus and indexing control method
US9973649B2 (en) Photographing apparatus, photographing system, photographing method, and recording medium recording photographing control program
CN114296949A (zh) 一种虚拟现实设备及高清晰度截屏方法
JP2013171599A (ja) 表示制御装置および表示制御方法
CN105814905A (zh) 用于使使用信息在装置与服务器之间同步的方法和系统
US20110304644A1 (en) Electronic apparatus and image display method
JP2006166208A (ja) コマ分類情報付与装置及びプログラム
US9201947B2 (en) Methods and systems for media file management
JP6043753B2 (ja) コンテンツ再生システム、サーバ、携帯端末、コンテンツ再生方法、プログラムおよび記録媒体
WO2017094800A1 (ja) 表示装置、表示プログラムおよび表示方法
WO2017022296A1 (ja) 情報管理装置及び情報管理方法、並びに映像再生装置及び映像再生方法
US12106561B2 (en) Information processing device, information processing method, and program
US20140153836A1 (en) Electronic device and image processing method

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20170815

Termination date: 20220208