CN102342128A - 书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质 - Google Patents

书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质 Download PDF

Info

Publication number
CN102342128A
CN102342128A CN2010800105094A CN201080010509A CN102342128A CN 102342128 A CN102342128 A CN 102342128A CN 2010800105094 A CN2010800105094 A CN 2010800105094A CN 201080010509 A CN201080010509 A CN 201080010509A CN 102342128 A CN102342128 A CN 102342128A
Authority
CN
China
Prior art keywords
content
bookmark
characteristic information
replacement
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010800105094A
Other languages
English (en)
Inventor
户谷智之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN102342128A publication Critical patent/CN102342128A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/16Analogue secrecy systems; Analogue subscription systems
    • H04N7/173Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309Transmission or handling of upstream communications
    • H04N7/17318Direct or substantially direct transmission and handling of requests
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47214End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for content reservation or setting reminders; for requesting event notification, e.g. of sport results or stock market
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Finance (AREA)
  • Strategic Management (AREA)
  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明的书签利用装置具备:特征信息提取部(64),从至少含有用于取得内容的内容取得地址以及用于对上述内容的内在内容进行表达的特征信息的书签中,提取上述特征信息;代替内容检索部(65),根据所被提取的特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检索拥有与上述内容的内在内容相类似或相当的内在内容的代替内容。因此,本发明具有以下效果:能够检索在内容性上与登录于书签的内容相当的其他所能够访问的代替内容的获取场所。

Description

书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质
技术领域
本发明涉及用以在不同装置间进行内容共有以及内容的书签的共有的书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质。
背景技术
就现有技术中的内容重放装置而言,为了在重放动画等内容时效率化地找出期望的场面、网页,或为了在再次重放中断了的内容时效率化地找出中断部分,而在该内容重放装置中装有向所述部分赋予书签(bookmark)并进行管理的功能。该功能具体例如通过万维网浏览器的功能来实现。书签借助浏览器功能而得到登录,并被广泛运用。
此外,所被登录的书签介助通信方案被发送给其他装置,或被上传到互联网中的服务器以供其他装置访问,从而与其他装置共有书签以及内容(contents)。这在公众书签服务中正得以广泛运用。
例如,在专利文献1及2中揭示了在多个装置间共有内容以及书签的技术。
专利文献1揭示了一种录像重放装置,其对动画内容进行录像,且在向所录像的动画内容的重放位置赋予书签时,使该书签与录像实际时刻构成对应关系。与录像实际时刻构成对应关系的书签在装置间被共有,因此对同一动画作了录像的其他录像重放装置便能够直接从被上述录像重放装置标上书签的重放位置开始,来进行重放。
然而上述专利文献1的发明的前提在于不同装置在同一时刻对同一动画内容(广播节目等)进行录像并保存。因此,专利文献1并不适用于对如IP电视(IPTV)、影视点播(VoD:Video on Demand)等这类由各个装置介由互联网以任意定时(timing)取得的内容,来进行书签共有的这种使用例。
另外,在专利文献2揭示的系统及方法中,由书签管理服务器来管理书签,多个装置通过互联网访问书签管理服务器来共有书签信息。在专利文献2记载的技术,能够按每个装置的URL来管理书签信息,从而提供与每个装置对应存储的URL。由于各装置利用的是书签信息中包含的与装置类别相匹配的URL,因此即使每个装置所能显示的万维网页内容不同,也能够共有书签信息以及内容。
〔现有技术文献〕
专利文献1:日本国专利申请公开,“特开2006-60867号公报”(2006年3月2日公开)
专利文献2:日本国专利申请公开,“特开2003-67328号公报”(2003年3月7日公开)。
发明内容
然而专利文献1以及2的技术有以下问题。具体为,在发生了不能根据登录的书签中所含的URL等地址来访问内容的状况时,无法对该状况进行处理。这对于即使能够共有书签也无法取得目标内容的用户而言,该书签便毫无价值。
关于导致发生上述状况的使用例,例如有在IPTV服务、VoD服务中,对应请求而分别由各种服务提供业者的不同服务器来向该业者的顾客即用户装置分发相同内容(contents)的用例。更具体为,由于用户向服务提供业者的服务器所请求的内容属于该内容的著作权所有者,且服务提供者是得到分发权后才分发上述内容的,因此,该内容在网络中的场所分散在获有分发权的服务提供业者所拥有的各个服务器中。并且,由于各用户是借助各装置来向自己签约的各个服务提供业者的服务器请求内容的,因此即使是内在内容相同的同一源内容,各装置请求内容时所利用的地址也常会有不同。因此,虽然对于作成了书签的装置而言,该装置自己能够反复利用该书签,然而对于无法从该同一服务提供业者接受内容分发的其他装置或无访问权的其他装置而言,便会发生无法利用上述书签来取得内容的状况。
上述问题的发生并不仅限于内容是动画时,即使是音乐、照片、万维网页等这些借助任何传送介质都能取得并利用的内容,若该内容适用于书签功能,便也会共通发生上述问题。另外,该问题并不限于发生在通过IPTV服务、VoD服务所分发的内容中,即使是对于广播内容、能借助可拆卸的外部存储介质而得的内容、保存在内设于装置的存储介质中的内容、通过近距离通信所提供的内容等而言,当想要在多个装置间共有同一内容时,若内容的取得途径(服务的种类)不同,便也会发生同样的问题。
本发明是鉴于上述问题而研发的,目的在于提供一种能够对在内容性上与登录于书签的内容相当的其他所能访问的代替内容的获取场所进行检索,由此来应付上述状况的书签利用装置、书签作成装置、书签共有系统、控制系统、控制程序以及记录介质。
为解决上述的问题,本发明的书签利用装置的特征在于具备:特征信息提取单元,从至少包含有内容取得地址以及特征信息的书签中提取所述特征信息,其中,所述内容取得地址用以取得内容,所述特征信息用以表达所述内容的内在内容;代替内容检测单元,根据所述特征信息提取单元所提取的特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检测拥有与所述内容的内在内容相类似或相当的内在内容的代替内容。
根据上述结构,上述特征信息提取单元从至少包含有用以取得内容的内容取得地址、特征信息的书签中提取上述特征信息,然后由上述代替内容检测单元使用上述提取的特征信息,检索在内容性上与上述内容相类似/相当的代替内容。
由此,书签利用装置能够发现与用上述内容取得地址所能取得的原内容不同的、在内容性上类似于/相当于上述原内容的代替内容。
为解决上述的问题,本发明的书签作成装置的特征在于具备:内容取得单元,从提供该书签作成装置所能利用的内容的内容源中取得内容;特征信息生成单元,从所述内容取得单元所取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;书签生成单元,生成至少含有所述内容取得单元在取得所述内容时所用过的内容取得地址和所述特征信息生成单元所生成的特征信息的书签。
根据上述结构,书签作成装置不但能够将用以指定内容的书签转达给书签利用装置,还能够将表达内在内容的特征信息也转达给书签利用装置。由此,在利用上述书签的书签利用装置侧,即使无法利用该书签所示的内容,也能够通过上述特征信息来类推该书签所指定的内容的内在内容。即,能够将上述特征信息用作在寻找内容性上类似的其他内容时所需要的线索。
为解决上述的问题,本发明的书签利用装置的控制方法的特征在于:所述书签利用装置利用至少包含有内容取得地址以及特征信息的书签,其中,所述内容取得地址用以取得内容,所述特征信息用以表达所述内容的内在内容;该控制方法包含:特征信息提取步骤,从所述书签中提取所述特征信息;代替内容检测步骤,根据在所述特征信息提取步骤中提取的特征信息,从提供所述书签利用装置所能利用的内容的一个或多个内容源中,检测拥有与所述内容的内在内容相类似或相当的内在内容的代替内容。
本发明的书签作成装置的特征在于包含:内容取得步骤,从提供所述书签作成装置所能利用的内容的内容源中取得内容;特征信息生成步骤,从通过所述内容取得步骤而取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;书签生成步骤,生成至少含有在通过所述内容取得步骤来取得所述内容时所用过的内容取得地址和通过所述特征信息生成步骤而生成的特征信息的书签。
(发明的效果)
为解决上述的问题,本发明的书签利用装置的特征在于具备:特征信息提取单元,从至少包含有内容取得地址以及特征信息的书签中提取所述特征信息,其中,所述内容取得地址用以取得内容,所述特征信息用以表达所述内容的内在内容;代替内容检测单元,根据所述特征信息提取单元所提取的特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检测拥有与所述内容的内在内容相类似或相当的内在内容的代替内容。
本发明的书签作成装置的特征在于具备:内容取得单元,从提供该书签作成装置所能利用的内容的内容源中取得内容;特征信息生成单元,从所述内容取得单元所取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;书签生成单元,生成至少含有所述内容取得单元在取得所述内容时所用过的内容取得地址和所述特征信息生成单元所生成的特征信息的书签。
因此,本发明具有以下的效果:能够检索在内容性上与登录于书签的内容相当的其他所能够访问的代替内容的获取场所,从而能够应付无法访问原内容的状况等。
附图说明
图1是本发明的书签共有系统100中的利用侧电视2的主要结构的框图。
图2是本发明的书签共有系统100中的作成侧电视1的主要结构的框图。
图3是本发明实施方式中的书签共有系统100的概略结构图。
图4是本实施方式中的内容的数据结构的概念图。
图5是用于对作成侧电视1的书签生成部25所生成的书签进行管理的书签管理表的例图。
图6是由作成侧电视1作成后,被登录进书签管理服务器7的书签d5的主要部分的具体例图。
图7是由作成侧电视1作成后,被登录进管理书签管理服务器7的书签d5的主要部分的其他具体例图。
图8是利用侧电视2的代替内容目录存储部82所存储的代替内容目录的具体例图。
图9是利用侧电视2的重放位置信息存储部83所存储的、某代替内容中的候补区间的一览的具体例图。
图10是利用侧电视2的书签更新委托部68所生成的更新提案书签d15(代替书签)的具体例图。
图11是便携式电话3依照图10所示的更新提案书签d15来更新了书签d5后所得到的更新后书签d16的具体例图。
图12是在书签共有系统100中,书签被作成并被登录时的各装置的处理流程的序列图。
图13是作成侧电视1中的、图12所示的书签作成处理S8的流程图。
图14是在书签共有系统100中,上传至书签管理服务器7的书签被利用时的各装置的处理流程的序列图。
图15是利用侧电视2中的、图14所示的书签利用处理流程的流程图。
图16A是作成侧电视1所重放的某音乐节目内容的内容关联信息的具体例图。
图16B是用以对内容关联信息的输出布局进行指定的布局信息的例图。
图17是上述音乐节目内容以及内容关联信息正被重放时的、作成侧电视1的显示画面的具体例以及正在视听该内容的用户进行书签登录操作时的样子的图。
图18是登录进书签管理服务器7的书签的其他具体例图。
图19是利用上述书签而显示出代替内容时的利用侧电视2的显示画面的具体例图。
图20是显示出类似内容检索结果时的利用侧电视2的显示画面的例图。
图21是在由书签管理服务器7来作成书签的情况下的、作成侧电视1的主要结构的框图。
图22是对书签进行作成的书签管理服务器7的主要结构的框图。
图23A是作成侧电视1的要求生成部27所生成的书签生成要求的数据结构的概念图。
图23B是基于HTTP POST法的书签生成要求的具体例图。
图23C是基于HTTP POST法的,针对书签生成要求所作出的响应的具体例图。
图24是在由书签管理服务器7来作成书签的情况下,正在视听内容的用户进行书签登录操作时的样子以及作成侧电视1和便携式电话3各自显示部中显示的显示画面的例子的图。
<附图标记说明>
1         作成侧电视(书签作成装置)
2         利用侧电视(书签利用装置)
3         便携式电话
4         便携式电话
5         内容分发服务器
6         内容分发服务器
7         书签管理服务器(书签作成装置)
8         网络日志服务器
10        控制部
11        红外线通信部
12        通信部
13        显示部
14        音频输出部
15        存储部
20        内容选择部
21        内容取得部(内容取得单元)
22        内容输出部
23        位置指定部
24        特征信息生成部(特征信息生成单元)
25        书签生成部(书签生成单元)
26        书签发送部
27        要求生成部
28        要求发送部
40        用户信息存储部
41        缩略图像存储部
42        书签存储部
50        控制部
51        红外线通信部
52        通信部
53        显示部
54        音频输出部
55        存储部
60        书签选择部
61        书签取得部
62        内容取得部
63        内容输出部
64        特征信息提取部(特征信息提取单元)
65        代替内容检索部(代替内容检测单元)
66        重放位置推定部(重放位置特定单元)
67        选择受理部
68        书签更新委托部(书签更新单元)
70        控制部
71        存储部
72        通信部
80        书签存储部
81        内容存储部
82        代替内容目录存储部
83        重放位置信息存储部
84        内容取得信息存储部
90        接收数据分析部
91        发送数据构建部
92        书签数据库
100       书签共有系统。         
具体实施方式
〔实施方式1〕
以下,参照附图来说明本发明的实施方式。在以下的说明中,对于同一部件以及主要结构赋予同一标记。这些同一部件及主要结构的名称和功能也是相同的,因此不对其作反复详细说明。另外,以下说明的实施方式仅仅是一例,本发明并不限于以下所述的内容。
以下,对本发明的书签作成装置以及书签利用装置用作为电视时的情况进行说明。在此,各电视也发挥内容重放装置的功能,即,各电视能够介由互联网接收动画等内容并进行重放。在本实施方式中,作为书签作成装置的作成侧电视以及作为书签利用装置的利用侧电视介由互联网而共有书签,从而构筑了本发明的书签共有系统。
(书签共有系统的概要)
本实施方式的书签共有系统大致为以下所述的形态。各内容服务业者通过各自的内容分发服务器,根据请求,来向服务加入者所拥有的多个电视(客户机)分发内容。在具有书签作成功能的电视(作成侧电视)中,能够针对所接收、重放的该些内容来作成书签。各电视所作成的书签与内容识别信息构成对应关系,并由各电视所能访问的书签管理服务器等来进行保存、管理。如此,在具有书签利用功能的多个电视(利用侧电视)之间便能够共有书签。
书签中含有内容的重放位置信息。这样,各电视能够利用其他电视所作成的书签,从与该其他电视相同的重放位置开始来重放内容。在此,从书签所示的重放位置开始重放内容(从途中开始重放内容)的这类方式称为“恢复重放(resume play)”。本发明中的重放位置信息可以用于将内容重放开始位置的这个时间点指定为重放位置,也可以用于以内容重放开始位置的时间点以及重放结束位置的时间点来特定重放区间,并将该区间指定成重放位置。另外,每个书签中的重放位置信息也可以包含由多个重放开始位置以及重放结束位置所组成的组,从而将多个重放区间指定成重放位置。关于重放位置信息的数据结构以及具体例,将在以后详述。
以下参照图3来详述书签共有系统的具体结构。
(本发明的书签共有系统的课题和目的)
例如设想有以下情况:第1内容服务业者通过第1 IPTV服务来分发现场直播的内容,且由上述IPTV服务的加入者即电视(作成侧电视)来接收并重放该内容;上述作成侧电视针对上述内容中的某个重放位置作成书签,其后,其他电视(利用侧电视)利用上述作成侧电视所作成的上述书签来试图视听该现场直播。
在此,若上述利用侧电视所加入的第2内容服务业者提供的是利用归档文件(archive)的VoD,或许能够用书签来进行视听,但在此设想的是不可能进行视听的状况。在该状况时,利用侧电视需要向与第1 IPTV服务不同的第2内容服务业者的VoD服务或主服务器要求内容。因此,对于利用侧电视而言,书签中的由作成侧电视在重放内容时所作成的该内容的地址(第1内容分发服务器的地址)有时便会毫无意义。
为了解决该问题,在作成侧电视作成书签时,需要先考虑好利用侧电视无法利用该内容的地址时的状况,然后使利用侧电视能够寻找到该内容以外的、在内容性上类似或相当于该内容的其他恰当的内容(以下称“代替内容”)。即,为了使利用侧电视能够寻找代替内容,作成侧电视需要具备以下功能:在作成书签时,对于标上了书签的内容或重放位置,生成用于启示/表现其内在内容的特征性信息(以下称“特征信息”),并将该特征信息加入该书签中。另外,利用侧电视需要具备以下功能:当无法直接利用作成侧电视所作成的书签时,使用该书签中含有的特征信息,并与自装置所加入的服务或与自装置所能访问的任何存储介质进行协作,以此来发现代替内容。此外,在利用侧电视中,优选进一步具备从代替内容中对内容性上类似的重放位置进行特定的功能。
另外,当利用侧电视如上述那样发现了所能利用的代替内容(以及重放装置)时,优选在原书签上附加该代替内容的书签来扩展书签,以使该代替内容的书签能够被共有。这样,即使此后试图利用该书签的其他利用侧电视不具备发现所能视听的代替内容的功能,也能够利用该书签(代替内容越是增加,多个非特定的电视用户能够利用该书签的可能性就越高。)
关于用于达成上述目的的本发明的书签共有系统,以下举具体例来进行详细说明。
(书签共有系统的结构)
图3是本发明实施方式中的书签共有系统100的概略结构图。如图3所示,书签共有系统100至少包含作成侧电视1、利用侧电视2、内容分发服务器5、内容分发服务器6、书签管理服务器7。在本实施方式中,书签共有系统100还包含便携式电话3、便携式电话4、网络日志服务器8。该些装置通过互联网等通信网络(涉及便携式电话3和便携式电话4时,还包括便携式电话回线网络),以能够相互通信的方式连接。
图3所示的书签共有系统100仅是用于说明本发明的书签共有系统的一个例子,其并不限定本发明的范围。
内容分发服务器5向服务加入者提供服务A,具体是根据来自加入者的电视(客户机)的请求来分发内容。内容分发服务器5具备了认证功能,即:对介由通信网络从客户机发送过来的内容请求消息进行分析,以判断其是否为拥有内容接收权的客户机(加入者)。
例如,设想用户A通过内容分发服务器5与经营服务A的服务业者签约,由此成为服务A的加入者。内容分发服务器5向用户A的作成侧电视提供用户ID以及进入码(password),以用作对服务A的加入者即用户A进行认证的信息。然后,作成侧电视1登录该用户信息(用户ID和进入码),以作备用。由此,作成侧电视1被允许向内容分发服务器5进行访问,从而能够对动画内容进行流接收并重放。
关于内容分发服务器5所提供的服务A,例如有向作成侧电视1等加入者分发IPTV内容的IPTV服务。此时,内容分发服务器5是IPTV服务器。
作成侧电视1是用户A所利用的电视,其接收已签约的内容分发服务器5所分发的内容,并重放该内容。另外,作成侧电视1还能够接收由内容分发服务器5所提供的电子节目表(EPG:Electronic Program Guide)。
此外,作成侧电视1具有就自装置所重放的内容来作成书签的功能。书签中含有与内容相关的各种信息(标题、分类、演出者等)、重放位置信息(经过时间)、视听者所附加的信息(关键字、短评等)。关于书签的数据结构和书签的生成动作的详情,将在以后叙述。作成侧电视1所作成的书签被登录进书签管理服务器7,从而能够与连接了书签管理服务器7的其他电视共有。
便携式电话3是用户A所持有的便携式电话。在本实施方式中,便携式电话3除了具有一般便携式电话的功能以外,还具备与作成侧电视1进行红外线通信,由此作为作成侧电视1的遥控器来工作的遥控器功能。具体为,通过在便携式电话3中安装利用红外线通信功能的、用以输出电视操作用遥控信号的遥控应用程序软件,便可实现遥控功能。如此,能够将便携式电话3用作一般的电视遥控器。在此,所输出的遥控信号可以与电视专用遥控器所输出的现有公知技术中的遥控信号相同。或,也可以使内容的缩略图像文件的头区域中内含有以遥控内容视听的数据,然后将该缩略图像文件作为遥控信号来发送。
书签管理服务器7用于向用户提供书签共有服务。具体为,书签管理服务器7具备存储书签的书签数据库,并管理该些书签,还受理书签的上传和下载。在本实施方式中,为了能够利用书签管理服务器7的书签共有服务,采用的是由各电视的用户向书签管理服务器7进行用户登录的方式。具体而言,用户登录是指,将用户的电视以及便携式电话的地址与用户ID及进入码对应地存储进书签管理服务器7。
对于被登录的用户A的作成侧电视1所作成的书签,书签管理服务器7受理来自作成侧电视1的该书签的上传。在上传时,也可以用用户ID和进入码来进行用户认证。在本实施方式中,书签是XML(Extensible Markup Language:可扩展标记语言)方式的文件,其按照HTTP协议而被上传到相当于是HTTP服务器的书签管理服务器7。或,在其他实施方式中,作成侧电视1可以将书签所示的重放位置上的内容的图像作为缩略图像(图像数据),并以JPEG(Joint Photographic Experts Group)形式作保存,并在该缩略图像文件的头区域中加入以XML形式记述的书签,然后由作成侧电视1向书签管理服务器7上传上述缩略图像。
在本实施方式中,书签管理服务器7完成了书签的登录后,作为答复,还将表示该书签的存放场所的书签地址信息(以下称“书签URL”)返送给用户A。虽然书签管理服务器7也可以向用户A的作成侧电视1发送上述书签URL,但在此设想的是通过邮件向便携式电话3发送上述书签URL。
在本实施方式中,虽然上述所上传的书签被允许公开给多个非特定的用户,但并不限定于此。也可以采用各种各样的方式,例如,也可以由用户来指定允许分发书签的人;或可以设定参照书签时所需要的认证信息(进入码),从而使只有知道进入码的人才能访问。
网络日志服务器8向用户提供网络日志服务。具体为,对登录用户所作成的网络日志(Blog)的数据进行保存,还向连接网络日志服务器8的非特定的多个用户公开该网络日志。
在本实施方式中,用户A能够使用便携式电话3来将书签服务器7所提供的书签URL上传给网络日志服务器8。在本实施方式中,是以添附编辑成邮件的文书的方式来向网络日志服务器8进行上传的。但这仅是一个例子,本发明并不限定于此。只要能够向网路日志服务器8上传插入有便携式电话3所持有的书签URL的网络日志记事,则使用任何方法均可。
上述网络日志记事上传到网络日志服务器8后,能够阅览网络日志服务器8中网络日志的多个非特定的用户便能够利用用于访问书签管理服务器7中的书签的链接,从而更多的用户能够得知用户A所作成的书签的存在,更多的用户能够利用该书签。
关于用户A推广自己所作成的书签的方法,除了上述的方法,还有使用电子邮件来向其他用户宣传书签的方法。例如,可以向持有相同兴趣的人或友人等的群体邮递名单地址,投送带有书签URL的邮件,由此向其他用户(例如用户B)介绍书签。
使用网络日志服务器8等适宜的设备而推广的书签URL最终会被对同样内容持有兴趣的用户(例如用户B)所看到。
内容分发服务器6向服务加入者提供服务B,具体与内容分发服务器5同样,根据来自加入者的电视(客户机)的请求来分发内容。另外,也可以与内容分发服务器5同样,具备用户认证功能。
关于内容分发服务器6所提供的服务B,例如有基于VoD的以归档文件分发方式来向加入者提供内容的VoD服务。此时,内容分发服务器6是具有基于VoD的归档文件分发功能的VoD服务器。
利用侧电视2是用户B所利用的电视,其接收内容分发服务器6所分发的内容,并重放该内容。另外,利用侧电视2依照用户B所获得的书签URL,访问书签管理服务器7,并从书签管理服务器7取得书签,然后利用该书签来进行内容的恢复重放。
此外,利用侧电视2具备以下功能:当因无法访问上述书签所示的内容的地址而无法利用该书签时,检测自装置所能利用的、与被标上了书签的内容相类似或相当的代替内容。另外,更优选具有对代替内容来作成新书签的功能。关于该书签的利用以及更新动作,将在以后详述。
关于无法利用上述书签的原因,例如有以下所述的情况。用户B是服务B的加入者,但不是服务A的加入者。因此用户B无法视听内容分发服务器5所提供的服务A中的内容。即,利用侧电视2无法取得内容分发服务器5所分发的内容。关于无法直接利用上述书签的其他例子,例如还有因国家不同等原因而处于服务提供的范围外,从而导致不可能访问/加入内容分发服务器5的情况。或,因内容分发服务器5和内容分发服务器6各自所提供的服务种类的不同,导致电视中有时不能重放该些服务器所分发的内容(具体情况例如有IPTV服务不对应影视点播(VoD))的各种状况。
便携式电话4是用户B所持有的便携式电话。在本实施方式中,便携式电话4与便携式电话3同样,具有用以遥控操作利用侧电视2的遥控功能。用户B能够通过操作便携式电话4来指示利用侧电视2取得书签,并用该书签来指示进行恢复重放等。
以下,对在由以上各装置所构筑的书签共有系统100中运用本发明的方法来共有书签时所实施的数据/信号的收发流程和处理流程,进行简单的说明。
(书签共有系统中的数据流动)
便携式电话3通过红外线通信,将内容重放指示信号d1送出至作成侧电视1。d1中含有用以指定内容的内容识别信息。例如,用户A可以通过作成侧电视1来阅览内容分发服务器5所提供的电子节目表,然后操作便携式电话3,选择了内容后,按下用以指示重放的按键,由此来发送d1。
作成侧电视1向内容分发服务器5请求便携式电话3所指定的内容。即,作成侧电视1向内容分发服务器5发送内容请求消息d2。内容分发服务器5对该请求作出答复并进行认证,其后向作成侧电视1分发所被请求的内容d3。然后作成侧电视1对内容d3进行重放。
在作成侧电视1重放内容3的过程中,若用户A按下了便携式电话3的通过遥控应用程序中的GUI(Graphical User Interface:图形用户界面)所安装的书签按键(无图示),则便携式电话3向作成侧电视1发送书签登录信号d4。书签登录信号4用以向作成侧电视1通知书签的作成定时(即,对正在重放的内容的重放位置进行采取的定时)。作成侧电视1在书签中加入内容分发服务器5所分发的上述内容的地址信息(URL),必要时,还加入内容识别信息。另外,作成侧电视1在接收到了书签登录信号d4的这个定时上,取得作成侧电视1的重放部所正在输出的内容的重放位置。具体为,若设内容开始位置为00:00:00,便将自该时间点起的相对经过时刻的信息,作为想要标上书签的重放位置的信息来取得。
在图3所示的例子中,虽然书签登录信号d4被发送了1次,但便携式电话3也可以以固定的时间间隔来2次发送书签登录信号d4。作成侧电视1根据最初的书签登录信号特定出内容的书签开始位置后,例如可以在画面上显示出“请在书签结束位置上,再次按下书签按键”等消息。作成侧电视1若在显示上述消息的过程中再次收到书签登录信号,便对书签结束位置进行特定,然后将书签结束位置和书签开始位置一同加入到书签中。此时,作成侧电视1可以显示出“已记录完书签”等消息。
由此,作成侧电视1将与被标了书签的内容或重放位置相关的特征信息加入到书签中,从而完成书签的制作(详细情况将在以后叙述)。作成侧电视1将完成了的书签以及登录委托消息d5发送给书签管理服务器7,以委托进行书签的登录。
书签管理服务器7受理了来自作成侧电视1的书签登录委托后,将d5所对应的书签登录进书签数据库。书签管理服务器7结束了登录后,通过邮件等向作成侧电视1的用户所持有的便携式电话3发送所登录的书签的书签URL、以及登录结束通知d6。
用户A通过便携式电话3得到了d6所对应的书签URL后,用便携式电话3作成含有该书签URL的网络日志记事d7,并将d7上传给网络日志服务器8。
网络日志服务器8所公开的网络日志记事d7处于用户B能够用便携式电话4来阅览的状态。用户B能够从网络日志服务器8所提供的网络日志中,检索与自己的兴趣一致的网络日志,并阅览条件吻合的网络日志。用户B在阅览上述网络日志d7时,若对上述书签所示的内容持有兴趣并想要观看,可以操作便携式电话4,将自网络日志服务器8链接的书签URLd8下载到便携式电话4。
便携式电话4收到了规定的格式的书签URL后,可以启动红外线发送遥控应用程序,并显示出用以询问用户是否要将接收的书签URL作为遥控信号送出的消息。当用户B把向利用侧电视2发送书签URL的这一指示输入进便携式电话4时,便携式电话4便通过红外线通信,向利用侧电视2发送书签URL以及用以指示依照该书签进行恢复重放的恢复重放指示信号d9。
利用侧电视2根据从便携式电话4接收的书签URL,访问书签管理服务器7,以请求与该书签URL对应的书签。利用侧电视2向书签管理服务器7发送书签请求消息d10。书签管理服务器7对上述请求作出答复,向利用侧电视2发送与上述请求相对应的书签d11。
利用侧电视2根据所接收的书签d11中含有的用以向内容进行访问的地址信息以及重放位置信息,尝试从内容分发服务器5中取得该内容。
若利用侧电视2因前述的原因而无法根据书签d11中含有的地址信息来取得目标内容(例如,从内容分发服务器5收到分发不许可通知d12等),便根据书签中含有的本发明的特征信息,寻找代替内容(详情将在以后叙述)。
在此,当找不出其他可取得上述内容的方案(代替内容)时,内容分发服务器5也可以向利用侧电视2发送分发不许可通知d12,并提供链接到服务A加入手续网页的URL。若利用侧电视2能够就内容分发服务器5中的服务A来进行网络服务加入手续,则也能够采用使用上述URL来加入服务A并进行用户登录,从而使对应上述书签的视听成功的实施方式。
利用侧电视2根据上述特征信息,从例如已签约的内容分发服务器6等中,发现利用侧电视2所能利用的代替内容。利用侧电视2向内容分发服务器6发送用以请求分发所发现的代替内容的代替内容请求消息d13。内容分发服务器6对该请求作出答复,若有必要,还进行认证,然后向利用侧电视2分发所被请求的代替内容d14。从而,利用侧电视2能够重放代替内容d14。
此外,利用侧电视2不但特定代替内容,为了更准确地对应未能利用的书签,优选还能够对该代替内容中的用作代替的重放位置进行特定。并且,优选向原书签追加上述代替内容的书签,以扩展原书签。例如,利用侧电视2可以重放代替内容,然后让用户B来指定代替的重放位置(代替重放位置信息)。用户B在通过利用侧电视2来视听内容的过程中,对便携式电话4的遥控应用程序上的书签登录按键进行操作。利用侧电视2通过与作成侧电视1作成书签时的动作相同的动作,就代替内容来作成书签。即,利用侧电视2向原书签追加代替内容的地址信息以及用户B所指定的代替内容重放位置,从而作成更新提案书签d15(代替书签)。利用侧电视2将更新提案书签d15发送给原书签的作成者即用户A的便携式电话3,以提案书签的更新。
原书签的作成者即用户A确认从利用侧电视2发送过来的更新提案书签d15所示的追加部分后,若认为即使追加新的内容信息以及新的重放位置信息也不妨,便访问书签管理服务器7,将更新后书签以及书签更新委托消息d16一起发出,以正式更新现有的书签。
如上所述,根据本发明的书签共有系统100,即使发生无法根据作成侧电视1作成的书签中登录的地址信息来访问保存有内容的服务器的这类状况(无法接收/重放内容的状况),利用侧电视2也能够提供所能利用的代替内容的获取场所,以应付上述状况。此外,能够针对代替内容,特定出可替代书签重放位置的重放位置,并将代替内容的信息添加进原书签,以扩展原书签。从而能使更多的用户能够活用上述书签。
以下,对作成侧电视1和利用侧电视2各自的结构及动作、书签的数据结构进行更详细的说明。
为了便于说明,以下将作成了原书签的用户A的电视称为作成侧电视1,将尝试利用上述书签的用户B的电视称为利用侧电视2。但该作成侧电视1也可以具备利用侧电视的功能,即,能够利用其他电视所作成的书签。另外,利用侧电视2也可以具备作成侧电视的功能,即,能够新作成书签。
(作成侧电视的结构)
图2是本发明的书签共有系统100中的作成侧电视1的主要结构的框图。在本实施方式中,作成侧电视1是具备网络功能的IPTV(Internet Protocol Television:因特网电视)终端。
如图2所示,作成书签的作成侧电视1具备有控制部10、红外线通信部11、通信部12、显示部13、音频输出部14、存储部15。
红外线通信部11接收从便携式电话3以红外线方式发出的信号。红外线通信部11包含用以接收从便携式电话3发出的红外光的光接收单元(红外线通信端口)。红外线通信部11所接收的信号依照其是否是用以指示作成书签的书签登录信号而被分类。当接收到了书签登录信号时,红外线通信部11便将书签登录信号转达给位置指定部23。
通信部12适当地利用无线/有线通信方法,介由互联网等通信网络与外部的装置进行通信。
显示部13根据控制部10的输出指示,显示图像或影像。例如可以使用LC(Liquid Crystal:液晶)显示面板、等离子显示面板、EL(Electro Luminescence:电致发光)显示面板等来作为显示部13。
音频输出部14根据控制部10的输出指示,输出音频。例如可以使用扬声器来作为音频输出部14。
存储部15存储控制部10所执行的控制程序和OS程序以及、控制部10在执行作成侧电视1所具有的各种功能时所要读取的各种数据。可以使用例如闪存等存储装置来构成存储部15。存储部15尤其存储作成侧电视1在执行书签共有应用程序时所要读取的各种程序、数据。存储部15具体含有用户信息存储部40、缩略图像存储部41、书签存储部42。
控制部10统辖控制作成侧电视1的动作,其可以用例如CPU(Central Processing Unit:中央处理器)等来构成。控制部10在工作时,把由例如RAM(Random Access Memory:随机访问存储器)等构成的临时存储部(未图示)作为其工作区域。控制部10具备有作为功能块的内容选择部20、内容取得部21、内容输出部22、位置指定部23、特征信息生成部24、书签生成部25、书签发送部26。CPU把存储在ROM(read only memory:只读存储器)等存储装置(存储部15)中的程序,读入未图示的RAM(Random Access Memory)等中并加以执行,由此能够实现上述的各功能块。
内容选择部20用以特定被指定要重放的内容。具体为,在显示部13中,将提供IPTV服务等的内容分发服务器5所供给的电子节目表显示在GUI(Graphical User Interface:图形用户界面)上,然后,在通信部11通过红外线从便携式电话3接收到了用于选择内容的信号时,特定该内容。内容选择部20将所特定的内容的内容识别信息等提供给内容取得部21,以传达所应取得的内容。
更具体的,用户A一边观看显示部13中显示的电子节目表的画面,一边操作便携式电话3来选择内容,然后通过按下决定键等,由便携式电话3向作成侧电视1发送内容重放指示信号d1。内容选择部20接收了指定有内容的内容重放指示信号d1后,从电子节目表中特定出与该内容相对应的内容识别信息,然后将该内容识别信息输出给内容取得部21。在本实施方式中,内容识别信息可以是由内容分发服务器5所预先赋予的用来取得上述内容的视听请求地址。
内容取得部21使用内容选择部20所提供的视听请求地址,向内容分发服务器5请求分发期望的内容,以从内容分发服务器5取得内容。具体为,内容取得部21使用登录在用户信息存储部40中的、在签契时所得到的用户信息(用户ID、进入码等),从内容分发服务器5的上述视听请求地址中,取得用来获取期望内容的内容取得地址、端口信息、认证信息。然后,使用内容取得地址、端口信息、认证信息来访问内容分发服务器5,并开始进行所期望的内容的流接收。
在本实施方式中所设想的取得方式是:首先由内容取得部21向上述视听请求地址发送包括认证信息在内的服务利用(内容的视听)要求,若认证成功,作为对方的答复,获得用以取得内容的直接地址即内容取得地址。然而本发明并不限于该取得方式。例如,在不需要认证手续的简单的取得方式时,也可以不对视听请求地址和内容取得地址进行区分,仅是由内容取得部21基于内容取得地址这一方来取得所期望的内容。
在本实施方式中,上述内容取得部21所取得的内容如图4所示那样,包含作为数字数据的元信息(包括了标题、内容识别信息、演出者信息、内容概述、提供商名、著作权信息等)和由视频数据及音频数据构成的内容主体。内容取得部21将所取得的内容中的上述元信息提供给特征信息生成部24,将所取得的内容中的上述内容主体提供给内容输出部22。内容取得部21由例如解调部和TS解码器等组成。解调部依照内容的信号形态,进行解调以及纠错。TS解码器对多重化状态的内容进行解调,以分离出含有视频/音频信号的TS数据包和含有内容中的元信息信号的TS数据包。
内容输出部22对内容取得部21所接收的内容进行解码,然后分别将视频数据输出给显示部13,将音频数据输出给音频输出部14。内容输出部22由例如AV解码器等所组成。AV解码器对上述前者的TS数据包进行解码,形成音频信号和视频信号。音频信号被输出给音频输出部14,视频信号被输出给显示部13,即,各信号各自输出。
位置指定部23介由红外线通信部11受理了从便携式电话3发送出的书签登录信号后,指示书签生成部25以及特征信息生成部24进行书签的作成。具体为,位置指定部23将作成侧电视1收到了书签登录信号的这个定时,通知给各部(特征信息生成部24/指示书签生成部25),以使各部特定出作成侧电视1正在重放的内容中的处于该定时上的重放位置。在本实施方式中,由于是对应书签开始位置和书签结束位置来两次发送书签登录信号,因此位置指定部3先判断所受理的书签登录信号是用于指示书签开始位置的信号,还是用于指示书签结束位置的信号,然后再使各部特定处于上述定时上的重放位置。
特征信息生成部24针对被便携式电话3指示标上书签的内容以及该内容的重放位置,生成用以表达该重放位置上的内在内容的特征性信息。特征信息生成部24既可以根据与内容的上述重放位置相关联的内容主体中的视频数据、音频数据来生成特征信息,也可以根据附加在内容中的元信息来生成特征信息。
详细为,特征信息生成部24在从接收到了来自位置指定部23的书签开始位置信号时起,到接收下次的书签结束位置信号为止的这段期间中,首先特定出内容输出部22所输出的内容的区间,然后生成从该区间的视频数据、音频数据中所能获得的特征信息。
具体为,特征信息生成部24将上述区间中某个重放位置(开始位置、结束位置)的时点上的内容图像进行缩小来生成缩略图像,或对上述区间中的各图像进行图像处理来提取字符串,或对上述区间中的音频数据进行声音识别处理来提取字符串,或提取上述内容中附加的元信息(内容标题、内容概要、演出者信息等),然后将这些图像数据、文本信息作为内容的特征信息或该内容的重放位置的特征信息。另外,特征信息生成部24也可以从内容分发服务器5预先与内容另行所提供的电子节目表中,提取与内容相对应的元信息。
关于特征信息生成部24从视频数据或音频数据等中提取的字符串,可以举出以下的例子。例如,若内容是体育节目,特征信息生成部24能够通过文字识别处理,将构成视频数据的各图像数据中的参赛队和比分等这些文字信息、或反射投影(television opaque projector)字符等,作为文本信息提取出来。另外,若内容是电影,特征信息生成部24能够从音频数据中或字幕台词中提取出字符串。用以提取特征信息的图像处理功能部分可以由GPU(Graphic Processing Unit)等硬件芯片来支持,也可以通过软件来实现。另外,就用以提取特征信息的图像处理、声音处理而言,目前存在多种实用技术,例如有图像中文字的提取技术以及根据视频数据来生成文本的技术。但这些技术并不是本发明的本质,因此在此省略说明。
特征信息生成部24在所被指定的定时,从内容输出部22当前正输出的内容中生成出缩略图像,并将该缩略图像保存到存储部15的缩略图像存储部41。特征信息生成部24向缩略图像赋予文件名后,将其按照与内容取得地址、重放位置信息(时刻)等呈对应的方式保存进缩略图像存储部41。这样,在生成书签的书签生成部25中,便能够容易地使内容和重放位置构成联接。
另外,关于决定在内容的哪个重放位置上提取缩略图像并保存的方法,有多种方法。
例如可以采用以下方法:在收到了书签登录信号的这一定时,特征信息生成部24将该时点上被重放的图像作为缩略图像来提取,并作保存。或可以采用以下方法:在内容的某重放位置上出现了预先附加的章节的记号时,由特征信息生成部24在该时点提取缩略图像,并作保存。或还可以采用以下方法:由特征信息生成部24以固定的时间间隔连续地临时提取缩略图像,并检测从缩略图像中所能获得的字符串的变化,若字符串发生了变化,便将该变化时点上的缩略图像保存到缩略图像存储部41,还可以把从该时点上的缩略图像中所能获得的字符串作为特征信息。
特征信息生成部24把按照上述方法所生成的涉及内容或涉及书签中重放位置的特征信息,提供给书签生成部25。
书签生成部25生成与被便携式电话3指示标上书签的内容以及该内容的重放位置相对应的书签。此时,书签生成部25将特征信息生成部24所生成的特征信息加入书签中。尤其是,对于内容的有关内容特征信息,书签生成部25将该内容特征信息按照与该内容相对应的形式放进书签中;而对于涉及该内容中某重放位置的重放位置特征信息,书签生成部25将该重放位置特征信息按照与该重放位置相对应的方式放进书签中。
书签生成部25从位置指定部23收到了书签开始信号或书签结束信号后,在所被指示的各定时,取得内容输出部22正在输出的内容的经过时间(设内容的起始为00:00:00时的相对经过时间),并将所取得的各时刻(书签开始位置以及书签结束位置)作为重放位置信息。
书签生成部25所生成的书签至少包含:内容取得地址,用以识别在指示了书签作成时所正重放的内容;对应书签开始/结束位置信号而特定出的、上述内容的重放位置信息;特征信息生成部24就上述内容或重放位置所生成的特征信息;保存在用户信息存储部40中的用户信息(用户ID、进入码、便携式电话3的邮箱地址)。
书签生成部25把按照上述方式生成的书签转换成例如XML文档的数据格式等,然后传送给书签发送部26。书签生成部25还可以将生成的书签保存进书签存储部42。
关于书签生成部25对重放位置信息进行特定的方法,例如可以例举以下方法。
例如,书签生成部25可以对构成内容的各图像的信息变化进行监视,以对场面(scene)的切换时点进行检测,并对书签开始位置作校正,即,将用户实际所指定的存有偏差的定时校正成上述所检测出的切换时点。另外,书签生成部25也可以对从特征信息生成部24生成的缩略图像中所能获取的文本信息(字符串)的变化进行检测,由此推测用户原本想要指定的定时,并对书签开始位置进行校正。或,书签生成部25中也可以预先设定好如下的处理方式:对于接收到了书签开始信号或书签结束信号时的这一定时,从处于该定时的重放位置起,倒退规定的时间(例如3秒左右),并将该倒退后的时刻特定为重放位置信息。
例如,用户A在视听直播的途中,即使想要对当前的场面标上标签,也因无法立即使用便携式电话3来发送书签登录信号,而可能导致书签开始位置发生迟延。通过上述结构,作成侧电视1能够校正这类的迟延,并按照用户原本期望的书签开始位置来作成书签。
书签发送部26将书签生成部25生成的书签、以及登录委托消息d5发送给书签管理服务器7,以委托书签管理服务器7登录上述书签。
书签发送部26使用用户信息存储部40中保存的各种用户信息来将上述书签上传给书签管理服务器7。用户信息存储部40中存储有涉及用户的各种信息(用户信息)。例如存储有用户A持有的作成侧电视1的IP地址、机种信息、用户A持有的便携式电话3的邮箱地址等。此外,各服务提供商所发付的用户ID以及进入码按照与其提供商呈对应的方式存储。例如,向书签管理服务器7登录书签时所用的用户ID以及进入码所对应的是书签管理服务器7;向内容分发服务器5委托内容的分发时所用的用户ID以及进入码所对应的是内容分发服务器5。
在本实施方式中,书签发送部26是使用存储在用户信息存储部40中的与书签管理服务器7对应的认证信息(用户ID以及进入码),来开始进行上述书签的上传的。
在上述实施方式的说明中,举出了由作成侧电视1对从内容分发服务器5取得的内容进行书签作成的这一例子,但本发明的作成侧电视1并不限于该例子,对于提供作成侧电视1所能利用的内容的任何内容源,作成侧电视1均能对从该内容源取得的内容进行书签的作成。例如,内容源可以是诸如作成侧电视1的所有者即用户A所签约的内容分发服务器5之类的、能够介由互联网来连接的外部装置,也可以是作成侧电视1介由家庭内LAN所连接的录像装置、家庭服务器等,还可以是能够在作成侧电视1上拆装的USB(Universal Serial Bus:通用串行总线)存储器等外部存储介质或作成侧电视1中内设的HDD等存储装置。
(书签管理表)
图5是用于对作成侧电视1的书签生成部25所生成的书签进行管理的书签管理表的例子。该书签管理表存储在书签存储部42中。
在一个书签中,与一个书签ID相对应地存储有书签名和书签主体(书签中内在的各种信息)。
“书签ID”列(column)用来独一无二地识别书签,书签生成部25每次在作成书签时,自动赋予互不重复的书签ID。“书签名”列用来表示各书签的名字,其能够由用户以易于管理的方式自由地赋予。
“内容取得地址”列用来表示内容的保存场所,其当中放入有例如内容的URL。另外,在本实施方式中,内容取得地址作为可独一无二地特定内容的内容识别信息来使用。另外,内容取得地址中也可以含有能够特定出提供该内容的提供商的信息。
“内容标题”列表示的是预先赋予给内容的标题。内容标题包含在电子节目表中或所分发的内容的元信息中,其被特征信息生成部24提取出后,被放入在该列中。
“公开”列表示了在将该书签上传给书签管理服务器7后,是否允许将该书签公开于众。关于公开/非公开的指示,可以由用户A通过操作便携式电话3来输入给作成侧电视1的书签生成部25。
在“重放位置信息”列中,“开始位置”表示了该书签所示的内容的重放开始位置;“结束位置”表示了该内容的重放结束位置。在“重放位置信息”中,“详细信息”表示了使得用户对“开始位置”与“结束位置”所夹的区间中的内容进行联想的说明文、有关内在内容的短评。在该“详细信息”中,可以放入由特征信息生成部25基于上述区间的视频、音频所提取的文本,也可以放入用户所输入的对上述区间想作的短评。另外,“重放位置信息”的数据结构也可以设定成仅拥有“开始位置”的值。此时,将“开始位置”这一时点上的内容的影像的相关说明文、短评放入“详细信息”内即可。
“缩略图ID”列表示了用以独一无二地识别特征信息生成部24所生成的缩略图像的识别信息。例如,可以把特征信息生成部24在生成了缩略图像时所赋予给该图像的文件名放入该“缩略图ID”列中。另外,还可以将该缩略图像和用以表示是该内容中哪个重放位置上的图像的时刻信息,一同存放。
当上述缩略图像被公开时,该公开的缩略图像的URL便被放入“缩略图地址”列中。书签管理服务器7决定缩略图像的存放场所,然后将该场所的URL通知给作成侧电视1即可。作成侧电视1从书签管理服务器7收到了缩略图像URL的通知后,作成侧电视1的特征信息生成部24取得用以表示该缩略图像的存放场所的URL,以代替取得缩略图像其本身,然后将该URL作为要加进书签中的特征信息,传送给书签生成部25。
如图5所示,对应一个书签可以指定一个区间,还可针对该区间作成一个缩略图像(参照书签ID“1”)。但也可以对应一个书签来指定两个区间,也可以针对一个区间,以区间的开始时点和结束时点来作成两个缩略图像(参照书签ID“2”)。或,在一个区间中,还可以按照除了区间开始时点和结束时点之外的其他时点,来作成缩略图像(参照书签ID“3”)。
另外,在书签生成部25生成书签的前后时点,无需上述全部的列中都存放有值,即,关于在书签被上传到书签管理服务器7后由书签管理服务器7附加给书签的信息,该信息的值可以在收到了来自书签管理服务器7的通知之后,再放入列中。另外,图5所示的书签管理表的结构仅是一个例子,其并不限定本发明的作成侧电视1的技术结构。
(书签的数据结构)
图6是在由作成侧电视1作成之后,被登录进书签管理服务器7的书签d5的主要部分的具体例图。图6所示的书签是将图5中的书签ID“1”所示书签改为XML文档格式后的书签。
如图6所示,与图5的书签管理表中的管理样态同样,在XML文档中用标签(tag)以层级的形式来表达构成书签的各要素。
<BookmarkID>相当于图5中的“书签ID”。在本实施方式中,书签管理服务器7是按照每个用户来管理书签的,因此是由作成侧电视1来自由地向书签分配序列号。但也可以在书签管理器7侧,将该书签作为与服务、用户信息构成对应关系的广泛识别符来生成。
<BookmarkName>是为了使人能够识别而取的名字,其相当于图5中的“书签名”。在本实施方式中,设想所被分配的书签名是诸如“新书签名”这类初始值固定的名字,以供用户以后访问书签管理服务器7来对名字作编辑。
<BookmarkDate>表示该书签的作成日时。
<Author>是用于识别作成书签的用户的信息,在本实施方式中,<Author>所记述的是用户A的便携式电话3的邮箱地址。该邮箱地址是预先登录在用户信息存储部40中的信息,其被书签生成部25读出,并被插入该<Author>标签内。另外,通过将用以识别便携式电话的ID加入进作为遥控器的便携式电话,从而按每个便携式电话来设定作成者的这类实施方式也可。
夹在标签<BookmarkInfo>之间的部分相当于图5中的“书签主体”。<Address>是用来请求内容的通信地址。在本实施方式中,<Address>记述为URL,其相当于图5中的“内容取得地址”。
<Title>是内容的标题,其相当于图5的“内容标题”。当通过电子节目表选择了内容时,电子节目表的节目信息中的标题信息便被插入该标签<Title>之内。关于活用标题的更详细的实施例,例如有向电子节目表的标题信息中追加附加信息。具体为,特征信息生成部24在作成供书签用的标题时,不但是足球赛的ID,还连上日期、赛目表、举行日时。
<AuthID>、<AuthPW>是用来取得内容数据的用户认证信息(用户ID以及进入码),该些认证信息从用户信息存储部40读出后,被插入到标签<AuthID>、<AuthPW>之内。认证信息是契约机密信息,其一般不插入到标签<AuthID>、<AuthPW>之内,但若是仅由作成书签的本人所利用的非公开书签,则可以如图示那样插入。
<PosInfo>表示内容中的重放位置,其相当于图5中的“重放位置信息”。在本实施方式中,内容是影视节目,因此要被标上书签的区间(开始时刻和结束时刻)是根据影视数据中的时刻信息来设定的,且在对应书签来重放时,是对该区间进行恢复重放。<VideoStart>是<PosInfo>中的下级要素,其相当于图5中的“开始位置”,<VideoEnd>相当于图5中的“结束位置”,<Info>相当于图5中的“详细信息”。
<Thumbnail Address>表述的是根据内容被标上了标签时的这一定时的输出数据,所作成的图像、声音数据,其当中记述有例如缩略图像的存放场所,也就是相当于图5中的“缩略图地址”。缩略图像是由特征信息生成部24在作成书签时通过抓取缩略图像而作成的,其被保存到书签管理服务器7中。在图6所示的例子中,<Thumbnail Address>所记述的是书签管理服务器7中保存的缩略图像的URL。
在图6所示的书签中,夹在<BookmarkInfo>这一标签内的用虚线表示的要素是特征信息。尤其的,<Title>要素是涉及内容的特征信息,<Info>要素以及<Thumbnail Address>要素是涉及重放位置的特征信息。
如之前所述,能够将书签插入到上述缩略图像文件的头区域中,以在便携式电话3与作成侧电视1之间协助利用。还能够采用由作成侧电视1先确认缩略图像,然后再对被标上了书签的区间的动画进行重放的这类实施方式。
图7是在由作成侧电视1作成之后,被登录进管理书签管理服务器7的书签d5的主要部分的其他具体例图。图7中的书签是,将图5中的书签ID“2”所示的书签改成XML文档方式后的书签。也就是说,图6的书签所对应的是,将单个区间指定为重放位置时的情况;而图7的书签所对应的是,将多个区间作为重放位置来与单个区间构成对应关系时的例子。
单个书签内含有多个作为重放位置的区间的书签可以通过如下方法作成:用户A进一步进行多次操作来发送便携式电话3的书签登录信号,其后将多个区间组合,以统合作成在一个书签内。例如,当用户想要独自地作成电影、电视剧等内容的摘要时,通过作成此类含有多个区间的书签便可容易地实现用户的希望。
图7所示的书签与图6所示书签的不同点在于,一个<BookmarkInfo>要素中含有多个<PosInfo>要素。虽然图7的例子所表示的方式是一个书签与一个内容及多个区间构成对应关系,但并不限定于此,即使采用一个书签与多个内容及各内容中的单个区间(或多个区间)构成对应关系的技术方案,各电视机、书签管理服务器7也能够使用该书签进行处理。
对于统合有多个内容的各区间且发挥摘要功能的书签在作成之后被公开给多个非特定用户的这类使用事例而言,本发明的技术尤其对该类使用事例发挥效力。其理由在于,如上述那样将多个内容的相关书签统为一体的书签在被多个非特定的用户(电视)使用时,若利用侧电视无法取得该书签中含有的全部内容,就无法根据该书签来进行重放。因此,一个书签中越是含有多种类的内容,能够完全利用该书签的可能性就越低。然而通过本发明,即使多个内容中有几个(或全部)是利用侧电视所无法取得的内容,也能够使用书签中的特征信息来发现代替内容并取之代用。由此,无论书签中含有多少内容,利用侧电视均能够利用该书签。
(书签作成的序列)
图12是在书签共有系统100中,书签被作成并被登录时的各装置的处理流程的序列图。图12所示的使用事例如下:用户A参照电子节目表来视听内容,并作成书签且将书签登录进书签管理服务器7,然后通过便携式电话3接收所登录的书签的URL,将上述URL作为链接而埋设进用便携式电话3作成的网络日志中,并将网络日志投稿给网络日志服务器8。在此,设想用户能够将便携式电话3用作遥控器来遥控操作作成侧电视1。
首先,用户A一边观看作成侧电视1中显示的电子节目表,一边操作便携式电话3来选择某个节目(内容)。此时,便携式电话3通过红外线向作成侧电视1发送兼用于内容选择和内容重放指示的信号(S1)。作成侧电视1接收了内容重放指示信号后,根据该信号向内容分发服务器5要求视听节目(IPTV认证)(S2)。即,向内容分发服务器5发送内容请求消息。
内容分发服务器5对来自作成侧电视1的视听认证信息(ID、进入码等)进行确认,若认证信息一致(认证无问题),便向作成侧电视1发送所被请求的内容的内容取得地址等信息(S3)。作成侧电视1使用所接收的内容取得地址等信息,向内容分发服务器5进行访问,以请求开始进行期望的内容的流播放(S4)。作为针对该请求的答复,内容分发服务器5开始对所被请求的内容进行流播放(S5)由此,组成侧电视1便能够实行上述内容的重放。
接着,在作成侧电视1重放内容的过程中,用户A操作便携式电话3来指定想要标上书签的地点(开始位置以及结束位置)。便携式电话3根据用户的该操作,将作为书签登录信号的红外线信号发送给作成侧电视1。具体是,便携式电话3通过红外线将书签开始位置信号(S6)以及书签结束信号(S7)发送给作成侧电视1。
作成侧电视1收到了上述书签开始位置信号以及书签结束位置信号后,针对正在重放的内容,生成能够实现对该信号所指定的区间进行恢复重放的书签。此时,作成侧电视1将涉及内容及/或重放位置(区间)的特征信息预先加入到书签中(S8的书签作成处理)。作成侧电视1将生成的书签上传至书签管理服务器7(S9)。
书签管理服务器7将接收的书签存放进书签数据库,然后将已登录完了书签的通知以及表示书签存放场所的URL,以邮件的方式发送给用户A的便携式电话3(S10)。书签管理服务器7对于S9中的作为书签登录方的作成侧电视1、以及用户A的便携式电话3的邮箱地址,借助例如用户A的用户ID等来构成联接,且进行管理。
在便携式电话3接收到了上述书签URL后,用户A操作便携式电话3来作成包含书签URL的网络日志记事,并将该网路日志记事上传给网络日志服务器8,以向多个非特定用户公开上述书签(S11)。
如此,含有特征信息的书签被共有。
(书签生成处理流程)
图13是作成侧电视1中的、图12所示的书签作成处理S8的流程图。
在内容的重放过程中,作成侧电视1的位置指定部23等待书签开始位置信号介由红外线通信部11输入过来(S101)。当位置指定部23收到了书签开始位置信号时(在S101中为“是”),便将正在重放的内容的、相当于书签开始时点的重放位置信息的作成定时,发送给书签生成部25(S102)。位置指定部23可以向特征信息生成部24也发送上述作成定时。
特征信息生成部24在位置指定部23或书签生成部25向其输入了书签开始位置信号的这一定时,对正在重放的内容提取特征信息(S103)。具体为,特征信息生成部24针对内容输出部22正在输出的内容,从内容取得部21获取包含在电子节目表中或内容的元信息中的标题等文本信息;或也可以从内容输出部22正在输出的视频帧中,抓取缩略图像,并根据该缩略图像或音频数据等来生成文本信息。另外,缩略图像本身也可以作为特征信息来用。特征信息生成部24也可以将书签开始位置上的所输出的视频帧作为图像来截取,由此生成缩略图像。缩略图像的生成定时并不限于开始位置,也可以在开始位置之后,按每一规定的间隔,或在场面的切换时点,生成缩略图像。还可以将开始位置的规定时间前的场面作为缩略图像。
书签生成部25收到了相当于书签开始时点的重放位置信息的作成定时后,取得内容输出部22正在输出的内容的重放经过时刻(将内容的起始设为00:00:00时的相对经过时刻),生成书签开始时点上的重放位置信息(S104)。
接着,位置指定部23等待便携式电话3介由红外通信部11发来书签结束位置信号(S105)。当位置指定部23收到了书签结束位置信号时(在S105中为“是”),便将书签结束位置上的重放位置信息的作成定时,发送给书签生成部25(S106)。此时,可以向特征信息生成部24也发送该作成定时。
特征信息生成部24对应从位置指定部23或书签生成部25接收到的上述作成定时,针对自开始位置至结束位置为止的期间中的所被输出的内容区间,提取特征信息(S107)。在此,特征信息生成部24也可以将书签结束位置上的被输出的视频帧作为图像来截取,以此生成缩略图像。
书签生成部25收到了书签结束时点上的重放位置信息的作成定时后,取得内容输出部22正在输出的内容的重放经过时刻,生成书签结束时点上的重放位置信息(S108)。
在此,特征信息生成部24所执行的S103与书签生成部25所执行的S104在执行先后顺序上并无限定。另外,S107与S108的执行先后顺序也无特别限定。S103与S104、S107与S108的各步骤也可以一并执行。
然后,书签生成部25生成至少含有在S104及S108中生成的重放开始位置信息和重放结束位置信息以及由特征信息生成部24生成的特征信息的书签(S109)。
书签发送部26将书签生成部25生成的书签与必要的认证信息一同发送给书签管理服务器7(S110)。
(利用侧电视的结构)
图1是本发明的书签共有系统100中的利用侧电视2的主要结构的框图。在本实施方式中,利用侧电视2是具备网络功能的IPTV(Internet Protocol Television:因特网电视)终端。
如图1所示,利用侧电视2具备有控制部50、红外线通信部51、通信部52、显示部53、音频输出部54、存储部55。
红外线通信部51接收便携式电话4以红外线发送出的信号。红外线通信部51包含有用以接收从便携式电话4发出的红外光的光接收单元(红外线通信端口)。红外线通信部51在其所接收的信号为含有书签的恢复重放指示信号d9时,将该信号d9传送给书签取得部61;若所接收的信号为含有书签URL的书签取得指示信号,则将该信号传送给书签选择部60。另外,关于在用户B操作便携式电话4来对显示部53中的、用GUI画面以能供选择的形式显示的各项目的某个作了选择之后而输入的信号,红外线通信部51将该信号作为选择项目指定信号而传送给选择受理部67。
通信部52、显示部53、音频输出部54可以拥有与上述通信部12、显示部13、音频输出部14相同的功能即可。
存储部55存储控制部50所执行的控制程序和OS程序、以及控制部50在执行利用侧电视2所拥有的各种功能时所要读取的各种数据。可以使用例如闪存等存储装置来构成存储部55。存储部55尤其存储利用侧电视2在执行书签共有应用程序时所要读取的各种程序、数据。具体为,存储部55具备书签存储部80、内容存储部81、代替内容目录存储部82、重放位置信息存储部83、内容取得信息存储部84。书签存储部80对书签取得部61所取得的书签进行保存。内容存储部81对内容取得部62所取得的内容/代替内容进行保存。代替内容目录存储部82对代替内容检索部65发现的代替内容的目录进行保存。重放位置信息存储部83对代替内容的重放位置信息(若存在开始位置和结束位置,则指区间)的候补进行保存。内容取得信息存储部84对提供利用侧电视2所能利用的内容的内容源的有关信息进行存储,另外也可以对内容取得部62过去曾取得过的内容的内容取得地址、标题等信息进行保存,若每一内容源需要加以认证,也可以保存其认证ID、进入码。
控制部50统辖控制利用侧电视2的动作,其可以用例如CPU等来构成。控制部50在工作时,把由例如RAM等构成的临时存储部(未图示)作为其工作区域。控制部50具备有作为功能块的书签选择部60、书签取得部61、内容取得部62、内容输出部63、特征信息提取部64、代替内容检索部65、重放位置推定部66、选择受理部67、书签更新委托部68。通过由CPU将存储在ROM等存储装置(存储部55)中的程序读进未图示的RAM等中并加以执行,能够实现该些功能块。
书签选择部60介由红外线通信部51取得从便携式电话4发送出的书签URL,并将该URL提供给书签取得部61,以指示书签取得部61取得书签。
在本实施方式中,书签URL由便携式电话4以附随于缩略图像的形式,借助红外线信号来发送出,该缩略图像用于启示·表现与该书签对应的内容的内在内容。在此,书签选择部60在收到了缩略图像时,提取该图像的规定区域(例如,JPEG图像的Exif区域等)中的书签URL,并将该书签URL输出给书签取得部61。书签URL用以表示书签管理服务器7存放书签的场所。
另外,若向书签管理服务器7的访问被限制,书签选择部60便将书签URL以及用以访问书签管理服务器7的认证信息(进入码等)一同从上述区域中提取出,然后传送给书签取得部61。
书签取得部61使用书签选择部60所提取的书签URL,介由通信部52向书签管理服务器7进行访问,以取得上述URL所示的书签。书签取得部61将取得的书签保存进存储部55中的书签存储部80。书签取得部61在取得了书签后,便请求内容取得部62使用该书签来取得内容。
内容取得部62使用书签取得部61取得的书签中的内容取得地址以及认证信息,取得与书签相对应的内容。内容取得部62既可以介由通信部52从外部装置取得内容,也可以取得利用侧电视2所拥有的存储部55中所存储的,或连接于利用侧电视2的存储介质中所存储的内容。
另外,内容取得部62可以在因前述的缘故而无法取得与上述书签对应的内容时,取得代替内容检索部65所检测出的代替内容;也可以介由选择受理部67受理从用户发出的代替内容指定操作,且依照用户指示来取得代替内容。
内容取得部62可以将取得的内容以及代替内容预备保存在内容存储部81中,也可以利用未图示的临时存储部,一边取得内容一边随时将该内容输出给内容输出部63。
内容输出部63对内容取得部62所接收的内容进行解码,然后分别向显示部53输出视频数据,向视频输出部54输出音频数据。内容输出部63由例如AV解码器等所组成。
特征信息提取部64从书签取得部61所取得的书签中,提取该书签所含有的与内容及/或其重放位置上的内在内容相关的特征信息。如之前所说明的,特征信息是指与被标上了书签的内容或该内容的重放位置相关的用于启示·表现其内在内容的信息。特征信息是利用则电视2在对内容、或重放位置信息所指定的区间中的内在内容进行推定时所要用的信息。作为特征信息的具体例,例如有内容的标题、内容的演出者信息、内容中含有的字幕信息、音频数据的文本化产物、从视频数据中提取的字符串、内容的缩略图像等。上述特征信息只要是利用侧电视2在类推内容的内在内容和书签中的重放位置时所能利用的信息即可,除了该些例子,还可以包括有:内容的种类;若是体育节目,则是用于识别比赛的信息;若是棒球比赛,则是攻守回合和比分的信息;若是足球赛,则是经过时间和比分的信息;若是电影或电视剧,则是台词或是从画面显示中所能读取的商品名等关键字,等等。
在本实施方式中,在内容取得部62根据书签取得部61所取得的原书签来欲取得内容时,若发生了失败,则特征信息提取部64以该失败为触发进行动作。内容取得的失败可以由内容取得部62通知给特征信息提取部64。也可以由特征信息提取部64来监视内容取得部62,以检测上述失败。
另外,特征信息提取部64并不限于上述的技术结构。不光是在内容取得部62无法取得内容时,特征信息提取部64还可以在书签每次被利用时必定进行提取,或可以按每一规定间隔时间来提取特征信息。或在得知该书签的利用者有多数时,针对拥有多数利用者的书签来提取其当中的特征信息,或可以依照来自便携式电话4等的用户指示来提取特征信息。特征信息提取部64把从书签中提取出的特征信息输出给代替内容检索部65以及重放位置推定部66。
代替内容检索部65使用由特征信息提取部64从书签中提取出的特征信息,检索利用侧电视2所能够阅览的代替内容,以代替与该书签对应的正规内容。
具体为,代替内容检索部65参照内容取得信息存储部84中存储的、保存有利用侧电视2所能阅览的内容的内容源的地址信息,并在各内容源中检索是否存在所要的代替内容。内容源只要将内容以利用侧电视2能够利用的状态来保管即可。例如,内容源可以是利用侧电视2的所有者即用户B所签约的内容分发服务器6之类的、能够介由互联网来连接的外部装置,也可以是利用侧电视2介由家庭内LAN所连接的录像装置、家庭服务器等,还可以是能够在利用侧电视2上拆装的USB存储器等外部存储介质,或是利用侧电视2中内设的HDD等存储装置。
例如在对内容分发服务器6进行代替内容的检索时,代替内容检索部65介由通信部52将上述特征信息用作检索查寻,来发送给内容分发服务器6,以进行检索。具体如下。代替内容检索部65将上述特征信息中含有的文本作为关键字,然后从内容分发服务器6中取得内容标题中含有该关键字的内容的目录;或,代替内容检索部65也可以使用作为特征信息的缩略图像,取得含有与该缩略图像类似的图像的内容的目录,在该情况时,内容分发服务器6具备如下功能:能够从自装置所保存的内容当中,检测出与其他内容服务提供方(内容分发服务器5)的用户A所推荐的场面相互类似或相当的内容。由此,内容分发服务器6能够向自装置的服务B的加入者即用户B,提供与其他服务加入者所推荐的场面相同的场面。当利用侧电视2所请求检索的代替内容是电视剧内容、电影内容时,内容分发服务器6也可以具备如下功能:根据该内容的台词(字幕数据、声音数据)来在自装置内检索同等·类似的内容,并在特定出了所要的场面后,将该场面提供给利用侧电视2。
代替内容检索部65如上述那样,对利用侧电视2所能利用的内容源检索代替内容,然后生成用于一览表示候补代替内容的代替内容目录。图8表示了代替内容目录的具体例。代替内容检索部65以特征信息为检索条件进行检索的结果若是发现了条件一致的多个代替内容,则可以生成如图8所示的代替内容目录,并将该代替内容目录输出给显示部53,以用户能够选择各候补的方式来进行提示。由此,用户B能够根据自己的判断来指定想要的代替内容。或,代替内容检索部65也可以根据规定的条件,从多个候补中选出1个最佳的代替内容。例如,可以评价代替内容与原内容之间的类似度,然后选择最类似的代替内容,或可以将免费利用的内容优先选为代替内容。代替内容检索部65可以将作成的代替内容目录保存进存储部55的代替内容目录存储部82中。
图8是代替内容目录存储部82所存储的代替内容目录的具体例图。在此,图8所示的代替内容目录仅为一个例子,其并不限定本发明。在代替内容目录中,与代替内容ID相对应地含有有“地址”列、“标题”列、“内容源”列中的各种信息,代替内容ID用来独一无二地管理与其对应的代替内容。在“地址”中,放入有用于访问该代替内容的URL、进入码等。在“标题”中,放入有该代替内容的标题。在“内容源”中,放入有保管着该代替内容的装置及业者的名字等。除此之外,代替内容目录中还可以对应地存储用以表示该代替内容是收费还是免费的信息、类似度的值等。在“标题”中,另外还可以就每一代替内容,对应地存储使用户能得知是什么样的代替内容的信息(缩略图像等)。
通过在显示部53上显示该代替内容目录以供用户进行选择,用户便能够选择出在内容性上与未能利用的原书签所示的内容相类似或相当的更恰当的书签。
内容取得部62取得由代替内容检索部65或由用户所选定的代替内容。在对上述代替内容推定重放位置时,重放位置推定部66在上述代替内容中,推定与原书签所示的重放位置相对应的重放位置。
重放位置推定部66使用特征信息提取部64所提取的特征信息,在代替内容检索部65所发现的代替内容中,推定在内容性上与原书签所示的位置相类似或相当的重放位置,由此特定出替代的重放位置(代替重放位置信息)。重放位置推定部66读取出原书签中含有的涉及重放位置的特征信息,从代替内容中特定出一个或多个含有类似内在内容的区间。若检测出了多个候补的区间,重放位置推定部66也可以生成出重放位置的候补一览表,并以用户能够选择各候补的方式输出给显示部53,以进行提示。由此,用户B便能够自己来判断并指定期望的重放位置。或,重放位置推定部66也可以利用特征信息来判断各候补区间与原书签所示的重放位置之间的类似性,然后特定出一个最佳(在内容性上最最类的)的区间。此外,重放位置推定部66也可以将作成的候补区间(重放位置信息)一览表保存进存储部55的重放位置信息存储部83。
图9是重放位置信息存储部83所存储的、某代替内容中的候补区间的一览的具体例图。
重放位置推定部66从图8所示的代替内容目录中将代替内容ID为“can001”的代替内容选为最佳代替内容时,便在该最佳代替内容(can001)中对候补区间进行检测。
关于重放位置推定部66对候补区间进行检测的具体方法例,参照图9来进行说明。在此,设想原书签是图6所示的书签d5。
重放位置推定部66从特征信息提取部64取得与原书签d5中的内容重放位置相关的特征信息。具体为,取得<Info>要素内的文本信息“下半场28分 罗尼进球!曼联 1-0 阿森纳”以及重放开始位置“01:33:24”这一时点上的缩略图像(“YN1.jpg”)。在此,也可以取得“01:33:24”这个值来作为重放开始位置信息。
设想重放位置推定部66从代替内容“can001”中检测出了两个含有与上述缩略图像“YN1.jpg”相类似的场面的区间。在图9所示的例子中,该两个区间是候补区间No.1和候补区间No.2。在此,重放位置推定部66也可以将检测出的两个候补区间直接提示给用户B,以让用户B来选择。用户B能够先确认原书签中含有的内容标题、被标了书签的场面的详细信息等,然后依据该些特征信息来视听代替内容中的候补区间,并选择出与原书签相当的代替内容中的候补区间。另外,用户B也可以一边视听代替内容,一边操作便携式电话4来指定与原书签相当的区间(重放开始位置和重放结束位置)。
或,重放位置推定部66也可以使用其他的特征信息,以更好精度来特定出类似的区间。
重放位置推定部66还可以从候补区间No.1的开始位置上的图像中,取得“曼联 0-0 阿森纳 下半场28分”这一文本信息。以此来比较候补区间No.1和候补区间No.2与原书签d5含有的<Info>要素内的上述文本信息之间的类似度,并判定出候补区间No.1比候补区间No.2更与原书签类似。此外,如果同样的场面大致都处于同样的重放位置的这一前提成立的话,重放位置推定部66也可以将与原书签中的重放开始位置“01:33:24”最接近的、重放开始位置“01:43:24”的候补区间No.1,特定为最类似的区间。
上述的候补区间的特定方法仅仅是一个例子,其并不限定重放位置推定部66的技术结构。
代替内容检索部65或重放位置推定部66介由GUI向用户以能够进行选择的方式对各候补作了一览显示后,选择受理部67介由GUI受理用户选择候补的信号,以将用户所选择的候补的信息传送给控制部50中的各个部。
在本实施方式中,例如代替内容检索部65在显示部53上显示多个候补的代替内容。然后,用户B操作便携式电话4来选择其中的一个代替内容,并按下决定键。选择受理部67根据从便携式电话4送出的红外线信号以及显示部53中显示的GUI,特定出所被选择的代替内容,并指示内容取得部62取得该代替内容。同样地,重放位置推定部66在显示部53上显示所检测出的几个候补区间,以供用户介由便携式电话4来作选择。选择受理部67特定出所被选择了的候补区间,并将上述代替内容的重放开始位置通知给内容输出部63。
选择受理部67也可以将用户B所选择的代替内容以及该代替内容的恢复重放位置(候补区间)的信息传送给用以更新书签的书签更新委托部68。
书签更新委托部68用以向作成原书签的用户A委托对书签取得部61所取得的该原书签进行更新。具体为,当代替内容检索部65特定出了代替内容时,或当重放位置推定部66推定出了上述代替内容的代替重放位置信息时,书签更新委托部68便生成含有上述代替内容以及该代替内容的重放位置信息的更新提案书签d15,以提案将该更新提案书签d15追加进原书签。
例如,在本实施方式中,若利用侧电视2使用原书签d5却未能够对内容分发服务器5的内容进行恢复重放,则在从内容分发服务器6取得到了类似的代替内容时,由书签更新委托部68用XML文件来新形成用以对该代替内容进行恢复重放的书签,并将其作为更新提案书签d15发送给用户A的便携式电话3。在本实施方式中,由于书签d5中记述有作成者用户A的便携式电话的邮箱地址,因此利用侧电视2能够从通信部52向便携式电话3发送更新提案书签d15。
用户A从利用侧电视2收到了书签更新的提案后,通过便携式电话3确认更新内容,若认为可以更新,便基于更新提案书签d15来更新原书签d5,并将更新后的书签d16上传给书签管理服务器7。更新后的书签d16中不但含有内容分发服务器5的内容的URL,还含有内容分发服务器6的代替内容的URL。因此,更新后的书签d16是从书签d5扩展开的、即使是无法利用内容分发服务器5的用户也能够通过访问内容分发服务器6来视听类似的内容的书签。
由此,即使是之后试图利用该书签的其他利用侧电视不具备发现所能视听的代替内容的功能,也能够利用该书签。因此,对于多个非特定用户进行书签共有的书签共有系统100,能够实现与该书签共有系统100的目的相匹配的书签管理。
〔更新书签〕
图10是书签更新委托部68所生成的更新提案书签d15的具体例图。
在图10中用虚线表示的<ProposedBookmarkInfo>要素包含了作为下位要素的代替内容信息以及用作替代的重放位置信息。<ProposedBookmarkInfo>要素意味着:无权更新原书签的用户向有权更新原书签的作成者提案“追加该BookmarkInfo如何?”。<ProposedBookmarkInfo>要素内的<Address>表示了从内容分发服务器6所能取得的代替内容的保存场所。
图11是依照图10所示的更新提案书签d15来更新书签d5后所得到的更新后书签d16的具体例图。
即,图11所示的更新后书签d16是原书签作成者即用户A在认可了图10所示的<ProposedBookmarkInfo>要素后,操作便携式电话3来将<Proposed BookmarkInfo>要素中的内容正式追加进原书签d5后所作成的书签。
在图11所示的更新后书签d16中,<ProposedBookmarkInfo>要素被改记述为<AlternativeBookmarkInfo>要素,以与原来的<BookmarkInfo>要素作区别。通过如此地变更且登录标签名,便能够通过利用侧电视2来辨别作成者所作成的书签和作成者以外的其他用户所作成的书签。这能够用于对作成者用户A的免责措施。
也就是说,作成者即用户A虽然认可了将用户B提案的<ProposedBook markInfo>要素追加进自己的书签,但有时也无法判断该书签所引导的内容是否恰当。即,用户A不能连<ProposedBookmarkInfo>要素的内容都负责任。对此,通过重新记述成<AlternativeBookmarkInfo>要素来向书签的利用者表明这不是作成者作成的书签,从而使利用者明白使用该书签即使出现了问题也不是作成者的责任。另一方面,利用者侧也能够在<AlternativeBookmarkInfo>要素的使用时,将其视为作成者所无法保证其内容的书签来慎重使用。
如上述那样,在本发明的书签共有系统100中,能够向最初作成的书签不断追加代替内容的书签,以扩展书签。利用侧电视2在利用连带了许多代替内容书签的书签时,也可以尝试使用上述书签中含有的全部地址,若判断全部地址都不能使用时,则进行新代替内容的检索动作。
书签的数据形式并不限于上述的XML形式。只要书签在其形式上能够被利用书签的各装置解释为是由多个要素组成的构造体,则可以运用任意形式的书签。
〔书签的利用序列〕
图14是在书签共有系统100中,上传至书签管理服务器7的书签被利用时的各装置的处理流程的序列图。在基于图14的说明中,设想了以下的场景:用户B用便携式电话4阅览用户A的网络日志,然后将网络日志中贴有的链接即书签URL下载至便携式电话4,之后利用红外线将该书签URL与缩略图像一同发送给利用侧电视2,从而由利用侧电视2利用根据上述书签URL从书签管理服务器7所取得的书签。还设想了以下场景:利用侧电视2试图重放与书签相对应的内容,然而却无法从内容分发服务器5取得内容,因此使用特征信息来从内容分发服务器6取得代替内容,接着,用户B开始视听其介由便携式电话4所指示的代替内容,然后用户B进一步通过便携式电话4来指定用作替代的书签开始/结束位置。此外,在图14所示的例中,还设想了以下场面:为了追加所发现的代替内容的书签,而向作成者委托进行更新,然后书签被更新。在此,设想用户B能够将便携式电话4用作遥控器来遥控利用侧电视2。
首先,设想用户B通过便携式电话4来访问网络日志服务器8,并看到了用户A的介绍有推荐影音的网络日志,且发现了有趣的记事。用户B操作便携式电话4,介由互联网从网络日志服务器8取得埋设有附随于该记事的书签URL的缩略图像(S21)。然后,便携式电话4通过红外线向利用侧电视2发送所取得的缩略图像(S22)。
利用侧电视2提取缩略图像中埋设的书签URL,并使用该URL来访问书签管理服务器7(S23)。然后,利用侧电视2从书签管理服务器7下载书签URL所示的书签(S24)。
接着,利用侧电视2使用下载的书签中含有的内容取得地址,尝试从内容分发服务器5取得内容(S25)。然而,因未与内容分发服务器5作内容取得的契约等理由,利用侧电视2从内容分发服务器5收到拒绝提供内容的通知(S26)。因此,利用侧电视2陷入即使使用上述书签也无法取得书签所指定的目标内容的这一状况。
对此,利用侧电视2使用包含在刚才所下载的书签中包含的特征信息,检索在内容性上类似于未能得到的内容的代替内容。在此,针对用户B所签约的内容分发服务器6进行代替内容的检索(S27)。
利用侧电视2接收了来自内容分发服务器6的检索结果后,生成代替内容目录,并将代替内容目录显示在显示部53中,以提示给用户B(S28)。
用户B操作便携式电话4来从利用侧电视2所显示的代替内容目录中指定出代替内容。此时,便携式电话4通过红外线向利用侧电视2发送用以表示用户B所选择的代替内容的内容选择信号(S29)。关于从代替内容目录中指定代替内容的方法,其并不限于是由用户B来指定,也可以由利用侧电视2自身根据特征信息来作出判断,并指定最佳的代替内容。
利用侧电视2接收了内容选择信号后,根据内容选择信号,向内容分发服务器6要求视听代替内容(IPTV视听认证)(S30)。内容分发服务器6对来自利用侧电视2的视听认证信息进行确认,若认证信息一致(认证无问题),便向利用侧电视2发送所被请求的代替内容的代替内容取得地址等信息(S31)。利用侧电视2使用所接收的代替内容取得地址等信息,访问内容分发服务器6,以请求开始所期望的代替内容的流传送(S32)。作为针对该请求的答复,内容分发服务器6开始进行所指定的代替内容的流播放(S33)。利用侧电视2在重放代替内容时,还可以根据特征信息来进一步从含有与原书签所示内容同样的影音的代替内容中,指定出用作替代的重放位置。
接着,在利用侧电视2重放代替内容的过程中,用户B操作便携式电话4来指定代替内容中的相当于原书签所示的重放位置的重放位置。此时,便携式电话4通过红外线向利用侧电视2发送提案书签开始位置信号(S34)以及提案书签结束位置信号(S34')。若是指定代替内容的重放位置来重放代替内容,则除了上述的方法以外,可以指定内容中的仅一处的定时(仅有S34),然后将该定时作为提案书签更新指示信号发送给利用侧电视2。
利用侧电视2根据提案书签开始位置信号以及提案书签结束位置信号,生成表示有用户B所指定的代替内容中重放位置(重放区间)的更新提案书签。利用侧电视2将生成的更新提案书签发送给原书签的作成者即用户A的便携式电话3(S35)。
用户A确认了发送过来的更新提案书签的内容后,若接受提案且想要更新,便向书签管理服务器7发送接受了提案后的更新后书签,以更新书签(S36)。
像这样,即使书签所示的内容无法利用,也能够采取用特征信息来检索代替内容的这一措施,且能够在发现了代替内容之后,向原书签中追加代替内容的书签,以使该代替内容的书签也能被利用。
〔书签利用处理流程〕
图15是利用侧电视2中的图14所示的书签利用处理的流程图。
首先,利用侧电视2的书签选择部60等待含有书签URL的缩略图像从便携式电话4经由红外线通信部51发送过来(S201)。当书签选择部60接收到上述缩略图像时(在S201中为“是”),则从该缩略图像中提取书签URL,并将书签URL输出给书签取得部61。
书签取得部61使用上述书签URL,从书签管理服务器7取得书签(S202)。内容取得部62使用书签取得部61取得的书签中所含的内容取得地址、认证信息,委托内容分发服务器5分发书签所示的内容(S203)。
在此,若内容取得部62从内容分发服务器5取得到了书签所示的内容,即,若认证成功(在S204中为“是”),内容输出部63便根据书签中含有的重放位置信息,向显示部53以及音频输出部54输出自指定的重放位置起的内容,以进行重放(S205)。
另一方面,若内容取得部62未能从内容分发服务器5取得到书签所示的内容(在S204中为“否”),特征信息提取部64便提取书签取得部61所取得的书签中的特征信息(S206)。
接着,代替内容检索部65将特征信息提取部64提取的特征信息用作检索查寻(query),对内容分发服务器6等内容源进行代替内容的检索(S207)。代替内容检索部65在检索内容时,主要使用针对内容整体所赋予的特征信息,但也可以并用针对内容的一部分(帧单位)所赋予的特征信息。代替内容检索部65根据各内容源所答复的检索结果,列出代替内容的候补。
在此,若因存在多个代替内容的候补而无法特定出单个所要代替重放的代替内容(在S208中为“否”),代替内容检索部65便将代替内容目录输出给显示部53。便携式电话4接受用户B的操作,从利用侧电视2显示的代替内容目录的候补中选出一个代替内容。此时,便携式电话4通过红外线向利用侧电视2发送用以表示用户B所选择的代替内容的内容选择信号。然后,选择受理部67介由红外线通信部51,接收从便携式电话4发送过来的内容选择信号来决定代替内容(在S209、S208中为“是”)。
另一方面,若代替内容的候补仅有一个,或代替内容检索部65从代替内容的候补中选出了一个最佳的代替内容(在S208中为“是”),代替内容检索部65便将所决定的代替内容的信息输出给内容取得部62。
内容取得部62从例如内容分发服务器6中取得在步骤S208中决定的代替内容(S210)。内容取得部62也可以将所取得的代替内容保存进内容存储部81,还可以把在取得代替内容时所用过的信息保存进内容取得信息存储部84。
接着,重放位置推定部66根据特征信息提取部64所提取的特征信息,推定所取得的代替内容中的与书签所示重放位置相当的、所应重放的位置(S211)。重放位置推定部66在推定重放位置时,虽然也可以并用针对内容整体所赋予的特征信息,但在此主要使用针对内容的一部分(帧单位)所赋予的特征信息。通过复合利用多种特征信息,可以使在内容性上接近原书签的代替书签的精度得以提高。重放位置推定部66也可以根据推定结果,将重放位置(重放区间)的候补按照与代替内容呈对应的方式保存进重放位置信息存储部83。
在此,若因存在多个重放位置(区间)的候补而无法特定出单个与原书签所示重放位置相当的重放区间(在S212中为“否”),重放位置推定部66便将重放区间的候补输出给显示部53,以供用户B来作选择(S213)。用户B操作便携式电话4,从利用侧电视2所显示的重放区间的候补中选择出一个重放区间。选择受理部67介由红外线通信部51,接收从便携式电话4发送的重放位置选择信号来决定代替内容的重放区间。选择受理部67将决定的代替内容重放位置的信息(重放区间)输出给内容输出部63。
另一方面,若重放位置的候补仅有一个,或重放位置推定部66从重放位置的候补中决定出了最佳的代替内容重放位置(在S208中为“是”),重放位置推定部66便将所决定的代替内容的重放位置信息输出给内容输出部63。
内容输出部63依照所决定的重放位置,将代替内容输出给显示部53以及音频输出部54(S214)。
本发明并不限于上述各实施方式,可以根据权利要求所示的范围进行各种的变更。即,对在权利要求所示的范围内作了变更后的技术方案进行组合而得到的实施方式也包含于本发明的技术范围之内。
例如,在上述实施方式中,虽然将便携式电话3、4用作遥控器来遥控作成侧电视1以及利用侧电视2,但本发明并不限定于此,也可以使用以往的电视遥控器来指示书签的作成。但如果是用便携式电话等通信终端装置与电视进行近距离无线通信来进行书签等信息的收发的话,则作成侧电视1以及利用侧电视2不一定要与网络连接。即,即使是无法连接网络的利用侧电视2,也能够从便携式电话4来提供书签,并使利用侧电视2检索所能利用的代替内容,且重放代替内容。
在上述的实施方式中采用了以下方式,即:为了公开上传至书签管理服务器7的书签,向便携式电话3提供书签URL,然后由便携式电话3来使网络日志服务器8公开书签。但本发明并不限定于此,书签管理服务器7也可以具备向多个非特定用户公开上传的书签的功能。即,本发明的书签共有系统中也可以不含有网络日志服务器8。
在上述的实施方式中,举例说明了作成侧电视1的特征信息生成部24根据构成内容主体的视频数据以及音频数据,或根据该内容的元信息(参照图4)来提取文本信息,但特征信息生成部24的技术结构并不限于此。例如,在将含有内容的关联信息的内容关联信息与该内容同步地提供时,不但可以从内容本身中提取特征信息,还能够从与该内容同步提供的内容关联信息中,提取特征信息。上述内容关联信息例如可以是副声道广播、文字广播、介由互联网从服务器取得的各种关联信息等。
此外,上述内容关联信息无需与内容同步地提供,若内容关联信息中具有能够实现与内容中的重放位置同步的信息,则即使是在与内容取得、内容重放相不同的定时上取得的上述内容关联信息也无妨。例如,作成侧电视1能够具有如下技术结构:从内容关联信息的提供方(例如内容分发服务器5、6等)中预先取得上述内容关联信息并作积存,其后在作成书签时,从积存的内容关联信息之中,检索出与欲要标上书签的内容相对应的内容关联信息,并从内容关联信息中提取特征信息。作成侧电视1还能够具有如下技术结构:在作成书签时,从互联网中检索与欲要标上书签的内容相对应的内容关联信息,若发现了对应的内容关联信息,便下载利用;或,作成侧电视1还可以向书签管理服务器7发送该内容关联信息的取得地址信息(URL),由此委托书签管理服务器7来作成书签,然后由书签管理服务器7根据该取得地址信息来取得内容关联信息,并将内容关联信息用于书签的作成。
图16A表示了内容关联信息的数据结构的一例。如图16A所示,内容关联信息与内容同样,与作为元信息的内容ID构成对应关系,因此能够识别出其是哪个内容的关联信息。内容关联信息将在以后详述。此外,内容关联信息的主体中还可以含有用以与内容同步的信息(重放时间等)。此时,即使作成侧电视1分别地取得内容和内容关联信息,也能够与内容同步地处理该内容关联信息。因此,作成侧电视1的特征信息生成部24能够在从便携式电话3收到了书签登录信号d4的这一定时,从要被登录书签的内容的内容关联信息中提取出特征信息。具体为,特征信息生成部24从电影内容的内容关联信息即字幕中,以及从音乐节目内容的内容关联信息即曲名、演唱者、作曲者、作词者等这些反射投影(television opaque projector)字符中,提取出文本信息。关于内容关联信息的数据方式,可以是文本方式,也可以是二进制方式(音频、视频、压缩数据等的二进制码)。若内容关联信息是与内容同步输出,则与内容主体同样,使内容关联信息与书签登录信号d4被输入作成侧电视1的这一定时构成对应关系,且将内容关联信息登录成书签的一部分。
〔书签共有系统的变形例〕
(1)错过的视听
通过本发明的书签共有系统100,在利用侧电视2的用户希望在内容的广播(分发)规定日期后视听该内容时,利用侧电视2能够利用本发明的书签来取得具有同样的内在内容的代替内容。
例如,设想图2所示的用户B在看到其他用户A的网络日志时(d8),发现了曾想视听但错过了的数字广播节目(内容)。
用户B无法通过利用侧电视2来视听用户A上传到上述网络日志中的、已标了书签的广播节目。导致无法视听的原因例如为上述节目是仅在其播放时日播放的节目;上述节目是用户B的居住区域所无法接收的广播站所分发的节目,等等。
对此,用户B的利用侧电视2对用户B所签约的IP电视服务商用以存储/管理内容的服务器(例如内容分发服务器6等这些用以分发内容的服务器)进行访问。利用侧电视2能够将用户A的书签中含有的特征信息用作检索查寻,从上述IP电视服务今后将要广播的节目当中,检测出在内容性上与标有上述书签的原节目接近的代替节目。
利用侧电视2发现了代替节目后,从上述服务器取得有关该代替节目的信息(广播时日、频道、VoD视听时所需的内容识别信息(节目编号)等)。利用侧电视2使用取得的各种信息,通过VoD来获取、重放实时节目,或能够对重放/录像进行预约。之后,用户B能够使用书签来视听与发觉曾错过的节目在内容性上相近的代替节目。
(2)预测(complete)推荐的视听
在上述实施方式中说明了,利用侧电视2能够使用本发明的书签中的特征信息来检索接近于原内容的代替内容。
然而本发明并不限定于此,利用侧电视2使用本发明的书签(所内包的特征信息)时,不仅是代替内容,还能够检索与标有书签的内容相关的关联内容。
例如,设想用户B的利用侧电视2欲要取得用户A所作成的、电视连续剧的最终集(第11集)的书签。另外,还设想利用侧电视2无论标有书签的电视连续剧的最终回可否取得,都根据上述电视连续剧的特征信息识别与该电视连续剧相关的上一集内容(即第10集),并判断是否能够通过该利用侧电视2来进行重放。
若没有上一集的视听履历,利用侧电视2可以根据上述第11集内容的书签中的特征信息,检测关联内容即第10集的内容,并询问用户B是否要视听。
根据上述结构,利用侧电视2能够利用书签中的特征信息,检测与原内容相关的关联内容,并从多个具有关联性(连续性)的内容中,向用户B推荐未视听过的内容。由此,用户B不会从具有关联性的多个内容当中错过部分内容,从而提高了用户的使用便利性。
在根据视听履历来判断是否曾视听过上集内容时,可以不由利用侧电视2,而是由向利用侧电视2分发内容的内容分发服务器6来判断。此时,内容分发服务器6根据利用侧电视2所提供的书签中的特征信息(检索查寻),检索所被请求的内容,若该内容与其他关联内容构成有对应关系,便也可以将该关联内容与上述内容一起提案给利用侧电视2。
(3)类似内容的检索
此外,利用侧电视2还能够将本发明的书签中的特征信息用作检索参数,使用书签来检索所重放的内容的类似内容。
图16A是作成侧电视1所重放的某音乐节目内容的内容关联信息的具体例图。图17是表示上述音乐节目内容以及内容关联信息被重放时的、作成侧电视1的显示画面的具体例以及正在视听该内容的用户进行书签登录操作时的样子的图。
作成侧电视1的内容取得部62针对上述音乐节目内容,取得如图4所示的内容以及如图16所示的内容关联信息。内容和内容关联信息能够通过元信息中含有的内容ID来构成联系。
此外,在本实施方式中,如图16A所示,内容关联信息中具有与内容相关且与重放时间信息构成了对应关系的信息,该重放时间信息用以使内容关联信息与上述音乐节目内容同步重放。在本实施方式中,由于视听的是音乐节目内容,所以内容关联信息中含有在该重放时所演唱的歌曲的相关信息。具体为,在内容关联信息中依次包含有曲名、演唱者、作曲者、作词者。
内容输出部22与上述音乐节目内容(图4)的输出进行同步,将图16A所示的内容关联信息以重叠显示的方式输出到显示部13。其结果如图17所示,在作成侧电视1的显示部13中,与上述音乐节目内容重叠地显示出当前所演唱的歌曲的曲名、演唱者、作曲者、作词者。
在本实施方式的图16A以及图17所示的例子中,内容关联信息与内容的重放位置(内容的时刻)构成为对应关系,该内容关联信息中具有的信息与内容重叠地被输出。关于作成侧电视1等输出该内容关联信息的方法,例如可以由作成侧电视1衡定地在规定的时间位置上输出;或,对于必须与内容同步输出的内容关联信息,可以依照用于重叠显示的布局信息来进行输出。内容关联信息中可以含有布局信息,也可以仅含有布局信息的取得地址,以便根据需要来取得。
图16B是用以对内容关联信息的输出布局进行指定的布局信息的例图。通过图16B所示的例子,能够根据预先定好的标签来判别构造化的布局信息中的各种信息的意义。曲名能够通过标签<song>等来判别,歌手能够通过标签<singer>等来判别。另外,对于每种需要重叠输出的信息,都指定好了用以指定布局的信息,即,画面上的输出位置<position>(x,y)和输出设定<font>(字体、尺寸)。在该例中,输出位置是绝对坐标,但相对坐标也不妨。另外,若采用XML方式来作成该布局信息,则能够容易地追加多种多样的数据属性。例如,在图16B所示的例子中,与编曲者A相关的信息并不是与内容重叠输出的信息,为了表达这一事项,而不对编曲者A的信息的输出位置<position>进行记述。当然,这仅是一个实施例,对于涉及布局的XML格式和标签的意义,可以根据每种服务样态作任意的定义。只要标签能够用于指定是否进行显示,或在需要显示时能够用于对属性信息进行指定,则可以任意地定义标签的意义。另外,也可以采用XML以外的数据形式。
在正在重放图17所示的内容时,与前述同样,设想书签登录信号d4从用户A的便携式电话3发出,并被作成侧电视1接收。此时,特征信息生成部24根据如图4所示的内容及/或如图17所示的内容关联信息,提取特征信息。书签生成部25作成含有上述特征信息的书签。书签发送部26向书签管理服务器7发送该书签以及登录委托消息d5,以委托书签管理服务器7对该书签进行登录。在此,可以在作成侧电视1、利用侧电视2等IPTV装置中,例如只要将红外线遥控信号码当中未使用的一个码分配成用于书签登录的书签登录信号d4便可,由此,当接收到该分配的信号时,便能够开始进行预先安装在IPTV中的书签作成处理。
其结果,图18所示的书签被登录进书签管理服务器7。
图18是登录进书签管理服务器7的书签的具体例图。图18中仅记载了夹在标签<BookmarkInfo>之中的部分。关于书签所含的其他信息,由于与上述实施方式(图6)中所述的相同,因此省略说明。
在图18所示的书签例中,标签<Info>内具有特征信息生成部24从图17所示的内容关联信息中提取的特征信息,即:“OO之歌”(曲名)、“演唱者X”、“作曲者Y”、“作词者Z”。
设想在利用该书签的利用侧电视2中,按上述记载顺序将标签<Info>内的特征信息依次辨别为是曲名、演唱者、作曲者、作词者的信息。
利用侧电视2通过利用上述书签,便能够从上述音乐节目内容中演唱者X的起唱部分开始,进行恢复重放。当然,由于是用户A作成的书签,因此用户B的利用侧电视2也可能无法重放上述音乐节目内容。此时,按照上述实施方式中说明的顺序,由利用侧电视2使用图18所示的书签中的特征信息来检索代替内容,然后如图19所示那样,重放用户A所视听过的上述音乐节目内容的代替内容。图19是利用图18所示的书签并显示出代替内容时的利用侧电视2的显示画面的具体例图。若内容关联信息也需与代替内容进行同步,则内容输出部63也可以如图19所示那样,将代替内容的反射投影(television opaque projector)字符重叠显示。
此外,在本实施方式中,能够使用所利用过的书签中的特征信息(或视听中的内容的内容关联信息),进行类似内容的检索,并向用户提示类似内容的目录。利用侧电视2的内容输出部63在输出内容的同时,还显示用于检索类似内容的GUI(Graphic Processing Unit)画面。例如,在图19所示的例中,用户B操作便携式电话4,能够通过按下“开始”键来指示检索与视听中的内容的“曲名”相一致的其他所能视听的类似内容。代替内容检索部65在用户介由上述GUI画面发出检索指示的这一定时,从视听中的内容的内容关联信息中,或从为了重放该视听中的内容而利用的书签中的特征信息中,提取出曲名,并向显示部53输出拥有包含该曲名(在本例中为“OO之歌”)的内容关联信息的内容(或含有该曲名的书签)的目录。
图20是代替内容检索部65的类似内容检索结果被显示在显示部53上时的显示画面的例图。在图20所示的内容目录中,一览显示出含有“OO之歌”演唱场面的、不问演唱者和作曲者等是谁的内容。
根据上述结构,基于视听中的歌曲的曲名,能够较容易地检索自己的利用侧电视2所能视听的、演唱有同一歌曲的其他类似内容。例如,当用户对视听中的歌曲很中意时,能够将曲名作为检索关键字来检索类似内容,由此便能够简单地对广泛包括原创曲和改唱曲等在内的、涉及该歌曲的各种内容。关于演唱者、作曲者等这些其他的内容关联信息,也同样能够将其用作检索关键字,来在所能视听的范围内检索类似内容。
(关于书签管理服务器)
在上述实施方式的技术结构中,书签共有系统100的作成侧电视1具备有特征信息生成部24以及书签生成部25,但本发明的书签共有系统100的结构并不限定于此。例如,书签管理服务器7也可以具备特征信息生成部24以及书签生成部25,且书签管理服务器7也可以对应作成侧电视1的要求来生成含有特征信息的书签,并将该书签反馈给作成侧电视1。
图21是,在由书签管理服务器7来作成书签的情况下的、作成侧电视1的主要结构的框图。图21所示的作成侧电视1的结构与图2的作成侧电视1的结构相比,不同点在于图21的作成侧电视1具备了要求生成部27来取代书签生成部25,还具备了要求发送部28来取代书签发送部26。
作成侧电视1收到了从便携式电话3发出的书签登录信号d4后,要求生成部27便在书签登录信号d4被收到的这一定时,从内容取得部21取得内容输出部22所正在重放的内容的内容ID。然后,从正重放的内容中特定出与位置指定部23所指定的定时相对应的重放位置。要求生成部27生成包含有所特定的内容ID以及所特定的重放位置的书签生成要求。
要求发送部28将要求生成部27生成的书签生成要求发送给书签管理服务器7。
图22是可作成书签的书签管理服务器7的主要结构的框图。
如图22所示,书签管理服务器7至少具备有控制部70、存储部71、通信部72。
存储部71用以存储书签管理服务器7所管理的书签。在本实施例中,书签管理服务器7对自身所作成的书签进行数据库化,将该些书签作为书签数据库92,存储进存储部71。
通信部72介由通信网与外部装置进行通信。例如,通信部72介由互联网与作成侧电视1、利用侧电视2、便携式电话3、便携式电话4、内容分发服务器5、内容分发服务器6进行通信。
控制部70用于统辖控制书签管理服务器7的各个部,其具备作为功能块的特征信息生成部24、书签生成部25、接收数据分析部90、发送数据构建部91。
接收数据分析部90用于接收从作成侧电视1发送过来的书签生成要求,并对其进行内容分析。
图23A是作成侧电视1的要求生成部27所生成的书签生成要求的数据结构的概念图。如图23A所示,书签生成要求中至少含有内容ID和内容的重放位置信息。接收数据分析部90将从上述要求中提取出的内容ID和重放位置,通知给特征信息生成部24以及书签生成部25。
书签生成要求例如可以通过HTTP协议的HTTP POST法来实现。当然,只要协议本身能够实现从客户机向服务器发送要求,便无特别限定。图23B表示了基于HTTP POST法的书签生成要求的具体例。在图23B所示的例中示出了以下的参数:用来表示内容ID的“content-id”;用来特定内容的URL;用“bm-start”和“bm-end”来各自定义的、内容中重放位置的信息(重放开始位置以及重放结束位置)。通过如该例那样在书签生成要求中排列记述多个信息,便能够委托将多个信息登录进一个书签来加以作成。以上,使用图23B所示的例子,对能够按照特征信息、书签格式来对书签生成要求的数据结构作恰当设计的这一点进行了说明。但本发明的书签生成要求的内容并不限于是图23B所示的内容。
若书签管理服务器7成功地作成了书签,书签管理服务器7便生成如图23C所例示的含有作成的书签的地址信息(URL)的响应信息。书签管理服务器7将生成的响应信息通知给作为请求方的作成侧电视1等。从图23C所示的例子可知,书签管理服务器7根据图23B所示要求中含有的“host”和“request-id”,生成了书签的文件名(“iptv1-1.html”)。
另外,为了按每个用户来提供书签服务,也可以运用Basic认证。在该情况时,若请求方(例如作成侧电视1)将无认证信息的书签生成要求发送给书签管理服务器7,则书签管理服务器7之后会向作成侧电视1返送要求进行认证的错误响应(error response)。由此,作成侧电视1需要再次发送在认证头(“Authorization:”)中附加有用户信息和进入码的、基于上述HTTP的要求。如上所述,本发明中的要求和响应并不限于是要通过HTTP协议,而是能够采用任何的通信方案。因此,即使是对于用户认证的有无及其方法,本发明很明显是不受上述例子的限定的。
特征信息生成部24从根据内容ID及重放位置信息而特定的内容(图4)及/或内容关联信息(图17)中,提取特征信息。内容以及内容关联信息可以介由通信部72,从分发该内容的内容分发服务器5(或内容分发服务器6)来提供。
书签生成部25根据内容ID、重放位置以及特征信息,生成如图6、图7、图18等所示的书签,并将该书签登录进书签数据库92。
发送数据构建部91用以生成与书签管理服务器7所接收的要求相对应的响应。作为对上述书签生成要求作出的响应,发送数据构建部91生成所被登录的书签的书签URL以及登录结束通知(d6)。发送数据构建部91所作成的书签URL以及登录结束通知d6可以发送给作为要求发送方的作成侧电视1以及同一用户的便携式电话3的这两方,或也可以发送给其中某一方。
另外,若特征信息生成部24包含在作成侧电视1中,那么要求生成部27可以将特征信息生成部24所提取的特征信息添加进书签生成要求中,然后将该书签生成要求通知给书签管理服务器7。此时,书签管理服务器7仅具备有书签生成部25即可,如此,书签生成部25能够使用接收数据分析部90从书签生成要求中提取出的特征信息来作成书签。
图24是,在由书签管理服务器7来作成书签的情况下,正在视听内容的用户进行书签登录操作时的样子以及作成侧电视1和便携式电话3各自显示部中显示的显示画面的例图。
当用户A在通过作成侧电视1视听某内容的过程中使用便携式电话3发送出了书签登录信号d4时,按照上述的次序,由作成侧电视1向书签管理服务器7发送书签生成要求。书签管理服务器7的书签生成部25对应该要求而生成书签,并将该书签登录进书签数据库92,从而得到该书签的URL。书签URL以及登录结束通知d6被发送给作成侧电视1及/或便携式电话3。
在图24所示的例中,作成侧电视1在收到了书签URL以及登录结束通知d6后,只对用以表示书签已被顺利登录的消息进行显示。为了不妨碍视听,优选该消息以较小的占用面积在短时间内显示。也可以在便携式电话3中显示出用以表示书签已被顺利登录的消息的同时,还一并显示出适于管理该书签的有用信息。由此,用户A能够利用便携式电话3较容易地用新作成的书签来进行其他处理。例如,用户A能够用便携式电话3进行简单的操作,将作成的上述书签上传至网络日志服务器8。
在上述实施方式的书签共有系统100的技术结构中,利用侧电视2具备有特征信息提取部64、代替内容检索部65、重放位置推定部66;在无法视听书签所示的内容时,由利用侧电视2来检索代替内容。但本发明的书签共有系统100的技术结构并不限定于此。例如,书签管理服务器7也可以具备特征信息提取部64、代替内容检索部65、重放位置推定部66(无图示)。此时,书签管理服务器7在判断出了利用侧电视2无法视听其自身所请求的书签的对应内容时,便使用上述书签中的特征信息,向分发利用侧电视2所能视听的内容的内容分发服务器6,询问(发送数据构建部91生成内容检索要求,并将其发送给内容分发服务器6)代替内容。书签管理服务器7根据询问的结果,生成代替内容的候补目录,并提供给利用侧电视2。
利用侧电视2从书签管理服务器7接收了上述候补目录后,将其显示在自身的显示部53上,以供用户选择。用户能够选择所期望的代替内容,并视听用于取代所未能视听的原书签所示的内容的代替内容。
〔用以解决上述问题的方案〕
上述书签利用装置的特征在于具备:特征信息提取单元,从至少包含有内容取得地址、重放位置信息、特征信息的书签中提取上述特征信息,其中,上述内容取得地址用以取得内容,上述重放位置信息用以指定该内容的重放位置,上述特征信息用以对上述内容的内在内容与上述重放位置所表示的内在内容的其中至少一方进行表达;代替内容检测单元,根据上述特征信息提取单元所提取的特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检测包含有与上述内容的全部内在内容或与上述内容的处于上述重放位置上的内在内容相类似或相当的内在内容的代替内容。
根据上述结构,上述特征信息提取单元从至少包含有用以取得内容的内容取得地址、重放位置信息、特征信息的书签中提取上述特征信息,然后由上述代替内容检测单元使用上述提取的特征信息,检索在内容性上与上述内容相类似/相当的代替内容。
由此,书签利用装置能够发现与用上述内容取得地址所能取得的原内容不同的、在内容性上类似于/相当于上述原内容的代替内容。所发现的代替内容是由该书签利用装置所能利用的内容源所提供的内容。
通过上述结构,能够实现一种能够视听代替内容的书签利用装置,该代替内容是与曾想利用的书签所表示的内容相不同的其他内容,且含有与标了书签的内容相等同的内在内容。
根据上述结构,即使发生了因服务不同等原因而导致无法对所利用的书签所表示的内容进行视听的这种状况,书签利用装置也能够视听内在内容相类似的其他内容。因此,对于在接受不同服务的装置之间共有相互作成的书签的这类使用事例而言,本发明的书签利用装置尤其能够发挥很大效果。
例如,通过利用本发明来与多数的非特定用户共有用通信方案被标了书签的分发内容的数据,这样,即使其他装置不能访问被标了书签的内容数据本身,也能够从其他分发业者等中得到且视听与书签所示的内在内容相等同的内容。
优选上述书签利用装置具备:重放位置特定单元,根据上述特征信息对拥有与上述重放位置上的上述内容的内在内容相类似或相当的内在内容的、上述代替内容中的重放位置,进行特定。
在上述结构中,根据上述特征信息,不但能够检测代替内容,还能对含有与被标上了书签的原内容的重放位置上的内在内容相类似或相当的内在内容的、代替内容的代替重放位置进行特定。
由此,能够视听更正确反映原内容的内在内容的代替内容。
优选上述书签利用装置具备:书签更新单元,作成至少含有代替内容取得地址的代替书签,其中,上述代替内容取得地址用以取得上述代替内容检测单元所检测出的代替内容。
优选上述书签利用装置具备:书签更新单元,作成至少含有代替内容取得地址和代替重放位置信息的代替书签,其中,上述代替内容取得地址用以取得上述代替内容检测单元所检测出的代替内容;上述代替重放位置信息用以指定上述重放位置特定单元所特定的、上述代替内容中的重放位置。
通过上述结构,能够作成更正确反映了原书签所示的内在内容,且基于上述代替内容以及上述重放位置的另外的代替书签。
优选上述书签更新单元将作成的上述代替书签追加进原来的上述书签来更新该书签,以作成更新后书签。
根据上述结构,更新后书签既含有用于访问原内容的信息,又含有用于访问本次新发现的代替内容的信息。由此,之后利用该更新后书签的书签利用装置便能够取得自装置所能利用的某内容。
根据以上的结构,能够提高原书签的利用可能性,从而使更多的书签装置能够利用该书签。
上述书签更新单元也可以将上述更新后书签发送给作成原来的上述书签的书签作成装置,以委托上述书签的更新。
上述书签中含有的特征信息也可以用文本信息来表达上述内容的内在内容;上述代替内容检测单元也可以通过将上述文本信息中含有的字符串用作检索查寻,来检测与原来的上述内容相类似或相当的代替内容。
也可以具备对访问一个或多个内容源时所需的认证信息进行存储的内容取得信息存储部;上述代替内容检测单元也可以使用上述内容信息取得存储部中存储的认证信息来访问各内容源。
上述书签中含有的特征信息也可以是上述内容的图像数据;上述代替内容检测单元也可以将从上述图像数据中提取出的图像特征用作检索查寻,以检测与原来的上述内容相类似或相当的代替内容。
上述书签中含有的特征信息也可以是上述内容的上述重放位置上的图像数据;上述重放位置特定单元根据从上述图像数据中提取出的图像特征,特定与原来的上述内容的重放位置相类似或相当的、上述代替内容中的重放位置。
上述书签作成装置的特征在于具备:内容取得单元,从提供该书签作成装置所能利用的内容的内容源中取得内容;特征信息生成单元,从上述内容取得单元所取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;书签生成单元,生成至少含有上述内容取得单元在取得上述内容时所用过的内容取得地址、用以对上述内容的由用户指定的重放位置进行指定的重放位置信息、上述特征信息生成单元所生成的特征信息的,书签。
根据上述结构,书签作成装置不但能够将用以指定内容和重放位置的书签转达给书签利用装置,还能够将用以表达内在内容的特征信息也转达给书签利用装置。由此,在利用上述书签的书签利用装置侧,即使无法利用该书签所示的内容,也能够通过上述特征信息来类推该书签所指定的内容的内在内容。即,能够将上述特征信息用作在寻找内容性上类似的其他内容时所需要的线索。
上述特征信息生成单元也可以生成:用以对上述内容的、由用户指定的上述重放位置所表示的内在内容,进行表达的特征信息。
上述特征信息生成单元也可以连续地或定期地提取重放位置信息以及上述内容中的特定的文本信息,并且针对在上述文本信息发生了变化的这一定时上的重放位置,生成特征信息。
上述特征信息生成单元也可以根据附随于上述内容的、涉及该内容的元信息来生成特征信息。
上述特征信息生成单元也可以从构成上述内容的图像数据中提取文本信息来生成特征信息。
上述特征信息生成单元也可以从构成上述内容的音频数据中提取文本信息来生成特征信息。
上述特征信息生成单元也可以将表示从上述内容中提取出的图像数据或该图像数据保管场所的信息,作为特征信息来生成。
由上述书签作成装置、保存并管理上述书签作成装置所作成的书签的书签管理服务器、利用从上述书签管理服务器取得的书签的上述书签利用装置所构建的书签共有系统也包含在本发明的范畴内。
上述书签利用装置以及书签作成装置也可以通过计算机来实现,在该情况时,使计算机作为上述各单元发生功能,由此通过计算机来实现上述书签利用装置后上述书签作成装置的控制程序以及记录有该程序的计算机可读取记录介质也包含在本发明的范畴内。
(工业上的利用可能性)
本发明的书签作成装置以及书签利用装置尤其适用于在内容利用环境多种多样的多个非特定用户之间,共有内容的书签的书签共有系统。

Claims (24)

1. 一种书签利用装置,其特征在于:具备
特征信息提取单元,从至少包含有内容取得地址以及特征信息的书签中提取所述特征信息,其中,所述内容取得地址用以取得内容,所述特征信息用以表达所述内容的内在内容;
代替内容检测单元,根据所述特征信息提取单元所提取的特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检测拥有与所述内容的内在内容相类似或相当的内在内容的代替内容。
2. 根据权利要求1所述的书签利用装置,其特征在于:
所述书签中含有用以指定所述内容的重放位置的重放位置信息;
所述特征信息用以表达所述重放位置信息所示的重放位置上的内容的内在内容;
所述代替内容检测单元根据所述特征信息提取单元所提取的所述特征信息,从提供该书签利用装置所能利用的内容的一个或多个内容源中,检测包含有与所述重放位置上的内容的内在内容相类似或相当的内在内容的代替内容。
3. 根据权利要求2所述的书签利用装置,其特征在于:
具备重放位置特定单元,
所述重放位置特定单元根据所述特征信息,对拥有与所述重放位置上的所述内容的内在内容相类似或相当的内在内容的、所述代替内容中的重放位置,进行特定。
4. 根据权利要求1所述的书签利用装置,其特征在于:
具备书签更新单元,所述书签更新单元作成至少含有代替内容取得地址的代替书签,其中,所述代替内容取得地址用以取得所述代替内容检测单元所检测出的代替内容。
5. 根据权利要求3所述的书签利用装置,其特征在于:
具备书签更新单元,所述书签更新单元作成至少含有代替内容取得地址和代替重放位置信息的代替书签,其中,
所述代替内容取得地址用以取得所述代替内容检测单元所检测出的代替内容;所述代替重放位置信息用以指定所述重放位置特定单元所特定的、所述代替内容中的重放位置。
6. 根据权利要求4或5所述的书签利用装置,其特征在于:
所述书签更新单元将作成的所述代替书签追加进原来的所述书签来更新该书签,以作成更新后书签。
7. 根据权利要求6所述书签利用装置,其特征在于:
所述书签更新单元将所述更新后书签发送给作成原来的所述书签的书签作成装置,以委托所述书签的更新。
8. 根据权利要求1至7中任意一项所述的书签利用装置,其特征在于:
所述书签中含有的特征信息是以文本信息来表达所述内容的内在内容的;
所述代替内容检测单元通过将所述文本信息中含有的字符串用作检索查寻,来检测与原来的所述内容相类似或相当的代替内容。
9. 根据权利要求1至8中任意一项所述的书签利用装置,其特征在于:
具备内容取得信息存储部,所述内容信息取得存储部对访问一个或多个内容源时所需的认证信息进行存储;
所述代替内容检测单元使用所述内容信息取得存储部中存储的认证信息来访问各内容源。
10. 根据权利要求1至9中任意一项所述的书签利用装置,其特征在于:
所述书签中含有的特征信息是所述内容的图像数据;
所述代替内容检测单元将从所述图像数据中提取出的图像特征用作检索查寻,以检测与原来的所述内容相类似或相当的代替内容。
11. 根据权利要求3所述的书签利用装置,其特征在在于:
所述书签中含有的特征信息是所述内容的所述重放位置上的图像数据;
所述重放位置特定单元根据从所述图像数据中提取出的图像特征,特定与原来的所述内容的重放位置相类似或相当的、所述代替内容中的重放位置。
12. 一种书签作成装置,其特征在于:具备
内容取得单元,从提供该书签作成装置所能利用的内容的内容源中取得内容;
特征信息生成单元,从所述内容取得单元所取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;
书签生成单元,生成至少含有所述内容取得单元在取得所述内容时所用过的内容取得地址和所述特征信息生成单元所生成的特征信息的书签。
13. 根据权利要求12所述的书签作成装置,其特征在于:
所述书签生成单元生成进一步含有用以对所述内容的由用户指定的重放位置进行指定的重放位置信息的书签。
14. 根据权利要求13所述的书签作成装置,其特征在于:
所述特征信息生成单元生成用以对所述内容的、由用户指定的所述重放位置所表示的内在内容,进行表达的特征信息。
15. 根据权利要求13所述的书签作成装置,其特征在于:
所述特征信息生成单元连续地或定期地提取重放位置信息以及所述内容中的特定的文本信息,并且针对所述文本信息发生了变化时的重放位置,生成特征信息。
16. 根据权利要求12至15中任意一项所述的书签作成装置,其特征在于:
所述特征信息生成单元根据与所述内容构成对应关系的、涉及该内容的元信息来生成特征信息。
17. 根据权利要求12至16中任意一项所述的书签作成装置,其特征在于:
所述特征信息生成单元从构成所述内容的图像数据中提取文本信息来生成特征信息。
18. 根据权利要求12至17中任意一项所述的书签作成装置,其特征在于:
所述特征信息生成单元从构成所述内容的音频数据中提取文本信息来生成特征信息。
19. 根据权利要求12至18中任意一项所述的书签作成装置,其特征在于:
所述特征信息生成单元将用以表示从所述内容中提取出的图像数据或该图像数据保管场所的信息,作为特征信息来生成。
20. 一种书签共有系统,其特征在于:包含
权利要求12至19中任意一项所述的书签作成装置、
对所述书签作成装置所作成的书签进行保存并管理的书签管理服务器、
对从所述书签管理服务器取得的书签进行利用的权利要求1至11中任意一项所述的书签利用装置。
21. 一种控制方法,是书签利用装置的控制方法,其特征在于:
所述书签利用装置利用至少包含有内容取得地址以及特征信息的书签,其中,所述内容取得地址用以取得内容,所述特征信息用以表达所述内容的内在内容;
该控制方法包含:
特征信息提取步骤,从所述书签中提取所述特征信息;
代替内容检测步骤,根据在所述特征信息提取步骤中提取的特征信息,从提供所述书签利用装置所能利用的内容的一个或多个内容源中,检测拥有与所述内容的内在内容相类似或相当的内在内容的代替内容。
22. 一种控制方法,是书签作成装置的控制方法,其特征在于:包含
内容取得步骤,从提供所述书签作成装置所能利用的内容的内容源中取得内容;
特征信息生成步骤,从通过所述内容取得步骤而取得的内容中,生成用以对该内容的内在内容进行表达的特征信息;
书签生成步骤,生成至少含有在通过所述内容取得步骤来取得所述内容时所用过的内容取得地址和通过所述特征信息生成步骤而生成的特征信息的书签。
23. 一种控制程序,其特征在于:
使计算机作为权利要求1至11中任意一项所述的书签利用装置的各单元或权利要求12至19中任意一项所述的书签作成装置的各单元来工作。
24. 一种记录介质,是计算机所能读取的记录介质,其特征在于:
记录有权利要求23所述的控制程序。
CN2010800105094A 2009-03-06 2010-03-04 书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质 Pending CN102342128A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2009054232 2009-03-06
JP2009-054232 2009-03-06
PCT/JP2010/001522 WO2010100937A1 (ja) 2009-03-06 2010-03-04 ブックマーク利用装置、ブックマーク作成装置、ブックマーク共有システム、制御方法、制御プログラム、および、記録媒体

Publications (1)

Publication Number Publication Date
CN102342128A true CN102342128A (zh) 2012-02-01

Family

ID=42709503

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010800105094A Pending CN102342128A (zh) 2009-03-06 2010-03-04 书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质

Country Status (4)

Country Link
US (1) US20120030554A1 (zh)
JP (1) JP5138810B2 (zh)
CN (1) CN102342128A (zh)
WO (1) WO2010100937A1 (zh)

Families Citing this family (143)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US8516533B2 (en) * 2008-11-07 2013-08-20 Digimarc Corporation Second screen methods and arrangements
US20120311585A1 (en) 2011-06-03 2012-12-06 Apple Inc. Organizing task items that represent tasks to perform
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US8695054B2 (en) * 2010-09-29 2014-04-08 Verizon Patent And Licensing Inc. Ingesting heterogeneous video content to provide a unified video provisioning service
KR20120035041A (ko) * 2010-10-04 2012-04-13 삼성전자주식회사 하이퍼링크의 주소를 북마크에 등록하는 방법 및 그 장치
US20130290845A1 (en) * 2010-12-22 2013-10-31 Thomson Licensing Method and system for sending video edit information
JP5640807B2 (ja) * 2011-02-23 2014-12-17 富士通株式会社 コンテンツ提供システム
CN102685563B (zh) * 2011-03-15 2015-11-25 华为终端有限公司 互联网协议电视内容共享方法、装置以及终端设备
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
CN102722481B (zh) 2011-03-29 2016-08-03 阿里巴巴集团控股有限公司 一种用户收藏夹数据的处理方法及搜索方法
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
JP2013008186A (ja) * 2011-06-24 2013-01-10 Kddi Corp コンテンツ表示システム、投稿端末、閲覧端末、コンテンツ表示方法、およびプログラム
KR101654439B1 (ko) * 2011-09-23 2016-09-12 엘지전자 주식회사 방송 서비스 수신 방법 및 그 수신 장치
US9524077B1 (en) * 2012-02-15 2016-12-20 Google Inc. Allowing users to categorize and visualize content recommendations
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9009258B2 (en) 2012-03-06 2015-04-14 Google Inc. Providing content to a user across multiple devices
US8966043B2 (en) 2012-04-27 2015-02-24 Google Inc. Frequency capping of content across multiple devices
US8978158B2 (en) 2012-04-27 2015-03-10 Google Inc. Privacy management across multiple devices
US9514446B1 (en) 2012-04-27 2016-12-06 Google Inc. Remarketing content to a user associated with multiple devices
US8892685B1 (en) 2012-04-27 2014-11-18 Google Inc. Quality score of content for a user associated with multiple devices
US9258279B1 (en) 2012-04-27 2016-02-09 Google Inc. Bookmarking content for users associated with multiple devices
US8688984B2 (en) 2012-04-27 2014-04-01 Google Inc. Providing content to a user across multiple devices
US9881301B2 (en) 2012-04-27 2018-01-30 Google Llc Conversion tracking of a user across multiple devices
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US9781388B2 (en) * 2012-05-28 2017-10-03 Samsung Electronics Co., Ltd. Method and system for enhancing user experience during an ongoing content viewing activity
US20140032537A1 (en) * 2012-07-30 2014-01-30 Ajay Shekhawat Apparatus, system, and method for music identification
US20140075310A1 (en) * 2012-09-11 2014-03-13 Eric Li Method and Apparatus For creating user-defined media program excerpts
US9727321B2 (en) * 2012-10-11 2017-08-08 Netflix, Inc. System and method for managing playback of streaming digital content
US11650814B1 (en) * 2012-12-21 2023-05-16 EMC IP Holding Company LLC Generating customized documentation for applications
DE212014000045U1 (de) 2013-02-07 2015-09-24 Apple Inc. Sprach-Trigger für einen digitalen Assistenten
US9882945B2 (en) * 2013-03-14 2018-01-30 Synacor, Inc. Media sharing communications system
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US10296487B2 (en) 2013-03-15 2019-05-21 The Directv Group, Inc. Method and system for operating user receiving devices with user profiles
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
US9351040B2 (en) 2013-03-15 2016-05-24 The Directv Group, Inc. Method and system for transferring user settings to another user receiving device
US10063924B2 (en) * 2013-03-15 2018-08-28 The Directv Group, Inc. Method and system for transferring user settings to another user receiving device using a mobile user device
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
DE112014002747T5 (de) 2013-06-09 2016-03-03 Apple Inc. Vorrichtung, Verfahren und grafische Benutzerschnittstelle zum Ermöglichen einer Konversationspersistenz über zwei oder mehr Instanzen eines digitalen Assistenten
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
EP3149728B1 (en) 2014-05-30 2019-01-16 Apple Inc. Multi-command single utterance input method
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US10659851B2 (en) * 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US10460098B1 (en) 2014-08-20 2019-10-29 Google Llc Linking devices using encrypted account identifiers
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US20160188742A1 (en) * 2014-12-30 2016-06-30 Quixey, Inc. Bookmarking Search Results
KR20160086128A (ko) * 2015-01-09 2016-07-19 삼성전자주식회사 채널 디스플레이 장치 및 그 제어방법
US10083494B2 (en) * 2015-01-30 2018-09-25 Huawei Technologies Co., Ltd. Systems, devices and methods for distributed content pre-fetching to a user device
US10425693B2 (en) * 2015-02-13 2019-09-24 Panasonic Intellectual Property Management Co., Ltd. Content reproduction system, video recording apparatus, terminal apparatus, and content reproduction method
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10956666B2 (en) 2015-11-09 2021-03-23 Apple Inc. Unconventional virtual assistant interactions
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
JP2018098763A (ja) * 2016-12-09 2018-06-21 日本放送協会 ブックマーク装置、タグ解析システム、ブックマーク解析システム、シーン共有システム、ブックマーク方法及びブックマークプログラム
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
US10657834B2 (en) * 2017-01-20 2020-05-19 Coursera, Inc. Smart bookmarks
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770427A1 (en) 2017-05-12 2018-12-20 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
US11039180B2 (en) * 2017-08-03 2021-06-15 Level 3 Communications, Llc Linear channel distribution of content in a telecommunications network
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
KR20190054807A (ko) * 2017-11-14 2019-05-22 삼성전자주식회사 북마크된 컨텐츠와 관련된 정보를 제공하는 전자 장치 및 그 전자 장치의 제어 방법
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
KR102519159B1 (ko) 2018-01-23 2023-04-07 삼성전자주식회사 전자 장치 및 그 제어 방법
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11076039B2 (en) 2018-06-03 2021-07-27 Apple Inc. Accelerated task performance
US10643074B1 (en) 2018-06-08 2020-05-05 Amazon Technologies, Inc. Automated video ratings
US10897649B1 (en) 2018-09-26 2021-01-19 Amazon Technologies, Inc. Mature themes prediction for online content
US11153655B1 (en) 2018-09-26 2021-10-19 Amazon Technologies, Inc. Content appeal prediction using machine learning
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11095958B2 (en) * 2019-04-12 2021-08-17 Clipkick, Inc. Systems and methods of universal video embedding
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
US11140099B2 (en) 2019-05-21 2021-10-05 Apple Inc. Providing message response suggestions
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. USER ACTIVITY SHORTCUT SUGGESTIONS
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
WO2021056255A1 (en) 2019-09-25 2021-04-01 Apple Inc. Text detection using global geometry estimators
JP6752349B1 (ja) * 2019-12-26 2020-09-09 株式会社ドワンゴ コンテンツ配信システム、コンテンツ配信方法、およびコンテンツ配信プログラム
US11399047B2 (en) * 2020-01-27 2022-07-26 Snibble Corp. Method and device for a video content distribution and messaging platform providing personalized video feeds
US11755276B2 (en) 2020-05-12 2023-09-12 Apple Inc. Reducing description length based on confidence

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001168742A (ja) * 1999-12-09 2001-06-22 Toyota Motor Corp 放送受信装置
US20070271498A1 (en) * 2006-05-16 2007-11-22 Joshua Schachter System and method for bookmarking and tagging a content item
JP2008097201A (ja) * 2006-10-10 2008-04-24 Nec Corp ブラウザデータ共有システム、サーバ、方法およびプログラム
CN101356812A (zh) * 2005-11-08 2009-01-28 夏普株式会社 通信装置、通信方法、通信系统、程序和计算机可读记录介质
US20090254586A1 (en) * 2008-04-03 2009-10-08 Microsoft Corporation Updated Bookmark Associations

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3595687B2 (ja) * 1998-07-23 2004-12-02 松下電器産業株式会社 録画制御装置、放送局、放送・受信システムおよび媒体
US20040205502A1 (en) * 2001-11-01 2004-10-14 Baird Roger T. Network navigation system and method
JP2003150472A (ja) * 2001-11-15 2003-05-23 Nippon Telegr & Teleph Corp <Ntt> ブックマーク共有方法およびその装置、並びに前記方法のプログラムおよびこのプログラムを記憶した記憶媒体
JP2005115790A (ja) * 2003-10-09 2005-04-28 Sony Corp 情報検索方法、情報表示装置及びプログラム
US8326126B2 (en) * 2004-04-14 2012-12-04 Eric J. Godtland et al. Automatic selection, recording and meaningful labeling of clipped tracks from media without an advance schedule
JP2007174255A (ja) * 2005-12-22 2007-07-05 Hitachi Ltd 録画再生装置
KR101460611B1 (ko) * 2008-09-04 2014-11-13 삼성전자주식회사 멀티미디어 컨텐츠에 관한 사용자 관심정보의 수집 방법 및제공 방법과 그 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001168742A (ja) * 1999-12-09 2001-06-22 Toyota Motor Corp 放送受信装置
CN101356812A (zh) * 2005-11-08 2009-01-28 夏普株式会社 通信装置、通信方法、通信系统、程序和计算机可读记录介质
US20070271498A1 (en) * 2006-05-16 2007-11-22 Joshua Schachter System and method for bookmarking and tagging a content item
JP2008097201A (ja) * 2006-10-10 2008-04-24 Nec Corp ブラウザデータ共有システム、サーバ、方法およびプログラム
US20090254586A1 (en) * 2008-04-03 2009-10-08 Microsoft Corporation Updated Bookmark Associations

Also Published As

Publication number Publication date
JP5138810B2 (ja) 2013-02-06
US20120030554A1 (en) 2012-02-02
WO2010100937A1 (ja) 2010-09-10
JPWO2010100937A1 (ja) 2012-09-06

Similar Documents

Publication Publication Date Title
CN102342128A (zh) 书签利用装置、书签作成装置、书签共有系统、控制方法、控制程序以及记录介质
JP6474932B2 (ja) 通信端末、通信方法、プログラム、及び通信システム
CN103686452B (zh) 一种视频关联信息的添加处理方法
US10235013B2 (en) Method and apparatus for providing recommendations to a user of a cloud computing service
US9600574B2 (en) Content reproduction method and apparatus in IPTV terminal
CN101271470B (zh) 处理信息的系统、装置、方法和程序
CN104781805B (zh) 用于元数据引导的动态和个人数据管护的方法和装置
CN105230035A (zh) 用于选择的时移多媒体内容的社交媒体的处理
CN101576930A (zh) 把由第一用户观看的视频内容项的关键帧发布到第二用户
WO2009081936A1 (ja) 広告管理システム、広告管理サーバ、広告管理方法、プログラム、および閲覧クライアント
CN106489150A (zh) 用于识别和保存媒体资产的一部分的系统和方法
US20120274790A1 (en) Image sharing system, image managing server, and control method and program thereof
EP2018063A2 (en) Information providing system, information receiving apparatus, information providing apparatus, information providing method and program
JP2008160337A (ja) コンテンツ連動型情報提示装置および提示方法
CN103428525A (zh) 网络视频和电视节目的在线查询和播放控制方法及系统
EP2183687A2 (en) System and method for exploiting a media object by a fruition device
KR100809641B1 (ko) 이종 시스템간의 컨텐츠 교환 방법 및 그 방법을 수행하는컨텐츠 관리 시스템
JP2022000955A (ja) シーン共有システム
US8190617B2 (en) Information transmitting apparatus, terminal apparatus and method thereof
US9084011B2 (en) Method for advertising based on audio/video content and method for creating an audio/video playback application
JP2010233036A (ja) 関連コンテンツ配信システム、ユーザデバイス管理サーバ、及びコンピュータプログラム
KR101407334B1 (ko) 음원 서비스를 제공하는 방법, 단말 및 서버
KR101690283B1 (ko) 태그 기반 컨텐츠 목록 제공 방법 및 이를 위한 장치
JP5347385B2 (ja) 端末装置、配信システム、端末装置のデータ管理方法およびプログラム
KR20090092355A (ko) 음성 삽입 컨텐츠 저작 방법 및 시스템

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20120201