CN101547326A - 通知内容场景出现的装置和方法 - Google Patents

通知内容场景出现的装置和方法 Download PDF

Info

Publication number
CN101547326A
CN101547326A CN200810181705A CN200810181705A CN101547326A CN 101547326 A CN101547326 A CN 101547326A CN 200810181705 A CN200810181705 A CN 200810181705A CN 200810181705 A CN200810181705 A CN 200810181705A CN 101547326 A CN101547326 A CN 101547326A
Authority
CN
China
Prior art keywords
keyword
scene
monitor
semantic classes
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN200810181705A
Other languages
English (en)
Inventor
山崎智弘
川村隆浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Publication of CN101547326A publication Critical patent/CN101547326A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
    • H04N21/8405—Generation or processing of descriptive data, e.g. content descriptors represented by keywords
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application

Abstract

本发明提供一种通知内容场景出现的装置和方法，提取单元从自所播放的场景中提取的元数据中提取关键词，附加单元向关键词附加语义类别，语义类别判定单元判定语义类别是否是应播放类别，当存在附加了应播放类别的关键词时，取得单元取得至少一个不具有该应播放类别的关键词作为应监视关键词，当元数据包括应监视关键词和附加了应停止类别的关键词时，出现判定单元判定包括应监视关键词的场景在内容中出现。

Description

通知内容场景出现的装置和方法
技术领域
本发明涉及一种在观看电视节目或任何其它视频内容时，通知用户感兴趣的对象出现在场景上，从而实现有效观看的装置和方法。
背景技术
近来，电视节目经常进行“X很快出现”、“此后Y即将开始”等通告，以向观看者提前通知感兴趣对象的出现。这样的通告是为了使观看者不改变频道而停留在该节目。但即使在通告后，对象X和Y实际出现在场景上还需要一会儿。因此，观看者可能不得不如下地观看电视：(1)尽管不希望的场景会非常短，也被迫停留在不想要的场景；(2)改变频道来观看其它节目，同时不时地查看以前的频道；或(3)录下该节目并在以后观看。
操作(1)和(2)浪费时间并且给用户增加了查看的劳动。对于操作(2)，如果用户喜欢改变后的频道的节目，则用户可能会错过以前频道上的希望对象的场景。在操作(3)中，用户可以以后观看节目，这降低了错过希望的场景的风险。但是，如果用户想要轻松地观看例如机智问答(quiz show)，录制操作会给用户增加负担。而且，用户可能不想录下体育比赛等的现场直播，而仅想获得进行中的比赛报告。利用现有技术，可能会降低电视观看的效率。
一些技术(例如JP-A 2005-323090)提出检测并通知观看者希望的场景从而观看者能够观看该场景而不会错过的方法。根据JP-A2005-323090提供的方法，将观看者输入的场景指定关键词与将识别场景的场景信息叠加在节目的每个场景上的广播数据(传输流)进行比较，以检测该节目中的希望场景。
但是，JP-A 2005-323090的方法是以叠加在广播数据上的场景信息为前提的。这意味着，需要将场景信息加到每个广播站的每个节目的每个场景上，以实现任何站的任何节目的任何希望场景的通知，这是非常困难的。代替识别场景的场景信息，可以加入字幕。但是，字幕信息不总是能够准确地识别场景。即使当表示观看者感兴趣的对象的关键词出现在字幕中时，如上所述，对应于该关键词的对象还需要一会儿才会实际出现在场景上。因此，在现有技术中，存在当感兴趣的对象还没有出现时向用户通知了错误的场景作为该对象实际出现的场景的可能。
发明内容
本发明的一个方面提供一种用于通知场景的装置。该装置包括：播放单元，播放包括能够按时间序列播放的多个场景的内容；元数据提取单元，从所播放的场景中提取作为与场景有关的文本信息的元数据；关键词提取单元，从元数据中提取关键词；附加单元，向每个关键词附加表示关键词的语义属性的语义类别；语义类别判定单元，判定附加到关键词上的语义类别是否是表示在提取了关键词的场景之后执行重放的应播放类别；取得单元，当存在语义类别判定单元判定为附加了应播放类别的关键词时，从附加了语义类别的关键词中取得至少一个不具有该应播放类别的关键词作为应监视关键词；出现判定单元，当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括应监视关键词和附加了作为表示重放结束的语义类别的应停止类别的关键词时，判定包括应监视关键词的场景在正在播放的内容中出现；和通知单元，当包括应监视关键词的场景出现时，通知包括应监视关键词的场景出现。
本发明的另一个方面提供一种用于通知场景的方法。该方法包括：播放包括能够按时间序列播放的多个场景的内容；从所播放的场景中提取作为与场景有关的文本信息的元数据；从元数据中提取关键词；向每个关键词附加表示关键词的语义属性的语义类别；判定附加到关键词上的语义类别是否是表示在提取了关键词的场景之后执行重放的应播放类别；当存在语义类别判定单元判定为附加了应播放类别的关键词时，从附加了语义类别的关键词中取得至少一个不具有该应播放类别的关键词作为应监视关键词；当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括应监视关键词和附加了作为表示重放结束的语义类别的应停止类别的关键词时，判定包括应监视关键词的场景在正在播放的内容中出现；当包括应监视关键词的场景出现时，通知包括应监视关键词的场景出现。
附图说明
图1是示出本发明的一个实施方式的场景通知装置的结构的框图。
图2是示出字典存储单元中存储的字典信息的数据结构的一例的图。
图3是示出字典存储单元中存储的字典信息的数据结构的另一例的图。
图4是本实施方式的整个监视信息提取处理的流程图。
图5是被叠加在视频内容上并且被配送给观看者的字幕信息的例子。
图6是附加了语义类别的关键词的例子。
图7是示出提示应监视信息的显示画面的一例的图。
图8是示出提示应监视信息的显示画面的另一例的图。
图9A和9B是本实施方式的整个场景通知处理的流程图。
图10是示出通知观看者场景出现的方法的一例的图。
图11是示出通知观看者场景出现的方法的另一例的图。
图12是示出通知观看者场景出现的方法的又一例的图。
图13是用于说明本实施方式的场景通知装置的硬件结构的图。
具体实施方式
以下参照附图详细说明本发明的装置和方法的示例性实施方式。
本实施方式的场景通知装置从内容的场景中提取文本信息元数据，从元数据的关键词中拾取附加了位于表示近未来的语义类别的关键词之前或之后的关键词，并且将所拾取的关键词判定为要监视的关键词(应监视关键词)。当在提取了元数据的场景之后播放的场景中检测出应监视关键词时，并且当在应监视关键词之前和之后存在任何附加了表示过去时态或现在完成时态的语义类别的关键词时，判定对应于应监视关键词的对象出现。
在图1的结构中，场景通知装置100包括播放单元101、元数据提取单元120、字典存储单元131、关键词提取单元102、附加单元103、语义类别判定单元104、应监视信息取得单元105、应监视信息存储单元132、显示单元106、接收单元107、出现判定单元108和通知单元109。
播放单元101播放包含多个场景的内容，例如电视广播。应注意，该内容不限于电视广播，只要包含在内容中的每个场景的元数据能够被提取为文本信息，就可以加入任何类型的内容。例如，可以加入存储在数字通用盘(DVD)等记录介质中的视频内容和无线电广播等音频内容。在以下说明中，以作为电视广播配送的视频内容的重放为例。
元数据提取单元120提取通过电视广播从视频内容的广播波配送的视频内容的每个场景的元数据。元数据提取单元120包括附加信息提取单元121、图像识别单元122和音频识别单元123。
附加信息提取单元121提取叠加在电视广播视频内容上的电子节目指南(EPG)、数据广播和字幕等作为文本信息的附加信息来作为元数据。
图像识别单元122识别视频内容中的人物、建筑等图像信息和字幕，并且提取表示所识别的图像信息和字幕的文本信息作为元数据。
音频识别单元123识别说话、音乐、音效等包含在视频内容中的音频信息，并且提取表示所识别的说话、乐曲的标题或音效的类型的文本信息作为元数据。
字典存储单元131在其中存储用于取得表示包含在元数据中的关键词的语义属性的语义类别的字典信息。如图2所示，字典信息包括关键词、关键词的语义类别和表示语义类别的确定性的语义类别确定性系数。语义类别包括近未来、过去和现在完成等与时间相关的类别，人物和地方等物理实体的名称等与名称相关的类别，以及与夸张相关的类别。
字典信息在后述的关键词提取单元102从元数据中提取关键词，或者后述的附加单元103向所提取的关键词附加语义类别时被参照。
字典信息的数据结构不限于图2所示的结构，只要能够使用字典信息来判定元数据等的文本信息中的关键词的语义类别，就可以为字典信息采用任何数据结构。在图3的例子中，字典信息包括定义字符串和词素的排列规则的条件、语义类别和确定性系数，它们之间相互关联。利用这样的字典信息，可以从给定的文本信息中提取满足条件的关键词，并且可以向所提取的关键词附加对应于该提取的关键词的语义类别。
关键词提取单元102从所提取的元数据中提取与存储在字典存储单元131中的字典信息中的一个关键词一致的关键词。关键词提取不限于该方法，可以构成为对元数据进行语形学分析，从而提取分析结果得到的关键词。
附加单元103向由关键词提取单元102提取的每个关键词附加字典信息的对应的语义类别。
关键词提取单元102从元数据提取关键词并且附加单元103向所提取的每个关键词附加语义类别的处理与元数据语义分析处理的执行相同。可以通过从图2所示的给定关键词中找到一致，或者通过从图3所示的给定条件中找到一致，来进行语义分析处理。
对于具有多个含义的关键词，可能从字典信息得到不同的语义类别。例如，“Kawasaki”可能是人名和地名。在这种情况下，所有得到的语义类别都可以原样使用。但是，为了用户的方便，最好通过选择具有最大确定性系数的语义类别或者最接近相邻关键词的语义类别的语义类别来减少到一个语义类别。
语义类别判定单元104判定在关键词提取单元102提取的关键词中，是否存在任何附加了表示在提取了关键词的场景之后执行的重放的应播放语义类别的关键词。例如，应监视信息取得单元105判定是否存在任何附加了表示近未来的语义类别作为应播放类别的关键词。
当判定在所提取的关键词中存在附加了应播放类别的关键词时，应监视信息取得单元105取得位于感兴趣关键词之前和之后的关键词作为应监视关键词。而且，应监视信息取得单元105取得所取得的感兴趣关键词之前和之后的关键词的语义类别作为应监视类别。在以下说明中，应监视关键词和应监视类别被称为应监视信息。
换言之，应监视信息取得单元105不仅能够取得关键词，而且能够取得语义类别来作为监视对象。这实现了希望场景的准确通知。例如，当输出了消息“名角很快登场”时，现有技术能够检测出关键词“名角”出现的场景，但是不能检测出名角的名字实际出现的场景。相反，本发明能够监视语义类别“名角”。这样，如果存在任何指示与语义类别“名角”相关的人名的字典信息项，就能够检测出该名字实际出现的场景。
应注意，应监视信息取得单元105从自一个场景提取的关键词中取得任何被选择的关键词以外的关键词作为应监视关键词。应监视信息取得单元105可以构成为分析从场景提取的关键词的修饰关系，并且取得与被选择的关键词具有修饰关系的关键词来作为应监视关键词。
显示单元106显示应监视信息取得单元105取得的应监视信息，询问是否实际将该应监视信息置于监视之下。示出应监视信息的显示画面的例子将后述。
接收单元107通过查看显示画面来接收用户指定的关键词，以便将该关键词置于监视之下。例如，接收单元107从所显示的应监视关键词中接收利用遥控光标选择的应监视关键词。
应监视信息存储单元132在其中存储接收单元107接收的、被指定的应监视信息。应监视信息存储单元132以(应监视关键词、频道ID)和(应监视类别、频道ID)等方式，将电视广播的频道ID等对象视频内容的识别信息与应监视信息相关联。
字典存储单元131和应监视信息存储单元132可以利用硬盘驱动器(HDD)、磁光(MO)盘、存储卡和随机存取存储器(RAM)等常用的记录介质来实现。
出现判定单元108判定存储在应监视信息存储单元132中的应监视信息是否在顺序播放的内容中出现。具体地，出现判定单元108判定从在应监视信息的存储操作之后播放的场景中提取的元数据是否包括应监视信息，并且位于应监视信息之前和之后的关键词是否被附加了作为表示重放结束的语义类别的应停止类别。当从在应监视信息的存储操作之后播放的场景中提取的元数据包括应监视信息，并且位于应监视信息之前和之后的关键词被附加了应停止类别时，出现判定单元108判定包含应监视信息的场景出现。关于应停止类别，可以采用表示过去或现在完成时态的语义类别。
更具体地，当应监视信息是应监视关键词时，出现判定单元108判定从所播放的场景提取的元数据中的关键词是否包括应监视关键词，并且与应监视关键词一致的关键词之前和之后的关键词是否被附加了应停止类别。当应监视信息是应监视类别时，出现判定单元108判定从所播放的场景提取的元数据中的关键词是否包括附加了应监视类别的关键词，并且该附加了应监视类别的关键词之前和之后的关键词是否被附加了应停止类别。
当出现判定单元108作出判定时，通知单元109通知用户包含应监视信息的场景出现。例如，通知单元109在显示单元106上显示包含应监视信息的场景，以通知观看者场景出现。通知单元109进行通知的方式将后述。
以下参照图4说明本实施方式的如上构成的场景通知装置100执行的应监视信息提取处理。在应监视信息提取处理中，从正在播放的内容中提取应监视信息并存储在应监视信息存储单元132中。
例如当用户开始观看电视广播时，启动应监视信息提取处理。首先，在播放广播视频内容时，元数据提取单元120的附加信息提取单元121提取以叠加在EPG、数据广播和字幕等视频内容上的方式配送的附加信息作为元数据(步骤S401)。
在图5中，提供了在时间21:28:00和21:30:00之间在某个频道上广播的关于鬣蜥(iguana)的对话的字幕示例。
在图4中，图像识别单元122识别视频内容的每个场景的图像，并且从其中提取作为识别结果得到的人物、建筑或字幕的文本信息作为元数据(步骤S402)。而且，音频识别单元123识别包含在视频内容中的音频信息，并且从其中提取作为识别结果得到的说话、乐曲的标题或音效的类型的文本信息作为元数据(步骤S403)。
步骤S401到S403的操作不必按上述次序执行。可以按照任何次序或者并行地执行上述处理。
接着，关键词提取单元102从所取得的文本信息(元数据)中提取关键词(步骤S404)。例如，关键词提取单元102从元数据中提取与图2所示的字典信息中包含的一个关键词一致的关键词。
然后，附加单元103向每个提取的关键词附加语义类别(步骤S405)。例如，附加单元103从图2所示的字典信息取得与所提取的关键词相对应的语义类别，并将其附加到该关键词上。
图6是示出作为利用字典信息对图5的字幕信息进行语义分析的结果得到的、附加了语义类别的关键词的列表的图。在图6中，向被认为是节目中的人物的名字的关键词“Yamamoto-san”和“Shima-san”附加了语义类别“人物、名人”。向关键词“iguana”和“lizard”附加了语义类别“动物、爬虫类”。
在图4中，语义类别判定单元104判定是否存在任何附加了语义类别“时间、近未来”的关键词(步骤S406)。当存在时(步骤S406为“是”)，应监视信息取得单元105取得位于附加了语义类别“时间、近未来”的关键词之前和之后的关键词作为应监视关键词，并且取得附加到这些关键词上的语义类别作为应监视类别(步骤S407)。
接着，应监视信息取得单元105判定所取得的应监视信息(应监视关键词或应监视类别)是否已经存储在应监视信息存储单元132中(步骤S408)。当还没有存储应监视信息时(步骤S408为“否”)，应监视信息取得单元105向用户提供所取得的应监视信息(步骤S409)。应监视信息取得单元105可以在显示单元106的显示画面上提示应监视信息，来向用户提供所取得的应监视信息。
在图7中，图示出在视频内容下方显示的应监视信息701的例子。显示方式不限于此，可以在画面上的任意其它位置显示应监视信息。
在图7的例子中，取得位于附加了表示应播放的语义类别“时间、近未来”的关键词711(“广告后”)之前的关键词712(“答案”)作为应监视关键词。另外，取得附加到该应监视关键词上的语义类别“无形物”作为应监视类别。所取得的应监视关键词和应监视类别作为应监视信息701显示。在该图中位于应监视关键词前面黑色块表示应监视信息中的应监视关键词(“答案”)被用户指定。然后，将与频道ID相关联的应监视关键词“(答案、频道4)”存储在应监视信息存储单元132中。
在图4中，接收单元107判定用户是否指定将该应监视信息置于监视之下(步骤S410)。当用户已经指定时(步骤S410中为“是”)，接收单元107接收所指定的应监视信息，并将其存储在应监视信息存储单元132中(步骤S411)。
当在步骤S406中判定没有附加了语义类别“时间、近未来”的关键词时(步骤S406为“否”)，当在步骤S408中判定应监视信息已经存储在应监视信息存储单元132中时(步骤S408为“是”)，并且在步骤S410中判定用户没有指定将该应监视信息置于监视之下时，或者在步骤S411中存储了应监视信息后，显示单元101判定视频内容的重放是否结束(步骤S412)。
当没有结束时(步骤S412为“否”)，显示单元101继续视频内容的重放。其后，系统返回到步骤S401，通过从新播放的场景中提取元数据来重复处理。当视频内容的重放结束时(步骤S412为“是”)，结束应监视信息提取处理。
应监视信息提取处理可以仅当用户在遥控上按下特定按钮等进行了预定动作时执行。这样，仅当用户希望时才显示应监视信息。
当执行了不同的动作，例如用户按下不同的按钮时，应监视信息提取处理可以构成为提取在该动作执行时获得的关键词及其语义类别，作为应监视信息，而不管是否存在附加了语义类别“时间、近未来”的关键词。
图8是示出利用上述构成来提示应监视信息的显示画面的例子的图。响应于按下遥控按钮，取得关键词811(“ANIME”)和关键词812(“FAN”)作为应监视关键词。而且，取得附加到这些应监视关键词上的语义类别“商品”和“地位”作为应监视类别。所取得的应监视关键词和应监视类别被显示为应监视信息801。当指定了关键词“ANIME”时，将应监视关键词与频道ID相关联，结果将“(ANIME、频道6)”存储在应监视信息存储单元132中。
以下参照图9A和9B说明本实施方式的场景通知装置100所执行的场景通知处理。在场景通知处理中，从在存储了应监视信息之后播放的内容中检测出应监视信息出现的场景，并且通知该场景。
与应监视信息提取处理同样，在以下说明中，以观看电视广播等视频内容为例。但是，只要能够提取场景的元数据作为文本信息，则可以加入任何其它类型的内容。
首先，元数据提取单元120判定应监视信息存储单元132中是否存储了应监视信息(步骤S901)。没有存储应监视信息时(步骤S901为“否”)，意味着没有需要监视的。从而结束场景通知处理。
当存储了应监视信息时(步骤S901为“是”)，元数据提取单元120从对应于与应监视信息相关联的频道ID的广播波的视频内容中提取元数据(步骤S902至S904)。
可以从能够在特定区域接收到的所有频道ID的广播波中并行地提取元数据。如果装置没有足够的元数据提取能力，则可以通过显示“不要再增加监视对象”等警告消息来限制监视对象的数量。
步骤S902至S904的元数据提取处理以及步骤S905和S906的语义分析处理与应监视信息提取处理的步骤S401至S405相同。因此，省略说明。
在语义分析处理后，出现判定单元108将在语义分析处理中提取的关键词或附加到该关键词上的语义类别与存储在应监视信息存储单元132中的、包括应监视关键词或应监视类别的应监视信息相比较(步骤S907)。
然后，出现判定单元108判定所提取的关键词或该关键词的语义类别是否与应监视信息存储单元132中的应监视信息一致(步骤S908)。当它们不一致时(步骤S908为“否”)，对后续播放的场景重复该元数据提取处理(步骤S902)。
当存在一致时(步骤S908为“是”)，出现判定单元108进一步判定在所提取的关键词之前或之后的位置处提取的关键词的语义类别是否是“时间、过去”或“时间，现在完成”(步骤S909)。
在图7的例子中，存储了关键词712(“答案”)作为应监视关键词。假设附加了表示“答案已经是...”的字幕或声音的场景被播放，则从该场景提取出与应监视关键词一致的关键词“答案”和跟随在该关键词之后的关键词“已经是”。关键词“已经是”例如按照图3的字典信息被给出表示重放结束的语义类别“时间、现在完成”。从而，出现判定单元108判定跟随在与应监视关键词一致的关键词之后的关键词“已经是”的语义类别是“时间、现在完成”。
如果语义类别既不是“时间、过去”，也不是“时间，现在完成”(步骤S909为“否”)，则对后续播放的场景重复元数据提取处理(步骤S902)。这是因为由应监视信息表示的对象被认为还没有出现在视频内容中。
如果语义类别是“时间、过去”或“时间，现在完成”(步骤S909为“是”)，则出现判定单元108判定由应监视信息指示的对象已经出现。然后，出现判定单元108判定与应监视信息相关联的监视对象的频道ID是否与现在正观看的频道的频道ID一致(步骤S910)。
当频道ID不一致时(步骤S910为“否”)，通知单元109通知用户包含应监视信息的场景出现(步骤S911)。根据本实施方式，只有当应监视信息在广播内容的元数据中出现并且当附加了表示重放结束的语义类别“时间、过去”或“时间、现在完成”的关键词位于应监视信息之前或之后时，才向用户给出通知。
以下说明通知单元109执行的通知方法。图10至12是示出通知单元109向观看者通知场景的方法例子的图。
在图10中，在当前正在观看的频道的显示画面的底部，显示在不同频道上出现所希望的场景的消息(“在频道6上开始关于ANIME的话题”)。
图11是示出在当前观看的频道的显示画面的右下角显示未观看频道上的监视对象的视频的另一通知方法的图。根据图10和11的通知方法，监视对象的出现的通知可以在不打扰用户观看频道上的内容的情况下进行。
在图12的通知方法的例子中，通过自动地切换到监视对象出现的频道的视频，来通知监视对象。从而，用户可以有效地观看监视对象出现的场景，而不会错过。
该结构可以构成为，用户可以通过对系统预设通知方法来选择它，或者用户可以在设定监视对象时选择一个。另外，该结构可以构成为，根据语义类别的确定性系数来切换通知方法。
在图9A和9B中，在通知单元109通知用户场景出现后(步骤S911)，接收单元107判定用户是否指定监视结束(步骤S912)。可以根据遥控的特定按钮的按下来判定监视的结束。
当没有指定监视结束时(步骤S912为“否”)，意味着希望的场景还没有出现。这样，系统返回到步骤S902以继续监视。当指定了监视结束时(步骤S912为“是”)，出现判定单元108从应监视信息存储单元132中删除对应的应监视信息(步骤S913)。然后，系统返回到步骤S901。在判定是否存储了任何其它应监视信息项后，重复处理。
当在步骤S910中判定频道ID一致时(步骤S910为“是”)，意味着用户当前正在观看监视对象。因此，通知单元109不进行通知。然后，出现判定单元108从应监视信息存储单元132中删除对应的应监视信息，并且系统返回到步骤S901，重复处理。
本实施方式的场景通知装置在广播内容的元数据中检测出应监视信息时，仅当位于该应监视信息之前或之后的关键词被附加了包含过去和现在完成等时态的语义类别的应停止类别时，才向用户通知场景。结果，当即将出现消息重复显示但监视对象还没有出现时，不进行通知，而当对象实际出现时，适当地进行通知。
监视对象的出现不仅通过比较关键词，而且通过使用监视对象的语义类别来判定。这样，即使当例如输出了消息“名角此后即将出现”时，也可以适当地检测出所希望的场景并通知给用户。仅使用关键词的现有技术难以实现这样的场景检测。
最后，参照图13说明本实施方式的场景通知装置的硬件结构。
本实施方式的场景通知装置具有使用通常的计算机的硬件结构，包括中央处理单元(CPU)51等控制装置、只读存储器(ROM)52和RAM53等存储装置、与网络连接以执行通信的通信接口(I/F)54、HDD和高密度盘(CD)驱动器等外部存储装置、显示装置、键盘和鼠标等输入装置以及连接这些部件的总线61。
由本实施方式的场景通知装置执行的场景通知程序以可安装或可执行格式文件的形式，被存储在高密度盘只读存储器(CD-ROM)、软盘(FD)、可记录高密度盘(CD-R)和数字通用盘(DVD)等计算机可读记录介质中来提供。
由本实施方式的场景通知装置执行的场景通知程序可以存储在与互联网等网络连接的计算机中，并且可以通过网络下载。由本实施方式的场景通知装置执行的场景通知程序可以通过互联网等网络提供或配送。
本实施方式的场景通知程序可以预先存储在ROM中并以该方式提供。
由本实施方式的场景通知装置执行的场景通知程序具有包括上述单元(播放单元、元数据提取单元、关键词提取单元、附加单元、语义类别判定单元、应监视信息取得单元、接收单元、出现判定单元和通知单元)的模块结构。作为实际的硬件结构，CPU51(处理器)从记录介质中读取场景通知程序并且执行该程序，从而在主存储装置上装载和生成上述单元。

Claims (13)

1.一种用于通知场景的装置，包括：
播放单元，播放包括能够按时间序列播放的多个场景的内容；
元数据提取单元，从所播放的场景中提取作为与场景有关的文本信息的元数据；
关键词提取单元，从元数据中提取关键词；
附加单元，向每个关键词附加表示关键词的语义属性的语义类别；
语义类别判定单元，判定附加到关键词上的语义类别是否是表示在提取了关键词的场景之后执行重放的应播放类别；
取得单元，当存在语义类别判定单元判定为附加了应播放类别的关键词时，从附加了语义类别的关键词中取得至少一个不具有该应播放类别的关键词作为应监视关键词；
出现判定单元，当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括应监视关键词和附加了作为表示重放结束的语义类别的应停止类别的关键词时，判定包括应监视关键词的场景在正在播放的内容中出现；和
通知单元，当包括应监视关键词的场景出现时，通知包括应监视关键词的场景出现。
2.如权利要求1所述的装置，其中，
当存在语义类别判定单元判定为附加了应播放类别的关键词时，取得单元取得至少一个附加了语义类别但是没有附加应播放类别的关键词的语义类别作为应监视类别，该应监视类别是要监视的语义类别；
当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括附加了应监视类别的关键词和附加了应停止类别的关键词时，出现判定单元判定包括由应监视类别表示的语义属性的关键词的场景在正在播放的内容中出现；
当判定为包括由应监视类别表示的语义属性的关键词的场景出现时，通知单元通知包括由应监视类别表示的语义属性的关键词的场景出现。
3.如权利要求1所述的装置，还包括：字典存储单元，相关联地存储关键词和语义类别的字典信息，其中，
关键词提取单元从元数据中提取与字典存储单元中存储的字典信息的关键词一致的关键词；
附加单元向所提取的每个关键词附加与同所提取的每个关键词一致的字典信息的关键词相对应的语义类别。
4.如权利要求3所述的装置，其中，
字典信息还包括与关键词和语义类别相关联的语义类别的确定性系数；
附加单元向所提取的每个关键词附加与同所提取的关键词一致的字典信息的关键词相关联的语义类别中具有最大的确定性系数的语义类别。
5.如权利要求1所述的装置，还包括：字典存储单元，相关联地存储关键词所满足的条件和语义类别的字典信息，其中，
关键词提取单元从元数据中提取满足字典存储单元中存储的字典信息中的条件的关键词；
附加单元向所提取的关键词附加与所提取的关键词所满足的条件相关联的语义类别。
6.如权利要求5所述的装置，其中，
字典信息还包括语义类别的确定性系数；
附加单元向所提取的关键词附加与所提取的关键词所满足的条件相对应的语义类别中具有最大的确定性系数的语义类别。
7.如权利要求1所述的装置，其中，
关键词提取单元提取以预定格式在元数据中出现的关键词；
附加单元向每个关键词附加与预定格式对应地预定的语义类别。
8.如权利要求1所述的装置，还包括：
显示单元，显示所取得的应监视关键词；和
接收单元，接收对所取得的应监视关键词的指定，
其中，当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括接收了指定的应监视关键词和附加了应停止类别的关键词时，出现判定单元判定包括应监视关键词的场景在正在播放的内容中出现。
9.如权利要求1所述的装置，其中，
播放单元播放包括附加了元数据的场景的内容；
元数据提取单元从场景中提取附加到场景上的元数据。
10.如权利要求1所述的装置，其中，
播放单元播放包括作为图像信息的场景的视频内容；
元数据提取单元提取作为识别图像信息的结果而得到的文本信息作为元数据。
11.如权利要求1所述的装置，其中，
播放单元播放包括作为图像信息的场景和对应于该图像信息的音频信息的视频内容；
元数据提取单元识别该音频信息，并且提取作为识别的结果而得到的文本信息作为元数据。
12.如权利要求1所述的装置，其中，
播放单元播放包括作为音频信息的场景的音频内容；
元数据提取单元提取作为音频信息的识别结果而得到的文本信息作为元数据。
13.一种用于通知场景的方法，包括：
播放包括能够按时间序列播放的多个场景的内容；
从所播放的场景中提取作为与场景有关的文本信息的元数据；
从元数据中提取关键词；
向每个关键词附加表示关键词的语义属性的语义类别；
判定附加到关键词上的语义类别是否是表示在提取了关键词的场景之后执行重放的应播放类别；
当存在语义类别判定单元判定为附加了应播放类别的关键词时，从附加了语义类别的关键词中取得至少一个不具有该应播放类别的关键词作为应监视关键词；
当从在提取了应监视关键词的场景之后播放的场景中提取的元数据包括应监视关键词和附加了作为表示重放结束的语义类别的应停止类别的关键词时，判定包括应监视关键词的场景在正在播放的内容中出现；
当包括应监视关键词的场景出现时，通知包括应监视关键词的场景出现。
CN200810181705A 2008-03-27 2008-12-04 通知内容场景出现的装置和方法 Pending CN101547326A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008084604A JP5135024B2 (ja) 2008-03-27 2008-03-27 コンテンツのシーン出現を通知する装置、方法およびプログラム
JP2008084604 2008-03-27

Publications (1)

Publication Number Publication Date
CN101547326A true CN101547326A (zh) 2009-09-30

Family

ID=41118631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN200810181705A Pending CN101547326A (zh) 2008-03-27 2008-12-04 通知内容场景出现的装置和方法

Country Status (3)

Country Link
US (1) US8214368B2 (zh)
JP (1) JP5135024B2 (zh)
CN (1) CN101547326A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102244788A (zh) * 2010-05-10 2011-11-16 索尼公司 信息处理方法、信息处理装置、场景元数据提取装置、丢失恢复信息生成装置和程序
CN103714094A (zh) * 2012-10-09 2014-04-09 富士通株式会社 识别视频中的对象的设备和方法
CN105450510A (zh) * 2015-12-18 2016-03-30 小米科技有限责任公司 用于社交网络平台的好友管理方法、装置及服务器
CN106028083A (zh) * 2016-06-30 2016-10-12 乐视控股（北京）有限公司 一种热门台词片段的展示方法及装置
CN103678353B (zh) * 2012-09-11 2017-06-20 北京大学 用于稿件中的职务信息的检查方法和装置
CN107924267A (zh) * 2015-08-27 2018-04-17 迈克菲有限责任公司 用于通知的情境隐私引擎
CN108829881A (zh) * 2018-06-27 2018-11-16 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置
CN112445895A (zh) * 2020-11-16 2021-03-05 深圳市世强元件网络有限公司 一种识别用户搜索场景的方法及系统

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013105309A (ja) * 2011-11-14 2013-05-30 Sony Corp 情報処理装置、情報処理方法、及びプログラム
US10939187B1 (en) * 2016-08-11 2021-03-02 Amazon Technologies, Inc. Traversing a semantic graph to process requests for video
US10320728B2 (en) * 2016-12-13 2019-06-11 Google Llc Methods, systems, and media for generating a notification in connection with a video content item
JP6669952B1 (ja) * 2018-11-12 2020-03-18 株式会社日本経済新聞社 動画のためのタグ付け装置、方法、およびプログラム

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3274943B2 (ja) * 1995-01-26 2002-04-15 日本電信電話株式会社 映像監視機能付きテレビ受像機
US6714909B1 (en) * 1998-08-13 2004-03-30 At&T Corp. System and method for automated multimedia content indexing and retrieval
JP2005323090A (ja) 2004-05-07 2005-11-17 Matsushita Electric Ind Co Ltd デジタル放送受信装置、デジタル放送送信装置、デジタル放送受信方法、及びデジタル放送受信方法を実行するプログラム
JP4554399B2 (ja) * 2005-03-03 2010-09-29 エヌ・ティ・ティ・コムウェア株式会社 デジタル放送受信装置、デジタル放送システム、デジタル放送受信方法及びデジタル放送方法
US9286388B2 (en) * 2005-08-04 2016-03-15 Time Warner Cable Enterprises Llc Method and apparatus for context-specific content delivery
JP2007148976A (ja) * 2005-11-30 2007-06-14 Toshiba Corp 関連情報検索装置
EP1958420A2 (en) * 2005-12-04 2008-08-20 Turner Broadcast System, Inc (TBS, Inc.) System and method for delivering video and audio content over a network
JP2007266800A (ja) * 2006-03-28 2007-10-11 Hitachi Ltd 情報再生装置
US8200602B2 (en) * 2009-02-02 2012-06-12 Napo Enterprises, Llc System and method for creating thematic listening experiences in a networked peer media recommendation environment

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102244788A (zh) * 2010-05-10 2011-11-16 索尼公司 信息处理方法、信息处理装置、场景元数据提取装置、丢失恢复信息生成装置和程序
CN102244788B (zh) * 2010-05-10 2015-11-25 索尼公司 信息处理方法、信息处理装置和丢失恢复信息生成装置
CN103678353B (zh) * 2012-09-11 2017-06-20 北京大学 用于稿件中的职务信息的检查方法和装置
CN103714094A (zh) * 2012-10-09 2014-04-09 富士通株式会社 识别视频中的对象的设备和方法
CN103714094B (zh) * 2012-10-09 2017-07-11 富士通株式会社 识别视频中的对象的设备和方法
CN107924267A (zh) * 2015-08-27 2018-04-17 迈克菲有限责任公司 用于通知的情境隐私引擎
CN105450510A (zh) * 2015-12-18 2016-03-30 小米科技有限责任公司 用于社交网络平台的好友管理方法、装置及服务器
CN106028083A (zh) * 2016-06-30 2016-10-12 乐视控股（北京）有限公司 一种热门台词片段的展示方法及装置
CN108829881A (zh) * 2018-06-27 2018-11-16 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置
CN108829881B (zh) * 2018-06-27 2021-12-03 深圳市腾讯网络信息技术有限公司 视频标题生成方法及装置
CN112445895A (zh) * 2020-11-16 2021-03-05 深圳市世强元件网络有限公司 一种识别用户搜索场景的方法及系统
CN112445895B (zh) * 2020-11-16 2024-04-19 深圳市世强元件网络有限公司 一种识别用户搜索场景的方法及系统

Also Published As

Publication number Publication date
JP5135024B2 (ja) 2013-01-30
US8214368B2 (en) 2012-07-03
JP2009239729A (ja) 2009-10-15
US20090248637A1 (en) 2009-10-01

Similar Documents

Publication Publication Date Title
CN101547326A (zh) 通知内容场景出现的装置和方法
US11653053B2 (en) Multifunction multimedia device
CN101536520B (zh) 交互式媒体指南应用程序的配置文件的管理
US9038104B2 (en) System and method for providing an interactive program guide for past, current, and future programming
CN1901638B (zh) 信息处理装置及方法
KR102053821B1 (ko) 방송 스트림 수신 장치 및 방법
JP5844274B2 (ja) 多機能マルチメディア装置
CN102202241B (zh) 交互式媒体指南应用程序的配置文件的管理
JP2002112186A (ja) 電子番組ガイド受信装置
CN101599086A (zh) 在媒体项目的回放期间向移动设备提供预先内容告警
US20120221645A1 (en) Automatic media asset update over an online social network
US20070089136A1 (en) Program recommendation method and program recommendation apparatus
US20090317060A1 (en) Method and apparatus for processing multimedia
CN102193794B (zh) 链接实时媒体情境到相关的应用程序和服务
WO2005107258A1 (ja) 番組選択システム
CN102118639A (zh) 信息处理装置、信息处理方法和程序
CN105230035A (zh) 用于选择的时移多媒体内容的社交媒体的处理
CN100466708C (zh) 视频记录器装置以及操作视频记录器装置的方法
CN111444415B (zh) 弹幕处理方法、服务器、客户端、电子设备及存储介质
US9866913B1 (en) Binary TV
US20080244654A1 (en) System and Method for Providing a Directory of Advertisements
US20120150990A1 (en) System and method for synchronizing with multimedia broadcast program and computer program product thereof
JP5225418B2 (ja) 情報処理装置及び方法
CN112052315A (zh) 一种信息的处理方法和装置
CN112073738B (zh) 一种信息的处理方法和装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20090930