CN101431645A

CN101431645A - 节目录像再现装置以及节目录像再现方法

Info

Publication number: CN101431645A
Application number: CNA2008101710924A
Authority: CN
Inventors: 亲松昌幸; 古井真树; 广井和重; 平松义崇; 鸟羽美奈子; 岸岳人; 山下智史; 佐佐木规和
Original assignee: Hitachi Ltd
Current assignee: Maxell Holdings Ltd
Priority date: 2007-11-06
Filing date: 2008-11-06
Publication date: 2009-05-13
Anticipated expiration: 2028-11-06
Also published as: JP2009118168A; CN101431645B

Abstract

提供一种节目录像再现装置以及节目录像再现方法。在对数字播送的节目进行录像再现的情况下，可进行利用字幕的最佳索引的再现和基于用户自主输入的关键字的再现的两者，对用户清楚地显示包含字幕中的关键字的场景。在节目录像再现装置中，对包含字幕信息的数字播送数据进行解析，输出字幕文数据。并且，解析字幕文数据，根据特征提取规则和出现的关键字的有效性，生成索引数据。在再现录像节目时，在节目再现画面上根据索引数据从视觉上清楚地显示用户所选择的索引的关键字的节目上的位置、和用户所输入的关键字的位置，使得能够从该关键字的节目的位置开始进行再现。

Description

技术领域

本发明涉及一种节目录像再现装置以及节目录像再现方法。特别是涉及一种适合使用于如下的节目录像再现装置以及节目录像再现方法中：当接收数字播送的节目来进行录像再现的情况下，根据利用了字幕的索引，按每个节目，根据包含在字幕中的最佳关键字、或者用户想要检索而自主输入的关键字来再现用户所希望的场景。或者，本发明涉及一种将具有字幕数据的节目数据进行录像再现的情况下的录像再现装置。

背景技术

在近年来的播送中，将影像作为数字数据进行播送的数字播送逐渐成为主流。可以说，通过该数字化使高像质化(高清晰度电视播送)、多频道化、数据播送、面向移动接收(便携电话等)的播送等新的播送服务成为可能。

作为数字电视播送的存储介质，使用DVD(Digital VersatileDisk：数字多功能光盘)等光盘、硬盘驱动器(HDD：Hard Disk Drive)等能够大量地保存节目、并能够高速且容易地进行编辑、删除的数字存储介质。只要存储介质的容量允许，用户就能够马上对感兴趣的节目进行录像，不束缚于播送时间而能够容易地在自己喜欢的时间阅览节目。在这种状况下，由于可收看的时间受限制，因此用户希望先找出所希望的场景来收看。

在专利文献1中，公开了如下方法：取出与影像一起多路复用而被存储的字幕信息，进行字符串搜索等，由此提取认为符合用户的请求的请求场景。

另外，在专利文献2中公开了提供如下的影像记录装置：在场景的级别为基准值以上的情况下，在录像过程中将关键字及其发生时间作为索引信息而进行保存，并与影像信号一起记录到记录介质中。

在专利文献2中公开了如下内容：根据关键字的发生频度等附加级别，将一定以上的级别的关键字作为索引信息记录到记录介质中。

[专利文献1]日本特开2005-115607号公报

[专利文献2]日本特开2006-157108号公报

发明要解决的问题

在专利文献1所公开的装置中，存储字幕信息，提取认为符合用户的请求的请求场景作为候选，对其进行图像解析、声音解析，其结果，提取判断为满足用户的请求的场景。通过这样利用字幕，与以往技术相比能够节省人工制作与内容有关的信息的劳力和时间。

然而，在专利文献1中，在取出多路复用而被存储的字幕信息来进行检索的情况下，由于在包含字幕的数据包的检索中花费时间，因此有时在场景检索中花费时间。另外，暂且以进行了解码的状态保存字幕信息，这有可能是要复制内容，因此在受到复制限制的内容中有可能发生违反标准、著作权上的问题。

另外，在专利文献2中，根据关键字的发生频度等附加级别，将一定以上级别的关键字作为索引信息而记录到记录介质中。

另外，在专利文献2所公开的技术存在如下问题：就节目的内容而言，仅根据关键字的发生频度附加的级别未必适合作为索引。

然而，在系统侧只存在针对任意地判断为最佳的关键字的索引，因此没有提供用户自己自主选择关键字来进行检索的方法，自由度低。另一方面，存在如下问题：不存在向用户通知针对内容正确地生成了索引的情形的单元，不存在向用户通知与关键字对应的场景位于整个节目的哪个位置的单元，使用情况较差。

发明内容

本发明是为了解决上述问题而完成的，其目的在于在将数字播送的节目进行录像再现的情况下，能够进行基于利用了字幕的最佳索引的再现与基于用户自主输入的关键字的再现的两者。

另外，其它目的在于提供一种向用户清楚地显示包含字幕中的索引的场景的用户界面。

另外，其它目的在于对于用户自主输入的关键字能够高速地进行关键字检索。

另外，本发明的一个方式的目的在于，在对数字播送的节目进行录像再现的情况下，进行基于利用字幕的最佳索引的再现。

用于解决问题的方案

为了解决上述问题，在本发明的节目录像装置中，分离接收到数字播送的播送数据，取出字幕ES。然后，解析字幕ES，输出由字幕文、控制代码以及显示时刻构成的字幕文数据。

并且，解析字幕文数据，根据特征提取规则、和出现的关键字的有效性生成索引数据。

在再现录像节目时，在节目再现画面上根据索引数据从视觉上清楚地显示用户所选择的索引的关键字的节目位置，能够从该关键字的节目位置起进行再现。

并且，通过节目再现画面使用户输入关键字，根据索引数据从视觉上清楚地显示用户所输入的关键字的节目位置，能够从该关键字的节目位置起进行再现。

另外，在设置了多个与一个节目对应的类别的情况下，进行检索的关键字被变更。

其它的本发明的方式只要例如构成为权利要求书所记载的那样即可。

附图说明

图1是表示本发明的第一实施方式所涉及的节目录像再现装置的结构的框图。

图2是表示数字播送中的数据流的数据结构的图。

图3是表示字幕文数据120的格式的图。

图4是表示索引数据123的数据结构的图。

图5是表示索引生成部114生成索引数据的处理的流程图。

图6是表示索引数据输出处理的细节的流程图。

图7是表示节目录像时的处理的流程图。

图8是表示向用户提示是否能够根据包含在字幕中的关键字进行索引再现的处理的流程图。

图9是表示向用户显示了是否能够根据字幕进行索引再现的情况下的节目一览画面的图。

图10是表示进行利用字幕的索引再现的节目再现画面的用户界面的例子的图。

图11是表示本发明的第二实施方式所涉及的节目录像再现装置的结构的框图。

图12是表示本发明的第三实施方式所涉及的节目录像再现装置的结构的框图。

图13是表示第四实施方式所涉及的节目录像再现装置的结构的框图。

图14是表示数字播送中的数据流的数据结构的图。

图15是表示字幕文数据1320的格式的图。

图16是章节数据1323的数据结构的图。

图17是表示章节生成部1314生成章节数据的处理的流程图。

图18是表示章节数据输出处理的细节的流程图。

图19是表示节目录像时的处理的流程图。

图20是表示节目录像时的处理的流程图。

图21是表示进行利用字幕的章节再现的节目再现画面的用户界面的例子的图。

具体实施方式

下面使用图1至图21说明本发明所涉及的各实施方式。

[实施方式1]

下面使用图1至图10说明本发明所涉及的第一实施方式。

首先，使用图1说明本发明的第一实施方式所涉及的节目录像再现装置的结构。

如图1所示，本实施方式的节目录像再现装置具备录像再现部101、显示装置102、输入装置103、调谐器104、天线105、RAM 106以及外部存储装置107。

录像再现部101是对外部存储装置107进行播送节目的录像、再现的部分。录像再现部101分为用于进行在对节目进行录像、再现时的各处理的处理模块。

显示装置102是显示影像、声音的部分，在将被录像的内容进行再现的情况下，进行影像的显示、声音的输出。显示装置102例如由电视、个人计算机的显示器或液晶面板等构成。

输入装置103是用户对该节目录像再现装置进行操作而输入与由用户输入的操作有关的控制信息、数据的装置，例如利用遥控器、键盘、鼠标、笔输入装置等指示设备、或者液晶触摸面板等来实现。

RAM 106是易失性存储器，是存储由录像再现部101处理的暂时性数据、程序的存储装置。

调谐器104是利用从播送台接收到的电波进行选台并获取播送节目数据的部分。

天线105是根据数字播送的频带接收播送电波的部分。例如，通过地波数字播送用的天线接收UHF带的电波。

外部存储装置107是具有大容量的存储容量的装置，例如是DVD等光盘、HDD。

接着，说明录像再现部101的各处理模块。此外，各处理模块例如可以是在CPU等通用处理器上运行的软件，也可以是按各模块中的每个模块以专用硬件进行处理。另外，也可以是软件和硬件混合存在的装置。

如图1所示，录像再现部101由系统控制部110、信号分离部111、字幕解析部112、节目记录部113、索引生成部114、关键字列表获取部115、再现位置列表获取部116、节目再现部117以及影像输出部118构成。

系统控制部110通过输入装置103接受用户的操作请求，控制录像再现部101的各模块的动作。另外，对节目的录像以及再现等中的录像再现部101的各模块的动作进行控制。

信号分离部111具有将接收到的播送数据按影像数据、声音数据、字幕文数据、节目信息数据等每个种类进行分离而传递给其它处理模块的功能。另外，在从其它处理部存在数据发送请求的情况下，向请求源发送所指定的数据。并且，能够向信号分离部111输入从调谐器104接收到的播送节目数据、被保存在外部存储装置107中的录像节目数据121。

关键字列表获取部115根据系统控制部110的指示，对保存在外部存储装置107中的索引数据123(后述)进行解析，获取在再现节目时向用户提示的关键字列表并输出到影像输出部118。

再现位置列表获取部116根据系统控制部110的指示，向影像输出部118输出针对用户所指示的关键字的再现位置列表。

节目再现部113根据系统控制部110的指示，获取用户所指示的节目的、被保存在外部存储装置107中的录像节目数据121，并向信号分离部111输入。之后，从信号分离部111获取影像ES(后述)和声音ES(后述)并进行解码，向影像输出部118输出影像和声音数据。

节目记录部113在通过系统控制部110存在节目的录像请求的情况下，对信号分离部111请求数据流，作为录像节目数据121保存到外部存储装置107。节目记录部113可以根据用户的指定将所有的数据流作为录像节目数据121进行保存，也可以为了减小存储区域而通过进行取舍选择来仅保存影像ES、声音ES。

影像输出部118接受关键字列表获取部115、再现位置列表获取部116以及节目再现部117的输出，构成画面，向显示装置102输出影像和声音。

字幕解析部112在从系统控制部110接受字幕解析请求时，从信号分离部111获取字幕ES(后述)和时间戳。然后，解析字幕ES，在RAM 106上作为字幕文数据120进行保存。

索引生成部114使用字幕文数据120和词典数据122，向外部存储装置107输出索引数据123。

字幕文数据120是由字幕解析部112解析字幕ES并以唯一的格式保存到RAM 106中的数据。后面详细记述字幕文数据120。

在外部存储装置107中保存录像节目数据121、词典数据122、索引数据123。

词典数据122是将作为索引应输出的关键字的列表进行了排列的数据。关于索引后面记述，索引在再现节目时成为用户可指定的目录、索引。但是，在只能进行在检测字幕文数据120的空白区间时的处理等、无法解析字幕的内容的情况下，也可以设为不具有词典数据122。另外，未必仅存在于外部存储装置107，也可以通过因特网、播送波或者快闪存储器等手段获取。或者，也可以具有根据用户的操作历史、EPG来更新词典的结构。

录像节目数据121是包含影像、声音、字幕等信息的节目的数据。

索引数据123是按每个节目保持与包含在字幕中的关键字有关的信息的数据。后面详细记述索引数据123。

接着，使用图2和图4说明与本实施方式的节目录像再现方法相关的数据结构。

图2是表示数字播送中的数据流的数据结构的图。

图3是表示字幕文数据120的格式的图。

图4是表示索引数据123的数据结构的图。

在数字播送中，作为传输方式使用MPEG-2TS(TransportStream：传输流)。以图2所示的TS数据包201传输影像数据、声音数据以及在数字播送中使用的所有的数据。

特别是，影像数据、声音数据、字幕文数据被编码压缩成ES(Elementary Stream：基本流)，分别成为影像ES 202、声音ES 203、字幕ES 204。这些ES以附加有表示显示时刻信息等的PES头205的PES(Packetized Elementary Stream：打包基本流)格式被打包。在PES头205中包含有时间戳，能够根据该时间戳取得各数据包的再现同步。从图2可知，能够利用多个TS数据包的有效负载制作一个PES数据包。

图1所示的信号分离部111解析图2的数据流，按数据包的每个种类进行分离。

接着，使用图3说明字幕文数据120。

如图3所示，以时间戳301、字幕文302以及控制代码303的表格格式保存字幕文数据120。

时间戳301是包含在PES头205中的字幕显示时刻，以从录像开始时刻起的相对时间进行显示。

字幕文302是包含在字幕ES 204中的文本信息。

控制代码303是用于控制包含在字幕ES204中的文字颜色、描绘位置、删除等字幕显示的数据。

在系统控制部110进行了字幕显示请求时，监视时间戳301，当成为显示时刻时字幕文302和控制代码303被发送到影像输出部118，能够作为字幕而进行显示。

另外，根据RAM 106的容量存储一定量的字幕文数据120。字幕解析部112监视存储字幕文数据120的数据量，在判断为在RAM上存储了规定数据量以上时，通知系统控制部。

接着，使用图4说明索引数据123。

索引数据123是按每个节目生成的数据，是与包含在字幕中的关键字有关的信息，在利用了索引的节目再现时使用。

如图4所示，索引数据123具有分层结构，最上位的层由开头的一个索引头(下面称为“IDX头”)601、其后接着的有可能包含多个的索引段(index section)(下面称为“IDX段”)602构成。

IDX头601包含有成为索引数据的属性的数据，包含有只可能包含一个的信息、例如录像开始时刻、结束时间以及索引的指示时刻即PTS(Presentation Time Stamp：播放时间戳)的单位、节目信息等，另外包含IDX段602的合计数。对节目信息除了附加从EPG获取的信息之外，还可以附加像质的设定等录像时的附加信息等。

根据关键字的属性、关键字有用性判断算法的差异制作IDX段602使其区别于其它IDX段。例如，在节目的类别不同的情况下，使用不同的关键字的属性、关键字有用性判断算法，因此与各个节目的类别相对应地制作IDX段。例如，棒球节目的类别与新闻节目的类别的各自的关键字及其关键字有用性判断算法不同，因此制作各自不同的IDX段。

另外，如图4所示，各IDX段划分为具有分层结构的多个区(segment)。由开头的一个段头603和接着的有可能包含多个的关键字区(keyword segment)604构成。

段头603是表示IDX段的属性的区。段头603例如能够设为段ID605、段大小606以及PTS类型607。

段ID605是表示段的属性的ID编号，对于包含在同一索引数据中的各IDX段中的每个IDX段是唯一的。处理索引数据的节目再现装置调查段ID来决定该IDX段的使用方法，因此在多个节目的各索引数据使用了相同的关键字有用性判断算法的情况下，理想的是使用相同的段ID。

段大小606表示该区的整体大小。另外，PTS类型607是区分包含在关键字区604中的PTS的表现方法的代码。后面记述PTS的表现方法的例子。

关键字区604是用于保存关键字及其出现位置的区。关键字区604具有分为多个单位的分层结构，由开头的一个关键字属性608和其后接着的有可能存在多个单位的PTS单位609构成。

关键字属性608例如由作为关键字区的大小的关键字区大小610、关键字长度611、关键字名612、表示包含在关键字区中的PTS单位的数量的PTS单位数613构成。

PTS单位609表示关键字出现的位置、或者关键字出现的场景的位置。PTS单位609的保存方法根据包含在段头603中的PTS类型607而不同。例如，如果在PTS 607中指示了类型1，则仅保存针对关键字的出现时刻，另外在指示了类型2的情况下，将关键字出现的场景的开始/结束时刻成对保存。

接着，使用图5至图10说明本发明的第一实施方式所涉及的节目录像再现方法的各部分的处理。

图5是表示索引生成部114生成索引数据的处理的流程图。

图6是表示索引数据输出处理的细节的流程图。

图7是表示节目录像时的处理的流程图。

首先，使用图5说明索引生成部114生成索引数据的处理。

由系统控制部110指示索引生成部114开始进行生成索引数据的处理。

索引生成部114最初从外部存储装置107获取词典数据122(步骤401)。

接着，获取节目信息(步骤402)。节目信息是数字播送的电子节目表(EPG)等，通过解析图2所示的播送数据、录像节目数据121而从信号分离部111获取。

接着，将时间戳301、字幕文302以及控制代码303作为一个记录(record)而获取图3所示的字幕文数据120(步骤403)。

接着，获取一个特征检测规则(步骤404)。特征检测规则是为了判断所输入的字幕文数据120是否为特定模式而使用的规则，例如判断是否包含通过图4的步骤S401获取的词典关键字的、发现用于强调字幕的特定的控制代码等。另外，字幕文数据120的关键字在上下文中重复的情况较多，因此不将第二次以后的重复的关键字设为有特征的关键字，在字幕文数据120的特定关键字没有出现一定区间以上而在之后存在时，能够判断为是与特征检测规则一致的关键字。

图1中没有示出特征检测规则，但是既可以作为索引生成部114的控制数据而保存在内部，也可以保存到外部存储装置107中而根据需要取出。

接着，根据分别通过步骤403和步骤404获取的字幕文数据和特征检测规则，进行索引数据输出处理(步骤405)。

后面使用图6详细说明索引数据输出处理。

接着，在结束了步骤405的索引数据输出处理之后，判断是否存在未判断的特征提取规则(步骤406)。

当存在其它特征提取规则的情况下，返回到步骤404而进行获取其它特征提取规则来输出索引数据的处理。

在应用了所有的特征提取规则的情况下，判断是否剩有字幕文数据121(步骤407)。

在剩有其它字幕文数据121的情况下，返回到步骤403，获取下一个字幕文数据。

在对所有的字幕文数据121应用了从步骤403至406的处理之后，索引生成部114结束生成索引数据的处理。

接着，使用图6详细说明索引数据输出处理。

最初，判断通过图4的步骤403获取的字幕文数据121是否符合特征检测规则(步骤501)。

如果判断为不符合特征检测规则，则结束处理。

在判断为符合特征检测规则的情况下，根据某关键字的有用性的判断方法判断关键字的有用性(步骤502)。另外，在步骤403中，也可以同时检索针对词典关键字的关联的单词、类似的单词。例如，在棒球节目中，在称为“得分场景”的词典关键字的情况下，还同时判断是否为表示取得了“适时安打”、“本垒打”等得分的情形的关键字。

关键字的有用性的判断是对于通过步骤403的处理获取的关键字判断是否根据录像节目的种类来输出索引数据的处理。作为进行判断的方法，根据周围的字幕文的上下文、关键字的出现频度、间隔、或者控制代码的规律进行判断。

例如，作为在棒球节目中通常由用户选择而再现的场景，可列举出得分场景、妙技(fine play)等。因此，对于字幕文301，即使包含有与得分场景相关联的关键字，在是“今天的第二个击球是本垒打。”这样的文章的情况下，由于只是过去的针对该击球员的比赛的陈述，因此认为该场景与用户想要观看的场景没有联系。因此，即使在字幕中包含有该关键字，也进行不包含在得分场景中的判断。另外，在检测出“本垒打”这样的单词的情况下，当出现的前后一定区间之间不存在相同的单词时，进行设为有用的判断。这是因为，在第二次以后只是说明的重复，因此认为作为信息不是有效，当第一次出现时，推测为在该场景中出现“本垒打”的得分场景较多。

另外，按节目的每个类别而改变关键字的有用性的判断方法。这是考虑到即使是一个节目，例如作为音乐节目、杂艺节目这样的不同的类别而捕捉时关键字的有效性也不同。另外，对于棒球的实况中继的节目，也可以如“体育”的类别、“棒球”的类别那样根据上位概念、下位概念的分类来判断关键字的有效性。

在所判断的关键字是有效关键字时(步骤503)，以按照图4的格式输出索引数据123(步骤504)。

此时，输出索引数据123使得对于一个类别构成一个IDX段602。因而，对于一个节目，在分类为多个类别时，生成多个IDX段602。

如果该节目的类别较多而导致用于判断有效关键字的计算量、索引数据123变大时，也可以应用限定类别的方法来减少输出类别。例如，在数字播送的EPG所包含的节目信息中，有时对一个节目赋予多个体裁代码。因此，也可以利用从这些体裁代码得到的体裁所适合的算法进行有效关键字判断，并进行输出以分别按每个体裁代码来构成不同的IDX段602。

输出索引数据的具体过程如下。

最初，根据使用有效关键字判断法的判断方法，决定从包含在图4的索引数据中的IDX段602中输出哪个IDX段602。如果不存在适合的IDX段602，则新生成IDX段602。

接着，判断要输出的关键字是否包含在各关键字区604中。当存在具有与输出关键字相同的关键字名612的关键字区604的情况下，向该关键字区的PTS单位609按照该PTS类型输出针对关键字的再现位置。另外，当不存在具有与输出关键字相同的关键字名612的关键字区604的情况下，新追加关键字区604。在向关键字区604追加了输出关键字的再现位置之后，更新关键字区大小610和段大小606。

根据IDX段而改变在此追加的再现位置的输出方法。例如也可以直接输出字幕文数据的时间戳。另外，在新闻节目等实况播送节目的情况下，有时关键字的出现时刻与播送字幕的出现时刻有偏差。因此，如果根据节目信息等能够检测出录像节目是否为实况播送，则也可以将与输出关键字对应的再现时刻设为字幕文数据的时间戳的一定时间前。另外，在检测出字幕文连续的区间等的情况等、需要作为场景进行检测的情况下，只要以图4的PTS类型2的格式保存到PTS单位中即可。

在输出索引数据123之后，判断字幕文数据是否进行了录像再现装置所支持的所有的有效关键字判断法(步骤505)。在除此之外还存在要应用的有效关键字判断法的情况下，再次返回步骤502，应用其它的有效关键字判断法。另一方面，在应用了所有的有效关键字判断法的情况下，结束处理。

接着，使用图7说明节目录像时的节目录像再现装置的处理。

在用户指示了节目的录像时，按照图7所示的处理，输出录像节目数据121，并且生成索引数据123。

首先，根据节目的预约录像、用户的录像指示，系统控制部110指示向节目录像状态转移。信号分离部111在接收播送数据时，对图2那样的格式的播送数据进行分析，并根据在录像前登记的传输请求进行分离处理(步骤701)，进行向节目记录部113和字幕解析部114的所希望数据的传输处理。然后，节目记录部向外部存储装置107记录录像节目数据121(步骤702)。

另一方面，同时向字幕解析部112输入字幕ES 204，字幕解析部112输出字幕文数据122(步骤703)。在此，索引生成部114在图6中的步骤502中所使用的关键字有效性的判断中，将包含在一定区间内的字幕文数据使用在评价中。因此，在RAM 106中存储一定量的字幕文数据122。然后，在字幕文数据122的存储量成为一定量以上的情况下(步骤702)，字幕解析部112向系统控制部110进行通知。系统控制部110在从字幕解析部112接受通知时，对索引生成部指示图5中说明的索引数据生成处理。

当判断为没有存储一定量以上的情况下，判断节目是否结束(步骤706)，当节目结束了时，使用RAM 106上的字幕文数据120，生成索引数据(步骤707)，结束处理。当节目没有结束时，之后再次成为播送数据的等待接收状态(步骤708)。

接着，使用图8和图9说明向用户提示是否能够对用户进行利用字幕的索引再现的处理。

如图9所示，当能够向用户进行利用字幕的索引再现时，在被显示在显示装置102上的节目一览画面800上显示其意思。

在此，索引再现是指使用了利用字幕制作的索引数据123的再现。

在节目一览画面800上显示多个进行了录像的节目的节目缩略图801、节目信息802。并且，在此，录像节目装置生成索引数据123，对能够根据包含在字幕中的关键字进行索引再现的节目例如附加星标记作为索引可再现标记803。这可以用称为“索引再现”的消息来进行显示，也可以改变节目缩略图801的颜色等来进行显示。

关于向用户提示是否能够进行利用字幕的索引再现的处理，最初获取被保存在外部存储装置107中的录像节目数N(步骤901)。

接着，获取第N个节目的索引数据123(步骤902)。

接着，关键字列表获取部115解析索引数据123，根据对象节目的类别进行索引数据123的有效性判断。

下面，详细说明判断索引数据123的有效性的处理。在此，设节目的类别是例如根据节目的体裁、节目标题、播送时间带、播送台等信息来决定的分类。例如，在棒球节目的情况下，能够指定包含与得分场景及三击未中场景有关的关键字的出现位置的章节来进行再现。

最初，判断在图4所示的索引数据中是否包含有与棒球节目的类别对应的IDX段602。如果没有包含IDX段602，则该索引数据123无效。在包含有与棒球节目的类别对应的IDX段602的情况下，判断是否存在包含指示得分场景的关键字名的关键字区604。当存在的情况下，求出包含在关键字区604中的PTS单位609的个数。当不存在包含指示得分场景的关键字名的关键字区604的情况下，将PTS单位609的个数设为0。同样地，求出针对指示三击未中场景的关键字名的PTS单位609的个数。

关于索引数据123的有效性，在得分场景和三击未中场景中的至少某一个的PTS单位的个数为规定以上的情况下，判断为该节目的索引数据123有效(步骤903)。

根据以上，在判断为索引数据123有效、可进行利用字幕的再现的情况下，显示能够对第N个节目进行利用字幕的再现的意思的标记(步骤904)。

之后，对所有节目进行步骤902至步骤904的处理，当结束所有节目的处理时(步骤905)，结束处理。

通过以上步骤，用户根据节目一览画面800上的、附加在对应的节目上的标记，获知可进行利用字幕的索引再现的节目。

另外，关于向用户提示是否能够进行利用字幕的索引再现的处理，在上述的例子中每当显示节目一览画面800时都对所有节目判断索引数据123的有效性。在此，为了减少显示节目一览画面800时的负荷，也可以将索引数据123的有效性判断结果例如保存在录像节目数据121内，并参照其判断结果对可进行索引再现的节目附加索引可再现标记803。利用本方法，只要进行一次就可完成索引数据123的有效性判断，能够减少显示节目一览画面800时的负荷。

另外，除了上述方法之外，还可以根据索引数据123的有效性判断结果，对于被判断为无法再现索引的节目，删除索引数据123。在实施本方法来显示节目一览画面800时，当存在索引数据123的情况下，附加索引可再现标记803。利用本方法，同样能够减少显示节目一览画面800时的负荷，能够进一步增加外部存储装置107的空闲容量。

接着，使用图10说明用户进行利用字幕的索引再现时的用户界面。

可进行本实施方式的索引再现的节目再现画面1000由索引选择菜单1001、类别选择菜单1002、关键字输入栏1003、进度条显示部1004、以及节目影像显示部1005构成。

可进行本实施方式的索引再现的节目再现画面1000在用户选择图9的附加有星标记803的节目并通过输入装置103指示了利用字幕的索引再现时被起动。

如图10所示，索引选择菜单1001是本垒打、得分场景等向用户提示而使用户选择用于再现的索引的菜单。索引是为了再现节目而向用户显示的索引，在本实施方式中，设为与字幕中的关键字一致而进行说明，但是也可以将关键字设为虽然相关但是不同显示的单词、从关键字联想到的单词、或者关键字的上位概念。在节目再现画面1000上显示这些时，系统控制部110对关键字列表获取部115进行关键字列表获取请求，由此获取在索引选择菜单1001内提示的索引的关键字。从该节目的索引数据123中自动地选择适于节目类别的IDX段602，从包含在IDX段602中的关键字区中获取所有的或者一部分关键字列表，并传递给影像输出部118。

如后面所说明的那样，用户能够通过类别选择菜单1002选择节目的类别。

另外，关键字列表获取部115仅输出存在一个以上的PTS单位的关键字。影像输出部118将所获取的关键字列表显示在索引选择菜单1001上。

当用户在索引选择菜单1001中选择索引时，进度条显示部1004的显示内容也发生变化。在进度条显示部1004上，对表示节目整体长度的进度条以及作为索引位置1006的与索引选择菜单1001的选择内容相应的章节的再现位置进行显示。

当在索引选择菜单1001中重新选择索引时，对再现位置列表获取部116输入与该索引对应的关键字。再现位置列表获取部116从该节目的索引数据123中选择与节目的类别对应的IDX段602，从与包含在IDX段中的输入关键字对应的关键字区604中获取所有的PTS单位。接着，将所获取的PTS单位609传递给影像输出部118。影像输出部118将所获取的PTS单位609所对应的章节的再现位置显示在进度条上。在此，在PTS单位是图4的类型1(出现时刻的类型)的情况下，影像输出部118仅将出现位置以与进度条的基准色不同的颜色进行显示。另一方面，在PTS单位是图6的类型2的情况下，将由开始/结束时刻包围的区间以与进度条的基准色不同的颜色进行显示。进度条显示部1004在通过输入装置1003接受用户的关键字再现请求时，能够跳到与该关键字对应的章节而进行显示。

如图10所示，类别选择菜单1002显示棒球、新闻之类的类别名，当改变类别时，在索引选择菜单1001上提示的索引的关键字名也发生变化。在显示该节目再现画面1000时，通过对关键字列表获取部115进行类别获取请求，从包含在该节目的索引数据123中的IDX段602中获取包含有效的关键字的所有的段ID。进行从所获取的段ID向类别名的变换，并向影像输出部118输出。影像输出部118在类别选择菜单1002上显示类别名。

当在类别选择菜单1002中选择其它类别时，从与该类别对应的段ID中确定索引数据123中的IDX段602，从包含在IDX段602中的关键字区中获取所有的、或者一部分关键字列表，并传递给影像输出部118。另外，关键字列表获取部115仅输出存在一个以上的PTS单位的关键字。然后，影像输出部118将所获取的关键字列表重新显示在索引选择菜单1001上。

用户通过输入装置103对关键字输入栏1003输入想要检索的关键字。设将该检索称为“自主关键字检索”。另外，设将用户所输入的关键字称为“自主关键字”。当输入关键字来指示开始检索时，对再现位置列表获取部115进行针对该关键字的再现位置列表获取请求。再现位置列表获取部115进行与包含在索引数据123中的所有的IDX段602内的关键字区的关键字名之间的匹配。与关键字名进行匹配的结果，如果发现了一致的关键字区，则向影像输出部118输出该关键字的PTS单位。在影像输出部118中，能够在与PTS单位609的位置对应的位置上再现对应的章节，或者能够利用该PTS单位所表示的位置，在进度条显示部1004上显示与该PTS单位对应的影像的位置。另一方面，在没有发现的情况下，向影像输出部118发送表示什么也没有发现的意思的消息的显示命令。

以上，通过由用户自动地输入关键字，用户能够手动检索想要观看的场景。另外，通过对索引数据123输出尽可能多的IDX段602，能够提高由用户进行的检索关键字的成功率。

本实施方式中的节目录像再现装置根据数字播送的字幕数据生成索引数据123，但是也可以通过解析影像、声音来将在字幕以外的场景检测结果反映在索引数据123中。例如，也可以使用影像中的图片放映机识别结果、CM检测结果等作为其它的IDX段而进行输出。

另外，实施方式中的节目录像再现装置在将录像节目数据121从外部存储装置107复制、移动到其它的记录介质的情况下，也可以同时移动索引数据123。例如，在再现专用播放器中，也能够通过安装关键字列表获取部115和再现位置获取部116来进行利用字幕的再现。

[实施方式2]

下面使用图11说明本发明所涉及的第二实施方式。

在第一实施方式中，在检索自主关键字时，将检索的范围仅设为索引数据123。本实施方式提供一种能够从包含在内容中的全字幕ES中高速地检索要检索的范围的方法。

此外，在本实施方式中，与第一实施方式进行比较，强调不同之处而进行说明。

如图11所示，本实施方式的节目录像再现装置的结构与第一实施方式的图1不同，字幕解析部112输出字幕地址数据125。字幕地址数据125是包含在录像节目数据121中的TS数据包中的、包含字幕ES的TS数据包的地址列表。

在现有技术中，在从录像节目数据121进行了利用自主关键字的检索时，由于无法确定包含在录像节目数据121中的字幕ES的位置，因此在检索字幕ES时需要解析所有的数据包，花费时间。

在本实施方式中，在从录像节目数据121进行自主关键字检索时，只要解析字幕地址数据125所表示的地址的数据包即可，因此能够大幅地改善检索的时间。

在节目录像过程中生成该字幕地址数据125。本实施方式中的节目录像再现装置中的节目录像时的处理是对第一实施方式的图7的流程图补充生成字幕地址数据125的处理的处理。在本实施方式中，在步骤701中向字幕解析部112传递字幕ES，同时传递包含字幕ES的TS数据包的录像节目数据121中的地址。数字播送中的TS数据包是188字节的固定长度，因此既可以是数据包编号，也可以是记录在实际的外部存储装置107中的实际地址。

字幕解析部112在步骤705中对字幕ES输出索引数据，并且输出所接收到的TS数据包的地址作为字幕地址数据125。

接着，说明使用字幕地址数据125进行自主关键字检索的方法。

本实施方式的处理仅在如下方面不同：进行自主关键字检索的对象，除了索引数据123之外还有录像节目数据121和字幕地址数据125。

首先，与第一实施方式同样地，当对关键字输入栏1003输入关键字来指示开始检索时，对再现位置列表获取部115进行针对该关键字的再现位置列表获取请求，并将索引数据123作为对象而进行自主关键字检索。将进行了自主关键字检索的该关键字的PTS单位609输出到影像输出部118。

另一方面，在没有发现的情况下，接着依次获取包含在字幕地址数据125中的TS数据包的地址列表。

接着，由信号分离部111解析包含在该地址的录像节目数据121中的TS数据包，将字幕ES输入到字幕解析部。在字幕解析部112中对字幕ES进行解码处理来获取字幕文，进行与检索对象的自主关键字之间的匹配处理。如果检索对象的自主关键字包含在字幕文中，则将字幕文的时间戳输出到RAM106。

之后，对包含在字幕地址数据125中的TS数据包的所有地址列表进行处理。

作为以上处理的结果，如果在字幕文中发现自主关键字，则将该时间戳列表输出到影像输出部118。另一方面，在没有发现的情况下，向影像输出部118发送表示什么也没有发现的意思的消息的显示命令。

在本实施方式中，最初检索索引数据123，因此与第一实施方式同样地维持检索的高速性。另外，在本实施方式中，即使在将索引数据123作为对象的自主关键字检索中没有发现，也能够高速地检索字幕文本身，因此改善关键字的成功率。另外，保存在外部存储装置107中的数据仅仅是包含简单的字幕ES的TS数据包的数据包地址，因此对于著作权也不会成为问题。

[实施方式3]

下面使用图12说明本发明所涉及的第三实施方式。

在第二实施方式中，在利用用户的自主关键字进行检索时，除了索引数据123之外还参照字幕地址数据125，从录像节目数据121中进行了检索。在本实施方式中，将字幕ES作为与录像节目数据不同的数据而进行保存。由于这不是将字幕文本身复制到外部介质中，因此对于著作权也不会成为问题。

此外，在本实施方式中，也与第一实施方式进行比较，强调不同之处来进行说明。

如图12所示，本实施方式的节目录像再现装置的结构与第一实施方式的图1不同，字幕解析部112输出字幕PES数据126。字幕PES数据是依次输出包含字幕ES的PES数据包而得到的数据。

在节目录像过程中生成该字幕PES数据126。本实施方式中的节目录像再现装置中的节目录像时的处理是对第一实施方式的图7的流程图变更与字幕PES数据126相关的处理后的处理。在本实施方式中，在图7的步骤701的处理中对节目录像部113输出录像节目数据时，过滤包含字幕ES的TS数据包而不传输。另外，字幕解析部121从所接收到的包含字幕ES的TS数据包中获取PES数据包，并作为字幕PES数据126进行输出。

在本实施方式中，在播送时，为了分离与字幕有关的ES并保存到外部存储装置107中，在将录像数据进行再现时，为了显示字幕而需要将字幕PES数据126作为PES数据包而直接输入到节目再现部117。

接着，说明使用字幕PES数据126来进行自主关键字检索的方法。

在第二实施方式的处理中，进行自主关键字检索的对象，除了索引数据123之外还有录像节目数据121和字幕地址数据125。

在本实施方式的处理中，进行自主关键字检索的对象，除了索引数据123之外还有字幕PES数据126。

首先，与第一、第二实施方式同样地，当对关键字输入栏1003输入关键字来指示开始检索时，对再现位置列表获取部115进行针对该关键字的再现位置列表获取请求，将索引数据123作为对象而进行自主关键字检索。将进行了自主关键字检索的该关键字的PTS单位609输出到影像输出部118。

另一方面，在没有发现的情况下，依次获取包含在字幕PES数据126中的PES数据包。接着将该PES数据包输入到字幕解析部112。在字幕解析部112中对字幕、ES进行解码处理来获取字幕文，进行与检索对象的自主关键字之间的匹配处理。如果检索对象的自主关键字包含在字幕文中，则将字幕文的时间戳输出到RAM106。之后，对包含在字幕PES数据126中的所有的数据包进行处理。

以上处理的结果，如果在从字幕PES数据126中获取的字幕文中发现自主关键字，则将该时间戳列表输出到影像输出部118。另一方面，在没有发现的情况下，向影像输出部118发送表示什么也没有发现的意思的消息的显示命令。

在本实施方式中的自主关键字检索中，将与字幕有关的PES数据包作为一系列数据而保存到外部存储装置107中，因此与第二实施方式相比，检索时的数据查找的次数减少并且高速。

下面使用图13至图21说明第四实施方式。

首先，使用图13说明第四实施方式所涉及的录像再现装置的结构。

图13是表示第四实施方式所涉及的录像再现装置的结构的框图。

如图13所示，第四实施方式的录像再现装置具备录像再现部1301、显示装置1302、输入装置1303、调谐器1304、天线1305、RAM1306以及外部存储装置1307。

录像再现部1301是对外部存储装置1307进行播送节目的录像、再现的部分。录像再现部1301分为用于进行对节目进行录像、再现时的各处理的处理模块。

显示装置1302是显示影像、声音的部分，在将所录像的内容进行再现的情况下，进行影像的显示、声音的输出。显示装置1302例如由电视、个人计算机的显示器或液晶面板等构成。

输入装置1303是用户对该录像再现装置进行操作而输入与由用户输入的操作有关的控制信息、数据的装置，例如利用遥控器、键盘、鼠标、笔输入装置等指示设备、或者液晶触摸面板等实现。

RAM 1306是易失性存储器，是存储由录像再现部1301处理的暂时性数据、程序的存储装置。

调谐器1304是根据从播送台接收到的电波进行选台并获取播送节目数据的部分。

天线1305是根据数字播送的频带接收播送电波的部分。例如，通过地波数字播送用的天线接收UHF带的电波。

外部存储装置1307是具有大容量的存储容量的装置，例如是DVD等光盘、HDD。

接着，说明录像再现部1301的各处理模块。此外，各处理模块例如可以是在CPU等通用处理器上运行的软件，也可以按每个模块利用专用的硬件进行处理。另外，也可以是软件和硬件混合存在的装置。

如图13所示，录像再现部1301由系统控制部1310、信号分离部111、字幕解析部112、节目记录部113、章节生成部114、关键字列表获取部115、再现位置列表获取部116、节目再现部117以及影像输出部118构成。

系统控制部1310通过输入装置1303接受用户的操作请求，控制录像再现部1301的各模块的动作。另外，对节目的录像以及再现等中的录像再现部1301的各模块的动作进行控制。

信号分离部1311具有将接收到的播送数据按影像数据、声音数据、字幕文数据、节目信息数据等每个种类进行分离而传递给其它处理模块的功能。另外，在从其它处理部存在数据发送请求的情况下，向请求源发送所指定的数据。并且，能够向信号分离部1311输入从调谐器1304接收到的播送节目数据、被保存在外部存储装置1307中的录像节目数据1321。

再现位置列表获取部1316根据系统控制部1310的指示，向影像输出部1318输出针对录像节目的再现位置列表。

节目再现部1313根据系统控制部1310的指示，获取用户所指示的节目的、被保存在外部存储装置1307中的录像节目数据121，并向信号分离部1311输入。之后，从信号分离部1311获取影像ES(后述)和声音ES(后述)并进行解码，向影像输出部1318输出影像和声音数据。

节目记录部1313在通过系统控制部1310存在节目的录像请求的情况下，对信号分离部1311请求数据流，并作为录像节目数据1321而保存到外部存储装置1307中。节目记录部1313可以根据用户的指定将所有的数据流作为录像节目数据1321进行保存，也可以为了减小存储区域而通过进行取舍选择来仅保存影像ES、声音ES。

影像输出部1318接受再现位置列表获取部1316和节目再现部1317的输出，构成画面，向显示装置1302输出影像和声音。

字幕解析部1312在从系统控制部1310接受字幕解析请求时，从信号分离部1311获取字幕ES(后述)和时间戳。然后，解析字幕ES，在RAM 1306上作为字幕特征数据1320进行保存。

章节生成部1314使用字幕特征数据1320和词典数据1322，向外部存储装置1307输出章节数据1323。

字幕特征数据1320是由字幕解析部1312解析字幕ES并以唯一的格式保存到RAM 1306中的数据。后面详细记述字幕特征数据1320。

在外部存储装置1307中保存录像节目数据1321、词典数据1322、章节数据1323。

词典数据1322是将应输出字幕特征数据1320的关键字的列表进行了排列的数据。但是，在只能进行字幕特征数据1320为检测出空白区间时的处理等、无法解析字幕内容的情况下，也可以设为不具有词典数据1322。另外，未必仅存在于外部存储装置1307，也可以通过因特网、播送波或者快闪存储器等手段获取。或者，也可以具有根据用户的操作历史、EPG来更新词典的结构。

录像节目数据1321是包含影像、声音、字幕等信息的节目的数据。

章节数据1323是按每个节目保持与包含在字幕中的关键字有关的信息的数据。后面详细记述章节数据1323。

接着，使用图14和图16说明与本实施方式的节目录像再现方法相关的数据结构。

图14是表示数字播送中的数据流的数据结构的图。

图15是表示字幕文数据1320的格式的图。

图16是表示章节数据1323的数据结构的图。

在数字播送中，作为传输方式使用MPEG-2 TS(TransportStream：传输流)。以图14所示的TS数据包1401传输影像数据、声音数据以及在数据播送中使用的所有的数据。

特别是，影像数据、声音数据、字幕文数据被编码压缩成ES(Elementary Stream)，分别成为影像ES1402、声音ES1403、字幕ES1404。这些ES以附加有表示显示时刻信息等的PES头205的PES(Packetized Elementary Stream)格式被打包。在PES头205中包含有时间戳，能够根据该时间戳取得各数据包的再现同步。从图14可知，往往能够利用多个TS数据包的有效负载来制作一个PES数据包。

图13所示的信号分离部1311解析图14的数据流，按数据包的每个种类进行分离。

接着，使用图15说明字幕特征数据1320。

如图15所示，以时间戳1501、字幕种类信息1502的表格格式保存字幕特征数据1320。

时间戳1501是包含在PES头1405中的字幕显示时刻，以从录像开始时刻起的相对时间进行显示。

字幕种类信息1502保存对包含在字幕ES1404中的字幕文303进行解析得到的结果。后面记述包含在字幕ES1404中的文本信息的解析方法和输出方法。

另外，根据RAM 1306的容量存储一定量的字幕特征数据1320。字幕解析部1312监视存储字幕特征数据1320的数据量，在判断为在RAM上存储了规定数据量以上时，通知系统控制部。

接着，使用图16说明章节数据1323。

章节数据1323是按每个节目生成的数据，在利用了自动章节的节目再现时使用。

如图16所示，章节数据1323具有分层结构，最上位的层由开头的一个章节头1601、和其后接着的有可能包含多个的章节段1602构成。

章节头1601包含有成为章节数据属性的数据，包含有只包含一个的信息、例如录像开始时刻、结束时间以及章节的指示时刻即PTS(Presentation Time Stamp)的单位、节目信息等，另外包含章节段1602的合计数。除了从EPG获取的信息之外，还可以对节目信息附加像质的设定等录像时的附加信息等。另外，也可以保持章节数据的版本编号、制作日期和时间等信息。

根据关键字的属性、关键字有用性判断算法的差异，制作章节段1602使其区别于其它章节段。例如，在节目的类别不同的情况下，使用不同的章节生成算法，因此与各个节目的类别相对应地制作章节段。例如，体育节目的类别与新闻节目的类别的各自的章节生成算法不同，因此制作各自不同的章节段。

另外，如图16所示，各章节段划分为具有分层结构的多个区。由开头的一个段头1603和有可能包含多个的PTS部1604构成。

段头1603是表示章节段的属性的区。段头1603例如能够设为段ID1605、段大小1606、PTS类型1607以及PTS数1608。

段ID1605是表示段的属性的ID编号，对于包含在同一章节数据中的每个章节段是唯一的。处理章节数据的节目再现装置调查段ID来决定该章节段的使用方法，因此在多个节目的各章节数据使用了章节生成算法的情况下，最好使用相同的段ID。

段大小1606表示该区的整体大小。另外，PTS类型1607是区分包含在PTS部1604中的PTS的表现方法的代码。后面记述PTS的表现方法的例子。另外，PTS数1608表示包含在该区中的PTS部的数量。

PTS部1604表示章节位置、或者检测出的场景的位置。PTS部1604的保存方法根据包含在段头1603中的PTS类型1607而不同。例如，如果在PTS407中指示有类型1，则仅保存章节位置，另外在指示有类型2的情况下，将场景的开始/结束时刻成对保存。

接着，使用图17至图21说明第四实施方式所涉及的节目录像再现方法的各部分的处理。

图17是表示字幕解析部1312生成字幕特征数据的处理的流程图。

图18是表示字幕特征数据输出处理的细节的流程图。

图19是表示章节生成部1314生成章节数据的处理的流程图。

图20是表示节目录像时的处理的流程图。

图21是表示进行利用字幕的自动章节再现的节目再现画面的用户界面的例子的图。

首先，使用图17说明字幕解析部1312生成字幕特征数据的处理。

由系统控制部1310指示字幕解析部1312开始进行生成字幕特征数据的处理。

章节生成部1312最初从外部存储装置1307获取词典数据1322(步骤1701)。但是，在不使用词典数据1322而生成字幕特征数据的情况下，省略本步骤。

接着，获取字幕ES和时间戳(步骤1702)。通过解析图14所示的播送数据来从信号分离部1311获取字幕ES。同样地，从PES头1405获取针对字幕ES的时间戳。

接着，解析字幕ES来获取一个数据单位(步骤1703)。数据单位是ARIB规格所记述的字幕ES的结构要素之一，当在字幕ES中包含多个语言的字幕文的情况下，按各个语言中的每个语言设为不同的数据单位而进行分组。关于语言种类，能够根据包含在数据单位中的数据组ID进行识别。

接着，解析数据单位来进行解码处理(步骤1704)。进行解码处理，获取图15所示的字幕文303。

接着，使用通过步骤1704获取的字幕文303和通过步骤1702获取的时间戳进行字幕特征数据输出处理(步骤1705)。使用图18详细说明字幕特征数据输出处理。

接着，判断通过步骤1702获取的字幕ES中是否存在未处理的数据单位。当不存在未处理的数据单位的情况下，返回到步骤1703，进行针对下一个数据单位的处理。但是，也可以仅处理包含特定的语言的数据单位。

接着，使用图18详细说明字幕特征数据的输出处理。最初，关于通过步骤1703获取的字幕文303判断是否包含文本(步骤1801)。

在数据单位中包含如图15的字幕文303所示那样的“您好～”之类的字符串。另一方面，包含有字符颜色变更、删除显示字幕文之类的与字幕显示方法有关的控制数据、作为位图而描绘的符号数据。

在步骤1801中，在关于通过步骤1703获取的字幕文303判断为包含文本部分的情况下，进行有效关键字判断处理(步骤1802)。

在有效关键字判断处理中，例如判断是否包含有词典数据1322所包含的各单词数据、或者系统起初所具备的检测语句。

例如在音乐节目的情况下，设节目过程由多个曲目构成，在歌曲的开头自动地附加章节。在本步骤中，判断是否包含作为歌曲的分隔符而假定的语句(“请欣赏下一个歌曲。”等)、或者在播放音乐的情况下显示的“

”之类的符号。

接着在步骤1802中的判断结果中，在判断为包含有效关键字的情况(步骤1803)下，输出字幕种类信息1502(步骤1804)。另外，在步骤1801中，在关于通过步骤1703获取的字幕文303判断为不包含文本部分的情况下，也进行相同的处理。

字幕种类信息1502为了例如图15所示那样保存多个种类，将各个种类的含有信息表现为比特标志，将其以十进制数等进行编码而保存。例如在包含文本部分的数据的情况下，将第一个比特设为1。另外，在仅包含控制代码的数据的情况下，将第三个比特设为1。另外，在包含与音乐有关的关键字的情况下，将第二个比特设为1。另外，在除此之外还包含其它关键字的情况下，将某一个比特设为1。另外，关于位图符号等，同样地对于与音乐有关的符号将第二个比特设为1，为了表示包含位图符号的情形而将任一个比特设为1。

用图15的例子进行说明，最初在时间戳3取得了仅包含字符颜色变更这样的控制数据的字幕ES的情况下，将下位第三个比特设为1以表示仅包含控制代码。当在下一个时间戳4取得了包含“您好～”这样的文本的字幕文数据的情况下，设为包含有文本部分而将下位第一个比特设为1。接着，在时间戳1302取得了包含具有“

”音乐符号的文本部分的字幕文数据的情况下，设为包含文本部分以及与音乐有关的关键字而将下位第一个比特和第二个比特同时设为1。接着在时间戳299设为包含“请欣赏下一个歌曲”这样的文本部分以及与音乐有关的关键字而将下位第一个比特和第二个比特同时设为1。接着在时间戳802中取得了包含“本周的名次”这样的文本部分的字幕文数据的情况下，设为在词典关键字122中包含“名次”这样的关键字并一致，将下位第一个比特和下位第六个比特同时设为1。

以上，在字幕种类信息1502中同时保存字幕文数据的种类、是否与词典数据1322的各关键字一致的信息。也可以如图15那样以比特标志保存字幕种类信息1502，但是例如在词典数据变得庞大的情况下，也可以不是比特表现而是仅在判断为包含的情况下只将词典关键字编号表现为不同的数据。另外，关于如例子那样以“

”、“请欣赏下一个歌曲。”这样的相同的类别检测出的关键字，分配给相同的比特，这最好考虑以后的章节生成部中的处理等。

以上，进行步骤1804的字幕种类信息的输出处理。接着，判断是否存在未适应的有效关键字判断方法(步骤1805)。另外，在步骤1803中没有被判断为有效关键字的情况下，直接进入步骤1805。在判断为残留有效关键字判断方法的情况下，返回到步骤1802，应用下一个关键字判断法。在进行了多个关键字判断方法的情况下，将结果与以前的字幕种类信息进行合并。

在步骤1805中判断为进行了所有的有效关键字判断方法的情况下，结束处理。另外，在步骤1801中判断为没有包含文本部分的情况下，在进行步骤1804的字幕种类信息的输出处理之后结束处理。

接着，使用图19说明章节生成部1314生成章节数据的处理。

由系统控制部1310指示章节生成部1314开始进行章节数据生成处理。

章节生成部1314最初获取节目信息(步骤1901)。节目信息是数字播送的电子节目表(EPG)等，通过解析图14所示的播送数据、录像节目数据1321而从信号分离部1311获取。

接着，将时间戳1501和字幕种类信息1502作为一个记录而获取图15所示的字幕特征数据(702)。

接着，判断所取出的字幕特征数据是否符合章节提取规则(步骤1903)。特征提取规则是为了判断所输入的字幕特征数据1320是否为特定模式而使用的规则，对通过步骤1902获取的一个记录，评价前后的字幕种类信息、其时间间隔。

作为例子，说明针对音乐节目的章节提取规则。在音乐节目中，例如应用对曲目的开头部分设定章节的规则。因此，一个记录一个记录地评价字幕特征数据，找出包含与音乐有关的关键字的字幕特征数据。在得到图15那样的字幕特征数据的情况下，时间戳1302符合条件。接着评价符合的上述字幕特征数据的下一个记录的类型与时间间隔。在图15那样的字幕特征数据的情况下，下一个记录是字符串，时间间隔为299-102＝197秒。在出现音乐关键字而没有以一定以上的间隔得到字幕特征间隔的情况下，是歌曲场景的可能性高，因此时间戳1302的数据符合章节提取规则。

除此之外，章节提取规则能够按节目的每个类别具有多个规则。通过进行与作为特征数据而持有的词典关键字之间的匹配状况、不存在字符串的一定区间的检测，设置将出现词典关键字的部分设定为章节的规则、在认为是CM区间的、不存在字符串的区间持续一定以上的情况下对下一个字符串部分的开头设定章节这样的规则。能够应用多个这些规则。

在步骤1903中判断为符合章节提取规则的情况下，输出章节数据(步骤1904)。在图15的情况下，时间戳1302的数据符合章节提取规则，因此对于图16的章节数据，向音乐节目段的PTS部输出时间戳1302。在应用了多个类别的规则的情况下，分别输出到符合的类别段中的PTS部。

另外在图16的章节数据的PTS部中通过PTS类型1607的表现，不仅能够作为章节的开始点而保存，还能够作为开始/结束点而保存。通过每个类别的章节提取规则来控制PTS的保存方法。

在步骤1904中输出章节数据之后并在步骤1903中判断为符合章节提取规则的情况下，判断是否存在下一个字幕特征数据记录(步骤1905)。在判断为存在剩下的字幕特征数据的情况下，返回到步骤1903而对下一个记录进行评价。在步骤1905中，判断为对所有的字幕特征数据进行了处理的情况下，章节生成部1314结束处理。

图13中没有示出章节提取规则，但是既可以作为章节生成部1314的控制数据而保存到内部，也可以保存到外部存储装置1307中并根据需要取出。

如果该节目的类别较多而使用于判断章节提取规则的计算量、章节数据1323变大的情况下，也可以应用限定类别的方法而减少输出类别。例如，在数字播送的EPG所包含的节目信息中，往往对一个节目赋予多个体裁代码。因此，也可以利用从这些体裁代码得到的体裁所适合的算法来进行有效关键字判断，进行输出使得分别对每个体裁代码构成不同的章节段1602。

另外，不需要对所有的类别设置规则，也可以设置共用规则类别用的章节提取规则。例如设为仅对认为是CM区间的部分的结束位置设定章节这样的章节提取规则。例如也可以除了音乐节目以外而进行应用共用规则这样的运用。

接着，使用图20说明节目录像时的录像再现装置的处理。

在用户指示了节目的录像时，按照图20所示的处理，输出录像节目数据1321，并生成字幕特征数据1322和章节数据1323。

首先，根据节目的预约录像、用户的录像指示，系统控制部1310指示向节目录像状态转移。信号分离部1311在接收播送数据时，对如图14那样的格式的播送数据进行分析，并根据在录像前登记的传输请求进行分离处理(步骤2001)，进行向节目记录部1313和字幕解析部1314传输期望数据的传输处理。然后，节目记录部对外部存储装置1307进行录像节目数据121的记录(步骤2002)。

另一方面，系统控制部1310根据用户的录像开始时的设定、或者系统的录像方法设定，判断是否进行自动章节(步骤2003)。如果判断为自动章节生成为开启(ON)，则向字幕解析部1312输入字幕ES1404，字幕解析部1312输出字幕特征数据1322(步骤2004)。

在步骤2003中判断为自动章节为关闭(OFF)的情况下、并且结束了步骤2004之后，判断节目是否结束(步骤2005)，在节目结束时，系统控制部1310判断是否存储了一定量以上的字幕特征数据(步骤2006)。在存储了一定量以上的情况下，章节生成部1314使用RAM1306上的字幕文数据1322，生成章节数据(步骤2007)，并结束处理。在步骤2006中判断为没有存储一定量以上的情况下，章节生成部1314不进行章节数据生成处理而结束处理。在步骤2005中判断为节目没有结束时，之后再次成为播送数据的等待接收状态(步骤2008)。

接着，使用图21说明用户进行利用字幕的自动章节再现时的用户界面。

可进行本实施方式的章节再现的节目再现画面2100由进度条显示部2101、自动章节再现方法显示部2102、以及节目影像显示部2103构成。

可进行本实施方式的自动章节再现的节目再现画面2100在用户通过输入装置1303指示了节目再现时被起动。

在进度条显示部2101上显示有表示节目总长度的进度条、和作为章节位置904的与该节目的章节数据1324的内容相应的章节的再现位置。

当被指示节目再现时，对再现位置列表获取部1316输入该节目的类别信息。再现位置列表获取部1316从该节目的章节数据1323中选择章节段1602，获取包含在章节段中的所有的PTS单位1604。接着将所获取的PTS单位1604传递给影像输出部1318。影像输出部1318将所获取的PTS单位1604所对应的章节的再现位置显示在进度条上。在此，影像输出部1318在PTS单位1604为图16的类型1(出现时刻的类型)的情况下，仅将出现位置以与进度条的基准色不同的颜色进行显示。另一方面，在PTS单位1604为图18的类型2的情况下，将由开始/结束时刻包围的区间以与进度条的基准色不同的颜色进行显示。

章节数据支持多个段的保存，在生成章节数据时，有可能输出系统所支持的所有的类别。再现位置列表获取部1316在再现节目时，例如也可以根据对数字播送的EPG所包含的节目信息附加的体裁代码，确定从这些体裁代码得到的体裁的章节段1602，获取特定章节段中的PTS单位的列表。

在这种情况下，例如在该体裁代码的种类中存在“音乐”“新闻”“体育”这样的类别的情况下，在“音乐”的情况下获取章节段1602中的章节段1，在“新闻”的情况下获取章节段1602中的章节段2，在“体育”的情况下获取章节段1602中的章节段3等，也可以根据体裁代码选择获取的章节段。在这种情况下，能够根据节目的种类来选择分别不同的章节，能够进行使用了更适合节目内容的章节位置的再现。

另外，在对数字播送的EPG所包含的节目信息附加的体裁代码中有可能包含多个体裁。在这种情况下，再现位置列表获取部1316也可以调查一部分或者所有的体裁代码，获取与体裁代码匹配的所有的章节段的PTS单位来进行显示。

在这种情况下，例如在该体裁代码的种类中存在“音乐”“新闻”“体育”的上述例子中，在某个节目的体裁代码中包含有“新闻”和“体育”的两者的情况下，只要获取章节段1602中的章节段2和章节段3的两者即可。在这种情况下，在节目的体裁代码中存在多个种类的代码的情况下，能够不遗漏与该多个种类的两者对应的章节而使用。

或者，也可以在最初发现包含在章节数据1324中的类别的时刻结束章节段的搜索。

在这种情况下，例如在该体裁代码的种类中存在“音乐”“新闻”“体育”的上述例子中，在某个节目的体裁代码中包含“新闻”和“体育”的两者而首先发现了“新闻”的情况下，只要获取章节段1602中的章节段2即可。在这种情况下，能够更简便、高速地进行处理。

或者，也可以仅调查最初的体裁代码，如果匹配，则获取该章节段的PTS单位，如果不匹配，则获取共用规则用的章节段的PTS单位。在这种情况下，也能够更简便地进行处理。

另外，除了按体裁代码不同的章节段之外，也可以准备共用规则用的章节段，在没有发现体裁代码的情况下，获取共用规则用的章节段。

另外，在由章节生成部1314生成章节时，例如也可以使用对数字播送的EPG所包含的节目信息附加的体裁代码，确定该节目的类别，使用该特定类别的规则来生成章节。即，也可以在生成章节时根据对生成章节的节目信息附加的体裁代码来变更章节的生成规则。在这种情况下，在再现时即使不搜索章节段而进行再现，也能够按每个类别进行最佳的再现。即，一边能够按每个类别进行最佳的再现，一边能够减少再现时的处理量。

另外，也可以根据用户的指定来显示用于选择类别的选项画面。在这种情况下，获取与该类别匹配的章节段的PTS单位。

另外，根据系统的情况对从再现位置列表获取部1316取得的各章节位置进行评价，在前后章节成为一定以下的间隔的情况下，汇总为一个章节。关于汇总章节的方法，能够简单地汇总为前方或后方的一定方向的章节，但是也可以按每个节目类别将汇总方法设为不同的方法。例如在音乐节目中，在将歌曲的开头位置和CM位置同时显示为章节的情况下，在紧接着CM结束之后检测出歌曲的开头位置时，在位于后方的歌曲的开头位置汇总，在用其它的类别显示包含在词典数据1324中的出现位置的章节位置时，也可以汇总为前方的章节。

进度条显示部2101在通过输入装置1303接受用户的向下一个章节位置的跳跃请求时，能够跳到位于从当前的再现位置最近的后方的章节而进行再现。另外，同样地，当接受向前一个章节位置的跳跃请求时，能够跳到位于从当前的再现位置最近的前方的章节而进行再现。但是，在正在对距章节位置某一定时间以内的再现位置进行再现时接受向前一个章节位置的跳跃请求的情况下，跳到靠前两个的章节。

自动章节再现方法显示部2102向用户显示自动章节的操作方法。例如能够仅在再现可进行自动章节的节目时进行显示。另外，如果从开始再现起一定时间之后与进度条显示部2101一起删除，则能够不妨碍视听画面。也可以仅在用户进行了跳跃请求、快进、快退之类的特殊操作时重新进行显示。

以上，在用户选择了节目再现时，能够进行自动章节再现。

此外，进度条显示部2101和章节位置904中的仅在自动章节再现时进行显示的部分、或自动章节再现方法显示部2102，在进行所谓的“追踪再现”、即并行地进行节目记录部中的记录和节目再现部中的再现的情况下，也可以设定为不进行显示。

本实施方式中的录像再现装置在录像过程中解析字幕数据来生成字幕特征数据122，在紧接着录像之后生成章节数据1323，但是例如也可以在深夜的空余时间等用户不使用时生成字幕特征数据1322和章节数据1323。

另外，本实施方式中的录像再现装置为了节约RAM106的使用量而保存持有字幕种类信息的字幕特征数据而不是如图3所示的字幕文本身，但是在可使用大容量RAM的情况下，也可以保存全字幕文数据，并由章节生成部114进行解析。另外，在RAM容量较小而无法在录像过程中将字幕特征数据122保存到RAM中的情况下，也可以在字幕解析部1312中限制字幕特征数据输出。在这种情况下，章节生成部1314生成直到录像节目的途中为止的章节。

另外，本实施方式中的录像再现装置从数字播送的字幕数据生成章节数据1323，但是也可以通过解析影像、声音，在字幕以外的场景检测结果反映在章节数据1323中。例如，也可以使用影像中的图片放映机识别结果、CM检测结果等，作为不同的章节段而进行输出。

另外，实施方式中的节目录像再现装置将录像节目数据1321从外部存储装置1307复制、移动到其它的记录介质的情况下，也可以同时移动索引数据1323。例如，在再现专用播放器中，也能够通过安装再现位置获取部1316来进行利用字幕的自动章节再现。

根据本发明，在对数字播送的节目进行录像再现的情况下，能够进行基于利用字幕的最佳索引的再现、以及基于用户自主输入的关键字的再现的两者。

另外，根据本发明，能够提供让用户容易理解地显示包含字幕中的关键字的场景的用户界面。

另外，根据本发明，能够对用户自主输入的关键字高速地进行关键字检索。

根据其它的本发明的方式，能够更适当地对具有字幕数据的节目数据进行录像再现。

Claims

1.一种节目录像再现装置，其特征在于，具有：

信号分离部，其接收数字播送，根据播送数据的种类进行分离；

字幕解析部，其解析从上述信号分离部输入的字幕ES(Elementary Stream)，生成由字幕文、控制代码以及显示时刻构成的字幕文数据；

节目记录部，其将从上述信号分离部输入的播送数据作为录像数据而记录到存储装置中；

索引生成部，其解析上述字幕文数据，生成用于根据用户所指定的索引来再现节目的索引数据，并输出到存储装置；

关键字列表获取部，其从上述索引数据获取成为索引的候选的关键字列表；以及

再现位置列表获取部，其对于针对从上述关键字列表选择的关键字的再现位置，从上述索引数据中进行检索而获取再现位置列表，

其中，在再现录像节目时，显示与用户所指定的索引的关键字对应的位置位于节目的哪个部分，将与上述用户所指定的索引的关键字对应的位置的录像数据进行再现。

2.根据权利要求1所述的节目录像再现装置，其特征在于，

还具有由用户输入关键字的单元，

上述再现位置列表获取部对于上述输入的关键字，从上述索引数据中进行检索而获取再现位置列表，

在再现录像节目时，显示与上述输入的关键字对应的位置位于节目的哪个部分，将与上述输入的关键字对应的位置的录像数据进行再现。

3.根据权利要求1所述的节目录像再现装置，其特征在于，

还具有由用户选择节目的类别的单元，

上述索引数据具有按节目的每个类别保存不同的关键字的区域，

在再现录像节目时，显示与用户所选择的类别的关键字对应的位置位于节目的哪个部分，将与用户所选择的类别的关键字对应的位置的录像数据进行再现。

4.根据权利要求2所述的节目录像再现装置，其特征在于，

上述字幕解析部提取包含从上述信号分离部输入的字幕ES的TS(Transport Stream)数据包的地址，生成由包含字幕ES的TS数据包的地址构成的字幕地址数据，并输出到存储装置，

上述再现位置列表获取部对于上述输入的关键字，从上述字幕地址数据中进行检索而获取再现位置列表。

5.根据权利要求2所述的节目录像再现装置，其特征在于，

上述字幕解析部生成包含从上述信号分离部输入的字幕ES的字幕PES(Packetized Elementary Stream)数据，并输出到存储装置，

上述再现位置列表获取部对于上述输入的关键字，从上述字幕PES数据中进行检索而获取再现位置列表。

6.一种节目录像再现方法，其特征在于，具有：

信号分离部接收数字播送并根据播送数据的种类进行分离的步骤；

字幕解析部解析从上述信号分离部输入的字幕ES(ElementaryStream)并生成由字幕文、控制代码以及显示时刻构成的字幕文数据的步骤；

节目记录部将从上述信号分离部输入的播送数据作为录像数据而记录到存储装置中的步骤；

索引生成部解析上述字幕文数据并生成用于根据用户所指定的索引来再现节目的索引数据的步骤；

关键字列表获取部从上述索引数据获取成为索引的候选的关键字列表的步骤；

再现位置列表获取部对于针对从上述关键字列表选择的关键字的再现位置，从上述索引数据中进行检索而获取再现位置列表的步骤；

通过节目再现画面输入用户所指定的索引的关键字的步骤；

在节目再现画面上显示与上述用户所指定的索引的关键字对应的位置位于节目的哪个部分的步骤；以及

将与用户所指定的索引的关键字对应的位置的录像数据进行再现的步骤。

7.根据权利要求6所述的节目录像再现方法，其特征在于，还具有：

由用户输入关键字的步骤；

上述再现位置列表获取部对于上述输入的关键字，从上述索引数据中进行检索而获取再现位置列表的步骤；

在再现录像节目时显示与上述输入的关键字对应的位置位于节目的哪个部分的步骤；以及

将与上述输入的关键字对应的位置的录像数据进行再现的步骤。

8.根据权利要求6所述的节目录像再现方法，其特征在于，还具有：

由用户选择节目的类别的步骤；

在再现录像节目时显示与用户所选择的类别的关键字对应的位置位于节目的哪个部分的步骤；以及

将与用户所选择的类别的关键字对应的位置的录像数据进行再现的步骤。

9.根据权利要求7所述的节目录像再现方法，其特征在于，具有以下步骤：

上述字幕解析部提取包含从上述信号分离部输入的字幕ES的TS数据包的地址，生成由包含字幕ES的TS(Transport Stream)数据包的地址构成的字幕地址数据并输出到存储装置的步骤；以及

上述再现位置列表获取部对于上述输入的关键字，从上述索引中进行检索并在没有找到时从上述字幕地址数据中进行检索而获取再现位置列表的步骤。

10.根据权利要求7所述的节目录像再现方法，其特征在于，具有：

上述字幕解析部生成包含从上述信号分离部输入的字幕ES的字幕PES(Packetized Elementary Stream)数据并输出到存储装置的步骤；以及

上述再现位置列表获取部对于上述输入的关键字，从上述索引中进行检索并在没有找到时从上述字幕PES数据中进行检索而获取再现位置列表的步骤。

11.一种录像再现装置，其特征在于，具有：

字幕解析部，其解析从上述信号分离部输入的字幕ES(Elementary Stream)，生成由包含字幕文的种类的字幕种类信息以及显示时刻构成的字幕特征数据；

章节生成部，其解析上述字幕特征数据，生成用于根据用户所指定的章节来再现节目的章节数据，并输出到上述存储装置；

再现位置列表获取部，其从上述章节数据中检索与节目的类别相应的章节位置来获取再现位置列表；以及

节目再现部，其进行如下的再现：将被记录在上述存储装置中的上述录像数据进行再现，并将再现位置变更为包含在上述再现位置列表获取部所获取的再现位置列表中的再现位置。

12.根据权利要求11所述的录像再现装置，其特征在于，

上述章节生成部在上述节目的类别是音乐节目时生成章节的开头为歌曲开头的章节数据。

13.根据权利要求12所述的录像再现装置，其特征在于，

上述章节生成部根据包含在字幕中的音符标记的有无来判断上述节目中的上述歌曲的开头位置。

14.根据权利要求1所述的录像再现装置，其特征在于，

上述再现位置列表获取部获取与对上述数字播送所包含的上述节目附加的体裁代码对应的各个再现位置列表。

15.根据权利要求11所述的录像再现装置，其特征在于，

上述节目再现部根据与对上述数字播送所包含的上述节目附加的体裁代码对应的各个再现位置列表，变更上述录像数据的再现位置。

16.根据权利要求11所述的录像再现装置，其特征在于，

上述再现位置列表获取部在存在多种对上述数字播送所包含的上述节目附加的体裁代码的情况下，同时获取与上述多种体裁代码对应的多种再现位置列表。

17.根据权利要求11所述的录像再现装置，其特征在于，

上述节目再现部在存在多种对上述数字播送所包含的上述节目附加的体裁代码的情况下，根据与上述多种体裁代码对应的多种再现位置列表两者的列表，变更上述录像数据的再现位置。

18.根据权利要求11所述的录像再现装置，其特征在于，

还具有控制上述字幕解析部的系统控制部，

上述系统控制部根据系统的录像方法设定，判断是否进行自动章节，

在上述系统控制部判断为自动章节生成为开启设定的情况下，上述字幕解析部将上述字幕特征数据输出到上述章节生成部，

在上述系统控制部判断为自动章节生成为关闭设定的情况下，上述字幕解析部不将上述字幕特征数据输出到上述章节生成部。

19.根据权利要求11所述的录像再现装置，其特征在于，

还具有控制上述字幕解析部的系统控制部，

在上述系统控制部判断为自动章节生成为开启设定的情况下，上述章节生成部生成上述章节数据，

在上述系统控制部判断为自动章节生成为关闭设定的情况下，上述章节生成部不生成上述章节数据。

20.根据权利要求11所述的录像再现装置，其特征在于，

还具有显示部，该显示部对上述节目再现部再现的录像数据进行显示，

上述显示部在再现可进行自动章节的节目时，进行表示自动章节的操作方法的显示。

21.根据权利要求11所述的录像再现装置，其特征在于，

上述章节生成部根据对上述数字播送所包含的上述节目附加的体裁代码来变更上述章节的生成规则。