CN1201571C

CN1201571C - 重放具有闭合字幕文本的视频的系统和方法

Info

Publication number: CN1201571C
Application number: CNB018047181A
Authority: CN
Inventors: S·达塔斯
Original assignee: Koninklijke Philips Electronics NV
Current assignee: Koninklijke Philips NV
Priority date: 2000-10-11
Filing date: 2001-09-26
Publication date: 2005-05-11
Anticipated expiration: 2021-09-26
Also published as: CN1398485A; KR20020062751A; WO2002032128A2; JP2004511972A; WO2002032128A3; EP1329102A2

Abstract

本发明公开了一种视频帧捕获装置，它能够在快进模式和反向模式期间从重放的视频信号中捕获多个视频帧。一种闭合字幕文本检测器被提供用于检测重放的视频信号中的闭合字幕文本。一个存储器被提供用于存储检测到的闭合字幕文本和多个关键帧。这些关键帧包括由视频帧捕获装置捕获的与检测到的闭合字幕文本相对应的所选帧。一个视频处理器用于检索闭合字幕文本的一个行以及与闭合字幕文本的该第一行相对应的至少一个关键帧，并在显示屏上和该关键帧一起显示闭合字幕文本的该行。

Description

重放具有闭合字幕文本的视频的系统和方法

本发明的技术领域

本发明一般涉及视频量放设备，具体来说，本发明涉及一种在快进和反向模式中显示闭合字幕文本和相关视频的系统。

发明背景

目前在市场上可以获得各种各样的视频重放设备。很多人都拥有或者熟悉盒式磁带录像机(VCR)，这种录像机也被称作磁带录像机(VTR)。近来，在市场上已经出现了使用计算机硬磁盘而不是盒式磁带来存储视频节目的录像机。例如ReplayTVJ录像机或TiVOJ录像机，它们利用MPEG-2压缩把电视节目以数字形式记录到硬盘驱动器上。另外，一些视频重放设备也可在可读/可写数字多用盘(DVD)而不是磁盘上进行记录。

闭合字幕服务已被广泛用在电视节目中，以提供音频语音段的文字副本。对于处在吵杂环境中的观众以及有听力障碍的观众来说，这个性能特别有用。文本通常显示在电视屏幕下部的方框中。在记录一个广播之后，用户可能会希望找出磁带或盘记录中的一点或一段的位置以便于观看。用户可能希望跳过电视广告或在记录的广播中找到想要的场景。用于找出片段位置的传统方法是使用“快进”和“倒带”(二者均被认为是一种快速播放模式)，它们分别正向或反向提高视频信息的速度。

在传统的VCR和数字重放设备中，在快进或倒带模式期间，闭合字幕性能通常是不起作用的，或者至多也就以高速率显示帧的一个样本。这将会妨碍残疾人用户存取文本信息并会妨碍其利用可提高视频浏览质量的大量重要且有价值的内容资源。

因此，在相关技术中，需要一种在快进和倒带期间观看文本的系统。在相关技术中，还需要在快速播放模式期间使闭合字幕文本与视频帧同步。

发明概述

为了克服已有技术中的上述缺陷，本发明的首要目的就是要提供一种用在录像机(该录像机使用录像带、硬盘或固态存储器)中的系统和方法，以用于在快速播放期间显示闭合字幕文本。本发明公开了一种视频帧捕获装置，它能够在快进模式和反向模式期间从重放的视频信号中捕获多个视频帧。一种闭合字幕文本检测器被提供用于检测重放的视频信号中的闭合字幕文本。一个存储器被提供用于存储检测到的闭合字幕文本和多个关键帧。这些关键帧包括由视频帧捕获装置捕获的与检测到的闭合字幕文本相对应的所选帧。一个视频处理器用于检索闭合字幕文本的一个行以及与闭合字幕文本的第一行相对应的至少一个关键帧，并在显示屏上显示具有该关键帧的闭合字幕文本行。

根据本发明的一个优选实施例，其中视频处理器能够在显示屏的一个所选窗口中显示闭合字幕文本的多个行。

根据本发明的一个实施例，视频处理器能够在显示屏的一个所选窗口中滚动闭合字幕文本的多个行。

根据本发明的一个实施例，视频处理器能够在显示屏的第一部分中显示第一关键帧并在显示屏的第二部分中显示第二关键帧。

根据本发明的另一个实施例，当闭合字幕行文本的第一行出现在显示屏的一个所选窗口中时，视频处理器能够在显示屏的第一部分中显示第一关键帧。

根据本发明的又一个实施例，当闭合字幕行文本的第一行在显示屏的所选窗口中滚动到一个新位置时，视频处理器能够在显示屏的第二部分中显示第一关键帧。

根据本发明的另一个实施例，视频处理器能够以由从视频重放设备用户接收的命令所确定的可变速率在显示屏上显示闭合字幕文本的行和关键帧。

上文非常概括地描述了本发明的特征和技术优势，以使本专业技术人员可以更好地理解本发明以下的详细描述。形成本发明的权利要求主体的本发明的其它特征和优点将会在下文中描述。本专业技术人员应当理解，他们可以很容易地使用所公开的本发明的概念及特定实施例，以作为改进或设计用以执行本发明相同目的的其它结构的基础。本专业技术人员还应当认识到，这类等效结构并不背离本发明在其最广泛形式上的范围和宗旨。

在进行以下的详细描述之前，有必要对在本专利文件的通篇中使用的某些单词或短语的定义进行表述；术语“包括”及其派生词意味着包括但不限制；术语“或者”是包括在内的，表示和/或；短语“与…相关”和“与其相关”及其派生词可表示包括、被包括于…中、与…互连、包含、被包含于…中、连接到或与…连接、耦合至或与…耦合、可与…通信、与…共同操作、交错、并列、近似于、联接至或与…联接、具有、具有…的性质，如此等等；并且术语“控制器”表示至少控制一个操作的任意设备、系统或其中的一部分，这种设备可以以硬件、固件或软件、或者是至少在它们中的二者的某种组合实现。应当指出，与任何特定控制器相关的功能可以是集中式或分布式的，而无论其是本地的还是远程的。特别是，控制器可包括一个或多个数据处理器以及相关的输入/输出设备和存储器，它们执行一个或多个应用程序和/或操作系统程序。在本专利文件的通篇中，某些单词或短语的定义被提供，本专业技术人员应当理解，在许多情况下(即使不是在大多数情况下)，这样的定义适于这样定义的单词和短语的以前及将来的使用。

附图简述

为了更全面地理解本发明及其优点，现在将参考结合了附图的以下描述，其中，相同的数字表示相同的对象；并且其中：

图1表示根据本发明一个实施例的典型视频重放设备和电视机；

图2详细示出了根据本发明一个实施例的典型视频重放设备；

图3表示根据本发明一个实施例的电视屏幕，在该屏幕上显示了闭合字幕文本和相关的视频帧；

图4表示根据本发明一个实施例的典型视频重放设备中的闭合字幕存储器的内容；并且

图5表示根据本发明一个实施例的典型视频重放设备的操作流程图。

本发明的详细描述

在本专利文件中，下面将要讨论的图1-图5以及用来描述本发明原理的各种实施例只是示例性的，不应把它们看作是对本发明范围的任何形式的限制。本专业技术人员应当理解，本发明的原理可以在适当配置的任何视频重放设备中实现。

图1表示根据本发明一个实施例的典型视频重放设备150和电视机105。视频重放设备150从外部信号源接收输入电视信号，外部信号源可以是有线电视服务提供商(有线公司)、本地天线、互联网或DVD或VHS磁带播放器，视频重放设备150还把现众选择的频道传送给电视机105。在记录模式中，视频重放设备150可解调输入的射频(RF)电视信号，从而产生基带视频信号，该基带视频信号被记录和存储到视频重放设备150之内或与之连接的存储介质中。在播放模式中，视频重放设备150从存储介质中读出用户选择的所存基带视频信号(即节目)并将其发送给电视机105。

例如，如果视频重放设备150是盒式磁带录像机(VCR)，也称作磁带录像机(VTR)，那么视频重放设备150将把输入电视信号存储到盒式磁带中并从该盒式磁带中检索输入电视信号。如果视频重放设备150是基于磁盘驱动器的设备，如ReplayTVJ录像机或TiVOJ录像机，那么视频重放设备150将利用计算机硬磁盘而不是盒式磁带来存储和检索输入电视信号。在另外一些实施例中，视频重放设备150可利用本地读/写(R/W)数字多用盘(DVD)或R/W CD-ROM进行存储和检索。因此，本地存储介质可以是固定的(即硬盘驱动器)，或是可移动的(即，DVD，CD-ROM)。

视频重放设备150包括红外(IR)传感器160，它接收观众操作的遥控装置的命令(如上翻频道、下翻频道、提高音量、减小音量、记录、播放、快进(FF)、换向等)。电视机105是一种传统的电视，它包括屏幕110、红外(IR)传感器115以及一个或多个人工控制键120(由虚线表示)。IR传感器115还接收观众操作的遥控装置的命令(如提高音量、减小音量、电源开/关)。

应当指出，视频重放设备150并不限于从特定类型的信号源接收特定类型的输入电视信号。正如上面所指出的，外部信号源可以是有线服务提供商、传统RF广播天线、卫星抛物面天线、互联网连接或另一个本地存储设备，如DVD播放器或VHS磁带播放器。在一些实施例中，视频重放设备150甚至不能进行记录，但可被限制用于重放从可移动DVD或CD-ROM检索的电视信号。因此，输入信号可以是数字信号、模拟信号或互联网协议(IP)包。但是，为了简单清晰地解释本发明的原理，下面的描述总是针对一个实施例，在该实施例中，视频重放设备150接收来自有线服务提供商的输入电视信号(模拟和/或数字)。不过，本专业技术人员可以理解，本发明的原理可以很容易地适用于无线广播电视信号、本地存储系统、包含MPEG数据的IP包的输入数据流等。

图2详细示出了根据本发明一个实施例的典型视频重放设备150。视频重放设备150包括IR传感器160、视频处理器210、MPEG2编码器220、硬盘驱动器230、MPEG2解码器/NTSC编码器240和录像机(VR)控制器250。视频重放设备150还包括帧捕获装置260、闭合字幕检测器270和闭合字幕存储器(或缓冲器)280。VR控制器250指示视频重放设备150的整个操作，其中包括了观看模式、记录模式、播放模式、快进(FF)模式、换向模式。

在观看模式中，VR控制器250使来自有线服务提供商的输入电视信号由视频处理器210解调和处理并发送给电视机105，而并不存储到硬盘驱动器230中或从中进行检索。视频处理器210可以是TriMedia(TM)1100介质处理器，它包括射频(RF)前端电路，其用于接收来自有线服务提供商的输入电视信号；调谐至用户所选频道并把所选RF信号转换为适于在电视机105上显示的基带电视信号(如超视频信号)。视频处理器210还能从MPEG2解码器/NTSC编码器240接收传统的NTSC信号并从CC存储器280接收视频帧，并发送基带电视信号(如超视频信号)给电视机105。

在记录模式中，VR控制器250使输入电视信号存储到硬盘驱动器230中。在VR控制器250的控制下，MPEG2编码器220接收来自有线服务提供商的输入电视信号并把接收的RF信号转换为MPEG格式以存储在硬盘驱动器230中。在播放模式中，VR控制器250控制硬盘驱动器230将存储的电视信号(即节目)注入到MPEG2解码器/NTSC编码器240，其把来自硬盘驱动器230的MPEG2数据转换为例如超视频(S-Video)信号，该信号由视频处理器210发送至电视机105。

应当指出，为MPEG2编码器220和MPEG2解码器/NTSC编码器240选择MPEG2标准只是出于举例说明的目的。在本发明的其它一些实施例中，MPEG编码器和解码器可以遵循MPEG-1、MPEG-2、MPEG-3和MPEG-7标准中的一个或多个标准。

为了本申请以及下述权利要求的目的，硬盘驱动器230被定义为包括既可读又可写的任何海量存储设备，它包括传统的磁盘驱动器和用于读/写数字多用盘(DVD-RW)、可写CD-ROM的光盘驱动器、VCR磁带等。实际上，硬盘驱动器230不必是传统意义上被固定的，即不必永久地嵌入视频重放设备150中。相反，硬盘驱动器230包括专用于视频重放设备150用来存储记录的视频节目的任何海量存储设备。因此，硬盘驱动器230可包括附加的外围设备或可移动磁盘驱动器(无论是嵌入的还是附加的)，如保存了读/写DVD或可重写CD-ROM的自动点唱设备。此外，在本发明的一个优选实施例中，硬盘驱动器230可包括视频重放设备150可通过网络连接(如互联网协议(IP)连接)存取和控制的外部海量存储设备，举例来说，它包括在用户家用个人电脑(PC)中的磁盘驱动器或者在用户的互联网服务提供商(ISP)的服务器上的磁盘驱动器。

在播放模式中，VR控制器250可通过IR传感器160接收用户的快进(FF)或反向命令。在FF或反向模式中，通过使用帧捕获装置260、闭合字幕(CC)检测器270和闭合字幕(CC)存储器280，视频重放设备150能在电视屏幕110的一个CC窗口中显示闭合字幕(CC)文本。当接收到FF或反向命令时，相应地，VR控制器250使硬盘驱动器230和MPEG2解码器/NTSC编码器240以较快的前进速度或反向播放视频。但是，VR控制器250还指示视频处理器停止接收作为视频信号源的MPEG2解码器/NTSC编码器240的输出。代替的是，MPEG2解码器/NTSC编码器240被切换至接收作为视频信号源的CC存储器280的输出的视频帧。

帧捕获装置260捕获并存储来自MPEG2解码器/NTSC编码器240输出的视频帧。CC检测器270检测MPEG2解码器/NTSC编码器240的NTSC输出信号中的CC文本。CC文本通常在消隐期间插入在视频信号的第21行的结尾。正如下面将要详细解释的，CC检测器270使用与每行CC数据相关的时间戳记来识别与CC文本相对应的所选关键视频帧。CC检测器270在CC存储器280中存储CC文本的每一行和时间戳记并使帧捕获装置260在CC存储器280中存储为CC文本的每一行所选的视频帧。之后，关键帧和CC文本根据用户选择的速度和重放方向(FF或反向)传送给视频处理器210。视频处理器210播放作为一系列静止帧的关键帧，这些帧与相应的CC文本同时出现在电视屏幕110上。

图3表示根据本发明一个实施例的电视屏幕，在该屏幕上显示了闭合字幕文本和相关的视频帧。电视屏幕110成对显示视频帧310和315，它们分别被标记为帧A和帧B，位于电视屏幕110的上部。闭合字幕文本在电视屏幕110下部的CC文本窗口305中滚动。帧的显示位置是任意的，并且帧和文本窗口可位于电视屏幕110的预定的任意位置上。

CC文本行在CC文本窗口305中的滚动可以是不同速度的滚动，并且每一行根据一个同步方案(例如，使关键帧与CC文本同步以匹配CC文本和关键帧的时间戳记)与一个适当的关键帧同步。根据模式是快进模式或是反向模式，这些帧可以从屏幕的一侧移动到另一侧，并且在CC文本滚动时装入一个新帧。通过在一个时刻显示两个关键帧，则可以在视频显示时提供连续性并可以有效地利用屏幕空间。

在本实施例中，用户按动快进或反向(或倒带)按钮几次则表明了快进或倒带的速度。CC文本的每行的时间戳记数据被用来确定针对CC文本的该行要显示哪一帧。一个特定关键帧能够利用一个固定的取样率来拾取，或者该关键帧可利用“最相邻”方案从一列预定关键帧中选择。如果用户在FF或反向模式期间按动“暂停”按钮，则在帧A和帧B中的当前视频帧在暂停周期保存不变。类似地，在CC文本窗口305中滚动的闭合字幕文本在用户按动“暂停”按钮时也保持不变。

图4表示根据本发明一个实施例的典型视频重放设备150的闭合字幕存储器280中的内容。闭合字幕(CC)存储器280存储闭合字幕文本的N个行，包括典型的闭合字幕行401-404，它们分别被标记为CC行1，CC行2，CC行3和CC行N。CC存储器280还存储N个时间戳记，包括典型的时间戳记411-414，它们分别被标记为TS1，TS2，TS3和TSN。最后，CC存储器280存储N个关键帧，包括典型关键帧421-424，它们分别被标记为关键帧1，关键帧2，关键帧3和关键帧N。

TS1和关键帧1是对应于CC行1的时间戳记和关键帧。TS2和关键帧2是对应于CC行2的时间戳记和关键帧。TS3和关键帧3是对应于CC行3的时间戳记和关键帧。最后，TSN和关键帧N是对应于CC行的时间戳记和关键帧。

现在参考图5，流程图500表示根据本发明一个实施例的典型视频重放设备150的操作。VR控制器250接收来自用户重放设备150的遥控器的快进命令(处理步骤505)。帧捕获装置260随后开始所有来自视频介质的视频帧。另外，CC检测器270从对应于存储的视频帧的视频信号中检测闭合字幕文本(处理步骤510)。

关键帧随后从存储的视频帧中选择并存储在CC存储器280中。除了关键帧之外，CC文本行以及文本行和关键帧的时间戳记也存储在CC存储器280中(处理步骤515)。按照用户在用户遥控器上的输入确定的速度和重放方向，视频处理器210开始在电视屏幕110上显示一个或多个关键帧以及相应的CC文本(处理步骤520)。

至少用于显示视频的两个帧被呈现在了电视或显示屏上。在屏幕的另一个预定位置上，在这些帧中，一个帧被放置用于显示语音，其形式是可读文本。这些帧是所选的帧，并且该文本是与显示的帧相对应的语音。通过选择用于显示的关键帧和文本，在滚动所有记录中的帧以寻找一个特定点时遇到的问题会被大大地减少。

尽管已对本发明进行了详细的描述，但本专业技术人员应当理解，在不背离本发明最概括形式的宗旨和范围的情况下，他们可以进行各种变化，替换或改动。

Claims

1.一种用在视频重放设备中的装置，该装置用于在快进模式和倒带模式期间在与视频重放设备耦合的显示屏上显示闭合字幕文本，所述装置包括：

视频帧捕获装置(260)，它能够在快进模式和反向模式期间从重放的视频信号中捕获多个视频帧；

闭合字幕文本检测器(270)，它能够检测在所述重放的视频信号中的闭合字幕文本；

存储器(280)，连接到所述视频帧捕获装置和闭合字幕文本检测器，所述存储器用于存储所述检测到的闭合字幕文本和多个关键帧，所述关键帧包括由所述视频帧捕获装置(260)捕获的、与所检测到的闭合字幕文本相对应的、所述多个视频帧中的选定视频帧；以及

视频处理器(210)，连接到所述存储器，所述视频处理器能够从所述存储器(280)中检索闭合字幕文本的第一行以及与闭合字幕文本的所述第一行相对应的至少一个关键帧，并在所述显示屏(105)上显示闭合字幕文本的所述第一行和所述至少一个关键帧。

2.如权利要求1所述的装置，其中所述视频处理器(210)能够在所述显示屏(105)的一个选定窗口中显示闭合字幕文本的多个行。

3.如权利要求2所述的装置，其中所述视频处理器(210)能够在所述显示屏(105)的选定窗口中滚动所述的闭合字幕文本的多个行。

4.如权利要求1所述的装置，其中所述视频处理器(210)能够在所述显示屏(105)的第一部分中显示第一关键帧并在所述显示屏(105)的第二部分中显示第二关键帧。

5.如权利要求4所述的装置，其中，所述视频处理器(210)在闭合字幕行文本的所述第一行出现在所述显示屏(105)的一个选定窗口中时，能够在所述显示屏(105)的所述第一部分中显示所述第一关键帧。

6.如权利要求5所述的装置，其中，所述视频处理器(210)在闭合字幕行文本的所述第一行滚动到所述显示屏(105)的所述选定窗口中的一个新位置时，能够在所述显示屏(105)的所述第二部分中显示所述第一关键帧。

7.如权利要求1所述的装置，其中所述视频处理器(210)能够以由从所述视频重放设备的用户接收到的命令所确定的可变速率来在所述显示屏(105)上显示闭合字幕文本的行和关键帧。

8.一种视频重放设备，包括：

存储设备，它能够在其上存储多个视频信号；

视频重放电路，它能够检索存储在所述存储设备上的第一选定视频信号并通过其产生能够在与所述视频重放设备耦合的显示屏(105)上显示的重放视频信号；

所述视频重放设备还包括用于在快进模式和倒带模式期间在所述显示屏上(105)显示闭合字幕文本的装置，所述装置包括：

存储器(280)，连接到所述视频帧捕获装置和闭合字幕文本检测器，所述存储器用于存储所述检测到的闭合字幕文本和多个关键帧，所述关键帧包括由所述视频帧捕获装置(260)捕获的、与所述检测到的闭合字幕文本相对应的、所述多个视频帧中的选定视频帧；以及

9.一种用在视频重放设备中的方法，该方法用于在快进模式和倒带模式期间在与视频重放设备耦合的显示屏(105)上显示闭合字幕文本，该方法包括如下步骤：

在快进模式和反向模式期间从重放的视频信号中捕获多个视频帧；

检测在所述重放的视频信号中的闭合字幕文本；

在存储器(280)中存储所检测到的闭合字幕文本和多个关键帧，所述关键帧包括所捕获到的、与所检测到的闭合字幕文本相对应的、所述多个视频帧中的选定视频帧；以及

从存储器(280)中检索闭合字幕文本的第一行以及与闭合字幕文本的所述第一行相对应的至少一个关键帧，并在显示屏(105)上显示闭合字幕文本的所述第一行和所述至少一个关键帧。

10.如权利要求9所述的方法，其中所述视频处理器(210)能够在所述显示屏(105)的一个选定窗口中显示闭合字幕文本的多个行。

11.如权利要求10所述的方法，还包括如下步骤：在所述显示屏(105)的所述选定窗口中滚动所述的闭合字幕文本的多个行。

12.如权利要求9所述的方法，还包括如下步骤：在所述显示屏(105)的第一部分中显示第一关键帧，并在所述显示屏(105)的第二部分中显示第二关键帧。

13.如权利要求12所述的方法，还包括如下步骤：当闭合字幕行文本的所述第一行出现在所述显示屏(105)的一个选定窗口中时，在所述显示屏(105)的所述第一部分中显示所述第一关键帧。

14.如权利要求13所述的方法，还包括如下步骤：当闭合字幕行文本的所述第一行滚动到所述显示屏(105)的所述选定窗口中的一个新位置时，在所述显示屏(105)的所述第二部分中显示所述第一关键帧。

15.如权利要求9所述的方法，还包括如下步骤：以由从所述视频重放设备的用户接收到的命令所确定的可变速率来在所述显示屏(105)上显示闭合字幕文本的行和关键帧。