CN1309250C - 提供多透视画面即时重放的系统和方法 - Google Patents
提供多透视画面即时重放的系统和方法 Download PDFInfo
- Publication number
- CN1309250C CN1309250C CNB018088619A CN01808861A CN1309250C CN 1309250 C CN1309250 C CN 1309250C CN B018088619 A CNB018088619 A CN B018088619A CN 01808861 A CN01808861 A CN 01808861A CN 1309250 C CN1309250 C CN 1309250C
- Authority
- CN
- China
- Prior art keywords
- perspective
- perspectives
- program
- skew
- time point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
处理广播内容的方法包括接收包含节目的多个透视画面的节目广播,和向观众呈现多个透视画面的至少一个。该方法还包括把多个透视画面自动记录在存储器件中,和不中断广播记录地为观众播放交替记录的那些透视画面。还公开了记录包含节目的多个透视画面的广播的系统。
Description
交叉参考相关申请
本申请要求如下美国临时专利申请的优先权:列在这里以供参考的、2000年9月26日提交的、名称为“提供多透视画面即时重放的系统和方法(SYSTEM AND METHOD FOR PROVIDING MULT-PERSPECTIVEINSTANT REPLAY)”的美国临时专利申请第60/235,529号(代理人案号OPTVP014+);和列在这里以供参考的、2000年8月2日提交的、名称为“插入以前广播过的内容的系统和方法(SYSTEM AND METHOD FORINCORPORATING PREVIOUSLY BROADCAST CONTENT)”的美国临时专利申请第09/630,646号(代理人案号OPTVP013)。
列在这里以供参考的、1999年10月29日提交的、名称为“推行内容的记录(RECORDING OF PUSH CONTENT)”的美国临时专利申请第60/162,490号(客户案号OTV0033+)。
技术领域
本发明一般涉及诸如交互式电视之类的交互式视频传送媒体,尤其涉及提供广播内容的多透视画面即时重放的系统和方法。
背景技术
广播服务提供器把音频-视频流发送到观众的电视机上。除了典型的音频-视频节目之外,交互式电视系统还能够显示文本和图形图像。它们还可以向观众提供电视购物之类的许多服务、和其它交互式应用。除了音频-视频部分之外,交互式电视信号还可以包括由应用代码、数据和信令信息组成的交互部分。广播服务提供器可以把任何或全部这种信息组合成单个信号和几个信号,发送给与观众的电视机相连接的接收器,或者,提供器可以只包括这些信息的一个子集,也许还带有资源定位符。这样的资源定位符可以用于指示交互式和/或音频-视频信息的择一信源。例如,资源定位符可以采取环球网通用资源定位符(URL)的形式。
一般来说,在发送之前,先对电视信号进行压缩,然后,通过闭路电视(CATV)线或直接卫星发送系统之类的典型广播媒体发送出去。通过资源定位符引用的信息可以在不同媒体上获得,例如,通过DOCSIS调制解调器之类的常开返回信道。
与电视机连接的机顶盒控制电视机的交互功能。机顶盒接收广播服务提供器发送的信号,把交互部分与音频-视频部分分开,并且解压缩信号的各个部分。机顶盒一边把音频-视频信号发送给电视机,一边把交互信息用于执行一种应用。机顶盒通常只包括有限的存储容量。虽然这个存储器足以执行交互式应用,但是通常不足以存储时间间隔无限长的应用。并且,机顶盒的存储器通常太小,无法容纳包括大量音频或视频数据、应用代码、或其它信息的节目。可以把外部存储器件与机顶盒耦合一起,为视频和音频广播内容的存储提供附加存储器。
诸如应用代码或与电视节目相关的信息之类的交互式内容通常以重复的格式广播。以这种形式广播的数段信息形成所谓的“旋转本马(carousel)”。重复发送“旋转本马”中的对象使得无需从接收器到服务器的返回路径,接收器就可以接收到那些对象。如果接收器需要特定的一段信息,它就可以简单地一直等到广播该段信息的下一个时间,然后,从广播流中提取该信息。如果信息不是循环广播,接收器就不得不向服务器发送有关该信息的请求,从而需要返回路径。如果用户最初对“旋转本马”内容不感兴趣,但以后表示感兴趣,那么,可以在广播“旋转本马”的下一个时间获得信息。由于广播网络只使用有限带宽,因此,音频-视频内容不以“旋转本马”的形式广播。也没有足够的带宽和服务器资源去实时处理视频和音频所需的大量数据,以应付大量电视观众想要广播以前广播过的内容所作的几乎同时的请求。
在诸如体育赛事广播之类,通过电视网络的广播中,内容提供器可以生成,例如,从各个不同比赛角度获得的多个视频馈送信号。网络可以从多个视频馈送信号中选择一个或多个馈送信号,在任何给定时间点向观众广播所选的视频馈送信号。也就是说,例如,网络可以同时广播除了来自不同透视画面之外,呈现相同场景的视道(video track),或者,如果用不同语言播放电影的话,发送不同的声道(audio track)或字幕。观众可以利用在他们的机顶盒上执行的交互式应用去选择不同的透视画面。当观众请求改变透视画面时,交互式应用利用元数据去确定哪个数据分组包含所选透视画面。然后,开始传送包含新选透视画面的数据分组。
如上所述,由于可用于广播网络的带宽有限,观众不能请求以前广播过传送包含新选透视画面的数据分组。
如上所述,由于可用于广播网络的带宽有限,观众不能请求以前广播过的音频或视频素材。此外,伴随交互式应用的数据往往对应于当前正在广播的音频和视频,因此,它频繁改变。在这些情况下,作为“旋转本马”部分广播的那些值常常也发生改变,在“旋转本马”中不再携带那些旧值。观众不能重放来自不同透视画面的场景或体育比赛场面,除非观众已经记录了替用透视画面的视频流。
发明内容
本发明公开了提供多透视画面(multi-perspective)即时重放的方法和系统。处理广播内容的方法一般包括接收包含节目的多个透视画面的节目广播,和向观众呈现多个透视画面的至少一个。该方法还可以包括把多个透视画面自动记录在存储器件中,和不中断广播记录地为观众播放交替记录的那些透视画面。
电视节目可以包括许多种相关视频流、音频流、执行代码、和数据。在适当的时候,可以利用电视屏幕中的画中画(PIP)窗口,同时向观众显示数个透视画面。
记录包含节目的多个透视画面的广播的系统一般包括起接收广播作用的接收器、与接收器耦合的存储器件、和起向观众呈现多个透视画面的至少一个作用的处理器。接收器还可以起把多个透视画面自动记录在存储器件中,和不中断多个透视画面记录地向观众播放记录的那个透视画面的作用。
接收器可以是机顶盒,和存储器件可以包含在机顶盒中的或与之耦合。存储器件可以包括,例如,磁盘、光盘、或闪速存储器等。接收器盒可以包括一个或多个调谐器。
本发明提供一种处理广播内容的方法,包括:接收节目广播,该广播包含节目的多个透视画面;向观众呈现多个透视画面的第一透视画面,所述第一透视画面包括一部分所述节目的第一透视画面;存储多个透视画面的至少一个;提供用户的输入,该输入指示希望从多个透视画面的第二透视画面重放节目的部分;响应于所述输入,在第一透视画面中识别节目中的第一时间点,其对应于所述部分的开始;和在第二透视画面中自动确定第二时间点,其中第二时间点包括节目中的第一时间点的近似;和在第二时间点处开始向观众呈现第二透视画面的节目的部分。
本发明还提供一种呈现广播内容的系统,包括:配置成接收包含节目的多个透视画面的广播的接收器(16);存储多个透视画面的至少一个的存储器件(18);和配置成向观众呈现第一透视画面,同时向观众至少呈现第二、存储的透视画面的处理器(30);其特征在于其中在呈现第二、存储的透视画面中,所述处理器被配置以便:接收来自观众的输入,该输入指示希望从多个透视画面的第二透视画面重放所述节目的部分;响应于所述输入,在第一透视画面中识别与所述部分的开始相对应的、节目中的第一时间点;在第二透视画面中自动确定第二时间点,其中第二时间点包括节目中的第一时间点的近似;和在第二时间点开始从第二、存储的透视画面呈现所述节目的部分。
本领域的普通技术人员可以从如下的描述和附图中,以及从所附的权利要求书中清楚地看到本发明的其它特征、优点和实施例。
附图说明
图1是表示把电视节目和信令信息从广播台分配到接收站的图形;
图2是本发明用于记录从图1所示的广播台接收的节目的系统的方块图;
图3是表示把数据传送到与图2所示的机顶盒耦合的存储器件的方块图;
图4是表示把三种视频流和两种音频流同时发送给接收站,以及把音频流之一和视频流之一发送给电视机的图形,并且,把这两个流与另外两个视频流之一一起发送给存储器件;
图5与图4的图形类似,除了此时与在电视的主画面中显示的第一音频和视频流一起,在PIP窗口中显示第二视频流之外;
图6是与图5的图形类似的图形,除了此时与在PIP窗口中显示的第一视频流一起,在电视屏幕的中央显示第二视频流之外;
图6a是与图6的图形类似的图形,除了所示的结构不需要或不使用PIP的形式组装音频-视频和控制信息,并且将其映射成通过卫星发送到接收站的数字信号。可以把诸如条件访问信息和信令信息(譬如,可用于用户的服务、事件名称、和事件时间表(开始时间/日期和持续时间)的列表、和节目特定信息)之类的控制信息加入视频、音频、和供交互式电视系统使用的交互式应用中。控制信息可以描述流与流之间的相互关系,譬如说,可以认为哪些流携带与哪些别的流不同透视画面的节目。控制信息由广播台转换成适合于在广播媒体上发送的格式。数据可以被格式化成,例如,可以在数字卫星网络上发送的数据分组。数据分组可以与其它数据分组多路复用在一起进行发送。通常,在发送之前,对信号进行压缩,然后,可以通过诸如闭路电视线或直接卫星广播系统22(如图1所示)之类的广播信道发送它。因特网、电话线、蜂窝式网络、光纤、或其它地面传输媒体也可以用于代替闭路或卫星系统来发送广播信号。如下所述,广播者可以把服务信息嵌在广播传输流中,服务信息可以列出每个基本流标识符,并且把每个标识符与描述相关流的类型(例如,是包含音频,还是视频)的编码和可以被用户理解的和可以由用户用来在不同透视画面之间作出选择的流的文本描述相联系。
接收站包括与存储器件18相连接的机顶盒16、和用于向观众呈现节目的电视机20。机顶盒16起解压缩数字数据和向观众显示节目的作用。解压缩的视频信号可以被转换成诸如NTSC((美国)国家电视标准委员会)格式信号之类的模拟信号,供电视机显示用。对发送到机顶盒16的信号进行过滤,在满足过滤要求的那些信号中,一些供处理器30直接使用,另一些可以存放在诸如RAM(随机存取存储器)之类的局部存储器中。过滤所需的要求的例子包括专供基本流标识符或发端网络标识符之用的位置中的特定值。机顶盒16可以用于重叠或组合不同信号,以便在观众的电视机20上形成所需的显示。
正如下面进一步所述的,机顶盒16被配置成同时记录一个或多个视频和/或音频流,使观众能够从不同透视画面重放他们最近已经看过或听过的场景。广播台12同时广播供拥有执行交互式电视应用的机顶盒16的观众观看的数个透视画面。例如,数个摄像机可以用于记录体育赛事,和台可以同时广播来自数个摄像机的内容,使观众能够利用在他们的机顶盒16上执行的交互式应用在不同摄像机透视画面之间作出选择。广播者也可以,例如,用不同语言发送数个透视画面的声道。数个视频和音频透视画面只不过是其中许多可以包含在广播中的各种类型的透视画面的例子而已。其它例子包括多种电视文字广播流,也许用不同语言;多种可执行程序流,也许每一种意味着不同的熟练等级;或多种数据流。本发明使观众能够从不同透视画面重放相同的场景,而同时保证观众仍然能够同时或以后观看与重放的他们正在观看的内容同时广播的节目部分。观众可以请求从与以前播放的透视画面相同或不同的透视画面中,重放音频、视频、可执行程序、和数据的任意组合。
应该明白,这里所使用的术语“节目”指的是包括电视表演、体育赛事、新闻节目、电影、或任何其它类型的广播素材的任何广播素材,或一段素材。素材可以只包括音频、视频、数据、或它们的任何组合。节目可以只是电视表演或广播的一部分(例如,没有商业广告节目或缺乏开头部分或结尾部分)或者是多于一个的表演,或者可以包括,例如,商业广告节目。并且,应该明白,这里所使用的术语“观看”定义为调谐器一开始过滤与节目相对应的数据,就开始观看节目。如果观众在节目广播之前就已经调谐到特定的频率上,那么,观看的开头最好对应于节目的开头。观看最好在节目已播完时或在调谐器不再过滤与节目相对应的频率时结束。因此,节目的记录与节目的“观看”相一致,和只有当调谐器调谐到广播节目的台时才记录节目。在观众已经开始记录节目之后关掉电视显示器的情况下,只要调谐器调谐到广播节目的台和正在进行在与观看一开始就使用的频率相同的频率上广播的信息的记录,就认为还在继续观看。机顶盒16接收的音频-视频信号和节目控制信号对应于电视节目和观众可以通过用户界面访问的菜单选择。观众可以通过,例如,红外线遥控单元、机顶盒上的控制面板、或在电视屏幕上显示的菜单控制机顶盒16。
应该明白,如上所述和如图1所示的系统10只是用于把信号传送到电视机20的系统的例子。广播网络系统可以与在这里所述的广播系统不同,而仍不偏离本发明的范围。
机顶盒16可以与接收器或与能够解码视频、音频和数据的集成解码器接收器一起使用,譬如说,与卫星接收器或与能够解码MPEG视频、音频和数据的卫星集成解码器接收器一起使用的机顶盒。可以把机顶盒16配置成,例如,能够接收支持利用正交调幅(QAM)进行宽带通信的数字视频信道,和控制双向信号传送和消息传送的信道。数字QAM信道传送压缩和编码MPEG(运动图像专家组)传输流。传输系统从传输流中提取所需的节目,并且分离成音频、视频和数据成分,将它们路由到处理它们的设备,譬如,一个或多个音频解码器、一个或多个视频解码器、和可选择地路由到RAM(或其它形式的存储器)或硬盘(可选)。应该明白,机顶盒16和存储器件18可以是模拟的、数字的、或模拟和数字两者的。
如图1和2所示,存储器件18与机顶盒16耦合。存储器件18用于提供足够的存储空间来记录不宜记录在通常存在于机顶盒中的容量有限的主存储器(例如,RAM)中的节目。存储器件18可以包括任何适用的存储器件,譬如,硬盘驱动器、可记录DVD(数字多功能盘)驱动器、磁带、光盘、磁光盘、闪速存储器或固态存储器等。存储器件18可以在机顶盒16的内部,也可以从外部(例如,通过IEEE(电气电子工程师学会)1394-1995)与可更换连线的永久连线相连接。可以有多于一个的存储器件18附在机顶盒16上。机顶盒16和/或存储器件18也可以包含在带有电视机20的单个组件中。
图2显示了本发明用于记录从广播台12接收的节目的系统的一个实施侧。机顶盒16一般包括控制单元(例如,微处理器)、主存储器(例如,RAM)、和选择和解码接收的交互式电视信号所需的其它部件。如图2所示,机顶盒16包括起从广播台12接收音频、视频和其它数据作用的前端26。广播源信号被馈送到机顶盒16的前端26,前端26包括模拟-数字(A/D)转换器和调谐器/解调器(未示出)。前端26过滤出特定频带,解调它,并且把它转换成数字格式。然后,把数字化输出发送给传输级28。传输级28进一步处理数据,把数据的一部分发送到视听(AV)级34供显示用和把另一部分发送到控制处理器30,并且过滤出数据的其余部分。
控制信息也可以在广播的时候与音频-视频数据一起记录下来,或者,可以由机顶盒16内的软件首先加以管理。例如,广播条件访问(CA)信息可以用于解密广播的视频。可选地,在记录之前,可以利用机顶盒密钥或算法重新加密原始广播流,或这些流的改变形式。加密视频也可以在接收的时候与广播的CA信息一起存储。此外,在记录之前,可以把时钟信息翻译成虚拟时间系统。可以从MPEG-2传输流中多路分用出MPEG-2基本流,然后将其密封成节目流进行记录。
图3显示了数据从传输级28到存储器件18的传输。存储器件18通常包含已经由观众记录下来的多个节目。每个透视画面的记录与可能已经从原始信令信息中复制下来的或修改而成的标识信息相联系。这个标识信息可以包含与通常存储在音频/视频文件系统或分层计算机文件系统中的那种薄记信息相似的薄记信息。标识信息可以具有各种各样的格式和内容,只要它能提供足够的信息,使观众(或许与系统交互)能够唯一地检索到特别记录的透视画面即可。节目可以用ID号和开始时间和结束时间标识。如下所述,可以定期对存储器进行碎片处理,以便以邻接方式存储节目。最好把直接存储器访问(DMA)用于将数据从传输级28发送到存储器件18。发送到控制处理器30的数据可以包括描述音频-视频数据流的内容的元数据,并且还可以包括可以在控制处理器上执行,以便提供交互电视的应用程序和相应数据。
在观看开始时,把从传输级28发送到AV级34的数据的拷贝发送到存储器件18。控制处理器30中的CPU(中央处理单元)配置DMA控制器,以保证把数据写入在存储器件18中分配的缓冲区中。观看要记录在缓冲区中的数据的分钟数最好由观众来选择;但是,也可以为机顶盒16预置默认值,譬如说,15分钟。控制处理器的CPU根据分钟数和发送观众正在观看的传输流中的一些位(比特)的最大速度,计算要分配的缓冲区的大小。这个最大速度可以从与音频-视频流一起发送的元数据中获得。当到达缓冲区底部时,中断控制处理器中的CPU,此时,它将重新配置DMA控制器,从缓冲区的开头开始写入。这种设计被称为循环缓冲区。
缓冲区最好是可循环的,以便允许邻接记录和使以前记录的内容被盖写。当观众改变信道或出现TV事件(例如,电视节目结束了)时,控制处理器的CUP将被中断。此时,CPU可以分配新的缓冲区或在原来的缓冲区中标记新事件的开头。观众无需做任何动作地在节目的开头把节目和所有相关的视频、音频、和数据流自动记录在存储器件中使观众能够从不同透视画面重放节目部分。
如前所述,控制处理器30在节目的开头就记录多透视画面流,把这些透视画面存储在存储器件18中。这些透视画面一直被记录和存储在存储器件18中长达预定时间间隔(例如,15分钟)。如果观众决定在节目开始之后记录整个观看部分,他就选择记录选项,处理器30将在存储器件18中分配空间。所有透视画面将与正在观看的节目一起被记录。例如,参见作为整体列在这里以供参考的、2000年8月2日提交的、名称为“插入以前广播过的内容的系统和方法(System and Method for Incorporating Previously Broadcast Content)”的美国临时专利申请第09/630,646号(代理人案号OPTVP013)。
在公共存储区中任何给定透视画面的第一和第二记录部分的接合可以物理地或虚拟地实现。物理实现可以包括把第一记录部分复制到已经记录了第二部分的地方。虚拟实现可以包括修改存储在存储器件中的数据的结构。在每一种情况中,观看任何透视画面的重放的观众都不应该觉察得到这个透视画面的两个部分原来是分开存储的。因此,这个透视画面的各个部分可以是物理连接的,或者,这个透视画面的各个部分可以以非连接格式分开存储,只要整个记录节目可以以连续方式回放即可(即,观众感觉不到回放这个透视画面的第一部分与第二部分之间的跳跃)。
应该明白,把包括多个透视画面的整个节目记录在存储器件18中可以在观众不做任何动作的情况下发生。例如,如果观众反转记录的数个透视画面之一的一部分(或者,在不同类型的存储介质上进行类似的动作),想重放一段场景,那么,由于观众已经表示出他对这个节目感兴趣,因此,可以把整个节目,以及它的多个透视画面的全部都记录在存储器件中。
与节目一起广播的控制信息最好指示哪些流与观看的流相关。通过对广播的MPEG-2(或DSS或其它编码)分组中的适当标识符进行过滤,机顶盒16可以定位所有相关的基本流。它把观众正在观看的流发送到电视机20,并且把这些流的内容,以及其它相关的流,包括相关的视频、音频、可执行程序和数据记录在存储器件18中。提示流的最大位速率的元数据可以与基本流或传输流一起。被记录的流的格式可能取决于硬件支持。例如,正如本领域的普通技术人员所熟知的,机顶盒16内部的专用硬件可以支持流的重新多路复用或对存储器件18的同时读写。
诸如音频和视频数据、应用代码、控制信号和其它类型的信息之类的广播数据可以作为数据对象来发送。如果想要使用节目(即,向观众呈现),就必须对广播数据进行分析,以便从流中提取数据对象。当已经提取了必要的数据对象时,就播放节目。例如,启动需要执行的任何应用,和播放需要向观众呈现的任何音频或视频数据。如果存储节目,那么,以相同方式提取数据对象,把它们存储起来,而不是直接用于呈现节目。利用存储的数据对象回放记录的节目。数据对象可以包括如果不马上使用掉就会过时的“实况”数据。如果把这个数据存储起来,在回放节目时使用它,那么,节目至少部分会过时。因此,虽然大多数数据对象可以存储成文件,但是实况数据对象要存储成节目的参照物。当回放节目时,可以获得与参照物相对应的新实况数据,来取代在记录节目时是实况的数据。因此,只有临时纠正的数据才被交互式应用在以后执行时使用(例如,参见列在这里以供参考的、1999年10月29日提交的、名称为“推行内容的记录(RECORDING OF PUSH CONTENT)”的美国临时专利申请第60/162,490号(客户案号OTV0033+)。
图4-10显示了从广播台12接收三种视频流和两种音频流的机顶盒16。在前端26中的调谐器从广播台12接收信号,并且把相关的流发送到多路分解器和处理器100。视频流V1、V2和音频流A1是彼此相关的(例如,视频流是不同摄像机拍摄同一场体育赛事获得的和A1是播音员的声道),并且可以在单个传输流中提供它们。如果在单个传输流中提供所有相关的流,那么,只需要一个调谐器50。机顶盒16可以包括多个调谐器50,用于记录和显示在分开的传输流中广播的相关流。最好在小量的频率上广播相关流,这样,就不需要在机顶盒16内部或附在机顶盒16上的大量调谐器。例如,可以把大量(例如,5种)视频流与多种音频流、可执行程序、数据和控制信息一起多路复用在单个频率上。
图4-7显示了观众请求利用画中画(PIP)模式从不同透视画面进行重放的情况。如果观众想要观看从不同透视画面的重放,那么,无需机顶盒16或电视机20中的多个调谐器,可以以PIP的模式观看它。由于以前已经记录的视频或音频流之一是来自存储器件18的,因此不需要附加调谐器。所示的所有流最好被多路复用在同一个频率上。视频或音频可以直接传送到包含在本身在机顶盒16内部的100中的AV级34,并且可以与通过调谐器50发送的传输流多路复用。请注意,100代表三个部件:(i)多路分解器;(ii)把广播信息的某些部分引向其它部件的处理器;和(iii)在必要时(即,当电视是模拟的时)调制的AV级。或者,如下面参照图8-10所述的那样,观众可以选择只观看重放,而机顶盒16把供以后传送用的实况广播缓存在存储器件18中。
在图4中,广播台12发送包含两个不同透视画面的视频流V1和V2和一种音频流A1。两种视频流可以是,例如,棒球赛场上的两个不同摄像机位置。观众当前正在观众视频流V1和收听音频流A1。第一和第二视频流V1和V2和音频流A1被自动记录。因此,如果观众想要重放,例如,比赛的最后场面,以前广播的信息就用得上。尤其是,借助于本发明,观众可以从以前广播的透视画面的任何一个重放这个信息。观众可以把机顶盒设置成PIP模式,使得观众可以观看到显示在电视屏幕的大中央区域中的第一个透视画面(视频流V1)和显示在电视屏幕的右上角(或一些其它区域)中的小画面窗中的第二个透视画面(视频流V2)(图5)。在比赛中出现重要场面(例如,棒球比赛中的双击)之后,观众可能想要观看一下重放镜头,这一次想从与显示V1的透视画面不同的透视画面观看。此时,观众可以有选择地切换到其中显示视频流V1和V2的窗口,如图6所示。现在,视频流V1被发送到PIP窗口,和视频流V2被发送到中央视窗。然后,观众可以发出命令(即,按下遥控器上的按钮),对主窗口中的视频进行倒片,而让PIP窗口继续显示PIP容器中的“实况”V1。
如图7所示,把来自与V2相同的透视画面的、但较早广播和记录的记录视频流V2′从存储器件18发送到100中的多路分解器,100把以前记录的视频流V2′与当前的视频流V1一起发送到电视机进行显示。观众可以倒片或搜索记录,直到到达记录的开头为止。观众也可以倒片和显示第一视频流V1。同时,由于观众已经表示出他对记录感兴趣,因此,可以把节目的其余部分的广播发送到存储器件18。这可以是自动的(即,根据观众的重放请求,把节目流发送到存储器件18),也可以只有从观众那里接收到记录整个节目的请求时才发生。
另一种情况是,观众可能不太喜欢被如显示在图7的PIP中那样显示的实况广播分散注意力。因此,如图6a所示,观众可以简单地先把透视画面从V1切换到V2。此后,观众可以“倒片”到较早的事件,从视频流V2中携带的透视画面观看以前的场景。这种情况显示在图7a中,在图7a中,只把实况视频流V1的拷贝与实况视频流V2和实况音频流A1一起发送到存储器件。记录流V2′和A1′是一次性发送到电视机的(可能在调制之后)。当没有与观众的电视机相联系的PIP功能时,呈现在图6a和7a中的脚本也可以是观众用来在实况视频透视画面与不同的、记录的、视频透视画面之间切换的脚本。
图8-10显示了用不同透视画面音频流广播节目的情况。例如,观众可以观看用意大利语音频流A1和英语音频流A2广播的意大利电影。如图8所示,把视频流V1和音频流A1呈现给观众,并且记录在存储器件18中,而把音频流A2也记录在存储器件18中,但不呈现给观众。观众最初收听意大利语广播(音频流A1);但是,在放了一会之后,观众听不懂意大利语,因此,他从菜单中选择“切换到英语”的选项,观众现在收听到的是英语广播(音频流A2)(图9)。如果观众想要用英语收听一下伴随着以前场景的声道,那么,他可以反绕视频流V1和音频流A2的磁带,用英语再观看一下该场景(图10)。视频和音频流V1、A2和A2将一直记录下去,以便观众可以以延迟模式观看电影的其余部分,而不会错过电影在观众倒带和重放以前的场景时广播的那一部分。
图11显示了可以与每个记录透视画面一起存储的元数据文件的例子。本发明不要求如图所示的格式,而是,这种格式只用作元数据如何有助于从不同透视画面进行即时重放的播放的例子。除了其它可能字段之外,所示的元数据文件的每个记录还包含时间和偏移。在本例中,节目时钟参考尽管不是定期地,但是频繁地与视频一起广播。当这些时钟参考值的一些被机顶盒接收到时,它们的值,以及进入最近I-frame(I-帧)(可以用于视频的3种类型MPEG-2帧编码之一)的记录的偏移,可以被记录成元数据。况且,这只是一个例子,实际的实现可以利用P-frame和B-frame(P-帧和B-帧)(MPEG-2编码的其它类型,这两种类型通常比I-帧压缩得更多)。偏移是以字节为单位从包含这个透视画面的记录的文件的开头开始测量的。
在本例中,观众已观看包含视频透视画面V1的实况广播。在观众观看的时候,把视频透视画面V1记录在文件中。此外,把包括视频透视画面V2的其它视频透视画面记录在不同文件中,因为它们代表相同信息的不同视角。当然,可以把V2记录在同一个文件中,只要把区分V1和V2的其它信息记录在某个地方即可。观众刚好看到屏幕上感兴趣的东西,他就输入适当命令让V1倒带到感兴趣场景的开头。当MPEG-2 I-frame1,t正用于显示屏幕的内容时,观众就停止V1。(再次说明,这只是一个例子。也可以把P-frame和B-frame记录在包含来自V1的I-frame的文件中,和可以把它们用在定位场景中,但是,在本例中不使用它们。此外,MPEG-2只用作例子;媒体和/或数据的其它格式可以同等使用)。然后,观众发出命令,告诉机顶盒开始往前播放,但是来自V2,而不是来自V1。机顶盒必须确定它应该首先让V2的哪个I-frame得到显示。在两个透视画面以相同的恒定速率发送时,简单的解决方案,即在包含V2的文件中选择其偏移与I-frame1,t的偏移最接近的I-frame还算得上正确,尽管在两个透视画面以几乎相同的非恒定速率发送时,这样的近似也许才有用。现在给出可变速率流或具有不同恒定速率的流的更好解决方案。尽管在某些情况下,容易从公开文献中找到的其它众所周知经典内插方法可以提供更好的近似,但是,这个解决方案使用了线性内插。
首先近似计算与原来打算播放I-frame1,t的时间相对应的实际时间。进入包含I-frame1,t所在的V1的文件中的偏移用于这个近似计算。为了近似计算这个时间,在元数据文件中检索两个相继时间值d1,i和d1,i+1,使得d1,i≤d1,t<d1,i+1。(本领域的普通技术人员都知道,如果记录是固定长度的和每个元素以如图所示的顺序存储,那么,对分检索法(二进制检索)可能最迅速地找到这两个相继的元素。如果使用了不同的存储格式,那么,不同的检索方法会更适宜。况且,还存在着在计算机科学文献中广泛引用的众所周知技术)。一旦它们被定位,也就知道了t1,i和t1,i+1。然后,将这些值用于近似计算t。本例使用了线性内插公式:
t=((t1,i+1-t1,i)(d1,t-d1,i)/(d1,i+1-d1,i))+t1,i
在已经找到t的近似值之后,需要找出透视画面V2的记录中与那个时间最接近的I-frame的位置。这里的第一步骤是定位t2,k和t2,k+1,使得t2,k≤t<t2,k+1。况且,在任何给定情况下进行的最佳检索取决于文件的格式,这是一个研究利比较透彻的问题。让这些值用于计算d2,t的近似值。本例再次使用了线性内插公式:
d2,t=((d2,j+1-d2,j)(t-t2,j)/(t2,j+1-t2,j))+d2,j
现在,已知d2,t的近似值,离包含V2的记录的文件的开头最接近d2,t个字节的I-frame用作为观众回放记录的开始帧。
图12显示了根据这里所述的实施例的处理流程。为了清楚起见,用具体的流程显示了该处理,但是,应该明白,其它顺序也是可以的,并且,其中一些可以并行地进行,这些都不偏离本发明的精神内涵。在步骤200,系统接收包括节目的多个透视画面的广播。系统在步骤210向观众呈现多个透视画面之一,并且在步骤220把所有透视画面都存储在存储器件中。在公开的实施例中,系统存储所有透视画面,但是,也可以把系统配置成有选择地存储基于观众提供的准则(譬如,观众对哪些透视画面感兴趣的指示)的那些透视画面。在步骤260,把各个透视画面存储在循环缓冲区中。在步骤230,向观众呈现另一个透视画面,和在步骤250,这个透视画面和第一个透视画面的呈现包括为电视机准备音频/视频信号。在步骤240,在步骤230中其它透视画面的呈现可以包括检索存储的那些透视画面,和呈现的那个透视画面可以是存储的那些透视画面之一。
处理各种广播内容的方法和系统已经被公开了。根据本发明写成的软件可以存储在诸如存储器或CD-ROM(光盘只读存储器)之类某些形式的计算机可读介质中,或者可以在网络上传输,并且可以由处理器来执行。另外,在公开方法的地方,步骤的各种其它顺序也是可以的,并且可以同时执行这样的步骤,这些都不偏离本发明的范围。
虽然根据所示的实施例已经对本发明作了描述,但是,本领域的普通技术人员容易认识到,可以对这些实施例作各种各样的改变,而不偏离本发明的范围。因此,包含在上述描述中的和在附图中所示的所有内容应该被看作是示范性的,而不是限制性的。
Claims (25)
1.一种处理广播内容的方法,包括:
接收节目广播,该广播包含节目的多个透视画面;
向观众呈现多个透视画面的第一透视画面,所述第一透视画面包括一部分所述节目的第一透视画面;
存储多个透视画面的至少一个;
提供用户的输入,该输入指示希望从多个透视画面的第二透视画面重放节目的部分;
响应于所述输入,在第一透视画面中识别节目中的第一时间点,其对应于所述部分的开始;和
在第二透视画面中自动确定第二时间点,其中第二时间点包括节目中的第一时间点的近似;和
在第二时间点处开始向观众呈现第二透视画面的节目的部分。
2.根据权利要求1所述的方法,其中呈现多个透视画面的至少一个包括呈现存储的那些透视画面的至少一个。
3.根据权利要求1所述的方法,还包括周期地存储与接收的节目的多个透视画面的一个或多个的每个相对应的元数据,所述元数据至少包括用于多个透视画面的相应一个或多个的每个的时间和偏移信息。
4.根据权利要求1所述的方法,其中接收广播包括接收许多种相关视频流,每种流包括这些透视画面之一。
5.根据权利要求3所述的方法,其中在第一透视画面中识别第一时间点包括在与第一透视画面相对应的存储文件中识别第一偏移。
6.根据权利要求1所述的方法,其中呈现第一透视画面包括在显示器的一个窗口中呈现第一透视画面,和呈现多个透视画面的至少一个包括在显示器的不同窗口中呈现来自存储的多个透视画面的第二透视画面。
7.根据权利要求5所述的方法,其中在第二透视画面中确定第二时间点包括在第二透视画面中定位在第一偏移附近的偏移。
8.根据权利要求5所述的方法,其中在第二透视画面中确定第二时间点包括:
检索存储的元数据以识别与第一透视画面相对应的两个相继偏移,以便由两个相继偏移代表的间隔包括第一偏移;
利用与两个相继偏移的每个相对应的存储的时间来确定近似的时间点;
检索存储的元数据以识别与第二透视画面相对应的两个相继时间,以便由两个相继时间代表的间隔包括近似的时间点;
利用与两个相继时间的每个相对应的存储的偏移以确定近似的偏移;和
在第二透视画面中定位在近似的偏移附近的偏移。
9.根据权利要求1所述的方法,其中呈现所述第一透视画面和存储是同时进行的。
10.一种呈现广播内容的系统,包括:
配置成接收包含节目的多个透视画面的广播的接收器(16);
存储多个透视画面的至少一个的存储器件(18);和
配置成向观众呈现第一透视画面,同时向观众至少呈现第二、存储的透视画面的处理器(30);
其特征在于其中在呈现第二、存储的透视画面中,所述处理器被配置以便:
接收来自观众的输入,该输入指示希望从多个透视画面的第二透视画面重放所述节目的部分;
响应于所述输入,在第一透视画面中识别与所述部分的开始相对应的、节目中的第一时间点;
在第二透视画面中自动确定第二时间点,其中第二时间点包括节目中的第一时间点的近似;和
在第二时间点开始从第二、存储的透视画面呈现所述节目的部分。
11.根据权利要求10所述的系统,其中第一透视画面是存储的透视画面。
12.根据权利要求10所述的系统,还被配置成与呈现第一透视画面同时地存储至少一个透视画面。
13.根据权利要求10所述的系统,还被配置成与呈现第二透视画面同时地存储至少一个透视画面。
14.根据权利要求10所述的系统,其中所述处理器还被配置周期地存储与接收的节目的多个透视画面的一个或多个的每一个相对应的元数据,所述元数据至少包括用于多个透视画面的相应一个或多个的每一个的时间和偏移信息,并且其中在第一透视画面中识别第一时间点包括在相应于第一透视画面的存储的文件中识别第一偏移。
15.根据权利要求14所述的系统,其中处理器被配置成在显示器上的第一窗口中呈现第一透视画面和在显示器上的第二窗口中呈现第二透视画面。
16.根据权利要求15所述的系统,其中第一和第二窗口之一嵌套在第一和第二窗口的另一个的内部。
17.根据权利要求15所述的系统,其中接收器被配置成接收与多个透视画面相联系的多个音频和/或视频流。
18.根据权利要求17所述的系统,其中每种音频和/或视频流包括这些透视画面之一。
19.根据权利要求17所述的系统,其中在第二透视画面中确定第二时间点包括在第二透视画面中定位在第一偏移附近的偏移。
20.根据权利要求17所述的系统,其中在第二透视画面中确定第二时间点包括:
检索存储的元数据以识别与第一透视画面相对应的两个相继偏移,以便由两个相继偏移代表的间隔包括第一偏移;
利用与两个相继偏移的每个相对应的存储的时间来确定近似的时间点;
检索存储的元数据以识别与第二透视画面相对应的两个相继时间,以便由两个相继时间代表的间隔包括近似的时间点;
利用与两个相继时间的每个相对应的存储的偏移来确定近似的偏移;和
在第二透视画面中定位在近似的偏移附近的偏移。
21.根据权利要求10所述的系统,其中处理器被配置成检索存储的那些透视画面的至少一个。
22.根据权利要求1所述的方法或根据权利要求10所述的系统,其中存储多个透视画面的至少一个是自动进行的。
23.根据权利要求1所述的方法或根据权利要求10所述的系统,其中存储多个透视画面的至少一个包括在至少一个循环缓冲区中存储所述透视画面。
24.根据权利要求7所述的方法或根据权利要求19所述的系统,其中节目的多个透视画面包括MPEG数据流,并且在第二透视画面中的、在第一偏移附近的偏移对应于MPEG I-帧。
25.根据权利要求8所述的方法或根据权利要求20所述的系统,其中节目的多个透视画面包括MPEG数据流,并且其中在第二透视画面中的、在近似的偏移附近的偏移对应于MPEG I-帧。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US09/765,965 US8250617B2 (en) | 1999-10-29 | 2001-01-19 | System and method for providing multi-perspective instant replay |
US09/765,965 | 2001-01-19 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN1428045A CN1428045A (zh) | 2003-07-02 |
CN1309250C true CN1309250C (zh) | 2007-04-04 |
Family
ID=34194994
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CNB018088619A Expired - Lifetime CN1309250C (zh) | 2001-01-19 | 2001-06-06 | 提供多透视画面即时重放的系统和方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN1309250C (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8250617B2 (en) | 1999-10-29 | 2012-08-21 | Opentv, Inc. | System and method for providing multi-perspective instant replay |
US20100211988A1 (en) * | 2009-02-18 | 2010-08-19 | Microsoft Corporation | Managing resources to display media content |
US9069585B2 (en) | 2009-03-02 | 2015-06-30 | Microsoft Corporation | Application tune manifests and tune state recovery |
US10154293B2 (en) | 2016-09-30 | 2018-12-11 | Opentv, Inc. | Crowdsourced playback control of media content |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5371551A (en) * | 1992-10-29 | 1994-12-06 | Logan; James | Time delayed digital video system using concurrent recording and playback |
US5995705A (en) * | 1988-12-27 | 1999-11-30 | Instant Video Technologies, Inc. | Burst transmission apparatus and method for audio/video information |
JP2000350156A (ja) * | 1999-06-09 | 2000-12-15 | Hitachi Ltd | 動画像情報の記憶方法及びこれを記録した記録媒体 |
-
2001
- 2001-06-06 CN CNB018088619A patent/CN1309250C/zh not_active Expired - Lifetime
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5995705A (en) * | 1988-12-27 | 1999-11-30 | Instant Video Technologies, Inc. | Burst transmission apparatus and method for audio/video information |
US5371551A (en) * | 1992-10-29 | 1994-12-06 | Logan; James | Time delayed digital video system using concurrent recording and playback |
JP2000350156A (ja) * | 1999-06-09 | 2000-12-15 | Hitachi Ltd | 動画像情報の記憶方法及びこれを記録した記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
CN1428045A (zh) | 2003-07-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10869102B2 (en) | Systems and methods for providing a multi-perspective video display | |
JP3491431B2 (ja) | テレビジョン信号受信装置 | |
CN102415095B (zh) | 记录并且呈现由拼接的段形成的节目的数字视频录像机 | |
EP1415473B2 (en) | On-demand interactive magazine | |
CN1774928A (zh) | 广播节目的记录 | |
US20040078829A1 (en) | Technique for delivering network personal video recorder service and broadcast programming service over a communications network | |
US20090228928A1 (en) | Method of receiving broadcast signals and apparatus for receiving broadcast signals | |
CA2398200C (en) | System and method for providing multi-perspective instant replay | |
AU2001266732A1 (en) | System and method for providing multi-perspective instant replay | |
US20150071608A1 (en) | Receiving device, transmitting device and transmitting/receiving system | |
CN1309250C (zh) | 提供多透视画面即时重放的系统和方法 | |
JP2001258005A (ja) | 配信装置、配信システムおよびその方法 | |
WO2005083977A1 (en) | Method and apparatus for reproducing a first data stream | |
JP4063212B2 (ja) | 情報記録再生装置および情報記録方法 | |
JP2005295576A (ja) | 放送受信装置及び放送受信記録装置 | |
JP3922110B2 (ja) | テレビジョン信号受信装置 | |
US20040141713A1 (en) | Method and system for implementing a service provider personal video recorder | |
JP2005204233A (ja) | デジタル放送受信装置、デジタル放送送信装置、受信方法、プログラム、記録媒体および録画再生装置 | |
KR20100047734A (ko) | 방송 수신 장치 및 이를 이용한 영상 재생 방법 | |
CN1705369A (zh) | 数字电视的节目信息管理装置及其方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CX01 | Expiry of patent term |
Granted publication date: 20070404 |
|
CX01 | Expiry of patent term |