CN101322408B - 无触发信号的交互式电视 - Google Patents

无触发信号的交互式电视 Download PDF

Info

Publication number
CN101322408B
CN101322408B CN2006800452854A CN200680045285A CN101322408B CN 101322408 B CN101322408 B CN 101322408B CN 2006800452854 A CN2006800452854 A CN 2006800452854A CN 200680045285 A CN200680045285 A CN 200680045285A CN 101322408 B CN101322408 B CN 101322408B
Authority
CN
China
Prior art keywords
search
stream
action
computer
search criteria
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN2006800452854A
Other languages
English (en)
Other versions
CN101322408A (zh
Inventor
J·布莱德斯瑞特
D·E·左勒
J·坎宁
L·迈克库罗格
J·霍夫梅耶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Adeia Technologies Inc
Original Assignee
Microsoft Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Corp filed Critical Microsoft Corp
Publication of CN101322408A publication Critical patent/CN101322408A/zh
Application granted granted Critical
Publication of CN101322408B publication Critical patent/CN101322408B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/858—Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/242—Synchronization processes, e.g. processing of PCR [Program Clock References]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43074—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on the same device, e.g. of EPG data or interactive icon with a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/631—Multimode Transmission, e.g. transmitting basic layers and enhancement layers of the content over different transmission paths or transmitting with different error corrections, different keys or with different transmission protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/16—Analogue secrecy systems; Analogue subscription systems
    • H04N7/173—Analogue secrecy systems; Analogue subscription systems with two-way working, e.g. subscriber sending a programme selection signal
    • H04N7/17309—Transmission or handling of upstream communications
    • H04N7/17318—Direct or substantially direct transmission and handling of requests

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

公开了涉及通过将内容与实况和/或录制的电视演出同步来提供交互式电视的各种技术和方法。在不使用带内触发信号的情况下同步内容。接收一广播流，并且从一传输路径，诸如从因特网或用户接收搜索/动作对。当在广播流中找到搜索准则时，执行相关联的动作并且将内容与演出同步。使用一应用程序编程接口来便于同步，并且该接口包括设置搜索方法、搜索函数模板方法以及清除搜索方法。设置搜索方法启动对广播流的搜索，并注册用于在找到匹配时执行相关联动作的一个或多个回调方法。搜索函数模板用作用于注册回调方法的模板。清除搜索方法从搜索中清除系统资源。

Description

无触发信号的交互式电视
背景
计算机和电视行业在开发组合了计算机和电视的功能的技术方面正在大幅进步。例如，计算机正变得越来越适应于以模拟电视行业的广播基础结构的方式来呈现音频和视频数据。同样，电视和计算机行业在递送将基于web的和/或其它内容捆绑到电视广播内容的交互式电视内容方面正在作出改进。这一交互式电视的一个示例包括当广播特定广告客户的商业广告时显示其网页。交互式电视的另一示例包括显示与电视广播同步的交互式游戏。
为了将基于web的和/或其它内容与电视视频内容同步，广播公司通常在带内与视频一起发送触发信号。触发信号是对执行动作的应用程序的同步事件和引用，应用程序通常是网页。支持这种触发信号的工业标准的示例包括高级电视论坛(ATVEF)标准和广播HTML标准。当以此方式使用触发信号时，通常需要某种后向信道来发送实际网页，因为带内信道太窄以致于无法发送那么多内容。此外，带内触发信号要求生成网页和触发信号的广播公司在头端器侧的带内工作来使得这些触发信号被发送。广播公司和头端器侧之间的这一关系传统上是有问题的，因为电视广播还必须被修改以包括所需的带内触发信号，以及其它原因。
概述
此处所描述的是用于通过将内容同步到电视演出来提供交互式电视的各种技术和方法。在一方面，在不使用带内触发信号的情况下同步内容。作为一个非限制示例，接收广播流，诸如特定的实况或录制的电视演出。从一传输路径，诸如从通过诸如因特网等单独的传输路径下载的网页和/或从用户输入的搜索指令中接收一组搜索指令。该搜索指令包括一搜索准则以及当在广播流的特定一部分中找到该搜索准则时要执行的一个或多个动作。当在广播流中找到搜索准则时，执行相关联的一个或多个动作，并且将内容与正播放的演出同步。
在另一方面，提供了一种便于将内容同步到电视演出的应用程序编程接口。该应用程序编程接口包括设置搜索方法、搜索函数模板方法、以及清除搜索方法。设置搜索方法启动对一特定广播流的搜索以定位要匹配的值(例如，串等)，并注册应被调用以当找到匹配时执行特定动作的一个或多个回调方法。搜索函数模板用作用于注册回调方法的模板。清除搜索方法清除与特定搜索相关联的系统资源。
提供本概述以便用简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在确定所要求保护的主题的关键特征或必要特征，也不旨在用于帮助确定所要求保护的主题的范围。
附图简述
图1是本发明的一方面的计算机系统的示意图。
图2是在本发明的一方面中在图1的计算机系统上操作的搜索程序的示意图。
图3是用于图1的系统的一方面的高级过程流图。
图4是用于图1的系统的一方面的过程流图，它示出了在将内容与演出同步时所涉及的阶段。
图5是用于图1的系统的一方面的类图，它示出了用于将内容与演出同步的方法。
图6是用于图1的系统的一方面的过程流图，它示出了根据一说明性示例在执行串行匹配时所涉及的阶段。
图7是用于图1的系统的一方面的图示，它示出了根据图6的说明性示例的具有用于执行并行匹配的VBScript的HTML页面。
图8是用于图1的系统的一方面的过程流图，它示出了根据一个说明性示例的在执行并行匹配时涉及的阶段。
图9是用于图1的系统的一方面的图示，它示出了根据图8的说明性示例的具有用于执行串行匹配的VBScript的HTML页面。
图10是用于图1的系统的一方面的模拟屏幕，它示出了基于图6-9中所示的假设搜索将内容与电视演出同步。
详细描述
出于促进对本发明的原理的理解的目的，现在将参考附图中所示的各实施例并使用特定的语言来描述这些实施例。然而，可以理解，这并不因此旨在对本发明的范围作出任何限制。所描述的实施例中的任何更改和进一步修改，以及此处所描述的本发明的原理的任何其它应用都被构想为是本发明所涉及的技术领域的技术人员通常能够想到的。
有各种方法来将基于web的和/或其它内容与电视视频内容同步。通常，广播公司诸如使用STVEF或广播HTML标准来在带内与视频一起发送触发信号。广播公司通常必须修改电视广播以便包括该带内触发信号，并且必须与头端器侧联合工作来使得这些触发信号被发送。此处所讨论了允许将基于web的和/或其它内容与视频内容同步而无需使用带内触发信号和/或无需修改电视广播流的各种技术和方法。此处使用的术语广播流意在包括实况和/或录制的广播流。
图1示出了其上可实现本发明的合适的计算系统环境100的一个示例。计算系统环境100仅为合适的计算环境的一个示例，并非对本发明的使用范围或功能提出任何局限。也不应将计算环境100解释为对示例性操作环境100中示出的任一组件或其组合具有任何依赖或需求。
本发明可以使用众多其它通用或专用计算系统环境或配置来操作。适用于本发明的众所周知的计算系统、环境和/或配置的示例包括但不限于，个人计算机、服务器计算机、手持式或膝上型设备、多处理器系统、基于微处理器的系统、机顶盒、可编程消费电子产品、网络PC、小型机、大型计算机、移动电话、PDA、包括任一上述系统或设备的分布式计算环境等等。
本发明可在诸如程序模块等由计算机执行的计算机可执行指令的一般上下文中描述。一般而言，程序模块包括执行特定的任务或实现特定的抽象数据类型的例程、程序、对象、组件、数据结构等等。本发明也可以在其中任务由通过通信网络链接的远程处理设备来执行的分布式计算环境中实践。在分布式计算环境中，程序模块可以位于包括存储器存储设备的本地和远程计算机存储介质中。
参考图1，用于实现本发明的示例性系统包括计算机110形式的通用计算设备。计算机110的组件可包括但不限于，处理单元120、系统存储器130以及将包括系统存储器130的各类系统组件耦合至处理单元120的系统总线121。系统总线121可以是若干种总线结构的任一种，包括存储器总线或存储器控制器、外围总线以及使用各类总线体系结构的任一种的局部总线。作为示例而非局限，这类体系结构包括工业标准体系结构(ISA)总线、微通道体系结构(MCA)总线、增强型ISA(EISA)总线、视频电子技术标准协会(VESA)局部总线以及外围部件互连(PCI)总线(也称为小背板(Mezzanine)总线)。
计算机110通常包括各种计算机可读介质。计算机可读介质可以是可由计算机110访问的任一可用介质，包括易失性和非易失性介质、可移动和不可移动介质。作为示例而非局限，计算机可读介质包括计算机存储介质和通信介质。计算机存储介质包括以用于储存诸如计算机可读指令、数据结构、程序模块或其它数据等信息的任一方法或技术实现的易失性和非易失性，可移动和不可移动介质。计算机存储介质包括但不限于，RAM、ROM、EEPROM、闪存或其它存储器技术、CD-ROM、数字多功能盘(DVD)或其它光盘存储、磁盒、磁带、磁盘存储或其它磁存储设备、或可以用来储存所期望的信息并可由计算机110访问的任一其它介质。通信介质通常以诸如载波或其它传输机制等已调制数据信号来体现计算机可读指令、数据结构、程序模块或其它数据，并包括任一信息传送介质。术语“已调制数据信号”指以对信号中的信息进行编码的方式设置或改变其一个或多个特征的信号。作为示例而非局限，通信介质包括有线介质，如有线网络或直接连线连接，以及无线介质，如声学、RF、红外和其它无线介质。上述任一的组合也应当包括在计算机可读介质的范围之内。
系统存储器130包括易失性和/或非易失性存储器形式的计算机存储介质，如只读存储器(ROM)131和随机存取存储器(RAM)132。基本输入/输出系统133(BIOS)包括如在启动时帮助在计算机110内的元件之间传输信息的基本例程，它通常储存在ROM 131中。RAM 132通常包含处理单元120立即可访问和/或当前正在操作的数据和/或程序模块。作为示例而非局限，图1示出了操作系统134、应用程序135、其它程序模块136和程序数据137。
计算机110也可包括其它可移动/不可移动、易失性/非易失性计算机存储介质。仅作示例，图1示出了对不可移动、非易失性磁介质进行读写的硬盘驱动器140，对可移动、非易失性磁盘152进行读写的磁盘驱动器151，以及对可移动、非易失性光盘156，如CD ROM或其它光介质进行读写的光盘驱动器155。可以在示例性操作环境中使用的其它可移动/不可移动、易失性/非易失性计算机存储介质包括但不限于，磁带盒、闪存卡、数字多功能盘、数字录像带、固态RAM、固态ROM等等。硬盘驱动器141通常通过不可移动存储器接口，如接口140连接到系统总线121，磁盘驱动器151和光盘驱动器155通常通过可移动存储器接口，如接口150连接到系统总线121。
上文讨论并在图1示出的驱动器及其关联的计算机存储介质为计算机110提供了计算机可读指令、数据结构、程序模块和其它数据的存储。例如，在图1中，示出硬盘驱动器141储存操作系统144、应用程序145、其它程序模块146和程序数据147。注意，这些组件可以与操作系统134、应用程序135、其它程序模块136和程序数据137相同，也可以与它们不同。这里对操作系统144、应用程序145、其它程序模块146和程序数据147给予不同的标号来说明至少它们是不同的副本。用户可以通过输入设备，如键盘162和定位设备161(通常指鼠标、跟踪球或触摸垫)向计算机110输入命令和信息。其它输入设备(未示出)可包括话筒、操纵杆、游戏手柄、圆盘式卫星天线、扫描仪等等。这些和其它输入设备通常通过耦合至系统总线的用户输入接口160连接至处理单元120，但是也可以通过其它接口和总线结构连接，如并行端口、游戏端口或通用串行总线(USB)。
监视器191或其它类型的显示设备也通过接口，如视频接口190连接至系统总线121。计算机110可以与监视器191集成在一起或与其分离。监视器191可被配置成显示不同大小的项目以及以不同颜色来显示项目。其它合适的显示设备的示例包括但不限于，计算机监视器、电视机、PDA显示器、其它便携式设备的显示器等等。除监视器之外，计算机也可包括其它外围输出设备，如扬声器197和打印机196，它们通过输出外围接口190连接，并与计算机110集成在一起或与其分离。扬声器的非限制示例包括计算机扬声器、立体声系统、放大器、收音机、电视音频系统等等。
计算机110可以使用到一个或多个远程计算机，如远程计算机180的逻辑连接在网络化环境中操作。远程计算机180可以是个人计算机、服务器、路由器、网络PC、对等设备或其它常见的网络节点，并通常包括许多或所有相对于计算机110所描述的元件，尽管在图1中仅示出了存储器存储设备181。在一个实施例中，远程计算机180可包括电视广播台、电缆广播台、和/或卫星传输系统。在计算机110和远程计算机180之间传送的广播信号可以包括通过任何适当的通信链路传送的模拟和数字信号。图1描述的逻辑连接包括局域网(LAN)171和广域网(WAN)173，但也可包括其它网络。这类网络环境常见于办公室、企业范围计算机网络、内联网以及因特网。
当在LAN网络环境中使用时，计算机110通过网络接口或适配器170连接至LAN 171。当在WAN网络环境中使用时，计算机110通常包括调制解调器172或用于通过WAN 173，如因特网建立通信的其它装置。调制解调器172可以是内置或外置的，它通过用户输入接口160或其它适当的机制连接至系统总线121。在网络化环境中，相对于计算机110所描述的程序模块或其部分可储存在远程存储器存储设备中。作为示例而非局限，图1示出远程应用程序185驻留在存储器设备181上。可以理解，示出的网络连接是示例性的，也可以使用在计算机之间建立通信链路的其它手段。
现在转向图2，并继续参考图1，示出了本发明的一方面中在计算机110上操作的搜索程序200。在图2所示的示例中，搜索程序200是驻留在计算机110上的应用程序145之一。作为替代或除此之外，搜索程序200的一个或多个部分可以是RAM 132中、具有远程应用程序185的远程计算机181上、或计算机软件领域的技术人员能想到的其它这类变型中的应用程序135的一部分。
搜索程序200包括业务逻辑202。业务逻辑202负责实现部分或全部此处所描述的技术。业务逻辑包括用于检索从诸如与广播流分开的传输路径接收到的搜索指令的逻辑204，以及用于处理该广播流以查找搜索准则并确定匹配的逻辑206。业务逻辑202还包括用于注册一个或多个回调方法以在确定匹配时能执行一个或多个动作的逻辑208。搜索程序200的业务逻辑202还包括用于删除在搜索210中使用的系统资源的逻辑。在图2中，业务逻辑202被示为作为应用程序145的一部分驻留在计算机110上。然而，可以理解，业务逻辑202可以替换地或另外地被实施为在一个或多个计算机上和/或在与图2所示的不同的变型中的计算机可执行指令。作为一个非限制示例，业务逻辑202的一个或多个部分可以替换地或另外地被实现为驻留在外部计算机上的、当需要时被调用的XML web服务。
图2还示出了从诸如与广播流分离的传输路径接收到的搜索指令212。搜索指令212包含一组或多组搜索/动作对214。作为一个非限制示例，搜索指令212被包含在与搜索程序200通信的网页中。每一搜索/动作对214包括搜索准则216，以及当在广播流中找到特定的搜索准则216时要执行的一个或多个动作218。搜索指令212由业务逻辑204来检索。搜索准则216由业务逻辑206用作在广播流中进行查找的搜索准则。业务逻辑208注册对于动作218的回调方法，使得当搜索准则与广播流匹配时执行动作218。
现在转向图3-4，并继续参考图1-2，更详细地描述了用于实现系统100的搜索程序200的一个或多个方面的阶段。图3是本发明的一方面的高级过程流图。在一种形式中，图3的过程至少部分地在系统100的操作逻辑中实现。该过程在起始点220处以接收诸如音频、视频、紧急警告、时间、天气、和/或数据等至少一个广播流(阶段222)开始。从诸如与广播流分开的传输路径接收一个或多个搜索/动作对指令(阶段224)。作为几个非限制示例，搜索/动作对可被包含在HTML文件或通过因特网连接下载的其它文件中。例如，用于演出的指南条目可以包含指定何处可以检索到包含搜索/动作对的初始网页的URL。作为另一示例，用户可通过在web浏览器中导航到具有搜索/动作对的起始页面或通过某些其它选择手段来选择该起始页面。作为又一非限制示例，初始起始页面和/或搜索/动作对可以基于用户输入的准则通过编程或手动生成，这些准则诸如指示当搜索串“John Doe”出现时用户希望开始在可编程录像机(PVR)上录制演出的准则。最后，包含搜索/动作对的初始起始页面可以从各种其它源检索或生成。
该广播流由搜索程序200处理以从该流中提取内容部分(阶段226)。作为几个非限制示例，从流中提取的内容部分可包括从接近的文字说明和/或字幕流中检索到的串值。内容部分可替换地或另外地从另一文本流、从音频流、从视频流、从紧急警告流、从时间流、从天气流、和/或从其它流中提取。作为一个非限制示例，可能希望当广播某一特定声音，诸如特定公司的铃声时执行某一特定动作。作为另一非限制示例，可能已经有了希望在开始某一特定动作之前匹配的一个或多个特定视频帧。搜索众多其它文本和非文本变型也是可能的。
当搜索程序200基于完全或部分匹配确定在提取的内容中找到适用的搜索准则216(阶段228)时，启动与搜索准则216相关联的一个或多个动作218，并且将一个或多个动作的结果与正播放的演出同步(阶段230)。动作的某些非限制示例包括启动另一搜索、打开一特定页面、启动一外部程序、开始在PVR设备上录制、跳过在某一段特定时间之后的场景(诸如商业广告)、将商业广告静音、出于数据收集的目的跟踪一演出被观看的次数、和/或转录接近的文字说明流并将文本写入文件或布莱叶盲文输出。可使用计算机110通过编程启动的几乎任何事情都可作为动作的一部分或全部动作而被包括在内。同步的一个非限制示例包括进行时间位移(timeshifting)以将演出的回放从其广播时间延迟，并在看似为在该动作被实际启动之前出现的时刻执行该动作的结果。该过程然后在结束点232处结束。
图4所示是示出了在本发明的一方面中在将内容与演出同步时所涉及的阶段的更详细的过程流图。在一种形式中，图4的过程至少部分地在系统100的操作逻辑中实现。该过程在起始点240处以接收至少一个广播流(阶段242)开始。从诸如与广播流分开的传输路径接收具有一个或多个搜索/动作对的搜索页面(阶段244)。该搜索页面被绑定到至少一个搜索对象(例如，图5中的搜索类260)(阶段246)。作为一个非限制示例，搜索程序200可创建该搜索对象。注册回调方法，使得当找到匹配时调用关于相关联动作的搜索页面中的方法。然后调用回调方法以便在广播流中找到对搜索准则的匹配时执行相关联的动作(阶段250)。该动作的结果然后与演出进行同步(阶段252)。该过程然后在结束点254处结束。
现在转向图5，示出了说明在本发明的一方面中用于将内容与演出同步的方法的类图。搜索类260包括三个方法：SetSearch(设置搜索)262、SearchFncTemplate(搜索函数模板)264、以及ClearSearch(清除搜索)266。在本发明的一方面中，SetSearch方法262负责启动从广播流中对内容的提取以及搜索匹配。在本发明的一方面中，SetSearch方法262还负责使用SearchFncTemplate方法264作为用于回调方法的结构的模板，来注册关于相关联动作的回调方法。ClearSearch方法266负责删除在运行特定搜索时使用的系统资源。
在本发明的一方面，SetSearch方法262接受以下参数中的一个或多个：streamId(流ID)、searchFnc(搜索函数)、regExp(注册表达式)、mode(模式)、idSearch(ID搜索)、deltaTimeShift(增量时间位移)、startSearchTime(开始搜索时间)、endSearchTime(结束搜索时间)以及dwCookie(下载cookie)。这些参数中的一个或多个可以是可任选的和/或被省略。streamId参数用于指示要对其搜索搜索准则的特定流的标识符，诸如对于接近的文字说明流的“CC1”或“CC2”。searchFnc参数用于指示当在流中定位/匹配到指定的准则时要调用的回调搜索函数的名称。regExp参数与流的类型有关。作为一个非限制示例，对于基于文本的流，regExp参数可以是指示要在流中匹配的串的正则表达式或其它串。regExp参数可包括要匹配的全部或部分串，包括本领域的技术人员明白的通配符或其它变体。作为另一非限制示例，对于视频流，regExp参数可以是要匹配的视频图像。对于音频流，作为一个非限制示例，regExp参数可以是要匹配的声音字节。对于音频和/或视频流，regExp参数可包括要匹配的全部和/或部分值。作为替代或除此之外，特定流可以被转换成适用于匹配的串或其它数据类型。mode参数指示搜索应执行多久，诸如执行一次、重复执行等。在本发明的一方面，如果指定了一次(once)，则搜索在它获得的匹配的第一个串之后终止。如果指定了重复执行(recurring)，则搜索继续匹配串，直到手动或系统地终止。
idSearch参数是关于搜索的标识符，并且可以是或不是唯一的。deltaTimeShift参数指定了演示时间中从匹配搜索串到开始回调方法的延迟。作为一个非限制示例，deltaTimeShift参数可用于其中当找到匹配时要执行的动作包括在一段的某一部分开始播送之后在PVR上启动对具有用户希望录制的某些特征的电视演出的录制的情形中使用。startSearchTime参数指定了开始搜索的时间，而endSearchTime参数指定了搜索结束的时间。何时可使用startSearchTime和endSearchTime参数的一个非限制示例是在体育比赛的第三节中同步内容。SetSearch方法262输出dwCookie参数，它是关于搜索的唯一标识符，它可用于释放搜索的系统资源，以及用于所需的其它目的。
在本发明的一方面中，SearchFncTemplate方法264用作当在广播流中匹配特定搜索准则时调用的相关联动作的方法的回调模板方法。SearchFncTemplate方法264可包括以下输入参数中的一个或多个：ccMatched(匹配内容)、idSearch(搜索ID)、timeStart(开始时间)和/或timeEnd(结束时间)。这些参数中的一个或多个可以是可任选的和/或被省略。在该系统的一方面，对于基于文本的流，ccMatched参数是在搜索中匹配的实际串。对于诸如音频和/或视频流等其它流类型，ccMatched参数是该流中的匹配段。idSearch参数是关于搜索的标识符，并且可以是或不是唯一的。timeStart参数是搜索串中的第一个字段(例如，字符)的演示时间，而timeEnd参数是搜索串中的最后一个字段(例如，字符)的演示时间。timeStart和timeEnd参数可以按照SetSearch方法262中指定的的deltaTimeShift参数来偏移。作为一个非限制示例，timeStart参数可以在外部(后处理)阶段中用于将具有视频的阶段重新排列。作为一个非限制示例，timeEnd参数可用作其它动画以此为基础的同步点。
ClearSearch方法266可包括以下参数中的一个或多个：dwCookie。dwCookie参数是关于特定搜索的唯一标识符，并且允许ClearSearch方法266释放与搜索相关联的系统资源。
软件领域的普通技术人员将认识到，搜索类260中的方法可用更多或更少的参数来不同地安排、可执行更多或更少的操作、和/或可调用其它方法来执行所描述的操作。此外，软件领域的普通技术人员将认识到，搜索类260中的一个或多个方法可被修改为使得返回值不是来自所匹配的特定流，而是来自在同一时间点处的流和/或演出时间指示符。作为一个非限制示例，当在演出中出现了特定声音(匹配的值)时，可返回一特定图片(返回的值)。
现在转向图6-10，将使用某些假设示例来进一步示出图1-5所讨论的一些技术。这些示例仅是说明性的，并且此处所描述的技术可以在众多其它情形中使用。以图6开始，一过程流图示出了基于“Mary had a little lamb”(Mary有一只小羊羔)假设来执行串行匹配。串行匹配是在希望以特定次序处理某些搜索和/或仅当以那个精确次序满足所有搜索准则时执行一个或多个动作时使用。其中可使用串行匹配的一个示例是当正在广播实况演出并且不确定某些细节，因此希望等待直到完全并且以特定的精确次序匹配准则的时候。串行匹配在需要匹配的内容的部分被精选和/或其中演出在流传送中间并且包括搜索准则的某些内容已经被广播的情形中不能如此良好地工作。
图6的过程以从搜索页面运行OnLoad(在加载时)270事件开始。第一个搜索是查找“Mary”272。搜索该流，直到定位到“Mary”274。当实际定位到“Mary”276时，则搜索继续搜索“Had”(有)278。然后搜索该流，直到定位到“Had”280。当实际定位到“Had”282时，则搜索继续搜索“Little”(小)。该过程对于其余阶段中的每一个遵循此串行模式，直到实际找到了“Lamb”(羊羔)294。
图7示出了包含用于实现图6所描述的串行匹配过程的VBScript代码的示例HTML页面。作为一个非限制示例，包含搜索/动作对的这一起始页面可以从因特网上下载。用于获得起始页面的其它情形也可如上所述地使用。绑定方法300将该页面绑定到一搜索对象(例如，搜索类260的一个实例)。当OnLoad事件302运行时，调用SetSearch方法以设置对“Mary”的第一个搜索。向SetSearch方法传递用于接近的文字说明流的streamId值“CC1”、指定回调函数的名称的用于searchFnc值“ActMary”、用于匹配值的regExp串“Mary”、以及用于指定要查找多少匹配的模式“Once”。在这些场景之后，注册回调函数ActMary，并且当对“Mary”实际找到匹配时，调用ActMary方法304。ActMary方法304然后通过用新准则调用SetSearch方法来设置下一搜索。该模式然后通过在找到匹配时在适当的时刻以串行次序调用ActHad方法306、ActLittle方法308、以及ActLamb方法310来重复。当在串行过程的结束调用ActLamb方法308时，它执行期望的动作，并将该动作与演出内容同步，这在此示例中是在正在播送演出的同时启动示出“Test Your Litle Lamb Knowledge”(测试你的小羊羔知识)小测验的网页(参见在下节中讨论的图10)。
现在转向图8和9，将使用相同的假设来示出并行匹配过程。并行匹配过程可以用于其中有遗漏的串和/或当在某些内容已经被广播之后在演出的稍后部分中开始的情形。图8示出了过程流，而图9示出了具有实现该过程的VBScript的对应的HTML页面。这两张图在以下讨论中可被共同参考。再一次，图9中所示的包含搜索/动作对的起始页面可通过因特网下载和/或通过某一其它手段来获得。该过程以将网页绑定到一搜索对象(图9上的340)，然后运行启动所有搜索322的OnLoad事件320(图9上的342)开始。在OnLoad事件320中，使用SetSearch方法注册可按任何次序(如果有次序)完成的五个搜索：Mary 324、Had 326、A Little 328、Lamb 330和5Seconds(5秒)(超时)332。当对Mary 324、Had 326和A Little 328的搜索匹配时，则调用ActLine1(动作线1)回调方法334(图9上的344)。当对Lamb 330和5seconds(超时)332的搜索匹配时，调用DoneLine1(完成线1)回调方法336(图9上的346)。当对Lamb 330的搜索以成功匹配完成时，DoneLine1方法336(图9上的346)通过调用ClearSerch方法清除资源，然后执行最终的动作，即显示“Test Your Little Lamb Knowledge”小测验并将其与演出同步。如图10所示，模拟屏幕350包括TV窗口352、以及在图6-9的假设示例中讨论的用于显示“Test Your Little Lamb Knowledge”小测验的内容窗口354等等。本领域的普通技术人员将认识到，并行和串行搜索是搜索方法的两个极端，并且可使用这两个方法的组合来作为其中单独一个的代替或补充。
尽管以对结构特征和/或方法动作专用的语言描述了本主题，但是可以理解，所附权利要求书中所定义的主题不必限于上述具体特征或动作。相反，上述具体特征和动作是作为实现权利要求书的示例形式而公开的。落入此处和/或所附权利要求书所描述的本发明的精神之内的所有等效技术方案、改变和修改都是期望保护的。
例如，计算机软件领域的普通技术人员将认识到，在此处所讨论的示例中所描述的客户机和/或服务器安排、用户界面屏幕内容、和/或数据布局可以在一个或多个计算机上被不同地组织，以包括比在示例中所描绘的更多或更少的选项或特征，而仍落入本发明的精神之内。

Claims (12)

1.一种将内容与电视演出同步的方法，包括以下步骤：
在操作搜索程序的计算机上接收至少一个广播流(222)；
在所述计算机上从一与所述至少一个广播流分开的传输路径接收一组搜索指令，所述一组搜索指令包括至少一个搜索准则以及要执行的至少一个相关联动作(224)，其中所述一组搜索指令是在网页中接收的(224)，所述网页包括回调方法，并且所述回调方法被注册使得当所述至少一个搜索准则在所述至少一个广播流中被找到时，调用所述回调方法以启动至少一个相关联动作；
处理所述广播流以提取内容部分(226)；
确定在所提取的内容部分中找到了所述至少一个搜索准则(228)；
删除与搜索所述所提取的内容部分相关联的系统资源；以及
调用位于所述网页内的回调方法以启动所述至少一个相关联动作，包括将所述动作与正播放的特定演出同步(230)。
2.如权利要求1所述的方法，其特征在于，所述广播流是带文字说明的流(226)。
3.如权利要求1所述的方法，其特征在于，所述广播流是音频流(222)。
4.如权利要求1所述的方法，其特征在于，还包括：
在播放所述特定演出的同时使用时间位移，以使得所述动作看似在实际启动所述动作的时间点之前发生(230)。
5.如权利要求1所述的方法，其特征在于，所述搜索准则至少部分地基于串值(224)。
6.如权利要求1所述的方法，其特征在于，所述搜索准则至少部分地基于声音(228)。
7.如权利要求1所述的方法，其特征在于，所述搜索准则至少部分地基于一个或多个视频帧(228)。
8.如权利要求1所述的方法，其特征在于，所述确定找到至少一个搜索准则的步骤不需要精确匹配(228)。
9.如权利要求1所述的方法，其特征在于，所述方法进一步包括：
接收关于正播放的特定演出的指南条目；以及
在所述指南条目中指定的特定URL处检索包括所述一组搜索指令的所述网页(224)。
10.如权利要求1所述的方法，其特征在于，所述传输路径是因特网连接(224)。
11.如权利要求1所述的方法，其特征在于，其中包括所述一组搜索指令的所述网页是基于由用户指定的准则生成的(224)。
12.一种将内容与电视演出同步的方法，包括以下步骤：
接收至少一个广播流(242)；
从一与所述至少一个广播流分开的传输路径接收至少一个搜索页面，所述搜索页面包括至少一个搜索准则以及要执行的至少一个相关联动作(244)；
将所述搜索页面绑定到至少一个搜索对象(246)；
从所述搜索对象中，注册至少一个搜索回调方法，所述回调方法位于所述搜索页面内，并且所述回调方法可用于执行所述相关联动作(248)；
从所述搜索对象中，确定在所述至少一个广播流中找到所述至少一个搜索准则；
删除与搜索所述至少一个广播流相关联的系统资源；
调用位于所述搜索页面内的所述回调方法以执行所述相关联动作(250)；以及
将所述相关联动作与正播放的特定演出同步(252)。
CN2006800452854A 2005-12-02 2006-11-02 无触发信号的交互式电视 Active CN101322408B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US11/292,868 US8307403B2 (en) 2005-12-02 2005-12-02 Triggerless interactive television
US11/292,868 2005-12-02
PCT/US2006/042887 WO2007064438A1 (en) 2005-12-02 2006-11-02 Triggerless interactive television

Publications (2)

Publication Number Publication Date
CN101322408A CN101322408A (zh) 2008-12-10
CN101322408B true CN101322408B (zh) 2011-08-03

Family

ID=38092559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2006800452854A Active CN101322408B (zh) 2005-12-02 2006-11-02 无触发信号的交互式电视

Country Status (8)

Country Link
US (1) US8307403B2 (zh)
EP (1) EP1964406A4 (zh)
JP (1) JP5174675B2 (zh)
KR (1) KR101312902B1 (zh)
CN (1) CN101322408B (zh)
BR (1) BRPI0619039A2 (zh)
MX (1) MX304391B (zh)
WO (1) WO2007064438A1 (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7904922B1 (en) 2000-04-07 2011-03-08 Visible World, Inc. Template creation and editing for a message campaign
US7895620B2 (en) * 2000-04-07 2011-02-22 Visible World, Inc. Systems and methods for managing and distributing media content
US9094477B2 (en) 2008-10-27 2015-07-28 At&T Intellectual Property I, Lp System and method for providing interactive on-demand content
ES2352397B1 (es) * 2009-06-24 2011-12-29 Francisco Monserrat Viscarri Dispositivo, procedimiento y sistema para generar eventos audiovisuales.
JP5595028B2 (ja) * 2009-12-14 2014-09-24 キヤノン株式会社 放送受信装置及び方法
CN102196193B (zh) * 2010-03-15 2015-04-29 新奥特（北京）视频技术有限公司 一种实现多种球类体育赛事的字幕播出方法
DE102010045335A1 (de) * 2010-09-14 2012-03-15 Klaus Hoffmann Verfahren zum Interaktiven Fernsehen mittels Apps auf Smartphones und Tablet-Computern
US8681866B1 (en) 2011-04-28 2014-03-25 Google Inc. Method and apparatus for encoding video by downsampling frame resolution
US9106787B1 (en) 2011-05-09 2015-08-11 Google Inc. Apparatus and method for media transmission bandwidth control using bandwidth estimation
US9185429B1 (en) 2012-04-30 2015-11-10 Google Inc. Video encoding and decoding using un-equal error protection
US8948568B2 (en) * 2012-07-31 2015-02-03 Google Inc. Customized video
US20140108602A1 (en) * 2012-10-13 2014-04-17 Thomas Walter Barnes Method and system for delivering time-sensitive, event-relevant interactive digital content to a user during a separate event being experienced by the user
US9172740B1 (en) 2013-01-15 2015-10-27 Google Inc. Adjustable buffer remote access
US9311692B1 (en) 2013-01-25 2016-04-12 Google Inc. Scalable buffer remote access
US9225979B1 (en) 2013-01-30 2015-12-29 Google Inc. Remote access encoding
CN105357588A (zh) * 2015-11-03 2016-02-24 腾讯科技（深圳）有限公司 数据显示方法及终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805156A (en) * 1994-09-19 1998-09-08 Intel Corporation Automated media capturing system
CN1429455A (zh) * 2000-05-25 2003-07-09 汤姆森许可贸易公司 用于同步广播音像节目和互补信息的设备和方法
CN1574959A (zh) * 2003-06-24 2005-02-02 微软公司 无嵌入式触发器的互动内容
CN1666533A (zh) * 2002-06-28 2005-09-07 汤姆森许可贸易公司 视听节目同步系统和方法

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6336429A (ja) 1986-07-31 1988-02-17 Nec Corp デ−タ検索回路
US6240555B1 (en) * 1996-03-29 2001-05-29 Microsoft Corporation Interactive entertainment system for presenting supplemental interactive content together with continuous video programs
US5937331A (en) 1996-07-01 1999-08-10 Kalluri; Rama Protocol and system for transmitting triggers from a remote network and for controlling interactive program content at a broadcast station
US20030093790A1 (en) * 2000-03-28 2003-05-15 Logan James D. Audio and video program recording, editing and playback systems using metadata
JPH10154182A (ja) 1996-11-25 1998-06-09 Nippon Telegr & Teleph Corp <Ntt> 問い合わせ回答方法及びシステム
KR19990051743A (ko) 1997-12-19 1999-07-05 정선종 내용 기반 영상 정보를 이용한 등록 상표 자동 검색 방법
JPH11259492A (ja) 1998-03-09 1999-09-24 Digital Archives Japan Kk 画像検索システム、画像検索方法および記録媒体
JPH11353325A (ja) 1998-06-10 1999-12-24 Hitachi Ltd 映像と関連情報の同期表示システム
JP4242986B2 (ja) 1998-10-27 2009-03-25 パナソニック株式会社 フォーカス制御装置
US6526580B2 (en) * 1999-04-16 2003-02-25 Digeo, Inc. Broadband data broadcasting service
US6816858B1 (en) * 2000-03-31 2004-11-09 International Business Machines Corporation System, method and apparatus providing collateral information for a video/audio stream
KR20020054325A (ko) 2000-07-27 2002-07-06 요트.게.아. 롤페즈 비디오 개선을 위한 트랜스크립트 트리거
US6928429B2 (en) * 2001-03-29 2005-08-09 International Business Machines Corporation Simplifying browser search requests
US20030001887A1 (en) * 2001-06-27 2003-01-02 Smith James E. Method and system for communicating user specific infromation
US7017148B2 (en) * 2001-07-10 2006-03-21 Intel Corporation Apparatus and method for UPnP device code generation using XML
US7610358B2 (en) * 2001-11-26 2009-10-27 Time Warner Cable System and method for effectively presenting multimedia information materials
PL374881A1 (en) 2002-08-26 2005-11-14 Samsung Electronics Co, Ltd. Apparatus for reproducing av data in interactive mode, method of handling user input, and information storage medium therefor
JP2007528144A (ja) 2003-07-11 2007-10-04 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ マルチメディア信号おいてトリガーマーカとして機能するフィンガープリントを生成及び検出する方法及び装置
US7653288B2 (en) 2003-08-16 2010-01-26 Samsung Electronics Co., Ltd. Information storage medium having data structure for being reproduced adaptively according to player profile information, method for reproducing AV data in interactive mode
JP2005286966A (ja) 2004-03-31 2005-10-13 Hitachi Ltd 情報処理装置及び情報処理システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5805156A (en) * 1994-09-19 1998-09-08 Intel Corporation Automated media capturing system
CN1429455A (zh) * 2000-05-25 2003-07-09 汤姆森许可贸易公司 用于同步广播音像节目和互补信息的设备和方法
CN1666533A (zh) * 2002-06-28 2005-09-07 汤姆森许可贸易公司 视听节目同步系统和方法
CN1574959A (zh) * 2003-06-24 2005-02-02 微软公司 无嵌入式触发器的互动内容

Also Published As

Publication number Publication date
KR101312902B1 (ko) 2013-09-30
US8307403B2 (en) 2012-11-06
CN101322408A (zh) 2008-12-10
EP1964406A4 (en) 2010-09-08
WO2007064438A1 (en) 2007-06-07
BRPI0619039A2 (pt) 2011-09-20
MX304391B (es) 2012-10-17
JP2009517976A (ja) 2009-04-30
US20070130611A1 (en) 2007-06-07
EP1964406A1 (en) 2008-09-03
JP5174675B2 (ja) 2013-04-03
KR20080071585A (ko) 2008-08-04

Similar Documents

Publication Publication Date Title
CN101322408B (zh) 无触发信号的交互式电视
US10034028B2 (en) Caption and/or metadata synchronization for replay of previously or simultaneously recorded live programs
CN106570100A (zh) 信息搜索方法和装置
CN1711757B (zh) 用于显示嵌入在广播媒体信号中的文本数据的方法和设备
JP2006523418A (ja) インタラクティブコンテンツ同期化装置及び方法
JP2005295375A (ja) 情報取得支援システム
CN106098056A (zh) 一种语音新闻的处理方法、新闻服务器及系统
CN102169489A (zh) 信息处理装置、关键字注册方法和程序
KR101396362B1 (ko) 녹화 기기의 상세 정보 제공 방법 및 장치
KR20170063860A (ko) 홍보 정보의 처리방법, 장치, 디바이스 및 비휘발성 컴퓨터 저장매체
CN104349173A (zh) 视频复读方法及装置
CN109889921B (zh) 一种具备交互功能的音视频创建、播放方法及装置
TW201225669A (en) System and method for synchronizing with multimedia broadcast program and computer program product thereof
RU2316134C2 (ru) Устройство и способ для обработки текстов в приемнике цифрового вещания
CN103747280A (zh) 一种创建节目单的方法及电子设备
KR102307330B1 (ko) 수신 장치 및 수신 방법
KR101828715B1 (ko) 단축코드를 이용한 양방향 데이터서비스 확장시스템
JP2006054517A (ja) 情報提示装置、方法及びプログラム
JP5242826B1 (ja) 情報処理装置及び情報処理方法
KR102468214B1 (ko) 사용자의 발화를 기반으로 컨텐츠를 제공하는 장치 및 시스템
KR100944958B1 (ko) 특정 구간의 멀티미디어 데이터 및 캡션 데이터를 제공하는장치 및 서버
JP6112598B2 (ja) 情報取得装置、情報取得方法および情報取得プログラム
KR100863297B1 (ko) 선택 영상을 이용한 스트리밍 서비스 제공방법과 제공장치
JP4771922B2 (ja) 番組検索用のデータベース取得方法及びディジタル放送受信装置における番組検索処理方法
CN113422998A (zh) 短视频和笔记内容生成的方法、装置、设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: ROVI TECHNOLOGIES CORPORATION

Free format text: FORMER OWNER: MICROSOFT CORP.

Effective date: 20150724

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150724

Address after: American California

Patentee after: ROVI technology company

Address before: Washington State

Patentee before: Microsoft Corp.