CN107079186B - 增强的交互式电视体验 - Google Patents

增强的交互式电视体验 Download PDF

Info

Publication number
CN107079186B
CN107079186B CN201580046745.4A CN201580046745A CN107079186B CN 107079186 B CN107079186 B CN 107079186B CN 201580046745 A CN201580046745 A CN 201580046745A CN 107079186 B CN107079186 B CN 107079186B
Authority
CN
China
Prior art keywords
user
content
application
computer
real
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201580046745.4A
Other languages
English (en)
Other versions
CN107079186A (zh
Inventor
T·比尔曼
H·兰姆
M·T·H·楚埃
S·Y·Y·李
M·N·卡特
M·D·沃尔什
D·塞莫尔
P·S·门格特
W·M·莫泽儿
J·W·韦森
M·J·马哈
R·A·C-Y·卢姆
M·J·佩泽尔
C·D·J·麦克雷
D·A·布朗
D·岳
R·拉杜
E·C·布里奇沃特
D·T·弗格森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN107079186A publication Critical patent/CN107079186A/zh
Application granted granted Critical
Publication of CN107079186B publication Critical patent/CN107079186B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations

Abstract

各种增强的交互式TV体验由可以通过网络与在交互式TV平台上运行的应用交互的实时TV服务来支持。实时电视服务使得数据、视频和通信用户界面(UI)元素能够与线性TV内容一起被支持在三个离散导航状态中，每个离散导航状态具有与用户意图对准的特定角色。在一个特定UI元素(即，聚焦伴随面板)的情况下，增强用户对实况事件的理解和认识的个性化数据的实况流得到支持。实时TV服务可进一步使得用户能够选择某些可定制的事件，并且在他们的注意力被引导到的TV屏幕上被提供通知，并且跟随该通知进入将他们登陆在满足特定条件的一则具体内容的应用中。

Description

增强的交互式电视体验
背景
线性电视(TV)内容的伴随体验通常被限于第二屏幕，如那些由移动和平板设备支持的屏幕。这通常迫使用户在他或她面前的大屏幕TV与手中较小的屏幕之间划分注意力。这些设备之间的同步性加上屏幕的物理位置通常可产生不协调的体验(即，用户想要数据，但总是缺少某些东西)。此外，当用旨在仅占据来自用户的部分注意力的内容分发系统和界面来呈现时，伴随体验当前没有按被细微地打扰并且可以利用减少的用户输入来达到和保持有意义的状态的方式被设计。
用户还可能面临伴随体验的其他问题。例如，用于实时发生的事件的任何通知的面向TV的活动空间(TV-oriented activity space)通常不能被直接提供到用户正观看的TV屏幕。在大多数情况下，实况事件的通知被限于第二屏幕设备。此外，在TV上的交互空间中跟进与实况事件相关的通知的能力通常是有限的。
提供本背景来介绍以下概述和详细描述的简要上下文。本背景不旨在帮助确定所要求保护的主题的范围，也不旨在将所要求保护的主题限于解决以上所提出的缺点或文体中的任一个或全部的实现。
概述
各种增强的交互式TV体验由实时TV服务支持，该实时TV服务可通过网络与在诸如多媒体控制台、个人计算机(PC)等交互式TV平台上运行的应用进行交互。实时电视服务使得数据、视频和通信用户界面(UI)元素能够与线性TV内容一起被支持在三个独立的导航状态中，每个导航状态具有与用户意图对准的特定角色。在一个特定UI元素(即，聚焦伴随面板)的情况下，增强用户对实况事件的理解和认识的个性化数据的实况流得到支持。当交互式TV平台工作在伴随模式中时，以最优地安排用户从完全注意移到部分注意状态的方式来组织UI。实时TV服务可确定要显示的内容及其组织、自动更新某些内容，并且以简单和直观的方式来支持内容元素之间的移动。实时TV服务可进一步使得用户能够选择他们关心的某些可定制的事件、在他们的注意力被引导到的TV屏幕上被提供通知，并且随后例如通过按下单个按钮来跟随该通知进入将用户引导到满足他们所关心的特定条件的一则具体内容的应用中。
提供本概述以便以简化的形式介绍以下在详细描述中进一步描述的一些概念。本概述并非旨在标识所要求保护的主题的关键特征或必要特征，亦非旨在用作辅助确定所要求保护的主题的范围。此外，所要求保护的主题不限于解决在本公开的任一部分中所提及的任何或所有缺点的实现。将理解，上述主题可被实现为计算机控制的装置、计算机进程、计算系统或诸如一个或多个计算机可读存储介质之类的制品。通过阅读下面的详细描述并审阅相关联的附图，这些及各种其他特征将变得显而易见。
附图简述
图1示出了可在其中实现本发明的增强的交互式TV体验的说明性计算环境；
图2－4示出了本发明的增强的交互式TV体验的说明性示例的视图，其中用户在典型的家庭环境中与多媒体控制台进行交互；
图5是可被用来支持实时TV服务的说明性元素的功能框图；
图6示出了可由与实时TV服务进行交互的应用展示的说明性UI元素；
图7示出了可由应用UI元素展示的功能的说明性分类；
图8示出了从实时TV服务到应用的说明性事件馈送，其中事件馈送使用卡形式的内容来动态地布置；
图9示出了在体育应用的上下文中的一组说明性卡类型；
图10示意性地示出了事件馈送可包括实况使用和回顾(catch-up)使用案例；
图11示出了其中应用UI被划分成主要内容区域和次要内容区域的说明性布置；
图12示出了说明性静态和循环内容区域；
图13示出了用户如何在次要内容区域内所展示的内容的各种细节水平之间进行选择；
图14示意性地示出了如何使用特殊效果和/或视觉效果来处理卡；
图15和图16示出了由说明性体育应用展示的UI的屏幕捕捉；
图17示出了其中实时TV服务被配置成响应于来自第三方的数据馈送向应用提供通知的说明性布置；
图18示出了通知的说明性使用案例；
图19示出了与通知相关联的应用UI的屏幕捕捉的说明性序列；
图20是可部分地被用来实现本发明的增强的交互式TV体验的说明性计算机系统(诸如个人计算机(PC)或服务器)的简化框图；
图21示出了可部分地被用来实现本发明的增强的交互式TV体验的说明性计算平台的框图；
图22示出了可部分地被用来实现本发明的增强的交互式TV体验的说明性相机系统的功能框图；
图23示出了可部分地被用于实现本发明的增强的交互式TV体验的说明性多媒体控制台的功能框图。
各附图中相同的附图标记指示相同的元素。除非另外指明否则各元素不是按比例绘制的。需要强调的是，附图中所显示的特定UI可根据特定实现的需求而与所示的不同。
详细描述
图1示出了可在其中实现本发明的增强的交互式TV体验的说明性计算环境100。娱乐服务102通常可通过分发网络116向多媒体控制台114的用户112展示应用(app)104、游戏106、诸如电视节目和电影之类的媒体内容108以及流传输互联网协议电视(IPTV)内容110，分发网络116可包括包含公用交换电话网络(PSTN)、移动运营商和蜂窝网络、Wi-Fi、局域和/或广域网、短程网络和互联网的一个或多个网络的部分。其他服务/数据提供商(由附图标记118代表性地指示的)也可在环境100中，它们可提供各种其他服务150，诸如通信服务、金融服务、旅行服务、新闻和信息服务等。在一些情况下，其他服务/数据提供商118还可提供数据115和/或TV内容。
包括应用、游戏和/或媒体内容在内的本地内容120也可被利用并且/或者被消费以便在环境100中提供特定的用户体验122。在一些情况下，本地内容120从诸如包括DVD(数字通用盘)和CD(压缩盘)在内的光盘之类的可移动源获得，而在其他情况下，本地内容从远程源下载并被本地保存。用户体验122可在多媒体控制台114上本地地执行，由娱乐服务102远程地托管，或者在使用本地或联网内容/应用/游戏的某些情况下酌情使用本地和远程执行的组合。用户体验122也可以是具有其他计算设备的多个其他玩家124可参与其中的用户体验。在一些实现中，用户体验也可在社交网络126上被共享。
用户112可通常使用各种不同的接口设备与多媒体控制台114进行交互，该各种不同的接口设备包括可被用于感测视觉命令、运动和姿势的相机系统128以及头戴组件130或其他类型的麦克风或音频捕捉设备/系统。在一些情况下，麦克风和相机可被组合到单个设备中。用户112还可利用控制器132来与多媒体控制台114进行交互。控制器132可包括各种物理控制，包括操纵杆、方向键(D-pad)和按钮。一个或多个触发器和/或缓冲器(未示出)也可被合并到控制器132内。用户112通常将与被显示在显示设备136(诸如电视机或监视器)上的用户界面134进行交互。
各种应用138在多媒体控制台114上得到支持。应用138通常使用本地执行代码来实现。然而，在一些情况下，应用可依赖于由远程服务器或其他计算平台提供的服务和/或远程代码执行。如下面更详细地描述的，应用138中的特定应用可被配置成与实时TV服务170互操作以支持各种用户体验。
要强调的是，相机系统128、音频捕捉系统和控制器132中所使用的控件的数量以及相机系统128、音频捕捉系统和控制器132中实现的用户控制所支持的特征和功能可根据特定实现的需求而与图1中显示的不同。此外，在随后的描述中，描述了各种手势、按钮按压和控件操纵。注意，这些动作旨在是说明性的。例如，用户可致动特定按钮或控件，或者执行特定手势以便提示在多媒体控制台114上运行的系统来执行特定功能或任务。可以理解，控件到功能的特定映射可根据特定实现的需要而与以下描述的不同。如本文中使用的，术语“系统”涵盖被实例化在多媒体控制台上的各种软件(包括软件操作系统(OS))、硬件和固件组件以及其支持由该控制台提供的各种用户体验的外围设备。尽管本发明的增强的交互式TV体验在使用多媒体控制台的上下文的本文的说明性示例中进行了描述，但是要强调的是，诸如PC、膝上型计算机、平板电脑和移动设备之类的其他计算平台也可被用于各种替代的实现中。
图2－4示出了本发明的增强的交互式TV体验的说明性示例的视图，其中用户112在典型的家庭环境200中与多媒体控制台114进行交互。在图2中，用户112正在观看电视机136上的体育赛事(例如，美式足球赛事)的视频202。视频202由诸如图1所示的娱乐服务102和其他服务/数据提供商118的内容提供商提供。在一些情况下，视频202可以是电视节目的一部分，或者在其他情况下，可被提供作为数字内容流的一部分。
除了观看TV之外，多媒体控制台114通常被配置成用于使用本地和/或联网的程序编制和内容来运行游戏和非游戏应用、播放预先录制的多媒体(诸如包括DVD(数字通用盘)和CD(压缩盘)之类的光盘)、从网络流传输多媒体(例如，音乐和视频)、参与社交媒体、使用诸如电视机136之类的经耦合的音频/视觉显示器来浏览互联网以及其他联网媒体和内容。在一些实现中，多媒体控制台114可被配置成使用例如HDMI(高清晰度多媒体接口)连接来支持常规的有线电视(CATV)源。
多媒体控制台114可被操作地耦合到相机系统128，相机系统128可使用一个或多个摄像机来实现，该一个或多个摄像机被配置成可视地监视由用户112所占据的在图3中大致由虚线指示的物理空间305。如下面更详细地描述的,相机系统128被配置成捕捉、跟踪以及分析用户112的移动和/或姿势使得它们能被用作控件，该控件可被采用以影响例如多媒体控制台114上运行的应用或操作系统。用户112的手310或其他身体部位的各种运动可对应于常见的系统范围任务，诸如从主用户界面中选择游戏或其他应用。
例如如图3所示，用户112可在可选对象315(包括在电视机136上的UI134上示出的各种图标3201－320N)之间导航、浏览分层菜单中的项目、打开文件、关闭文件、保存文件等等。此外，用户112可使用移动和/或姿势来结束、暂停或保存游戏，选择级别，查看高分，与朋友交流等。事实上，操作系统和/或应用的任何可控方面都可以由用户112的移动来控制。用户112的全范围的运动可按任何合适的方式来获得、使用和分析，以与在多媒体控制台114上执行的应用或操作系统进行交互。尽管用户112在图3中被示为站立的，但是相机系统128同样可识别当用户就座时所执行的手势。相机系统128还可被用来捕捉、跟踪和分析用户112的移动，以当游戏应用在多媒体控制台114上执行时控制玩游戏过程。
用户还可利用控制器132与多媒体控制台114进行交互。控制器132可包括各种物理控件，包括操纵杆、方向键(D-pad)和各种按钮。一个或多个触发器和/或缓冲器(未示出)也可被合并到控制器132内。用户112通常还可与在显示设备136(诸如电视机、投影仪或监视器)上被示出的用户界面134进行交互。图4示出了用户112使用控制器132与正在多媒体控制台114上进行并在显示设备136上显示的游戏422进行交互。
图5是可被用来支持实时TV服务170的说明性元素的功能框图。如图所示，实时TV服务向应用138展示各种服务500，包括客户端配置服务505、视频认证服务510、位置服务515(例如，可基于设备的IP(互联网协议)地址来确定地理位置的服务)、投票服务520、用户偏好服务525、轮询服务530、服务API(应用编程接口)535和其他服务540。如图所示，服务500中的一些由一个或多个数据存储服务545支持。服务API 535与内容分发网络元素550通过接口连接。
到实时TV服务170的外部输入555包括到客户端配置服务505的管理输入560以及可由例如第三方内容源提供以支持被应用138所支持的各种用户体验的外部数据馈送565。数据馈送565与在实时TV服务170中被实例化的代理570通过接口连接。在实时TV服务170中被支持的其他服务包括供应服务575和动态配置服务580。
根据本发明的增强的交互式TV体验，如图6所示，实时TV服务170与客户端侧逻辑元件605一起运行，以支持被配置成支持个性化数据的实况流的用户界面(UI)610，该个性化数据的实况流增强了用户对实况电视事件的理解和认识。UI 610利用了四个UI元素，包括视频块615、频道指南620、内容栏625和聚焦伴随面板630。如图7中的分类700所示，视频块615可播放在“无限”播放列表中的视频(如附图标记705所指示)，该“无限”播放列表从头到尾地自动播放应用内的所有视频内容。该特征为用户创建了基本全天候的内容网络，并且在一些实现中可被用于over-the-top(OTT)在线视频网络。
频道指南620是顶层导航元素710，其包括用于新内容715、特色内容720和实况内容725的标签。每个频道可专注于特定领域的主题。例如，在体育应用的说明性示例中，可存在被称为“赛事中心”的频道，其提供与本周的赛事相关的体验，以及被称为“梦幻”的另一频道，其提供与用户的梦幻足球队相关的体验。新标签将用户引导至尚未被查看的内容。实况标签将用户引导至针对用户经授权来使用的不同服务的实况内容。特色标签在特定时间对应用中最重要的领域进行宣传。
内容栏625提供表示视频735、数据740或其他通信体验745的各个个体可浏览块730。这些块可以是静态的，或者它们可取决于上下文用实况数据来“照亮”。用户可视觉上扫描或物理地浏览内容栏，以便决定他/她希望关注的一则内容。例如，在体育应用场景中，静态块可以是在赛季进程期间不进行改变的球队日程表。而更加实况的块可能是单个赛事，并且包括当前的比赛得分、比赛时间、控球等。
聚焦伴随面板630可替换所有其他导航UI，以允许用户锁定他/她此刻最感兴趣的一则内容。用户可允许伴随面板在面板的上下文内创建视频755、数据760和/或其他通信体验765的个性化馈送750。用户还可对各元素采取动作以选择要播放的视频、获取更多信息、分享给朋友等。例如，在说明性的体育应用中，“实况赛事事件馈送”伴随面板可向用户提供一系列的卡805(如图8所示)，其增强了实况赛事的观看或者用作当用户不能或不想将面板与实况赛事视频相配对时的赛事的实况视频馈送的代理。在图9中示出了在涉及足球的说明性体育应用的上下文中的各种类别的说明性卡900。要强调的是，卡900旨在是说明性的而不是穷尽性的，并且其他类型的卡可被用来满足本发明的增强的交互式TV体验的特定实现的需要。卡可被组织成包括通过主题、类型、流派、题材等来相关的数据、对象、图形和其他信息。
回到图8，事件馈送810是一种类型的聚焦伴随面板，其向用户提供创建各个个体元素的时间线的视频和数据元素的经聚集的馈送。如附图标记815所指示的，这些元素通过包括第三方数据820、用户偏好825、由用户生成的内容(UGC)830、由朋友/关注者835分享的内容、由实况运行组织840推送的内容的聚集或者使用其他因素845的各种手段来动态地布置。
基于云的数据和客户端侧逻辑的组合被用来生成虚拟时间线。该技术能够基于使用案例和用户偏好来递送时间线的不同布置。如图10所示，通常存在针对事件馈送810的两个主要使用案例，包括实况使用案例1005和回顾使用案例1010。
对于实况使用案例1005(诸如体育赛事、实况电视赛事等)，事件馈送可通过将用户连接到补充视频和数据内容(诸如即时重放或分解特定比赛的文本内容)来放大用户的认识和/或兴奋度。附加地，用户可与投入到相同的实况内容中的其他用户相连接。例如，在说明性体育应用138中，用户可在他/她的赛事中选择支持特定的球队，并且系统将朝该用户的馈送来使视频和数据卡805具有倾向性。在实况事件期间，该特征可将用户们连接在一起并且/或者布置增强了用户的归属感和陪伴感。用户可被动地观看数据和视频卡出现，或者他/她可主动导航并对各个个体元素采取动作。
对于回顾使用案例1010，事件馈送为用户提供了重新体验在先前实况事件期间所揭露的报道的简单方式。视频和数据由系统进行布置，并且一组不同的内容可被揭露。例如，在赛事应用中，比起在实况事件期间，一组更纵深的赛事亮点通常在回顾情景中被揭露。然而，详细描述赛事各方面(例如，足球赛事中的每场比赛)的通用数据卡得到抑制，以支持更直接地描述赛事情节的更重大的时刻。用户可播放视频并对数据进行操作，以便获取有关各个个体元素的更多信息。
如图11中的UI 1100所示，说明性体育应用138和实时TV服务170支持对用户可定制UI内容区域进行展示的特征，如由附图标记1110所指示的，其将UI置于伴随模式。伴随模式是当用户从完全注意移至部分注意状态时进行优化的UI组织。实时TV服务170可确定要显示的内容及其组织、自动更新某些内容，并且以简单和直观的方式来支持内容元素之间的移动。
例如，当用户完全参与正播放实况赛事的多媒体控制台114(图1)上的体育应用时，用户可决定玩视频游戏，但是仍然希望能够扫视并查看关于实况赛事的关键信息。用户可通过如附图标记1115所指示的平台的快照应用界面(snap-application interface)来调用伴随模式。作为响应，应用将可用的内容简化成该特定赛事的概要。赛事概要可包含重要事件(例如，比赛)的视觉上有目的的分层结构，其允许用户一眼就接受赛事更新。此外，用户界面改变成允许用户容易地转换到另一实况赛事、他/她的个性化幻想数据或其他高价值内容的方案。
伴随模式可被分离成可由用户进行个性化的预定的内容区域。例如，伴随模式可在用户的控制下被实现成与主要内容区域1125相邻的次要内容区域1120。通常，实时TV服务170(图5)可与应用138进行交互，以便为设备(例如，控制台114)上的硬件生成指令流1130，该硬件包括例如中央处理单元(CPU)和/或图形处理单元(GPU)，其促使设备当在显示器上生成内容区域时对计算资源的利用和分配进行优化。例如，这样的优化可包括分辨率、帧速率等的调整，以便有效地呈现主要和次要内容区域，同时维持显示精度使得主要内容区域没有短时脉冲干扰和其他不想要的赝象。在多媒体控制台或PC的情况下，内容区域在那些平台上运行的整体操作系统内被认为是“被快照的(snapped)”或者经按比例缩小的。
如图12所示，在伴随模式UI 1205内可存在两种类型的内容区域－静态和循环，分别由附图标记1210和1215指示。静态内容区域由系统或由用户锁定到位。例如，在说明性体育应用138中，一个静态内容区域是“最爱的球队”窗口，其显示关于用户最爱的球队的当前信息(即，低变动、高情绪投入区域)。循环内容区域对数据或视频从头至尾进行循环。例如，在说明性体育应用138中，循环内容区域是“梦幻”窗口，其循环遍历用户的不同梦幻球队以提供当前分数(即，高变动、高情绪投入区域)。
此外，如图13所示，用户可选择内容区域并且更深入地了解细节。例如，在说明性体育应用138中，用户可对赛事中心内容区域中的特定赛事采取动作，随后便转到专用于该赛事的数据和视频馈送。一旦用户已到达与他/她感兴趣的内容相匹配的状态，则应用可被保持在周期性地进行更新的被动状态，如附图标记1305所指示。更新被配置成基于事件发生的重要性来对用户的注意力形成或多或少的干扰。例如，在说明性体育应用138中，由用户最爱的球队取得的达阵得分可使用动画(诸如如图14所示的在给定卡1415中的VFX(视觉效果)1405和SFX(特殊效果)1410)以创建比由一个不是该用户最爱的球队的球队取得的射门得分(即，导致得分较少的活动)聚集更多关注的外围时刻。
图15和图16示出了由说明性体育应用138展示的UI的屏幕捕捉。在图15中，UI1500示出了主要内容区域中的视频块1505以及在次要内容区域中展示各种卡的频道指南1510。在一些实现中，与用户有关的个人信息(诸如姓名、玩家标签、统计数据等)可被显示在频道指南上方的区域中。在图16中，UI 1600示出了视频块1605和展示为用户定制的动态布置式事件馈送的说明性聚焦伴随面板1610。还示出了说明性内容栏1615。
图17示出了其中实时TV服务170被配置成响应于来自展示API 1715的第三方的数据馈送1710向应用138提供通知的说明性布置。实时TV服务170从API轮询数据并将其储存。不仅是用户主动提交的，还有作为应用138的后台进程的被动提交的某些用户简档数据同样被储存。附加地，小的本地服务1720被定位在当用户引导到应用138中时储存其他数据的多媒体控制台平台上。
当实时TV服务170从第三方检测到某些事件时，其使用相应的通知系统和处理程序1725和1730将有效载荷推送到本地服务，处理程序1725和1730可运行而不论应用138是否为活动的。本地服务启动系统通知，用户可对其执行动作以启动应用进入自定义位置。被包括在通知中的是形成应用138启动时访问的深度链接1735的非常小的代码表。应用138使用深度链接处理程序1740在应用内进行搜索以寻找由通知代码指示的特定内容，然后基于通知的类型将结果按优先级顺序进行排序，并且在启动时使用户登陆在应用中的正确位置。
如图18所示，使用案例1800可包括关于在实况事件1805期间的开始、结束或关键事件的通知、由实况运营团队1810传播的全局提醒、梦幻体育提醒1815、由用户生成的或由用户共享的内容1820、微博或其他短消息1825，以及用户状态或存在1830。
图19示出了与通知相关联的应用UI的屏幕捕捉的说明性序列。在附图的左上方，UI 1905在UI的底部显示传入通知1910(该通知同样以经放大的形式在图19中被示出)。与该通知相关联的应用启动，如在附图中心的UI 1915中所示，并且将用户引导到上下文正确的位置，如在附图的右下方的UI 1920中所示。
图20是可用来实现本发明的增强的交互式电视体验的诸如PC、客户端设备或服务器之类的说明性计算机系统2000的简化框图。计算机系统2000包括处理单元2005、系统存储器2011以及将包括系统存储器2014的各种系统组件耦合至处理单元2011的系统总线2005。系统总线2014可以是若干类型的总线结构中的任一种，包括存储器总线或存储器控制器、外围总线和使用各种总线架构中的任一种的局部总线。系统存储器2011包括只读存储器(ROM)2017和随机存取存储器(RAM)2021。基本输入/输出系统(BIOS)2025被存储在ROM2017中，该基本输入/输出系统2025包含了诸如在启动期间帮助在计算机系统2000内的元件之间传输信息的基本例程。计算机系统2000还可包括对内置硬盘(未示出)读写的硬盘驱动器2028、对可移动磁盘2030(例如，软盘)读写的磁盘驱动器1230、以及对诸如CD(压缩盘)、DVD(数字多功能盘)或其他光学介质之类的可移动光盘2043读写的光盘驱动器2038。硬盘驱动器2028、磁盘驱动器2030，以及光盘驱动器2038分别通过硬盘驱动器接口2046、磁盘驱动器接口2049，以及光盘驱动器接口2052连接到系统总线2014。驱动器及其相关联的计算机可读存储介质为计算机系统2000提供了对计算机可读指令、数据结构、程序模块，以及其他数据的非易失性存储。虽然该说明性示例示出了硬盘、可移动磁盘2033以及可移动光盘2043，但是可储存可被计算机访问的数据的其他类型的计算机可读存储介质(诸如磁带盒、闪存卡、数字视频盘、数据磁带、随机存取存储器(RAM)、只读存储器(ROM)等)也可在本发明的增强的交互式电视体验的一些应用中被使用。此外，如本文所使用的，术语计算机可读存储介质包括介质类型的一个或多个实例(例如，一个或多个磁盘、一个或多个CD等)。出于本说明书和权利要求书的目的，短语“计算机可读存储介质”及其变型不包括波、信号和/或其他瞬态和/或无形通信介质。
若干个程序模块可被储存在硬盘、磁盘2033、光盘2043、ROM 2017，或者RAM 2021上，包括操作系统2055、一个或多个应用程序2057、其他程序模块2060，以及程序数据2063。用户可通过诸如键盘2066和定点设备2068(诸如鼠标)之类的输入设备向计算机系统2000中输入命令和信息。其他输入设备(未示出)可包括麦克风、操纵杆、游戏手柄、圆盘式卫星天线、扫描仪、跟踪球、触摸垫、触摸屏、触敏模块或设备、手势识别模块或设备、语音识别模块或设备、语音命令模块或设备等。这些和其他输入设备通常由被耦合至系统总线2014的串行端口接口2071被连接到处理单元2005，但也可通过其他接口，诸如并行端口、游戏端口或USB连接。监视器2073或其他类型的显示设备也可经由诸如视频适配器2075之类的接口被连接到系统总线2014。除监视器2073以外，个人计算机通常包括诸如扬声器和打印机之类的其他外围输出设备(未示出)。图20中示出的说明性示例还包括主机适配器2078、小型计算机系统接口(SCSI)总线2083以及被连接到SCSI总线2083的外部存储设备2076。
计算机系统2000在使用到诸如远程计算机2088之类的一个或多个远程计算机的逻辑连接的联网环境中可操作。远程计算机2088可被选择为另一台个人计算机、服务器、路由器、网络PC、对等设备或其他公共网络节点，并且通常包括以上关于计算机系统2000所描述的许多或所有元件，尽管在图20中仅示出单个代表性远程存储器/存储设备2090。图20中所描绘的逻辑连接包括局域网(LAN)2093和广域网(WAN)2095。此类联网环境通常被部署在例如办公室、企业范围的计算机网络、内联网和互联网中。
当在LAN联网环境中使用时，计算机系统2000通过网络接口或适配器2096被连接到局域网2093。当在WAN联网环境中使用时，计算机系统2000通常包括宽带调制解调器2098、网络网关或用于通过诸如互联网之类的广域网2095建立通信的其他装置。内置或者外置的宽带调制解调器2098经由串行端口接口2071被连接到系统总线2014。在联网环境中，与计算机系统2000相关的程序模块或其部分可被储存在远程存储器存储设备2090中。注意到，图20中示出的网络连接是说明性的，并且取决于本发明的增强的交互式电视体验的应用的具体要求，用于建立计算机之间的通信链路的其他手段可被使用。允许除媒体控制台114以外的其他类型的计算平台在一些应用中实现本发明的增强的交互式电视体验可能是合乎需要和/或有利的。
图21示出了能够执行本文所描述的用于提供本发明的增强的交互式电视体验的各种组件的设备的说明性架构2100。因此，由图21例示出的架构2100示出如下架构：该架构可被适配成用于服务器计算机、移动电话、PDA、智能电话、台式计算机、上网本计算机、平板计算机、GPS设备、游戏控制台和/或膝上型计算机。架构2100可被用来执行本文所呈现的组件的任何方面。
图21中所示的架构2100包括CPU(中央处理单元)2102、包括RAM 2106和ROM 2108的系统存储器2104，以及将存储器2104耦合至CPU 2102的系统总线2110。基本输入/输出系统被储存在ROM 2108中，该系统包含帮助诸如在启动期间在架构2100中的元件之间传递信息的基本例程。架构2100还包括用于储存被用来实现应用、文件系统和操作系统的软件代码或其他被计算机执行的代码的大容量存储设备2112。
大容量存储设备2112通过被连接到总线2110的大容量存储控制器(未示出)被连接到CPU 2102。大容量存储设备2112及其相关联的计算机可读存储介质为架构2100提供非易失性存储。
虽然本文所包含的对计算机可读存储介质的描述是指诸如硬盘或CD-ROM驱动之类的大容量存储设备，但本领域的技术人员可以理解，计算机可读存储介质可以是可由架构2100访问的任何可用的存储介质。
作为示例而非限制，计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如，计算机可读存储介质包括，但不限于，RAM、ROM、EPROM(可擦除可编程只读存储器)、EEPROM(电可擦除可编程只读存储器)、闪存或其他固态存储器技术，CD-ROM、DVD、HD-DVD(高清晰度DVD)、蓝光或其他光学存储，磁带盒、磁带、磁盘存储或其他磁存储设备，或可以用来存储所需信息并可由架构2100访问的任何其他介质。
根据各实施例，架构2100可以使用通过网络至远程计算机的逻辑连接在联网环境中操作。架构2100可以通过连接至总线2116的网络接口单元2110来连接到网络。可以理解，网络接口单元2116还可被用来连接到其他类型的网络和远程计算机系统。架构2100还可以包括用于接收和处理来自数个其他设备的输入的输入/输出控制器2118，这些设备包括键盘、鼠标或者电子指示笔(未在图21中示出)。类似地，输入/输出控制器2118可向显示屏、打印机，或者其他类型的输出设备(在图21中也未示出)提供输出。
可以理解，本文所描述的软件组件在被加载到CPU 2102中并被执行时可以将CPU2102和总体架构2100从通用计算系统变换成为方便本文所提出的功能而定制的专用计算系统。CPU 2102可以用任意数量的晶体管或其他分立的电路元件(它们可以分别地或共同地呈现任意数量的状态)来构建。更具体而言，CPU 2102可响应于被包含在本文所公开的软件模块中的可执行指令而作为有限状态机来操作。这些计算机可执行指令可以通过指定CPU 2102如何在各状态之间转换来变换CPU 2102，由此变换了构成CPU 2102的晶体管或其他分立硬件元件。
对本文所提出的软件模块的编码也可变换本文所提出的计算机可读存储介质的物理结构。在本说明书的不同实现中，物理结构的具体变换可取决于各种因素。这样的因素的示例可以包括，但不限于：被用来实现计算机可读存储介质的技术、计算机可读存储介质被表征为主存储器还是辅存储器等等。例如，如果计算机可读存储介质被实现为基于半导体的存储器，则本文所公开的软件可以通过变换半导体存储器的物理状态而在计算机可读存储介质上编码。例如，软件可以变换构成半导体存储器的晶体管、电容器或其他分立电路元件的状态。软件还可变换这些组件的物理状态以在其上存储数据。
作为另一示例，本文所公开的计算机可读存储介质可以使用磁或光技术来实现。在这些实现中，本文所提出的软件可以在磁或光介质中编码了软件时变换所述磁或光介质的物理状态。这些变换可以包括改变给定磁性介质内的特定位置的磁性。这些变换还可以包括改变给定光学介质内的特定位置的物理特征或特性来改变这些位置的光学特性。在没有偏离本说明书的范围和精神的情况下，物理介质的其他变换也是可以的，前面提供的示例只是为了便于此讨论。
鉴于以上内容，可以理解，在架构2100中发生许多类型的物理变换以便储存并执行本文所提出的软件组件。还可以理解，架构2100可包括其它类型的计算设备，包括手持计算机、嵌入式计算机系统、智能手机、PDA，以及本领域技术人员已知的其它类型的计算设备。还构想了架构2100可不包括图21中所示的所有组件，可包括未在图21中明确示出的其他组件，或者可利用与图21中所示的架构完全不同的架构。
图22示出了相机系统128和多媒体控制台114的说明性功能组件，其可被用作目标识别、分析和跟踪系统的一部分以识别被相机系统监视的物理空间的捕捉区域中的人类和非人类目标而无需使用被附接到这些主体的专门感测设备，唯一地标识人类和非人类目标，以及在三维空间中跟踪人类和非人类目标。相机系统128可被配置成经由任何合适的技术(包括例如飞行时间、结构化光、立体图像等)来捕捉具有深度信息的视频，包括可包括深度值的深度图像。在一些实施例中，相机系统128可将所计算的深度信息组织为“Z层”，即可垂直于从深度相机沿其视线延伸的Z轴的层。
如图22所示，相机系统128包括图像捕捉组件2205。图像捕捉组件2205可被配置成作为可捕捉场景的深度图像的深度相机来操作。深度图像可包括所捕获的场景的二维(2D)像素区域，其中2D像素区域中的每个像素都可以表示深度值，诸如所捕获的场景中的对象距相机的距离，例如以厘米、毫米等为单位。在此例中，图像捕捉组件2205包括可被配置在阵列中(如显示的)或被配置在替换几何形状中的IR光组件2210、IR相机2215和可见光RGB相机2220。
可利用各种技术来捕捉深度视频帧。例如，在飞行时间分析中，相机系统128的IR光组件2210可以将红外光发射到捕捉区域上，并且然后用例如IR相机2215和/或RGB相机2220来检测从捕捉区域中的一个或多个目标和对象的表面反向散射的光。在某些实施例中，可以使用脉冲式红外光从而可以测量出射光脉冲和相应的入射光脉冲之间的时间差并将其用于确定从相机系统128到捕捉区域中的目标或对象上的特定位置的物理距离。此外，可将出射光波的相位与入射光波的相位进行比较来确定相移。然后可以使用该相移来确定从相机系统到目标或对象上的特定位置的物理距离。可使用飞行时间分析，通过经由包括例如快门式光脉冲成像的各种技术来分析反射光束随时间的强度以间接地确定从相机设备128到目标或对象上的特定位置的物理距离。
在其他实现中，相机系统128可使用结构化光来捕捉深度信息。在这样的分析中，图案化光(即，被显示为诸如网格图案或条纹图案等已知图案的光)可经由例如IR光组件2210被投射到捕捉区域上。在撞击到捕捉区域中的一个或多个目标或对象的表面时，作为响应，图案可变形。图案的这样的变形可由例如IR相机2215和/或RGB相机2220来捕捉，然后可被分析来确定从相机系统到目标或对象上的特定位置的物理距离。
相机系统128可利用两个或更多物理上分开的相机，这些相机可从不同角度查看场景以获得视觉立体数据，该视觉立体数据可被解析以生成深度信息。使用单个或多个相机的其他类型的深度图像布置也可用来创建深度图像。相机系统128还可包括麦克风2225。麦克风2225可包括可接收声音并将其转换成电信号的换能器或传感器。麦克风2225可以被用来减少目标识别、分析及跟踪系统2200中的相机系统128与多媒体控制台114之间的反馈。附加地，麦克风2225可用来接收也可由用户112提供的音频信号，以控制可由多媒体控制台114执行的诸如游戏应用、非游戏应用等应用。
相机系统128还可包括可以通过总线2240与图像捕捉组件2205可操作地通信的处理器2230。处理器2230可包括可执行指令的标准处理器、专用处理器、微处理器等，这些指令可包括用于储存简档的指令、用于接收深度图像的指令、用于确定合适的目标是否被包括在深度图像中的指令、用于将合适的目标转换成该目标的骨架表示或模型的指令，或任何其他合适的指令。相机系统128还可以包括存储器组件2245，该存储器组件2245可储存可以由处理器2230执行的指令、由相机捕获的图像或图像的帧、用户简档或任何其他合适的信息、图像等。根据一个示例，存储器组件2245可包括RAM、ROM、高速缓存、闪存、硬盘或任何其他合适的存储组件。如图22所示，存储器组件2245可以是与图像捕捉组件2205和处理器2230进行通信的单独组件。替代地，存储器组件2245可被集成到处理器2230和/或图像捕捉组件2205中。在一个实施例中，相机系统128的一些或所有组件位于单个外壳中。
相机系统128通过通信链路2250可操作地与多媒体控制台114进行通信。通信链路2250可以是包括例如USB(通用串行总线)连接、火线连接(Firewireconnection)、以太网电缆连接等的有线连接和/或诸如无线IEEE 802.11连接之类的无线连接。多媒体控制台114可以经由通信链路2250向相机系统128提供时钟，该时钟可被用来确定何时捕捉例如场景。相机系统128可经由通信链路2250来向多媒体控制台114提供由例如IR相机2215和/或RGB相机2220捕获的深度信息和图像，包括可由相机系统128生成的骨架模型和/或面部跟踪模型。多媒体控制台114然后可使用骨架和/或面部跟踪模型、深度信息和所捕捉的图像来例如创建虚拟屏幕、适配用户界面、以及控制应用/游戏2255。应用/游戏2255可包括用户体验122(图1)。
运动跟踪引擎2260使用骨架和/或面部跟踪模型以及深度信息来向在相机系统128所耦合至的多媒体控制台114上运行的一个或多个应用/游戏2255提供控制输出。姿势识别引擎2265、深度图像处理引擎2270和/或操作系统2275也可使用该信息。
深度图像处理引擎2270使用深度图像来跟踪诸如用户和其他对象等对象的运动。深度图像处理引擎2270通常会将检测到的每个对象的标识以及每帧的对象的位置报告给操作系统2275。操作系统2275可使用该信息来更新例如化身或显示器136上示出的其他图像的位置或移动，或者对用户界面执行动作。
姿势识别引擎2265可利用可包括姿势过滤器集合的姿势库(未示出)，每个姿势过滤器都包含关于例如可由骨架模型(在用户移动时)执行的姿势的信息。姿势识别引擎2265可将由相机系统114所捕获的帧(其形式为骨架模型以及与其相关联的移动)与姿势库中的姿势过滤器进行比较来标识用户(其由骨架模型来表示)何时执行了一个或多个姿势。这些姿势可与应用的各个控制相关联并引导系统打开如以上描述的经个性化的主屏幕。这样，多媒体控制台114可采用姿势库来解释骨架模型的移动并基于该移动来控制在多媒体控制台上运行的操作系统或应用。
在一些实现中，由应用/游戏2255、运动跟踪引擎2260、姿势识别引擎2265、深度图像处理引擎2270和/或操作系统2275所提供的功能的各种方面可直接在相机系统128本身上实现。
图23是多媒体控制台114的说明性功能框图。多媒体控制台114包括具有1级高速缓存2302、2级高速缓存2304和闪存ROM(只读存储器)2306的中央处理单元(CPU)2301。1级高速缓存2302和2级高速缓存2304临时地储存数据，并且因此减少存储器访问周期的数量，由此改进处理速度和吞吐量。CPU 2301可被配置成具有一个以上的核，并且由此具有附加的1级高速缓存2302和2级高速缓存2304。闪存ROM 2306可储存在多媒体控制台114通电时引导过程的初始阶段期间被加载的可执行代码。
图形处理单元(GPU)2308和视频编码器/视频编解码器(编码器/解码器)2314形成用于高速和高分辨率图形处理的视频处理流水线。经由总线从GPU2308向视频编码器/视频编解码器2314运送数据。视频处理流水线向A/V(音频/视频)端口2340输出数据，用于传输至电视机或其他显示器。存储器控制器2310被连接到GPU 2308，以便于处理器对各种类型的存储器2312(诸如，但不限于RAM)的访问。
多媒体控制台114包括优选地在模块2318上实现的I/O控制器2320、系统管理控制器2322、音频处理单元2323、网络接口控制器2324、第一USB(通用串行总线)主控制器2326、第二USB控制器2328和前面板I/O子部件2330。USB控制器2326和2328用作外围控制器2342(1)和2342(2)、无线适配器2348、以及外置存储器设备2346(例如，闪存、外置CD/DVD ROM驱动器、可移动介质等)的主机。网络接口控制器2324和/或无线适配器2348提供对网络(例如，互联网、家庭网络等)的访问，并且可以是包括以太网卡、调制解调器、蓝牙模块、电缆调制解调器等的各种不同的有线或无线适配器组件中的任何一种。
系统存储器2343被提供来存储在引导过程期间被加载的应用数据。媒体驱动器2344被提供并且可包括DVD/CD驱动器、硬盘驱动器、或其他可移动媒体驱动器等。媒体驱动器2344对多媒体控制台114而言可以是内置的或外置的。应用数据可经由媒体驱动器2344来访问，以供多媒体控制台114执行、回放等。媒体驱动器2344经由诸如串行ATA总线或其他高速连接(例如IEEE1394)之类的总线被连接到I/O控制器2320。
系统管理控制器2322提供与确保多媒体控制台114的可用性相关的各种服务功能。音频处理单元2323和音频编解码器2332形成具有高保真度和立体声处理的相应音频处理流水线。音频数据经由通信链路在音频处理单元2323与音频编解码器2332之间传输。音频处理流水线将数据输出到A/V端口2340，以供外置音频播放器或具有音频能力的设备再现。
前面板I/O子部件2330支持被展示在多媒体控制台114的外表面上的电源按钮2350和弹出按钮2352、以及任何LED(发光二极管)或其他指示器的功能。系统供电模块2336向多媒体控制台114的组件供电。风扇2338冷却多媒体控制台114内的电路。
多媒体控制台114内的CPU 2301、GPU 2308、存储器控制器2310，以及各种其他组件经由一条或多条总线互连，总线包括串行和并行总线、存储器总线、外围总线、以及使用各种总线架构中的任一种的处理器或局部总线。作为示例，这样的架构可包括外围部件互连(PCI)总线、PCI-Express总线等。
当多媒体控制台114通电时，应用数据可从系统存储器2343被加载到存储器2312和/或高速缓存2302和2304中，并且可在CPU 2301上被执行。应用可在导航到多媒体控制台114上可用的不同媒体类型时呈现提供一致用户体验的图形用户界面。在操作中，媒体驱动器2344中所包含的应用和/或其他媒体可从媒体驱动器2344启动或播放，以将附加功能提供给多媒体控制台114。
多媒体控制台114可通过简单地将该系统连接到电视机或其他显示器而作为独立系统来操作。在该独立模式中，多媒体控制台114允许一个或多个用户与该系统交互、看电影，或听音乐。然而，随着宽带连接的集成通过网络接口控制器2324而成为可能，多媒体控制台114可进一步作为更大网络社区中的参与者来操作。
当多媒体控制台114通电时，可以保留设定量的硬件资源以供多媒体控制台操作系统作系统使用。这些资源可包括存储器的保留量(诸如，16MB)、CPU和GPU周期的保留量(诸如，5％)、网络带宽的保留量(诸如，8kbs)，等等。因为这些资源是在系统引导时间被保留的，所以被保留的资源对于应用的视角而言是不存在的。
具体地，存储器保留量优选地足够大，以包含启动内核、并发系统应用和驱动器。CPU保留量优选地为恒定，以使得若所保留的CPU用量不被系统应用使用，则空闲线程将消耗任何未使用的周期。
对于GPU保留量，由系统应用生成的轻量消息(例如，弹出窗口)被显示，所述显示通过使用GPU中断来调度代码以将弹出窗口呈现为覆盖图。覆盖图所需要的存储器量取决于覆盖区域大小，并且覆盖图优选地与屏幕分辨率成比例缩放。在并发系统应用使用完整用户界面的情况下，优选使用独立于应用分辨率的分辨率。缩放器可被用来设置该分辨率，使得对改变频率并导致TV重新同步的需求被消除。
在多媒体控制台114引导并且系统资源被保留之后，执行并发系统应用来提供系统功能。系统功能被封装在上述所保留的系统资源内执行的一组系统应用中。操作系统内核标识出作为系统应用线程而非游戏应用线程的线程。系统应用优选地被调度为在预定时间并以预定时间间隔在CPU 2301上运行，以便提供对应用而言一致的系统资源视图。调度是为了使针对在控制台上运行的游戏应用的高速缓存中断最小化。
当并发系统应用需要音频时，由于时间敏感性而将音频处理异步地调度给游戏应用。多媒体控制台应用管理器(如下所述)在系统应用活动时控制游戏应用的音频水平(例如，静音、衰减)。
输入设备(例如，控制器2342(1)和2342(2))由游戏应用和系统应用共享。输入设备不是保留的资源，而是要在系统应用和游戏应用之间被切换以使其各自将具有设备的焦点。应用管理器优选地控制输入流的切换，而无需知道游戏应用的知识，并且驱动器维护关于焦点切换的状态信息。
现在通过说明的方式而非作为所有实施例的穷尽性列表来呈现本发明的增强的交互式电视体验的各种示例性实施例。一个示例包括一种用于提供具有实时更新的动态节目指南的方法，包括：为用户标识新内容；标记新内容以使得用户能够通过用户界面(UI)消费新内容；基于用户认证级别来标识实况内容；标记实况内容以使得用户能够通过UI消费实况内容；将内容区域分类成在UI上被显示的频道；展示被配置成用于使得用户能够在选择聚焦状态之前以预览状态浏览内容的内容栏；以及在促成由用户浏览的实况块内预览摘要状态下的实况内容。
在另一示例中，该方法还包括基于用户授权针对多个服务和偏好来动态地组织内容。在另一示例中，该方法还包括仅将实况视频内容递送至经第三方服务认证的用户，并且对其他用户隐藏该认证。在另一示例中，该方法还包括在概念上与该实况视频馈送对准的事件馈送内动态地创建实况视频播放器。在另一示例中，该方法还包括在事件馈送内递送数据和视频卡以创建促成用户对线性报道(linear story)的更彻底的理解的时间线。在另一示例中，该方法还包括在驻留在UI框架内的主角位置(hero position)上提供视频馈送的持久递送，以由此创建始终开启的视频网络。
进一步的示例包括一种用于针对部分注意力提供具有实时更新的TV伴随应用的系统，包括：包括图形处理单元(GPU)的一个或多个处理器；以及储存计算机可读指令的存储器设备，该计算机可读指令在由一个或多个处理器执行时执行一种方法，该方法包括以下步骤：当用户处于部分注意状态时确定哪个内容对用户而言最相关和紧急，接收来自用户的用户界面尺寸，基于来自用户的尺寸输入来修改用户界面以适合不同的占用面积(footprint)，该修改包括当处于伴随模式时操作GPU以用于在主要内容区域与次要内容区域之间分割用户界面，在伴随模式的供应个性化用户数据的顶层提供摘要数据，以及调整在伴随应用中示出的摘要数据的循环的时机和节奏以服务部分注意状态。
在另一示例中，该系统还包括支持导航模型，该导航模型使得用户能够停留在用重要数据来实时填充和更新的详细内容馈送中。在另一示例中，该系统还包括实现程序化系统，该程序化系统将来自第三方的信息对照用户偏好和倾向处理成进入馈送的UI元素。在另一示例中，该系统还包括当用户处于部分注意状态时应用支持新内容的引入的动画、视觉效果和特殊效果。在另一示例中，该系统还包括以卡的形式示出内容。在另一示例中，卡包括按主题、流派、题材或类型来组织的数据、对象、图形或信息中的至少一者。
另一示例包括储存用于实现系统通知的计算机可执行指令的一个或多个计算机可读存储器，包括：标识来自TV内容提供商的关键事件触发器并且将该关键事件触发器布置成用户体验；当事件实时发生时对该事件进行编目，该编目包括从外部数据源或通过使用人为引导的服务(human-directed service)进行聚集；标识需要通知的用户；将经标识的用户的兴趣水平与经编目的事件相交；以及在用户界面(UI)上显示提醒，而不管用户当前所参与的活动。
在另一示例中，一个或多个计算机可读存储器还包括使得能够对提醒采取动作以启动应用。在另一示例中，一个或多个计算机可读存储器还包括使得能够将用户引导到与提醒相关的一则具体内容上。在另一示例中，一个或多个计算机可读存储器还包括使得用户能够选择进入和退出特定的提醒类型。在另一示例中，一个或多个计算机可读存储器还包括基于先前用户决定来智能地对提醒进行布置。在另一示例中，一个或多个计算机可读存储器还包括在通知内包括一个或多个深度链接。在另一示例中，深度链接是针对因用户而异的应用内容的。在另一示例中，一个或多个计算机可读存储器还包括基于通知来定位内容并且基于通知类型将该内容按优先级顺序进行排序。
尽管用结构特征和/或方法动作专用的语言描述了本主题，但可以理解，所附权利要求书中定义的主题不必限于上述具体特征或动作。更确切而言，上述具体特征和动作是作为实现权利要求的示例形式公开的。

Claims (11)

1.一种用于针对部分注意力提供具有实时更新的TV伴随应用的系统，包括：
包括图形处理单元(GPU)的一个或多个处理器；以及
储存计算机可读指令的存储器设备，所述计算机可读指令当由所述一个或多个处理器执行时，执行一种包括以下步骤的方法：
在用户界面的主要内容区域内运行应用；
在运行所述应用的同时，接收与应用事件相关联的通知，所述通知提供用于导航至对应于所述应用事件的目标应用的位置的深度链接；
使用关联于所述目标应用的深度链接处理程序，定位在所述深度链接中标识的内容；
基于所述通知将所述内容排定优先级顺序；以及
在经排定的优先级顺序内在正确位置引导所述目标应用。
2.如权利要求1所述的系统，其特征在于，还包括支持导航模型，所述导航模型使得所述用户能够停留在用重要数据来实时填充和更新的详细内容馈送中。
3.如权利要求1所述的系统，其特征在于，还包括实现程序化系统，所述程序化系统将来自第三方的信息对照用户偏好和倾向处理成进入馈送的UI元素。
4.如权利要求1所述的系统，其特征在于，还包括当所述用户处于部分注意状态时应用支持新内容到次要内容区域的引入的动画、视觉效果和特殊效果。
5.如权利要求1所述的系统，其特征在于，还包括以卡的形式在次要内容区域中示出内容。
6.如权利要求5所述的系统，其特征在于，其中所述卡包括按主题、流派、题材或类型来组织的数据、对象、图形或信息中的至少一者。
7.一种储存计算机可执行指令的计算机可读存储介质，所述计算机可执行指令在被处理器执行时实现系统通知，包括：
标识来自TV内容提供商的关键事件触发器并且将所述关键事件触发器布置成用户体验；
当事件实时发生时对所述事件进行编目，所述编目包括从外部数据源或通过使用人为引导的服务进行聚集；
标识需要通知的用户；
将所标识的用户的兴趣水平与所编目的事件相交；
在用户界面(UI)上显示所述事件的提醒，而不管用户当前所参与的活动；
基于所述提醒来定位内容；
基于提醒类型来将所述内容排定优先级顺序；
允许对所述提醒采取动作以启动应用；以及
在经排序的优先级顺序内在正确位置引导所述应用。
8.如权利要求7所述的计算机可读存储介质，其特征在于，还包括使得所述用户能够选择进入和退出特定的提醒类型。
9.如权利要求7所述的计算机可读存储介质，其特征在于，还包括基于先前用户决定来智能地对提醒进行布置。
10.如权利要求7所述的计算机可读存储介质，其特征在于，还包括在所述提醒内包括一个或多个深度链接。
11.如权利要求10所述的计算机可读存储介质，其特征在于，其中所述深度链接是针对因用户而异的应用内容的。
CN201580046745.4A 2014-08-28 2015-08-25 增强的交互式电视体验 Active CN107079186B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201462043311P 2014-08-28 2014-08-28
US62/043,311 2014-08-28
US14/563,294 US10142697B2 (en) 2014-08-28 2014-12-08 Enhanced interactive television experiences
US14/563,294 2014-12-08
PCT/US2015/046619 WO2016032983A1 (en) 2014-08-28 2015-08-25 Enhanced interactive television experiences

Publications (2)

Publication Number Publication Date
CN107079186A CN107079186A (zh) 2017-08-18
CN107079186B true CN107079186B (zh) 2020-07-07

Family

ID=54140642

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580046745.4A Active CN107079186B (zh) 2014-08-28 2015-08-25 增强的交互式电视体验

Country Status (5)

Country Link
US (1) US10142697B2 (zh)
EP (1) EP3186970B1 (zh)
KR (1) KR102331290B1 (zh)
CN (1) CN107079186B (zh)
WO (1) WO2016032983A1 (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
USD764524S1 (en) * 2014-08-28 2016-08-23 Microsoft Corporation Display screen with graphical user interface
US10857464B2 (en) 2016-06-29 2020-12-08 Razer (Asia-Pacific) Pte. Ltd. Communication devices and methods for use with gaming devices to assist in gameplay
US10075740B2 (en) * 2016-11-22 2018-09-11 Facebook, Inc. Providing enhanced live video
US10762675B2 (en) * 2016-12-12 2020-09-01 Facebook, Inc. Systems and methods for interactive broadcasting
US10814230B2 (en) 2017-10-12 2020-10-27 Microsoft Technology Licensing, Llc Interactive event broadcasting
CN108737897B (zh) * 2018-05-22 2020-11-10 腾讯科技（深圳）有限公司 视频播放方法、装置、设备及存储介质
US11443008B2 (en) * 2018-06-11 2022-09-13 International Business Machines Corporation Advanced web page content management
US11489956B2 (en) * 2018-11-30 2022-11-01 Dish Network L.L.C. Systems and methods for notification forwarding
KR102569032B1 (ko) 2019-01-22 2023-08-23 삼성전자주식회사 전자 장치 및 그의 컨텐트 제공 방법
US11043114B2 (en) * 2019-02-14 2021-06-22 Sony Group Corporation Network configurable remote control button for direct application launch
US20220217442A1 (en) * 2021-01-06 2022-07-07 Lenovo (Singapore) Pte. Ltd. Method and device to generate suggested actions based on passive audio

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101663891A (zh) * 2007-04-19 2010-03-03 微软公司 交互式滚动条
EP2501144A2 (en) * 2011-03-17 2012-09-19 Zeebox Limited Content provision

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020040482A1 (en) * 2000-04-08 2002-04-04 Sextro Gary L. Features for interactive television
US7266832B2 (en) 2001-06-14 2007-09-04 Digeo, Inc. Advertisement swapping using an aggregator for an interactive television system
US8365230B2 (en) 2001-09-19 2013-01-29 Tvworks, Llc Interactive user interface for television applications
US20050262533A1 (en) * 2004-05-19 2005-11-24 Microsoft Corporation User interface having a cycling display of content representations
US8705195B2 (en) 2006-04-12 2014-04-22 Winview, Inc. Synchronized gaming and programming
US20070162850A1 (en) * 2006-01-06 2007-07-12 Darin Adler Sports-related widgets
US7735101B2 (en) 2006-03-28 2010-06-08 Cisco Technology, Inc. System allowing users to embed comments at specific points in time into media presentation
US20090089838A1 (en) 2006-04-07 2009-04-02 Pino Jr Angelo J Template Based System, Device and Method for Providing Interactive Content
US8392847B2 (en) * 2008-05-20 2013-03-05 Hewlett-Packard Development Company, L.P. System and method for providing content on an electronic device
US20100095326A1 (en) 2008-10-15 2010-04-15 Robertson Iii Edward L Program content tagging system
US20120225693A1 (en) * 2010-10-01 2012-09-06 Sanjiv Sirpal Windows position control for phone applications
US9607537B2 (en) * 2010-12-23 2017-03-28 Microsoft Technology Licensing, Llc Display region refresh
US8863185B2 (en) 2011-01-04 2014-10-14 Verizon Patent And Licensing Inc. Social television
US20120324507A1 (en) 2011-06-15 2012-12-20 Michael Ryan Weber Interactive Ticker
US9782680B2 (en) * 2011-12-09 2017-10-10 Futurewei Technologies, Inc. Persistent customized social media environment
US9986273B2 (en) 2012-03-29 2018-05-29 Sony Interactive Entertainment, LLC Extracting media content from social networking services
WO2014004955A1 (en) 2012-06-28 2014-01-03 Azuki Systems, Inc. Method and system for ad insertion in over-the-top live media delivery
BR112015006322B1 (pt) 2012-09-28 2022-02-08 Sony Corporation Aparelho, método e sistema de processamento de informação, e, terminal móvel
US20140325556A1 (en) 2013-04-26 2014-10-30 Microsoft Corporation Alerts and web content over linear tv broadcast
US20150310521A1 (en) * 2014-04-29 2015-10-29 Samsung Electronics Co., Ltd. Electronic system with content mechanism and method of operation thereof
US20150331856A1 (en) * 2014-04-30 2015-11-19 Cie Digital Labs, LLC Time-based content aggregator
US10089053B2 (en) * 2014-08-01 2018-10-02 Volkswagen Ag Mirroring deeplinks
US20160055256A1 (en) * 2014-08-19 2016-02-25 Adlast, Inc. Systems and methods for directing access to products and services
US9965559B2 (en) * 2014-08-21 2018-05-08 Google Llc Providing automatic actions for mobile onscreen content

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101663891A (zh) * 2007-04-19 2010-03-03 微软公司 交互式滚动条
EP2501144A2 (en) * 2011-03-17 2012-09-19 Zeebox Limited Content provision

Also Published As

Publication number Publication date
WO2016032983A1 (en) 2016-03-03
US10142697B2 (en) 2018-11-27
EP3186970B1 (en) 2018-11-28
KR102331290B1 (ko) 2021-11-24
KR20170046172A (ko) 2017-04-28
CN107079186A (zh) 2017-08-18
EP3186970A1 (en) 2017-07-05
US20160066053A1 (en) 2016-03-03

Similar Documents

Publication Publication Date Title
CN107079186B (zh) 增强的交互式电视体验
US9971773B2 (en) Automapping of music tracks to music videos
US20130324247A1 (en) Interactive sports applications
US8296151B2 (en) Compound gesture-speech commands
US20120159327A1 (en) Real-time interaction with entertainment content
US20150128042A1 (en) Multitasking experiences with interactive picture-in-picture
CN107096221B (zh) 用于提供时移智能同步游戏视频的系统和方法
CN109118290B (zh) 方法、系统和计算机可读非暂时性存储介质
US9123316B2 (en) Interactive content creation
US20110306426A1 (en) Activity Participation Based On User Intent
US20150194187A1 (en) Telestrator system
US20130305158A1 (en) Network system with reaction mechanism and method of operation thereof
RU2698158C1 (ru) Цифровая мультимедийная платформа для преобразования видеообъектов в представленные в игровой форме мультимедийные объекты
US20130304820A1 (en) Network system with interaction mechanism and method of operation thereof
KR20160003801A (ko) 커스터마이징가능한 채널 가이드
US10325628B2 (en) Audio-visual project generator
US20110295693A1 (en) Generating Tailored Content Based On Scene Image Detection
US9946438B2 (en) Maximum value displayed content feature
WO2014179595A1 (en) Integrated interactive television entertainment system
US10264320B2 (en) Enabling user interactions with video segments
KR102268052B1 (ko) 디스플레이 장치, 서버 장치 및 그 제어 방법
US20150086183A1 (en) Lineage of user generated content

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant