CN107005741A - 沉浸式缩放交互式电视 - Google Patents

沉浸式缩放交互式电视 Download PDF

Info

Publication number
CN107005741A
CN107005741A CN201580065350.9A CN201580065350A CN107005741A CN 107005741 A CN107005741 A CN 107005741A CN 201580065350 A CN201580065350 A CN 201580065350A CN 107005741 A CN107005741 A CN 107005741A
Authority
CN
China
Prior art keywords
window
display
user
video media
check
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580065350.9A
Other languages
English (en)
Other versions
CN107005741B (zh
Inventor
W·H·冯
C·王
J·A·布莱恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN107005741A publication Critical patent/CN107005741A/zh
Application granted granted Critical
Publication of CN107005741B publication Critical patent/CN107005741B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4221Dedicated function buttons, e.g. for the control of an EPG, subtitles, aspect ratio, picture-in-picture or teletext
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42212Specific keyboard arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438Window management, e.g. event handling following interaction with the user interface
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/482End-user interface for program selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81Monomedia components thereof
    • H04N21/8126Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
    • H04N21/8133Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

视频媒体视口/窗口可基于经由输入设备接收到的顺序导航命令被渐进地缩放和/或重新定位。一种过程可包括在基本上跨越显示器的面积的查看窗口内呈现视频媒体,以及在该视频媒体的回放期间,经由输入设备接收多个顺序用户输入命令,该多个顺序用户输入命令指示采用第一方向的导航命令。响应于接收该顺序用户输入命令,该系统可将该查看窗口渐进地缩放成越来越小尺寸的查看窗口,将这些较小尺寸的查看窗口相对于接收到的导航命令的方向定位在距该显示器的中心某距离处,以及在该较小尺寸的查看窗口外部呈现一个或多个交互式元素。

Description

沉浸式缩放交互式电视
背景
传统视频媒体(例如,广播电视)的显示界面主要依赖于“基于面板的”覆盖技术或画中画(PiP)技术来允许视频媒体的查看者与显示屏上的元素进行交互。例如,查看者可按压遥控上的按钮以使得覆盖面板被呈现在显示屏上,同时视频媒体继续在后台播放。在该场景中,覆盖面板可向查看者呈现电子节目指南(FPG)、电视设置或其他类似的信息。基于PiP的界面将视频媒体放置在通常被定位在显示器的外周附近的小视口中,并且被覆盖或复合在另一视频馈源顶部上或另一类型的用户界面上。在任一场景中,用户界面都是模式的,这意味着查看者可选择处于视频媒体查看模式(其中视频媒体以全屏呈现)或非查看模式(其中视频媒体在后台或PiP视口中呈现)。
概述
本文中描述了用于基于经由输入设备接收的顺序导航命令来渐进地缩放和重新定位视频媒体视口/窗口的技术和系统。视口被缩放到的尺寸和/或视口被放置在显示器上的位置可在从对应于视频媒体的全屏查看的开始点起的方向导航的上下文中。换言之,由按顺序接收的导航命令指示的从开始点(全屏查看)起的移动程度可指示缩放量以及经缩放的视口在显示屏上的具体位置。例如,随着查看用户(经由输入设备)从开始点(全屏查看)起越来越进一步在某方向中导航,视频媒体被呈现在其中的查看窗口或视口可被渐进地缩放为越来越小尺寸的查看窗口,并被定位在距显示器的中心相应距离处。此外,在缩放和重新定位视频媒体视口之际,交互式元素可被呈现在显示器上在经缩放的视频媒体视口外部和周围的面积中。随着视频被渐进地缩放和重新定位,交互式元素可在该视口周围重排。
通过提供在接收到的导航命令的上下文中渐进地缩放和重新定位视频媒体视口的显示界面,体验连续体可被提供给该显示界面的用户,该体验连续体允许用户以沿着该连续体的不同方向直观地进行导航,并定制其查看体验。上下文内容类型的分层结构可通过被呈现在显示界面上的交互式元素按减少对由这些交互式元素呈现的经渲染内容的遮挡的方式来访问。因此,显示元素的布置在屏幕上被优化,同时保持视口不被遮挡。此外,经缩放的媒体视口被定位在显示屏上的方式给予用户一种方向感,使得用户可直观地导航到具体查看体验。由此,该用户可选择如何使其自己沉浸在上下文内容中的各分层组织的级别处,同时经由经缩放的查看窗口将视频媒体保持“在框架中”(即,视频媒体保持在显示器的框架或面积内)。此外,显示界面通过以下方式来尊重用户的期望查看体验:在可推断出用户主要对观看视频媒体感兴趣时的情况下提供较大的视频媒体视口,并在可推断出用户主要对浏览上下文内容感兴趣时的情况下提供较小的视频媒体视口。
此外,本文中描述的技术和系统提供最优的用户交互性能和系统效率。用户交互性能可通过以上描述的给予用户沿着查看体验连续体的方向感的直观导航界面来优化。该直观的导航界面用于减少用户选择/导航错误率等,从而使得用户交互性能对用户更高效。例如,通过提供开始点位置(全屏查看)的概念以及用户可穿过以接收不同的预定查看体验的导航方向,用户较不可能错误地导航到不期望的体验,由此降低向系统提供附加输入的需要。通过这种方式,显示界面可被明确地定制和优化以提供最优用户交互性能。此外,通过沿着该查看体验连续体对预定分层级别的实现,本文中公开的系统和技术可利用系统硬件和软件来改进系统效率。例如,在一些实例中,显示界面修改可用系统硬件中来具体化,以允许快速的计算性能。附加地或替换地,高效编程语言(例如,基于注册表的操作、查找表等)可被利用来实现对显示界面的某些修改,其中预定配置可被提前预测。
提供本概述是为了以简化的形式介绍将在以下详细描述中进一步描述的一些概念。本概述并不旨在标识所要求保护主题的关键特征或必要特征,也不旨在用于限制所要求保护主题的范围。
附图简述
结合附图来描述具体实施方式。在附图中,附图标记最左边的数字标识该附图标记首次出现的附图。在不同的附图中使用相同的附图标记指示类似或相同的项。
图1是包括被配置成提供沉浸式缩放显示界面的示例计算设备的示例架构的示意图。
图2是包括图1的示例计算设备和被配置成通过网络向该计算设备传送数据或从该计算设备接收数据的其他计算设备的示例架构的示意图。
图3是示出促成通过视频媒体查看体验连续体的用户导航的沉浸式缩放显示界面的各输出的示意图。
图4示出“现在播放”查看体验的示例显示输出。
图5示出“现在播放”查看体验的另一示例显示输出。
图6示出“现在播放”查看体验的另一示例显示输出。
图7示出其中显示界面包括经缩放和重新定位的视频媒体视口的“社交”查看体验的示例显示输出。
图8示出“代理”查看体验的示例显示输出。
图9示出其中显示界面包括经缩放和重新定位的视频媒体视口的“伙伴”查看体验的示例显示输出。
图10示出具有允许用户沿着查看体验连续体跳到特定查看体验的导航界面的示例显示输出。
图11示出其中显示界面包括经缩放和重新定位的视频媒体视口的“最喜欢项”查看体验的示例显示输出。
图12示出“我的节目”查看体验的示例显示输出。
图13示出其中显示界面包括经缩放和重新定位的视频媒体视口的“朋友”查看体验的示例显示输出。
图14是基于经由输入设备接收的顺序导航命令来渐进地缩放和重新定位视频媒体视口/窗口的示例过程的流程图。
详细描述
本公开的实施例涉及用于基于经由输入设备接收的顺序导航命令来渐进地缩放和重新定位视频媒体视口/窗口的技术和系统等。出于说明的目的,在本文中,视频媒体通常被描述为广播电视。然而,将领会,本文中公开的技术和系统可利用任何合适类型的视频媒体。本文中构想的视频媒体的非穷尽列表包括流式视频、经下载的视频、数字多功能盘(DVD)视频、蓝光视频、录制视频(例如,数字录像机(DVR)视频)等等。由此,本文中描述的技术和系统不限于查看广播电视。附加地,视频媒体可提供任何类型的内容,诸如电影、电视节目、游戏、软件程序等。
示例架构
图1是包括计算设备102(有时被称为“客户端计算设备102”或“客户端设备102”)的示例架构100的示意图。计算设备102可被配置成提供响应于按顺序接收地导航命令来渐进地缩放和重新定位查看窗口106(或“视频媒体视口106”)的显示界面104,并且还被配置成在查看窗口106外部呈现一个或多个交互式元素108(1)、108(2)、…、108(N)(统称为108)。架构100仅是一个示例,并且本文中描述的技术不限于使用图1的架构100的执行。
计算设备102可被实现为任何类型的计算设备102,包括但不限于游戏控制台、机顶盒(STB)、智能电视(TV)、个人计算机、膝上型计算机、平板计算机、便携式数字主题(PDA)、移动电话(例如,智能电话)、电子书(e-书)阅读器、便携式游戏播放器、便携式媒体播放器等。图1示出游戏控制台102(1)形式的代表性计算设备102,诸如X-box游戏控制台,可从华盛顿州雷蒙德市的 公司购得。计算设备102的任何合适的示例可包括TV控制台,可从加利福尼亚州库伯提诺市的有限公司购得。
计算设备102可被配置成将视频媒体呈现在计算设备102的显示器110上。呈现的视频媒体可从任何合适的位置或视频内容源处被检索到。例如,由其他计算设备112表示的远程源可提供视频媒体。其他计算设备112可包括但不限于广播电视的服务提供者(例如,有线运营商、卫星运营商等)、流式视频内容或可下载视频内容的服务提供者(例如,等)等等。替换地,视频媒体可从诸如本地数据库114(例如,计算设备102的硬盘驱动器)之类的本地源或从可移动存储116(例如,数字多功能盘(DVD)、蓝光光盘、指状驱动器等)处被检索到。
计算设备102被示为包括一个或多个处理器118和一种或多种形式的计算机可读存储器120。(诸)处理器118可被配置成执行存储在存储器120中的指令、应用或程序。在一些实施例中,(诸)处理器118可包括硬件处理器,该硬件处理器包括但不限于硬件中央处理单元(CPU)、现场可编程门阵列(FPGA)、复杂可编程逻辑器件(CPLD)、专用集成电路(ASIC)、片上系统(SoC)或其组合。
计算设备102还可包括附加数据存储设备,诸如以上介绍的可移动存储116和/或不可移动存储122(例如,一个或多个硬盘驱动器(HDD))。计算机可读介质可包括两种类型的计算机可读介质,即计算机存储介质和通信介质。存储器120、可移动存储116和不可移动存储122都是计算机存储介质的示例。计算机存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其他数据等信息的任何方法或技术来实现的易失性和非易失性、可移动和不可移动介质。计算机存储介质包括但不限于,随机存取存储器(RAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、闪存或其他存储器技术、紧致盘只读存储器(CD-ROM)、DVD或其他光盘存储、盒式磁带、磁带、磁盘存储或其他磁性存储设备、或可用于存储所需信息并可由计算设备102访问的任何其他非瞬态介质。任何这样的计算机存储介质都可以是计算设备102的一部分。一般来说,计算机可读介质可包括在由(诸)处理器118执行时执行本文中描述的各种功能和/或操作的计算机可执行指令。
相反,通信介质在诸如载波的已调制数据信号或其他传输机制中体现计算机可读指令、数据结构、程序模块或其他数据。如本文所定义的,计算机存储介质不包括通信介质。
存储器120可包括操作系统(OS)124,操作系统124可包括一个或多个子组件,诸如用户界面(UI)模块126和OS代理128。UI模块126可被配置成在计算设备102的显示器110上输出显示界面104。OS代理128可被配置成诸如通过提供搜索功能性、促进伴随查看功能性和其他“虚拟辅助”功能来帮助计算设备102的用户,如以下将更详细描述的。
存储器120可进一步包括被配置成从各种源获得内容的内容检索模块130。例如,内容检索模块130可从其他计算设备112检索上下文内容或信息,检索到的内容最终通过显示界面104被呈现为(诸)交互式元素108。作为另一示例,内容检索模块120可从各前述内容源(诸如,其他计算设备112、本地数据存储114、可移动存储116和/或不可移动存储122)检索视频内容。
本地数据存储114可存储各种类型的数据,诸如视频内容(例如,录制的视频、经下载或导入的视频等)、操作计算设备102的用户的用户简档数据等等。因此,用户可能能够(例如,经由凭证、生物测定数据(例如,指纹扫描、面部识别等)等等)登录/登陆相应的用户简档,使得每一用户的身份可被计算设备102确定以为特定用户定制视频媒体查看体验。在该场景中,存储在本地数据存储114中的用户简档可表示各个体和/或用户群组。例如,共享的家庭计算设备102可存储针对用户群组的“家庭”简档。
计算设备102可包括或可连接到用于与计算设备102对接的一个或多个输入设备132。(诸)输入设备132可包括而不限于定点设备(例如,鼠标、操纵杆等)、物理按钮、遥控、(诸)相机、(诸)话筒(例如,用于接收语音命令)、触摸屏显示器和/或任何其他合适的输入设备132。(诸)输入设备132可以是(诸)有线或无线输入设备12。图1示出遥控132(1)(例如,游戏控制器)形式的代表性示例输入设备132。在一些实施例中,遥控132(1)可包括允许用户向计算设备102提供各种类型的用户输入命令的各种按钮和/或手动致动器,包括而不限于一个或多个指拨摇杆134、方向垫136、缓冲按钮138等。
可经由(诸)输入设备132输入的一种类型的输入命令包括导航命令。导航命令指示方向,并且导航命令可经由指拨摇杆134、方向垫136和/或缓冲按钮138中的一者或多者来提供,以向计算设备102提供方向输入(例如,右、左、上、下或其任何中间方向)。在一些实施例中,当计算设备102是移动或手持式设备时,倾斜姿势可由(诸)输入设备132或计算设备102的惯性测量单元(IMU)来启用。例如,陀螺仪、加速度计、磁力计和其任何组件可允许感测(诸)输入设备132或计算设备102本身的定向,该定向可被分析并解释为导航命令。即,用户可将计算设备102向其右方倾斜或移动以指示向右导航命令。
在一些实施例中,(诸)输入设备132可包括三维(3D)相机或深度相机,其被配置成连续地检测用户的具有深度信息的图像数据(即,捕捉视频),使得用户的移动可被计算设备102的板载处理单元解释为用户输入命令(例如,导航命令)。例如,用户可向其右方伸出或划动她的手以指示向右导航命令。(诸)基于相机的输入设备132可使用任何合适的技术来捕获具有深度信息的图像数据(例如,飞行时间(ToF)、结构化光成像、立体成像等)。在一些实施例中,红外(IR)传感器可被使用来发射和/或检测作为ToF成像的工具的IR光。一个合适的可被用于检测用户输入(例如,导航命令)的示例基于相机的输入设备132是与来自华盛顿州雷蒙德市的公司的控制台系统联用的传感器。
计算设备102可进一步包括用于向计算设备102的用户提供输出的一个或多个输出设备140。(诸)输出设备140可包括而不限于显示器110、扬声器、触觉反馈机制、打印机等等。例如,诸如当在显示器110上输出显示界面104时,显示器110可向计算设备102的用户提供视觉输出。显示器10可具有如由显示界面104的宽度w和高度h维度表示的任何尺寸,该显示界面可基本上跨越显示器110的整个面积(w x h)。
计算设备102可进一步包括允许计算设备102诸如通过网络(例如,因特网)与其他计算设备112通信的一个或多个通信连接142。附加地,(诸)通信连接142可允许诸如通过由IEEE 802.11标准定义的频率、短距离无线频率(诸如)的基于WiFi的通信,或允许计算设备102与其他计算设备112对接的任何合适的有线或无线通信协议。
图2是包括图1的示例计算设备102的示例架构200的示意图,该示例计算设备102被配置成通过网络202向其他计算设备传送数据/从其他计算设备接收数据。如上所述,计算设备102可包括而不限于任何类型的计算设备102,诸如具有相关联的显示器的游戏控制台102(1)、笔记本计算机102(2)、平板计算机102(3)或移动电话102(M)。网络202可代表多个不同类型的有线和/或无线网络中的任一者或其组合,诸如有线网络、因特网、局域网、移动电话网络、广域网或这些网络的组合。
计算设备102可被配置成经由网络202接收来自一个或多个有线运营商204的视频媒体,该一个或多个有线运营商204维护用于通过网络202传送视频媒体的装置206(1)、206(2)、…、206(P)(统称为206)。例如,有线运营商204可通过网络202向多个计算设备(诸如计算设备102)广播电视。附加地或替换地,装置206可按需允许计算设备102可访问的流式视频媒体或可下载视频媒体。
计算设备102可被配置成经由网络202检索来自一个或多个内容提供者208的内容,该一个或多个内容提供者208维护用于响应于来自计算设备102的请求而传送内容的一个或多个服务器210(1)、210(2)、…、210(Q)(统称为210)。(诸)内容提供者208可表示各种类型的内容提供者,包括而不限于社交联网站点(例如,等)、视频内容站点(例如,等)、百科信息站点(例如,等)、新闻站点、电子商务(e-商务)站点、媒体文件托管站点(例如,可从华盛顿州雷蒙德市的公司购得的OneDriveTM、可从加利福尼亚州库门洛帕克市的有限公司购得的谷歌DriveTM)等等。在一些实施例中,计算设备102可被配置成利用一个或多个搜索引擎(例如,等)来搜索可从(诸)内容提供者208获得的内容。例如,可从(诸)内容提供者208获得的内容可由计算设备102可访问的搜索引擎来索引,使得计算设备102可基于搜索查询高效地检索来自(诸)内容提供者208的内容(例如,上下文内容)。在一些实施例中,计算设备102可利用应用编程接口(API)来通过编程向搜索引擎发出这样的查询。
在一些实施例中,计算设备102可以是被配置成显示由一个或多个远程计算资源212提供的图形用户界面(GUI)的瘦客户端。该一个或多个远程计算资源212可在用于执行本文中描述的技术和系统的技术中的一些或全部的一个或多个服务器214(1)、214(2)、…、214(R)(统称为214)上被提供。由此,(诸)服务器214可包括参考图1描述的计算设备102的组件中的一些或全部。在该场景中,瘦客户端计算设备102可包括至少一个显示器110和用于通过网络202接收数据的(诸)通信连接142。
示例显示界面功能
图3是示出图1中引入的沉浸式缩放显示界面104的各输出的示意图。如本文中使用的“显示界面”可包括图形用户界面(GUI)。计算设备102的用户可经由(诸)输入设备132与显示界面104交互。通过与显示界面104进行交互,用户可导航通过对用户可用的视频媒体查看体验的连续体300。
在图3所示的示例中,用户可开启计算设备102,并使得计算设备102以“全屏”查看状态302在显示器110上呈现视频媒体。在全屏查看状态302,视频媒体(例如,广播电视)可被呈现在尺寸被设定为基本上跨越显示器110的整个面积(w x h)的查看窗口106内。例如,实况电视可以以全屏查看状态300被呈现在查看窗口106内。全屏查看状态300可对应于被称为“现在播放”查看体验304的“最低参与度”查看体验。“现在播放”查看体验304可定义用户可在其中导航的查看体验连续体300的开始点。
在一些示例中,在计算设备102上电之际,计算设备102可默认前往“现在播放”查看体验304。在其他实施例中,用户可首先调用应用以在显示器110上查看视频媒体,其中默认可启动诸如“现在播放”查看体验304之类的查看体验。这样的应用可以是集成在OS 124中的本机应用,或者该应用可以是下载到计算设备104上的单独的、售后应用,或者该应用可以是被渲染在浏览器内的基于web的应用等等。
响应于经由(诸)输入设备132接收到诸后续用户输入命令(每一后续用户输入命令指示第一导航方向),可在显示器110上输出不同的显示界面(诸如显示界面306、308、310和312)。这些显示界面306-312在接收到的导航命令的上下文中渐进地缩放和重新定位查看窗口106。例如,如果用户按压遥控132(1)的方向垫136的最右部分,则可在显示器110上输出显示界面306。在随后接收到的用户输入命令与第一输入命令采用相同的导航方向(即,向右或正X方向)之际,可在显示器110上输出显示界面308。由此,随着用户继续越来越进一步向右导航,显示界面306和308可被输出,以便渐进地缩小和重新定位查看窗口106,使得经缩小的查看窗口106的中心被定位在距显示器110的中心某距离处。查看窗口106的缩放和重新定位可包括在两个离散位置之间被内插的数据点,以使得该缩放和重新定位对查看者表现为平滑和连续的。在一些实施例中,两个相对位置之间的缩放和重新定位可呈现为较离散的步骤。在一些实例中,从显示器110的中心到经缩小的查看窗口106的中心的方向的一个分量与导航命令的方向相反。例如,当向右导航命令被接收到时,经缩放的查看窗口106的中心可以以从显示器110的中心起的方向被定位,该方向具有至少一个处于向左方向的分量方向。换言之,从显示器110的中心到经缩放的查看窗口106的中心的方向可处于对角线方向(例如,向上并向左的方向),并且因此,该对角线方向可用该对角线方向的两个分量(例如,向上的分量和向左的分量)来表示,这两个分量中的至少一者不同于导航命令的方向。
此外,一个或多个交互式元素108可被呈现在显示界面306和308中的每一者中的查看窗口106的外部。这些交互式元素108可在导航命令的上下文中提供对应于如连续体300所示出的分层布置的内容类型的内容。
在图3所示的说明性示例中,要经由交互式元素108显示的内容可对应于沿着查看体验连续体300的不同查看体验。在沿着连续体300向右的方向中,查看体验可包括而不限于“社交”查看体验314、“代理”查看体验316和“伙伴”查看体验318,这些查看体验中的每一者将在以下参考以下附图更详细地描述。换言之,随着用户越来越进一步向右(即,以正X方向)导航,她可沉浸在例如经由动态改变的显示界面306和308输出在显示器110上的不同的、分层布置的查看体验(例如,查看体验314-318)中。
类似地,如果经由(诸)输入设备132接收到指示向左(即,负X)方向的顺序用户输入命令,则显示界面310和312可响应于该接收到的顺序输入被输出在显示器110上。显示界面310和312像显示界面306和308一样在接收到的导航命令的上下文中渐进地缩放和重新定位查看窗口106,只是这时,查看窗口106可通过以从显示器110的中心起相反的方向移动它来重新定位。由此,随着用户继续越来越进一步向左导航,显示界面310和312可按顺序被输出在显示器110,以便渐进地缩小和重新定位查看窗口106,并在查看窗口106外部呈现一个或多个交互式元素108。这些交互式元素108可在导航命令的上下文中提供对应于在沿着连续体300向左的方向中的各查看体验的内容。图3解说交互式元素108可如何在经缩小的查看窗口106周围被重排,从而允许查看窗口保持可见,而不会遮挡交互式元素108和其中的相关联内容的呈现。
在图3所示的说明性示例中,在向左的方向中的分层布置的查看体验可包括而不限于“最喜欢项”查看体验320、“我的节目”查看体验322和“朋友”查看体验324,这些查看体验中的每一者将在以下参考以下附图更详细地描述。换言之,随着用户越来越进一步向左(即,负X方向)导航,她可沉浸在例如经由动态改变的显示界面310和312输出的不同的、分层布置的查看体验(例如,查看体验320-324)中。预定查看体验的分层布置可被系统利用,以使用高效的算法和/或硬件和软件的组合,这会改善计算性能和系统效率。例如,具有显示界面104的沿着连续体300的预定布局可允许显示界面104在连续体300上的各点之间的修改经由硬件算法或更高效的编程算法(例如,查找表)来实现。
图3所示的示例解说了在导航通过连续体300时,显示界面306-312如何给予用户方向导航的感觉。这种通过连续体300的方向导航的直观感觉通过以下方式在用户交互性能方面提供显著的利益:向用户清楚地指示如何导航连续体300,由此降低或一起消除导致系统对输入命令的不必要的处理的选择/导航错误率。换言之,随着用户越来越进一步在特定方向中导航,查看窗口106相对于显示器110的中心定位的方式充当对用户的视觉提示,该视觉提示告诉用户“如果你想要返回到全屏查看状态302,你可朝向移动查看窗口106移动”。例如,当用户越来越进一步向右导航时,她直观地知道朝向查看窗口106移动(即,向左或负X方向),这可使用(诸)输入设备132通过顺序用户输入命令来实现。
将领会,显示界面306-312可包括无模式界面(例如,无模式GUI),这些无模式界面被实现为被配置成同时地呈现经缩放的查看窗口106和(诸)交互式元素108同时允许与其的用户交互的应用。在此意义上,显示界面306-312经由单个交互式应用体现。例如,当用户与同一应用的(诸)交互式元素108交互时,查看窗口106可被用户临时忽略,并且反之亦然。换言之,用户输入在所有时间对所有呈现的用户界面元素被相同的解释。
连续体300中的示例查看体验仅仅是示例查看体验。此外,图3中示出的示例左和右方向仅仅是可通过该系统的实现来利用的示例方向。例如,采用向上(即,正Y方向)、向下(即,负Y方向)和/或中间方向的导航命令可使得动态改变的显示界面以类似的风格被输出在显示器110上。
图4-6示出图3中引入的“全屏”查看状态302的示例显示输出。如上所示,图4-6中示出的全屏查看状态302可对应于查看体验连续体300中的“现在播放”查看体验304。尤其参考图4,全屏查看状态302中的显示输出包括视频媒体(例如,实况电视新闻广播)。视频媒体可被呈现在显示器110上,使得视频媒体基本上跨越显示器110的整个面积;因此为全屏查看状态302。
如果用户经由(诸)输入设备132提供用户输入,诸如在遥控132(1)上按压按钮(例如,方向垫136的一部分),则图5中示出的显示输出可被渲染在显示器110上。具体地,面板500(有时被称为“现在播放面板500”)可覆盖在视频媒体呈现的顶部。即使面板500占据显示面积的一部分(例如,显示屏的底部的一部分),但是图5的显示输出可仍被看作全屏查看状态302,因为该视频媒体继续基本上跨越显示器110的整个面积(即,面板500仅遮挡视频媒体的底部的一小部分)。将领会,在全屏查看状态302中,其他相对次要的显示元素可覆盖在视频媒体之上或被呈现在视频媒体周围,使得在全屏查看状态302中视频媒体不必跨越显示器110的整个面积。
在一些实施例中,面板500可包括导航栏502,该导航栏502提供沿着连续体300的当前查看体验的视觉指示符504。图5将导航栏502示出在面板500的底部,但导航栏502可被放置在面板500内的任何地方,并以任何合适的方式定向(例如,垂直地定向),而不会改变该系统的基本特性。在一些实施例中,视觉指示符504可包括滑块元素,该滑块元素可响应于从(诸)输入设备132接收到的导航命令而沿着导航栏502移动。
图5示出视觉指示符504在导航栏502的中心处,以向用户指示她当前正处于“现在播放”查看体验304内。还将领会,导航栏502和/或视觉指示符504可提供附加的和/或不同的指示符,诸如沿着连续体300的不同查看体验的文本描述、色彩等。在“现在播放”查看体验304中,用户可经由在面板500的一部分中提供的小型指南506来浏览频道。例如,小型指南506被示出在面板500的最左部分,从而允许用户垂直地滚动通过频道列表,以便以全屏查看状态302浏览和选择特定频道。
图5示出焦点元素508(或光标),该焦点元素508指示可通过(诸)输入设备132选择的突出显示的元素。在图5中,焦点元素508被定位在“网络α”上,其当前在播放晚间新闻节目。当用户在小型指南506中将焦点元素508移动到特定频道时,面板500可更新面板500的具有正在突出显示的频道上播放的节目的简要大纲以及一个或多个交互式元素的一部分510,一个或多个交互式元素为诸如在被选择之际开始录制节目的“录制”元素512,在被选择之际将节目添加到最喜欢项列表的“添加到最喜欢项”元素514,和/或在被选择之际可将用户引导到与节目有关的更多信息(例如,演职表、导演传记等)的“全部细节”元素516。
如果用户将焦点元素508移动到不同的频道(诸如当前正在播放美国足球大联盟节目的“网络β”),并且用户选择了该频道,则视频媒体可呈现那个频道上的节目的实况广播,如图6的显示输出所示出的。图6中示出的显示输出仍被看作全屏查看状态302,在该情况下,该全屏查看状态302仍可呈现面板500达至少一时间段。即,在流逝了一时间段后,面板500可消失,而无需从(诸)输入设备132接收的任何输入。
通过图4-6表示的“现在播放”查看体验304可被认为是尊重用户正在观看视频媒体的事实的最低参与度查看体验。“现在播放”面板500通过以下方式来尊重用户正在观看视频媒体的事实:将“现在播放”面板500在显示器110上渲染为允许用户找出哪些节目在播出、这些节目何时结束、以及有助于用户的“现在播放”查看体验304的其他功能的最小侵入面板500。
从对应于“现在播放”查看体验304的全屏查看状态302起,用户可按沿着连续体300的任何方向导航,以使其自己沉浸在不同的查看体验中。图7解说了其中用户已通过(诸)输入设备132沿着导航栏502提供了指示向右(即,正X)导航命令的输入的示例。图7的显示输出表示参考图3引入的“社交”查看体验314。为了提供“社交”查看体验314,诸如图3的显示界面306之类的显示界面可被输出在显示器110上,如图7所示。显示界面306在显示器110的左上角呈现经缩小的视频媒体视口106。在图7的示例中,查看窗口106被示为包括显示面积的约2/3到约3/4。查看窗口106的该特定尺寸范围尊重用户在浏览被呈现在查看窗口106外部的交互式元素108(1)-(5)的同时可能仍然期望观看视频媒体的事实。事实上,图7的显示输出表示“查看体验”的概念例示用户可宁愿在更持久的基础上以“社交”查看体验314观看视频媒体的事实。与典型的PiP视口(其对于连续地观看其内视频媒体而言太小了)形成对比,查看窗口106的尺寸允许在与交互式元素108的内容进行交互的同时对视频媒体的更持久的查看。连续体300允许用户选择要将自身沉浸在什么查看体验中。在一些实施例中,计算设备102可被配置成记住特定查看体验作为特定用户的“最喜欢项”查看体验,使得在开启计算设备102之际,显示输出可默认前往用户的最喜欢项查看体验。在一些实施例中,计算设备102可记住在用户退出以到全屏(即“现在播放”查看体验304)之前该用户所处的“最新近”查看体验。例如,用户可能查看了“伙伴”查看体验318,随后选择了输入设备132上的“后退”按钮(“B”按钮)以返回到全屏,并随后提供了方向输入(例如,对方向垫136的选择)。响应于该方向输入,显示界面104可返回到最新近查看体验;在该情况下,为“伙伴”查看体验318,而不是遍历通过“现在播放”查看体验304和“伙伴”查看体验318之间的中间查看体验。
图7还解说视觉指示符504可被呈现在导航栏502上向用户指示其当前处于“社交”查看体验314的位置。视觉指示符504沿着导航栏502的移动可采用与从用户接收到的导航命令相同的方向(在该情况下,为向右或正X方向),以在用户沿着连续体300导航时向用户提供方向感。
图7还解说查看窗口106的位置在显示器110的一部分中,该部分采用与接收到的导航命令的方向不同的从显示器110的中心起的方向。例如,查看窗口106的位置不响应于来自用户的向右导航命令而向右移动。相反,查看窗口106的中心可响应于接收到的向右导航命令而被定位在显示器110的中心的左边。附加地或替换地,查看窗口106的中心可被定位在显示器110的中心以上或以下。图7解说了其中查看窗口106的中心被定位在显示器110的中心左上方,以便将查看窗口106放置在显示器110的左上角的示例。与将查看窗口106放置在别处并在3侧或4侧用交互式元素108包围查看窗口106相反,将查看窗口106放置在显示器110的角落处可允许用户的眼睛更容易地跟踪或定位查看窗口106。
“社交”查看体验314可包括交互式元素108(1)-(5),交互式元素108(1)-(5)提供“社交”内容,使得用户可发现用户社区中与正在查看窗口106内被回放的节目有关的活动。内容检索模块130可通过网络202从(诸)内容提供者208中检索这样的内容。例如,内容检索模块130可从社交联网站点(诸如 等)中检索上下文内容。内容检索模块130可基于关键词、图像分析或任何其他合适的搜索技术来搜索社交联网站点以获得相关内容。在一些实施例中,搜索引擎可被利用来搜索可从社交联网站点获得的内容。由于显示器110上在向视频媒体视口106分派的面积外部的有限的“可用面积”,内容检索模块130可过滤检索到的内容或以其他方式将其变形为要经由交互式元素108(1)-(5)呈现的“最佳”内容子集。对“最佳”内容的选择可基于多种因素,诸如检索到的内容中的媒体文件(例如,图像或视频)的质量、分析不太相似的帖子(例如,文本、图形、视频等)的多样性指示符、帖子的年限(例如,较新的帖子可优先于较旧的帖子被选择)和/或用户交互特性(例如,“点赞”、再分享、评论、热门帖子等的数目)。此外,计算设备102的用户和社交社区中的其他用户之间的关系的当前状态可影响内容的过滤/变形(例如,在合适时,亲近的朋友和家庭活动可优先于较远的社交关系被选择)。
由于用户正在观看查看窗口106中的足球比赛,内容检索模块130可搜索通常与足球有关和/或与查看窗口106中正在广播的特定足球比赛有关的帖子、状态更新和媒体文件(例如,图像、视频等)。例如,交互式元素108(1)和108(2)可呈现来自社交联网(SNW)服务的用户的、关于正在广播的比赛中的明星球员之一的采访的社交媒体帖子。交互式元素108(2)可呈现按钮,这些按钮允许用户将张贴的视频保存到计算设备102的本地数据存储114、经由该社交联网服务或经由另一社交联网服务再分享张贴的视频、和/或经由电子邮件(e-mail)、短消息服务(SMS)文本等发送视频或到该视频的链接。交互式元素108(3)可呈现用户(例如在查看窗口106中正示出的足球比赛处的用户)张贴到社交联网站点上的图片。交互式元素108(4)和108(5)可呈现来自与查看窗口106中当前正在播放的视频媒体有关的各社交联网站点的用户的状态更新或帖子(微博)。经由交互式元素108(1)-(5)呈现的内容可通过涉及当前广播节目而前后关联,并可为用户提供更多社交查看体验。
从“社交”查看体验314,用户可(例如,通过按压遥控132(1)上的方向垫136的最右部分)提供另一向右导航命令以导航到通过图8解说的“代理”查看体验316。注意,视频媒体视口106在“社交”查看体验314和“代理”查看体验316之间的尺寸和/或位置可不改变。换言之,按顺序接收的导航命令中的各个体导航命令不会引起视频媒体视口106的任何缩放或重新定位,但可引起在该查看窗口106外部的交互式元素108的内容类型改变。从图7到图8的转变解说该场景。在该情况下,附加的向右导航命令使得用与“代理”查看体验316有关的不同内容来更新交互式元素108。视觉指示符504也可响应于接收到的向右方向的导航命令而更进一步向右移动,以向用户指示她处于“代理”查看体验316。
“代理”查看体验316可使得显示界面呈现交互式元素108(1),交互式元素108(1)向用户指示OS代理128当前正与用户一起“查看”视频媒体。供与“代理”查看体验316一起使用的OS代理128的一个合适的示例为CortanaTM,其可从华盛顿州雷蒙德市的公司处购得。OS代理128可通过分析与视频媒体相关联的元数据(例如,隐藏字幕)、执行对视频流的视觉和/或音频分析(例如,语音识别、歌曲视频等)等来与用户一起“查看”视频媒体。随着OS代理128执行对正在查看窗口106中播放的视频媒体的实时分析,OS代理128可创建被示出为交互式元素108(1)、108(3)和108(4)的一系列时间条目。例如,在时间13:45,OS代理128可能分析了视频媒体的元数据或视频流本身以确定该足球比赛正在华盛顿州西雅图市的足球体育场进行,并创建了时间条目108(2)。在稍后的时间(14:21),OS代理128识别出该足球比赛中的球队为西雅图对洛杉矶,并创建了时间条目108(3)。在甚至更后的时间(15:02),OS代理128可(经由音频识别)识别出广播员说了守门员的名字“John Goalie”,并创建了时间条目108(4)。随着新的时间条目被添加,先前的时间条目可被向下推,直到它们从显示屏中消失。用户仍可向后滚动通过先前的时间条目以召回与那些时间条目相关的内容。
随着每一时间条目被呈现,和/或响应于焦点元素508被移动到特定时间条目(例如,时间条目108(4)),交互式元素108(5)-(8)可用与那个时间条目108(4)相关的内容来更新。例如,内容检索模块120可访问针对要呈现的每一球员和针对要呈现的球队跟踪该足球比赛的统计的体育站点,统计为例如由交互式元素108(5)示出的被“John Goalie”救下的射门比例。内容检索模块130还可检索与时间条目108(4)相关的视频,诸如精彩片段视频108(6)。可呈现到信息、百科和/或新闻站点的链接,诸如交互式元素108(7)中示出的链接。球员统计可从任何合适的内容源检索,并经由交互式元素108(8)呈现。
从“代理”查看体验316,用户可(例如,通过按压遥控132(1)上的方向垫136的最右部分)提供另一向右导航命令以导航到图9所解说的“伙伴”查看体验318。视觉指示符504可响应于接收到的向右方向的导航命令而被呈现在最右位置以向用户指示她处于“伙伴”查看体验318。此外,查看窗口106可在尺寸方面被进一步缩小成更小尺寸的查看窗口106(例如,显示面积的约1/4或更小)并被进一步重新定位成在显示器110的中心的左方和更上方。经缩放的查看窗口106的尺寸可基于以下概念:可推断出用户不再主要对观看视频媒体节目感兴趣,而或许对使其自己更深地沉浸在经由交互式元素108提供的上下文内容中更感兴趣。相关联的显示界面(例如,显示界面308)可以是显示界面的使用户尽可能多地经由交互式元素108参与到上下文内容中的“最高参与度”形式。由此,查看窗口106可取决于用户沿着连续体300导航到的特定查看体验而被缩放到各种尺寸(查看窗口106不限于缩放到仅一个尺寸)。
在图9中,查看窗口106仍被定位在显示器110的角落处,但它不限于某角落位置。查看窗口106的移动方向一般不同于接收到的导航命令的方向,在该情况下,接收到的导航命令的方向为向右(即,正X)方向。因此,“伙伴”查看体验318可通过输出图3的显示界面308来启用。
经由“伙伴”查看体验318中的交互式元素108(1)-(4)呈现的内容可包括新闻文章、博客、来自提供视频媒体节目的演播室的独家内容、或与查看窗口106中正播放的视频媒体节目有关的任何相似类型的内容。再一次,由于显示器110的有限的“可用面积”,与视频媒体节目有关的“最佳”内容的经变形集合可被呈现在显示屏上,然而用户可能够(垂直和/或水平地)滚动通过或以其他方式翻页通过为“伙伴”查看体验318提供附加内容的附加“屏幕外”交互式元素108。图9将交互式元素108(1)示为提供来自与查看窗口106中正在播放的足球节目有关的网站的文章。内容检索模块130可能已利用搜索引擎来检索了经由交互式元素108(1)呈现的文章。交互式元素108(2)可呈现足球节目中正在踢的球队之一的精彩片段视频,而交互式元素108(3)可呈现两个足球球队之一的球员(名叫“Jim Q.Player”)的另一精彩片段剪辑。交互式元素108(4)可在被选择之际允许用户浏览与足球相关的视频游戏。在一些实施例中,用户可能能够启动与查看窗口106中正在播放的视频媒体节目相关的视频游戏,使得用户可与观看该节目并行地玩该相关游戏。例如,用户可能在观看并可决定他想要在观看节目的同时玩视频游戏。
在一些实施例中,如果用户将如图9所示将焦点元素508移动到交互式元素108(2)以开始播放精彩片段视频,则计算设备102可在精彩片段视频在查看窗口106外部的另一窗口中被回放的同时临时地暂停查看窗口106中对视频媒体的回放。为了提供该功能性,计算设备106可包括DVR或其他录制元件以在视频媒体被回放时至少缓冲该视频媒体,使得该视频媒体可被暂停,和/或使得用户可在视频媒体流中向后/向前进行搜寻。在一些实施例中,该精彩片段视频在被选择之际可在它被回放的同时重新安置到较大的交互式元素108(4)。在一些实施例中,在精彩片段视频被回放的同时该精彩片段视频可至少临时地接管全屏查看状态302,并在终止之际,显示输出可回退到显示界面308,如图9所描绘的。
图3的连续体300中的各查看体验的分层组织可被组织成使得在向右(正X)方向中的查看体验314-318允许用户使其自己越来越进一步沉浸在与查看窗口106中正在回放的视频媒体界面相关的上下文内容中,而在向左(负X)方向中的查看体验320-324允许用户将其自己越来越进一步沉浸在与该节目不相关但在接收到的导航命令的上下文中的内容。由此,图7-9解说了提供与查看窗口106中的视频媒体节目相关的上下文内容的处于向右(正X)方向中的各查看体验,而以下附图将解说可在处于向左(负X)方向中的各查看体验中被提供的内容类型。将领会,这些方向和内容类型可按其他方式被分层地组织,且本文中解说的向左/向右的组织仅是一个示例实现。
现在参考图10,示出了具有导航界面1000的示例显示输出。导航界面1000可响应于经由输入设备132接收用户输入(诸如响应于用户按压遥控132(1)上的缓冲按钮138)而被调用。导航界面1000可复制通过参考图3引入的查看体验连续体300,并可允许用户沿着该连续体300跳到特定查看体验。例如,用户可经由(诸)输入设备132提供用户输入,以便将焦点元素508移动到任何特定查看体验,以便直接导航到该查看体验。这在用户想要例如从“伙伴”查看体验318导航到“朋友”查看体验324而不是向后遍历通过连续体300中的每一中间查看体验的情况下可以是合乎需要的。附加地或替换地,用户可按压遥控132(1)上的后退按钮以返回到处于全屏查看状态302的“现在播放”查看体验304。以上描述的特征用于改善用户交互性能的效率。例如,该系统可从一个查看体验改变为另一、非毗邻查看体验,而无需处理并渲染与连续体300上的中间查看体验相关联的显示界面。在用户导航连续体时,这极大地改善了用户交互效率。
想象例如用户通过例如在图10的导航界面1000内将焦点元素508移动到“最喜欢项”查看体验320来导航到“最喜欢项”查看体验302。得到的显示输出可以是图11中示出的那个显示输出。在“最喜欢项”查看体验320中,视觉指示符504可被定位在导航栏502的向用户指示她处于“最喜欢项”查看体验320的一部分上,在该情况下,该部分在导航栏502上的中心的略最方。查看窗口106也可按与从开始点(即,“现在播放”查看体验304)到“最喜欢项”查看体验320的导航方向相反的从显示器110的中心起的方向被缩放和定位。例如,由于“最喜欢项”查看体验320被定位到连续体开始点的左方,因此查看窗口106的中心可被定位在显示器110的中心的右方和/或显示器110的中心的上方或下方。在图11的示例中,查看窗口106被定位在显示器110的右上角,并被缩放到为显示面积的约2/3到约3/4的尺寸,以尊重用户在浏览“最喜欢项”查看体验320内的附加内容的同时可能主要对查看视频媒体节目感兴趣的事实。
“最喜欢项”查看体验320可经由呈现在查看窗口106外部的交互式元素108(1)和108(2)提供用户最近查看的频道和/或最喜欢的频道。交互式元素108(1)可包括可通过经由(诸)输入设备132提供输入来滚动和/或翻页的指南。图11示出用户已将焦点元素508移动到“网络δ”,并且已经由(诸)输入设备132提供了用户输入以在那个网络/频道上选择节目“汽车节目”以供在视频媒体视口106中查看。交互式元素108(2)可提供在突出显示的频道上广播的节目的简要大纲以及与参考图5的显示输出描述的那些显示元素相似的一个或多个交互式显示元素,诸如“录制”元素、“添加到最喜欢项”元素和/或“全部细节”元素。在“最喜欢项”查看体验320内,用户可继续在查看窗口106内观看视频媒体节目,同时浏览通过其最近观看和/或最喜欢的频道。
从“最喜欢项”查看体验320,用户可(例如,通过按压遥控132(1)上的方向垫136的最左部分来)提供向左导航命令以导航到图12所解说的“我的节目”查看体验322。视觉指示符504可响应于接收到的采用向左方向的导航命令而沿着导航栏502被向左移动以向用户指示她处于“我的节目”查看体验322。再一次,注意,在从图11转变到图12中,在“最喜欢项”查看体验320和“我的节目”查看体验322之间视频媒体视口106的尺寸和/或位置可不改变,而在查看窗口106外部的交互式元素108的内容类型可在导航命令的上下文中更新。在该情况下,附加的从“最喜欢项”查看体验320向左导航命令使得交互式元素108用与“我的节目”查看体验322相关的不同内容来更新。
经由图12的交互式元素108(1)-(4)呈现的内容可包括用户已使用计算设备102的DVR功能录制的节目、正被录制或标记/被排定供录制的节目、用户已标记为最喜欢项的节目、用户最近观看的节目和/或基于用户的查看历史对用户可能感兴趣的节目的系统推荐。图12将交互式元素108(1)示为用户最近录制或保存到计算设备102的本地存储器的视频。交互式元素108(2)可呈现用户已标记为最喜欢项的节目,并可(至少按照用户是否观看了这些节目)进一步指示为新的多个节目。交互式元素108(3)可呈现用户最近观看的节目,该节目可不仅仅是系统推断出的最喜欢的节目。图12中的交互式元素108(1)-(3)列可以是可滚动和/或可翻页的,使得用户可在“我的节目”查看体验322中浏览附加内容。交互式元素108(4)可呈现基于用户的查看历史对用户可能感兴趣的节目的系统推荐。
从“我的节目”查看体验322,用户可(例如,通过按压遥控132(1)上的方向垫136的最左部分来)提供另一向左导航命令以导航到图13所解说的“朋友”查看体验324。视觉指示符504可响应于接收到的采用向左方向的导航命令而被定位到导航栏502的最左部分以向用户指示她处于“朋友”查看体验324。此外,查看窗口106可以按不同于接收到的导航命令的方向的从显示器110的中心起的方向被缩放和重新定位。在该情况下,响应于向左(即,负X方向)导航命令,查看窗口106的位置被移动到显示器110的中心的右方和/或显示器110的中心的上方或下方。在图13中,查看窗口106被示为被放置在显示器110的右上角。经缩放的查看窗口106的较小的尺寸领会以下事实:用户可能对观看视频媒体节目较不感兴趣,而对浏览经由查看窗口106外部的交互式元素108提供的附加内容相对较感兴趣。相关联的显示界面(例如,显示界面312)可以是该显示界面的使用户尽可能多地经由交互式元素108参与到附加内容中的“最高参与度”形式。
图13示出呈现用户的社交关系(例如,朋友)的经变形集合以及可指示特定社交关系是否在线的状态指示符1300的交互式元素部分108(1)。交互式元素部分108(1)可进一步包括对各个体社交关系正在做什么的简要描述,这可基于用户已同意通过社交联网服务提供的状态更新、签到等。“朋友”查看体验324中的其他交互式元素108(2)-(5)可呈现来自特定社交关系的活动馈源、来自社交关系的视频、和/或关于热门话题的其他类型的帖子(例如,评论)等。因此,“朋友”查看体验324朝向以下被变形:允许用户看见她的朋友正在做什么(例如,他们正在观看的频道、他们正在玩的游戏、他们正作出的与查看窗口106中正在播放的视频媒体无关的帖子等等),并浏览通过她的社交网络生成的内容、加入可涉及用户的朋友的游戏和社区活动等等。
示例过程
图14是基于经由输入设备132接收的顺序导航命令来渐进地缩放和重新定位视频媒体视口106的示例过程1400的流程图。该过程被解说为逻辑流程图中的框的集合,这些框表示可用硬件、软件或其组合实现的一系列操作。在软件的上下文中,这些操作表示存储在一个或多个计算机可读存储介质上的计算机可执行指令,这些指令在由一个或多个处理器执行时执行所述操作。一般而言,计算机可执行指令包括执行特定功能或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等。描述操作的次序并不旨在被解释为限制,并且任何数量的所述框可以按任何次序和/或并行地组合以实现该过程。此外,在一些实施例中,该过程的一个或多个框可被整体地忽略。
过程1400是参考图1和2的架构100和200来描述的。可对图1中示出的UI模块126、输入设备132和显示器110等作出具体参考。
在1402,视频媒体(例如,广播电视)可在显示器110上该显示器110上的查看窗口内被呈现。在一些实施例中,查看窗口可基本上跨越显示器110的整个面积。换言之,全屏查看状态302可被调用以呈现视频媒体全屏幕。这可以是默认查看状态,诸如当用户开启与显示器110相关联的计算设备102时。
在1404,计算设备102可在视频媒体的回放期间经由输入设备132接收指示在与显示器110的前表面平行的平面内的采用第一方向的导航命令的第一用户输入。1404右边的图示示出其中用户输入可经由遥控132(1)的方向垫136提供的示例。在该情况下,用户可按压方向垫136的最右部分以指示在与显示器110的前表面平行的平面内的向右(即,正X方向)导航命令。
在1406,响应于在1404接收到的第一用户输入,UI模块126缩小视频媒体视口106,并将其中心定位在显示器110的距显示器110的中心某距离的一部分上。在一些实施例中,从显示器110的中心到经缩放的查看窗口106的中心的位置的分量方向与导航命令的第一方向不同(例如,相反)。例如,当导航命令采用显示屏的平面中的向右(即,正X)方向时,查看窗口106的移动可采用显示屏的平面中的向左、向上、向下和/或中间方向。此外,在1406,一个或多个交互式元素108可被呈现在经缩放的查看窗口106的外部。在一些实施例中,(诸)交互式元素108可在查看窗口106的至少两侧上包围查看窗口106。交互式元素108可呈现上下文内容,在一些实例中,上下文内容可涉及查看窗口106中正被回放的视频媒体节目。
在1408,计算设备102可经由输入设备132接收指示采用第一方向(即,与1404处的导航命令相同方向)的导航命令的第二顺序用户输入。1408处的第二用户输入在第一用户输入之后被接收,使得第一和第二用户输入组成指示采用同一方向的导航命令的一系列用户输入或多个顺序用户输入。
在1410,响应于在1408处接收到的第二用户输入,呈现视频媒体的查看窗口106可被更进一步缩小,并被重新定位在显示器110的采用与导航命令的第一方向不同的从显示器110的中心起的方向中的一部分上。再一次,如果导航命令采用向右方向,则查看窗口106的移动/重新定位可采用显示屏的平面中的向左、向上、向下和/或中间方向。此外,在1410,一个或多个交互式元素108可被呈现在经缩放的查看窗口106的外部。在一些实施例中,交互式元素108可呈现对应于与1406处的查看体验不同的查看体验的内容。即,在1406处呈现在显示器110上的(诸)交互式元素108可包括与在1410处呈现在显示器110上的(诸)交互式元素108的内容(例如,基于代理的内容)不同类型的内容(例如,基于社交的内容)。
过程1400允许计算设备的用户导航通过查看体验连续体300,使得她可将其自己沉浸在她选择的查看体验中。动态改变的显示界面(例如,显示界面306和308)按给予用户用于在整个连续体300上直观导航的方向感的方式来渐进地缩放和重新定位视频媒体视口106。
本文所描述的环境和各个元件当然可包括许多其它的逻辑、程序以及物理组件,其中显示在附图中的那些仅仅是与本文的讨论有关的示例。
本文所描述的示例被设想用于以广义的计算机可执行指令或软件上下文来实现的给定示例中,诸如程序模块,其被存储在计算机可读存储中并且由一个或多个计算机或其它设备的处理器来执行,诸如附图中所示出的那些。一般而言,程序模块包括例程、程序、对象、组件、数据结构等,并定义用于执行特定任务或实现特定抽象数据类型的逻辑。
可使用其它架构来实现所描述的功能,这些其它结构也落于本公开的范围内。此外,尽管以上为了讨论的目的描述了具体的职责分布,但可根据情况以不同方式分布和划分各组功能和职责。
类似的,可以各种方式和使用不同装置来存储和分布软件,并且以上所描述的特定软件存储和执行配置可以不同方式改变。因此,以上所描述的实现本技术的软件可以分布在各种类型的计算机可读介质上,计算机可读介质不限于具体描述的存储器形式。
示例一:一种计算机实现的方法,包括:引起视频媒体在基本上跨越显示器的面积的查看窗口内的呈现;接收多个顺序用户输入(例如,下压按钮、触摸屏、语音命令、(基于相机的)姿势)等),该多个顺序用户输入指示在与所述显示器的前表面基本上平行的平面内的采用第一方向(例如,水平、垂直、或中间方向)的导航命令;以及响应于接收到所述多个顺序用户输入:至少部分地基于所述顺序用户输入中的各个体用户输入,将所述查看窗口渐进地缩放为越来越小尺寸的查看窗口;将所述较小尺寸的查看窗口各自的中心定位在距所述显示器的中心相应距离处;以及,引起在所述较小尺寸的查看窗口外部的一个或多个交互式元素在所述显示器上的呈现。
示例二:如示例一所述的计算机实现的方法,其中所述较小尺寸的查看窗口各自的中心被定位在从所述显示器的中心起的一方向中,该方向具有该方向的采用与所述导航命令的第一方向不同(例如,垂直/正交、相反等)的方向中的至少一个分量。
示例三:如先前示例(单独地或组合地)所述的计算机实现的方法,其中所述不同的方向与所述第一方向相反。
示例四:如先前示例(单独地或组合地)所述的计算机实现的方法,其中所述一个或多个交互式元素:在所述较小尺寸的查看窗口周围被重排,并呈现或链接(例如,超链接)到与所述视频媒体相关的内容。
示例五:如先前示例(单独地或组合地)所述的计算机实现的方法,进一步包括:接收非导航用户输入(例如,对“后退按钮”的按压);以及响应于所述接收所述非导航用户输入,回退到引起所述视频媒体在基本上跨越所述显示器的面积的查看窗口内的呈现。
示例六:如先前示例(单独地或组合地)所述的计算机实现的方法,其中所述定位包括将所述较小尺寸的查看窗口渐进地定位在距所述显示器的中心越来越大的距离处。
示例七:如先前示例(单独地或组合地)所述的计算机实现的方法,进一步包括:在所述视频媒体的回放期间分析所述视频媒体;以及通过所述分析得到要通过所述一个或多个交互式元素呈现的内容。
示例八:如先前示例(单独地或组合地)所述的计算机实现的方法,其中在每一顺序用户输入之后显示的所述较小尺寸的查看窗口和所述一个或多个交互式元素被包括在无模式图形用户界面内,所述无模式图形用户界面被实现为呈现所述较小尺寸的查看窗口和所述一个或多个交互式元素中的一者同时允许与其的用户交互的应用。
示例九:一种系统,包括:具有前表面、中心和面积的显示器;输入设备(例如,话筒、相机、遥控等);一个或多个处理器;以及,存储计算机执行指令的存储器,所述计算机执行指令在由所述一个或多个处理器执行时使所述一个或多个处理器执行以下动作,包括:引起视频媒体在所述显示器上的查看窗口内的呈现;经由所述输入设备接收多个顺序用户输入(例如,下压按钮、触摸屏、语音命令、(基于相机的)姿势)等),所述多个顺序用户输入指示在与所述显示器的前表面基本上平行的平面内的采用第一方向(例如,水平、垂直、或中间方向)的导航命令;以及响应于接收到所述多个顺序用户输入:至少部分地基于所述顺序用户输入中的各个体用户输入,将所述查看窗口渐进地缩放为越来越小尺寸的查看窗口;将较小尺寸的查看窗口各自的中心定位在距所述显示器的中心相应距离处;以及,引起在所述较小尺寸的查看窗口外部的一个或多个交互式元素在所述显示器上的呈现。
示例十:如示例九所述的系统,其中所述较小尺寸的查看窗口各自的中心被定位在从所述显示器的中心起的一方向中,该方向具有该方向的采用与所述导航命令的第一方向不同(例如,垂直/正交、相反等)的方向的至少一个分量。
示例十一:如先前示例(单独地或组合地)所述的系统,其中所述不同的方向与所述第一方向相反,并且其中所述定位包括将所述较小尺寸的查看窗口定位为在所述显示器的角落处。
示例十二:如先前示例(单独地或组合地)所述的系统,进一步包括操作系统代理,所述操作系统代理被存储在所述存储器中,并可由所述一个或多个处理器执行以:在所述视频媒体的回放期间分析所述视频媒体;以及,至少部分地基于分析所述视频媒体得到要由所述一个或多个交互式元素呈现的内容。
示例十三:如先前示例(单独地或组合地)所述的系统,其中所述较小尺寸的查看窗口和所述一个或多个交互式元素被包括在无模式图形用户界面内,所述无模式图形用户界面被实现为呈现所述较小尺寸的查看窗口和所述一个或多个交互式元素中的一者同时允许与其的用户交互的应用。
示例十四:如先前示例(单独地或组合地)所述的系统,其中所述输入设备包括具有方向垫的遥控,并且所述用户输入是经由所述方向垫接收到的。
示例十五:如先前示例(单独地或组合地)所述的系统,其中所述一个或多个交互式元素呈现或链接到与所述视频媒体相关的内容。
示例十六:一种计算机实现的方法,包括:引起视频媒体在所述显示器上的查看窗口内的呈现;接收第一用户输入(例如,下压按钮、触摸屏、语音命令、(基于相机的)姿势)等),所述第一用户输入指示在与所述显示器的前表面基本上平行的平面内的采用第一方向(例如,水平、垂直、或中间方向)的导航命令;响应于接收所述第一用户输入:将所述查看窗口缩小成第一经减小尺寸的查看窗口;将所述第一经减小尺寸的查看窗口的中心定位在距所述显示器的中心第一距离处;以及,引起在所述第一经减小尺寸的查看窗口外部的一个或多个第一交互式元素在所述显示器上的呈现;接收第二用户输入(例如,下压按钮、触摸屏、语音命令、(基于相机的)姿势)等),所述第二用户输入指示采用所述第一方向的导航命令;以及,响应于接收所述第二用户输入命令:将所述第一经减小尺寸的查看窗口缩小成第二经减小尺寸的查看窗口;将所述第二经减小尺寸的查看窗口的中心定位在距所述显示器的中心第二距离处;以及,引起在所述第二经减小尺寸的查看窗口外部的一个或多个第二交互式元素在所述显示器上的呈现。
示例十七:如示例十六所述的计算机实现的方法,其中所述第一经减小尺寸的查看窗口的中心被定位在与所述导航命令的第一方向不同(例如,垂直/正交、相反等)的从所述显示器的中心起的方向中。
示例十八:如先前示例(单独地或组合地)所述的计算机实现的方法,其中所述一个或多个第一交互式元素呈现或链接(例如,超链接)到第一类型的内容,并且所述一个或多个第二交互式元素呈现或链接到第二类型的内容。
示例十九:如先前示例(单独地或组合地)所述的计算机实现的方法,进一步包括在所述视频媒体的回放期间分析所述视频媒体以得到由所述一个或多个第一交互式元素或所述一个或多个第二交互式元素呈现的内容。
示例二十:如先前示例(单独地或组合地)所述的计算机实现的方法,其中所述第一经减小尺寸的查看窗口和所述一个或多个第一交互式元素被包括在无模式图形用户界面内,所述无模式图形用户界面被实现为呈现所述第一经减小尺寸的查看窗口和所述一个或多个第一交互式元素同时允许与其的用户交互的应用。
示例二十一:一种系统,包括:用于显示视频媒体的装置,所述用于显示的装置具有前表面、中心和面积;用于接收用户输入的装置;用于执行计算机可执行指令的装置(例如,处理器,包括例如诸如中央处理单元(CPU)、片上系统等的硬件处理器);以及,用于存储计算机可执行指令的装置(例如,存储器、计算机可读存储介质,诸如RAM、ROM、EEPROM、闪存等),所述计算机可执行指令在由用于执行计算机可执行指令的装置执行时,使得执行以下动作,包括:引起视频媒体在所述用于显示的装置上的查看窗口内的呈现;经由所述用于接收用户输入的装置接收多个顺序用户输入(例如,下压按钮、触摸屏、语音命令、(基于相机的)姿势)等),所述多个顺序用户输入指示在与所述用于显示的装置的前表面基本上平行的平面内的采用第一方向(例如,水平、垂直、或中间方向)的导航命令;以及响应于接收到所述多个顺序用户输入:至少部分地基于所述顺序用户输入中的各个体用户输入,将所述查看窗口渐进地缩放为越来越小尺寸的查看窗口;将所述较小尺寸的查看窗口各自的中心定位在距所述用于显示的装置的中心相应距离处;以及,引起在所述较小尺寸的查看窗口外部的一个或多个交互式元素在所述用于显示的装置上的呈现。
示例二十二:如示例二十一所述的系统,进一步包括用于分析所述视频媒体的装置,所述用于分析的装置被存储在所述存储器中,并可由所述用于执行计算机可执行指令的装置执行以:在所述视频媒体的回放期间分析所述视频媒体;以及,至少部分地基于分析所述视频媒体,得到要由所述一个或多个交互式元素呈现的内容。
结语
总而言之,尽管用对结构特征和/或方法动作专用的语言描述了各实施方式,但可以理解,所附权利要求书中定义的主题不必限于所述具体特征或动作。相反,这些具体特征和动作是作为实现所要求保护的主题内容的示例形式而公开的。

Claims (15)

1.一种计算机实现的方法,包括:
引起视频媒体在基本上跨越显示器的面积的查看窗口内的呈现;
接收多个顺序用户输入,所述多个顺序用户输入指示在与所述显示器的前表面基本上平行的平面内的采用第一方向的导航命令;以及
响应于接收到所述多个顺序用户输入:
至少部分地基于所述顺序用户输入中的各个体用户输入,将所述查看窗口渐进地缩放为越来越小尺寸的查看窗口;
将所述较小尺寸的查看窗口各自的中心定位在距所述显示器的中心相应距离处;以及
引起在所述较小尺寸的查看窗口外部的一个或多个交互式元素在所述显示显示器上的呈现。
2.如权利要求1所述的计算机实现的方法,其特征在于,所述较小尺寸的查看窗口各自的中心被定位在从所述显示器的中心起的一方向中,该方向具有该方向的采用与所述导航命令的所述第一方向不同的方向的至少一个分量。
3.如权利要求2所述的计算机实现的方法,其特征在于,所述不同的方向与所述第一方向相反。
4.如权利要求1所述的计算机实现的方法,其特征在于,所述一个或多个交互式元素:
在所述较小尺寸的查看窗口周围被重排,以及
呈现或链接到与所述视频媒体相关的内容。
5.如权利要求1所述的计算机实现的方法,其特征在于,进一步包括:
接收非导航改变用户输入;以及
响应于所述接收非导航用户输入,回退到引起所述视频媒体在基本上跨越所述显示器的所述面积的查看窗口内的呈现。
6.如权利要求1所述的计算机实现的方法,其特征在于,所述定位包括将所述较小尺寸的查看窗口渐进地定位在距所述显示器的中心越来越大的距离处。
7.如权利要求1所述的计算机实现的方法,其特征在于,进一步包括:
在所述视频媒体的回放期间分析所述视频媒体;以及
通过所述分析得到要通过所述一个或多个交互式元素呈现的内容。
8.如权利要求1所述的计算机实现的方法,其特征在于,在每一顺序用户输入之后显示的所述较小尺寸的查看窗口和所述一个或多个交互式元素被包括在无模式图形用户界面内,所述无模式图形用户界面被实现为呈现所述较小尺寸的查看窗口和所述一个或多个交互式元素中的一者同时允许与其的用户交互的应用。
9.一种系统,包括:
具有前表面、中心和面积的显示器;
输入设备;
一个或多个处理器;以及
存储计算机可执行指令的存储器,所述计算机可执行指令在由所述一个或多个处理器执行时使得所述一个或多个处理器执行以下动作,包括:
引起视频媒体在所述显示器上的查看窗口内的呈现;
经由所述输入设备接收多个顺序用户输入,所述多个顺序用户输入指示在与所述显示器的前表面基本上平行的平面内的采用第一方向的导航命令;以及
响应于接收到所述多个顺序用户输入:
至少部分地基于所述顺序用户输入中的各个体用户输入,将所述查看窗口渐进地缩放为越来越小尺寸的查看窗口;
将较小尺寸的查看窗口各自的中心定位在距所述显示器的中心相应距离处;以及
引起在所述较小尺寸的查看窗口外部的一个或多个交互式元素在所述显示显示器上的呈现。
10.如权利要求9所述的系统,其特征在于,所述较小尺寸的查看窗口各自的中心被定位在从所述显示器的中心起的一方向中,该方向具有该方向的采用与所述导航命令的所述第一方向不同的方向的至少一个分量。
11.如权利要求9所述的系统,其特征在于,所述不同的方向与所述第一方向相反,并且其中所述定位包括将所述较小尺寸的查看窗口定位为在所述显示器的角落处。
12.如权利要求9所述的系统,进一步包括操作系统代理,所述操作系统代理被存储在所述存储器中,并可由所述一个或多个处理器执行以:
在所述视频媒体的回放期间分析所述视频媒体;以及
至少部分地基于分析所述视频媒体得到要由所述一个或多个交互式元素呈现的内容。
13.如权利要求9所述的系统,其特征在于,所述较小尺寸的查看窗口和所述一个或多个交互式元素被包括在无模式图形用户界面内,所述无模式图形用户界面被实现为呈现所述较小尺寸的查看窗口和所述一个或多个交互式元素中的一者同时允许与其的用户交互的应用。
14.如权利要求9所述的系统,其特征在于,所述输入设备包括具有方向垫的遥控,并且所述用户输入是经由所述方向垫接收到的。
15.如权利要求9所述的系统,其特征在于,所述一个或多个交互式元素呈现或链接到与所述视频媒体相关的内容。
CN201580065350.9A 2014-12-01 2015-11-20 一种计算机实现的方法、系统及存储介质 Active CN107005741B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/557,324 2014-12-01
US14/557,324 US9380345B2 (en) 2014-12-01 2014-12-01 Immersive scaling interactive television
PCT/US2015/061722 WO2016089616A1 (en) 2014-12-01 2015-11-20 Immersive scaling interactive television

Publications (2)

Publication Number Publication Date
CN107005741A true CN107005741A (zh) 2017-08-01
CN107005741B CN107005741B (zh) 2020-09-01

Family

ID=54754832

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580065350.9A Active CN107005741B (zh) 2014-12-01 2015-11-20 一种计算机实现的方法、系统及存储介质

Country Status (4)

Country Link
US (1) US9380345B2 (zh)
EP (1) EP3228087A1 (zh)
CN (1) CN107005741B (zh)
WO (1) WO2016089616A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109712522A (zh) * 2017-10-25 2019-05-03 Tcl集团股份有限公司 一种沉浸式信息呈现方法和系统
CN113302581A (zh) * 2018-12-20 2021-08-24 微软技术许可有限责任公司 交互式查看系统
WO2021244116A1 (zh) * 2020-06-04 2021-12-09 腾讯科技(深圳)有限公司 沉浸媒体的数据处理方法、装置、设备及存储介质

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112016001594T5 (de) * 2015-06-11 2018-01-18 Google Inc. Verfahren, systeme und medien zum aggregieren und präsentieren von relevantem inhalt für ein bestimmtes videospiel
CN106341702A (zh) * 2016-09-05 2017-01-18 Tcl集团股份有限公司 一种基于电视节目的互动方法及移动终端
CN106792188B (zh) * 2016-12-06 2020-06-02 腾讯数码(天津)有限公司 一种直播页面的数据处理方法、装置、系统和存储介质
US10548117B2 (en) * 2016-12-22 2020-01-28 Huawei Technologies Co., Ltd. Apparatus and method for OS agent to optimize transmission over the air
CN106982385A (zh) * 2017-02-22 2017-07-25 广州视源电子科技股份有限公司 菜单激活信息的设置方法及系统
US11388105B2 (en) * 2017-12-08 2022-07-12 Google Llc Content source allocation between computing devices
CN109714626B (zh) * 2018-12-26 2020-11-03 北京字节跳动网络技术有限公司 信息交互方法、装置、电子设备、和计算机可读存储介质
WO2020153232A1 (ja) * 2019-01-24 2020-07-30 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置、情報処理装置の制御方法、及びプログラム
US20220174258A1 (en) * 2019-03-13 2022-06-02 Sony Group Corporation Information processing device, information processing method, and program
US11259081B2 (en) * 2020-02-28 2022-02-22 Rovi Guides, Inc. Systems and methods for adaptively modifying presentation of media content

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120072952A1 (en) * 2005-01-27 2012-03-22 Arthur Vaysman Video stream zoom control based upon dynamic video mosaic element selection
US20140068669A1 (en) * 1998-04-30 2014-03-06 United Video Properties, Inc. Program guide system with flip and browse advertisements
CN104135680A (zh) * 2013-05-03 2014-11-05 三星电子株式会社 显示设备及其控制方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU3908297A (en) 1996-08-06 1998-02-25 Starsight Telecast Incorporated Electronic program guide with interactive areas
JP2000242392A (ja) 1999-02-12 2000-09-08 Dbm Korea:Kk 動的な情報ディスプレイのためのコンピュータシステム及びその方法
US7076734B2 (en) 2001-06-22 2006-07-11 Microsoft Corporation Systems and methods for providing a dynamically controllable user interface that embraces a variety of media
US8352983B1 (en) 2002-07-11 2013-01-08 Tvworks, Llc Programming contextual interactive user interface for television
US7549127B2 (en) 2002-08-01 2009-06-16 Realnetworks, Inc. Method and apparatus for resizing video content displayed within a graphical user interface
US20050015803A1 (en) 2002-11-18 2005-01-20 Macrae Douglas B. Systems and methods for providing real-time services in an interactive television program guide application
MXPA06003890A (es) 2003-10-06 2006-07-03 Disney Entpr Inc Sistema y metodo de control de reproduccion y caracteristica para reproductores de video.
US8006183B1 (en) 2006-12-08 2011-08-23 Trading Technologies International Inc. System and method for using a curser to convey information
EP2487924A3 (en) 2011-02-10 2013-11-13 LG Electronics Inc. Multi-functional display device having a channel map and method for controlling the same
KR102220085B1 (ko) * 2013-10-18 2021-02-26 삼성전자주식회사 멀티윈도우 운용 방법 및 이를 지원하는 전자 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140068669A1 (en) * 1998-04-30 2014-03-06 United Video Properties, Inc. Program guide system with flip and browse advertisements
US20120072952A1 (en) * 2005-01-27 2012-03-22 Arthur Vaysman Video stream zoom control based upon dynamic video mosaic element selection
CN104135680A (zh) * 2013-05-03 2014-11-05 三星电子株式会社 显示设备及其控制方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109712522A (zh) * 2017-10-25 2019-05-03 Tcl集团股份有限公司 一种沉浸式信息呈现方法和系统
CN113302581A (zh) * 2018-12-20 2021-08-24 微软技术许可有限责任公司 交互式查看系统
WO2021244116A1 (zh) * 2020-06-04 2021-12-09 腾讯科技(深圳)有限公司 沉浸媒体的数据处理方法、装置、设备及存储介质

Also Published As

Publication number Publication date
EP3228087A1 (en) 2017-10-11
CN107005741B (zh) 2020-09-01
WO2016089616A1 (en) 2016-06-09
US9380345B2 (en) 2016-06-28
US20160156983A1 (en) 2016-06-02

Similar Documents

Publication Publication Date Title
CN107005741A (zh) 沉浸式缩放交互式电视
US10560739B2 (en) Method, system, apparatus, and non-transitory computer readable recording medium for extracting and providing highlight image of video content
US9576033B2 (en) System, method and user interface for content search
CN109118290B (zh) 方法、系统和计算机可读非暂时性存储介质
AU2012100055A4 (en) Interface for watching a stream of videos
US8386942B2 (en) System and method for providing digital multimedia presentations
JP5662569B2 (ja) 複数ドメイン検索からコンテンツを除外するシステムおよび方法
US10212481B2 (en) Home menu interface for displaying content viewing options
US20140282061A1 (en) Methods and systems for customizing user input interfaces
CN106462316A (zh) 显示内容的系统和方法
US9615124B1 (en) Methods and systems for enhancing media viewing experiences
KR20140001977A (ko) 문맥상의 사용자 인터페이스
ES2914124T3 (es) Focalización multimedia
US20160170584A1 (en) Device and method for arranging contents displayed on screen
US20150301693A1 (en) Methods, systems, and media for presenting related content
TW201436543A (zh) 用於內容發現之方法及系統
US11558666B2 (en) Method, apparatus, and non-transitory computer readable record medium for providing content based on user reaction related to video
JP6078476B2 (ja) メディアアセットに関する説明情報の表示をカスタマイズする方法
US9654835B2 (en) Method for displaying electronic program guide, electronic device, and computer readable medium
US10656791B2 (en) Methods, systems, and media for navigating a user interface with a toolbar
KR20180053208A (ko) 전자 장치 및 그의 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant