CN109905741B - 用于对呈现的内容提供上下文功能的系统和方法 - Google Patents

用于对呈现的内容提供上下文功能的系统和方法 Download PDF

Info

Publication number
CN109905741B
CN109905741B CN201910045819.2A CN201910045819A CN109905741B CN 109905741 B CN109905741 B CN 109905741B CN 201910045819 A CN201910045819 A CN 201910045819A CN 109905741 B CN109905741 B CN 109905741B
Authority
CN
China
Prior art keywords
display device
content
application
media
user interface
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910045819.2A
Other languages
English (en)
Other versions
CN109905741A (zh
Inventor
桑吉夫·瑟尔帕尔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN201910045819.2A priority Critical patent/CN109905741B/zh
Publication of CN109905741A publication Critical patent/CN109905741A/zh
Application granted granted Critical
Publication of CN109905741B publication Critical patent/CN109905741B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H04N21/42209—Display device provided on the remote control for displaying non-command information, e.g. electronic program guide [EPG], e-mail, messages or a second television channel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6587—Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及用于对呈现的内容提供上下文功能的系统和方法，尤其是用于呈现与显示设备所呈现的内容相关联的用户界面的方法和系统。在一个实施方式中，用于呈现与显示设备所呈现的内容相关联的用户界面的方法包括通过设备运行应用程序，其中，所述应用程序配置成基于显示设备所显示的内容呈现用户界面；从所述显示设备接收数据，其中，所述数据与所述显示设备所显示的内容相关联。所述方法还包括在所述设备上基于从所述显示设备接收的数据来通过所述应用程序呈现用户界面，其中，基于所述显示设备所显示的内容来呈现所述用户界面的图形元素和功能，并且其中，能够选择所述用户界面的图形元素，以生成用于所述显示设备的命令。

Description

用于对呈现的内容提供上下文功能的系统和方法
本申请是2015年09月25日提出的发明名称为“用户对呈现的内容提供上下文功能的系统和方法”的中国发明专利申请201510623032.1的分案申请。
相关申请的交叉引用
本申请要求2013年10月03日提交、名称为“用于多屏幕体验的设备和方法（Deviceand Method for Multiscreen Experience）”的第61/886,241号美国临时申请的优先权，其全部内容通过引用结合在本申请中。
技术领域
本发明涉及电子设备和应用程序，并且更具体地涉及用于显示的系统、方法以及内容呈现设备。
背景技术
电视接收器已经长期用于呈现重放的电视（TV）内容。遥控器的控制命令和电视机的屏幕上的命令常常受限并且可能不方便操作。通常，电视接收器受限于可能提供有节目的信息。例如，电子节目指南通常是信息的唯一来源并且它受限于播送的内容。即使这样，所提供的信息通常只是播送的电视内容的简短说明。通过显示设备获取信息通常是有限的且难以实现。存在一种对提供信息和控制显示设备可访问的内容的系统和方法的需求。
发明内容
本文公开和要求保护的是呈现用户界面的方法、设备和系统，所述用户界面与显示设备所呈现的内容相关联。一个实施方式旨在提供用于呈现用户界面的方法，所述用户界面与显示设备所呈现的内容相关联。所述方法包括通过设备运行应用程序，其中所述应用程序配置成基于显示设备所显示的内容呈现用户界面；以及通过所述设备从所述显示设备接收数据，其中，所述数据与所述显示设备所显示的内容相关联。所述方法还包括在所述设备上基于从所述显示设备接收的数据来通过所述应用程序呈现用户界面，其中，基于所述显示设备所显示的内容来呈现所述用户界面的图形元素和功能，并且，能够选择所述用户界面的图形元素，以生成用于所述显示设备的命令。
在一个实施方式中，所述应用程序是Spring应用程序，所述Spring应用程序配置成将所述设备与所述显示设备配对，并且配置成基于在所述设备上所呈现的用户界面的操作来向所述显示设备提供命令。
在一个实施方式中，运行所述应用程序包括执行所述应用程序，以启动对所述设备与所述显示设备的配对。
在一个实施方式中，至少部分地基于具体的内容标题和与所述内容标题相关联的媒体的类型中的一者或多者，所述应用程序通过所述应用程序的定制功能以及图形元素的呈现来提供上下文功能。
在一个实施方式中，接收数据包括接收用于所述显示设备所呈现的有效内容的元数据。
在一个实施方式中，呈现所述应用程序包括呈现一个或多个图形元素，以提供对所述显示设备上的内容的重放的快速访问。
在一个实施方式中，所述应用程序的呈现包括基于与所述显示设备所呈现的内容相关联的一个或多个上下文特征进行所述用户界面的配置，其中用于所述显示设备所显示的内容的上下文信息在所述设备上通过所述应用程序呈现为信息元素。
在一个实施方式中，所述应用程序的呈现包括多个图形元素的呈现，所述多个图形元素是能够选择的，以启动对具体的内容标题的重放，所述具体的内容标题存储为用于所述应用程序的书签。
在一个实施方式中，所述方法还包括通过所述应用程序为所述显示设备输出控制命令，以控制对所述显示设备的操作，其中，基于检测到的对所述设备上的所述应用程序的用户输入来生成所述控制命令。
在一个实施方式中，所述方法还包括在所述设备上通过所述应用程序存储图像和媒体数据中的至少一者，其中，图像和媒体数据中的所述至少一者由所述显示设备所呈现的内容来生成。
另一个实施方式旨在提供一种系统，所述系统包括被配置成呈现内容的显示设备和联接到所述显示设备的设备。所述设备被配置成运行应用程序，其中所述应用程序配置成基于显示设备所显示的内容呈现用户界面；以及从所述显示设备接收数据，其中，所述数据与所述显示设备所显示的内容相关联。所述设备还配置成基于从所述显示设备接收的数据来通过所述应用程序呈现用户界面，其中，基于所述显示设备所显示的内容来呈现所述用户界面的图形元素和功能，并且，能够选择所述用户界面的图形元素，以生成用于所述显示设备的命令。
鉴于以下对实施方式的详细描述，其它方面、特征和技术对相关领域的技术人员而言将是显而易见的。
附图说明
本发明的特征、目的、以及优点从以下结合附图的所述详细描述中将变得更加显而易见，其中相同的附图标记在整个附图进行对应标示，并且其中：
图1示出了根据一个或多个实施方式的简化系统图；
图2A示出了根据一个或多个实施方式的用于呈现用户界面的过程；
图2B示出了根据一个或多个实施方式的用于用户界面命令的过程；
图3A至图3I示出了根据一个或多个实施方式的开源架构（Spring）应用程序的示例性特征的图形表示；
图4示出了根据一个或多个实施方式的显示设备的显示窗口的图形表示；
图5示出了根据一个或多个实施方式的用户界面的图形表示；
图6A至图6D示出了根据一个或多个实施方式针对Spring应用程序的媒体上下文的图形表示；
图7示出了根据一个或多个实施方式的Spring应用程序功能的图形表示；
图8A和图8B示出了根据一个或多个实施方式的用于将设备与显示设备配对的过程；
图9A至图9F示出了根据一个或多个实施方式的用户体验特征；
图10示出了根据一个或多个实施方式的示例性流程图；
图11示出了根据一个或多个实施方式的Spring应用程序用户界面的一个或多个面板；
图12示出了根据一个或多个实施方式的发射台（launch pad）呈现的示例性表示；
图13示出了根据一个或多个实施方式的工具栏溢出菜单的图形表示；
图14示出了根据一个或多个实施方式的上下文面板的图形表示；
图15示出了根据一个或多个其它实施方式的上下文面板的图形表示；
图16示出了根据一个或多个实施方式的正在重放的重放列表的图形表示；
图17示出了根据一个或多个实施方式的全屏模式下的图形表示；
图18示出了根据一个或多个实施方式的用于对关注内容创建直接链接或快捷方式，以及用于将链接添加到发射台的快捷方式集合的过程；
图19示出了根据一个或多个实施方式的用于进行屏幕截图的过程；
图20示出了根据一个或多个实施方式的共享操作的图形表示；
图21示出了根据一个或多个实施方式的媒体的喜好功能；
图22示出了根据一个或多个实施方式的媒体的观看功能；
图23示出了根据一个或多个实施方式的Spring应用程序Widget的图形表示；
图24示出了根据一个或多个实施方式的Spring应用程序Widget的图形表示；
图25示出了根据一个或多个实施方式的用于呈现上下文面板的过程；
图26A至图26D示出了根据一个或多个实施方式的用于通过Spring应用程序进行的上下文面板呈现的示例性配置；
图27A至图27B示出了根据一个或多个实施方式的Spring应用程序和重放控制的图形表示；和
图28示出了根据一个或多个实施方式的用于在设备上提供键盘的过程。
具体实施方式
概述和术语
本发明一方面提供了用于提供设备上的内容或信息的系统、方法、设备和应用程序，所述内容与由显示设备所呈现的媒体相关联。在一个实施方式中，提供Spring应用程序，以允许一个或多个并行的用户或设备连接到显示设备（例如，TV等），并基于有效内容访问上下文的功能。Spring应用程序可以是给配套设备提供动态的、以内容为中心的、和内容感知的功能的应用程序（例如，“应用程序（app）”）。Spring应用程序可以感知显示设备上的有效内容，因此，可以向用户提供上下文信息和针对用户体验的定制功能。本发明的实施方式旨在提供在设备上Spring应用程序的功能性和Spring应用程序的呈现。所提到的汇接应用或汇接功能（如本文所使用的）可以与Spring应用程序或Spring特征互换。
在一个实施方式中，提供了Spring应用程序。Spring应用程序可能是关注的内容或媒体。作为示例，Spring应用程序可以允许设备（例如，移动设备，平板电脑等）提供和/或呈现信息，其中至少部分地基于显示设备所呈现的内容对信息、控制和呈现进行格式化。Spring应用程序可以有益地允许利用连接的设备的个性化。Spring应用程序可以对适当的设备卸载上下文的任务。Spring应用程序可以是显示设备（如TV）的扩展。Spring应用程序可以提供正常的应用程序，以满足用户的期望。Spring应用程序可以被配置成允许多个用户对浏览的内容进行操作。Spring应用程序可以与TV软件系统交互操作，如CinesenseTM平台和允许GTV4.0平台的用户界面。
本发明另一个方面涉及架构（如Spring架构），其在显示设备上运行，允许一个或多个移动设备执行的应用程序连接到显示设备、接收与显示设备的有效内容相关联的信息并且基于该内容向显示设备发送指令。
基于内容的类型和命令对该类型和内容标题的适用性，上下文面板可以涉及一个或多个定制的配置。作为示例，内容面板可以设置成包括命令，该命令可以用于操作或控制媒体的重放。Spring应用程序将避免或不具有针对功能或特征的面板，这些功能或特征不适用于内容的类型或不能与内容的类型或标题一起使用。
上下文功能允许用户界面的功能被定制为图形元素的应用和呈现的一个或多个功能。作为示例，基于由显示设备所呈现的内容或媒体的类型，用户界面可以修改信息的类型、信息的呈现、重放控制、重放控制的可用性等。除了功能可用的更改，显示特征可以针对特定类型的内容而被定制，以提供上下文内容。例如，相比于由显示设备所呈现的音乐内容，显示属性对于直播内容或重放的TV内容可能不同。
如本文中所使用，媒体可以涉及显示设备的内容以及由显示设备呈现的内容的一个或多个来源或竖井（silo）。内容可以包括视频数据、重放的或直播TV数据、视频点播（video on demand，VOD）、由显示设备的媒体中心存储的内容、音乐数据、唱片数据、图像数据、相册数据、具体的输入源和可以由显示设备运行或执行的应用程序。此处提及的有效内容是指显示设备显示或呈现的内容，或者与当前显示设备被调制或被设置的具体竖井相关联的内容。
除了提供与由显示设备显示的媒体和/或内容相关联的信息，Spring应用程序可以提供一个或多个控制功能和格式。发射台可以指由Spring应用程序所呈现的图形元素的布置，如瓦片网格、书签的网格、或允许选择特定的内容标题、内容标题的类型或发射井的其他图形表示。发射台可以提供对内容的快速访问，而无需导航菜单。发射台可以由用户选择和/或基于与Spring应用程序的用户交互来构成。
Spring应用程序可以配置成提供一个或多个用于获取所需的内容的快捷方式。与和显示设备直接交互相对照，在设备上显示快捷方式，使得用户可以操作该设备。以这种方式，Spring应用程序可以改进命令操作和命令操作的定位。
如本文所使用的，导航抽屉涉及图形菜单，图形菜单可以经由用户界面呈现显示为层或显示特征，其中，可以选择抽屉的元素，以允许对用户界面的导航和/或对显示设备的控制。
如本文所使用的，术语“一”或“一个”（非特指）应当是指一个或多于一个。术语“多个”应当是指两个或多于两个。术语“另一个”定义为第二个或更多个。术语“包括”和/或“具有”是开放式的（例如，包含）。本文所使用的术语“或”是解释为包含性的或是指任何一个或任何组合。因此，“A、B或C”意思是“如下：A；B；C；A和B；A和C；B和C；A，B和C中的任何一者”。当元素、功能、步骤或动作的组合以某种方式固有地相互排斥时，才发生该定义的例外。
贯穿本文的对“一个实施方式”、“某些实施方式”、“一种实施方式”或类似的术语的引用意味着结合实施方式描述的特定特征、结构、或特性包括在至少一个实施方式中。因此，贯穿本说明书这些短语在不同地方的出现不一定全部指的是同一个实施方式。此外，特定的特征、结构或特性可以以任何合适的方式在一个或多个实施方式上结合，而不受限制。
示例性实施方式
现在参照附图，图1示出了根据一个或多个实施方式的系统100的简化系统图。系统100可以被配置成用于通过显示设备105呈现媒体和通过设备110呈现与媒体相关联的内容。如图1所示，系统100包括显示设备105和设备110。设备110可以配置成通过网络（如家庭网络115）与显示设备105通信，以交换与由显示设备105呈现的与媒体相关联的内容。在一个实施方式中，可通过显示设备105将示出为1201-n的一种或多种类型的内容提供给设备110。除了内容，可以从显示设备105将元数据、上下文信息、截屏、以及其他形式的数据提供给设备110。根据另一个实施方式，内容1201-n的通信和呈现可以由通过设备110执行的应用程序来执行。根据一个或多个实施方式，设备110可以配置成执行Spring应用程序或汇接应用程序。
显示设备105包括显示器，该显示器配置成呈现媒体和内容，如视频、图像数据、文本数据、和音乐数据（例如，音频、艺术家姓名、唱片、歌曲名、唱片、音频数据等）中的一个或多个。根据一个实施方式，显示设备105可以配置成基于通过显示设备105的应用程序（例如，app）的执行，将内容提供给移动设备，如设备110。显示设备105可以配置成从一个或多个来源接收媒体。显示设备105可以为电视。在一个实施方式中，显示设备105包括运行应用程序的控制器106。控制器106可以联接到显示设备105的显示单元。在一个实施方式中，控制器106配置成针对显示设备105运行应用程序，应用程序配置成将有效内容提供给与应用程序相关联的一个或多个设备，如设备110。控制器106还可以在显示设备105上呈现图形显示。
设备110可以是执行应用程序的移动设备或平板电脑，该应用程序例如是通过显示设备105执行的内容共享应用程序。虽然图1示出了一个设备110，但是应当理解，系统100和用于内容共享的应用程序可以允许多个设备与显示设备105进行通信和交互操作。根据一个或多个实施方式，设备110可以包括显示器和界面（例如，触摸屏，输入等），以允许内容的呈现。在某些实施方式中，对于比平板电脑较小的移动设备，Spring应用程序在呈现方面可以改变，其相比于移动设备的布局呈现可以包括附加的图形元素。
根据一个实施方式，设备110可以配置成执行应用程序，该应用程序配置成提供一个或多个Spring特征或汇接特征，如在通过引用结合于此、名称为“用于多屏幕体验的设备和方法”的第61/886,241号临时申请中所描述的。所提到的Spring特征与如本文中所使用的提及的汇接特征可以是可互换的。根据一个实施方式，Spring特征可以与Spring应用程序相关联。在一个实施方式中，Spring应用程序与显示设备110的控制器106的操作平台集成在一起和/或交互操作。以这种方式，设备110的Spring应用程序可以配置成与显示设备105的Spring应用程序和/或显示设备105的媒体呈现平台交互操作。
根据一个实施方式，基于由显示设备105所呈现的，可以向设备110提供内容1201-n，内容1201-n可以是内容、元数据和/或与有效内容相关的上下文信息。根据另一个实施方式中，每次由显示设备105呈现的内容改变时，通过显示设备105运行的Spring应用程序将向设备110提供数据或内容。设备110可以基于超文本传送协议（HTTP）REST接口接收包括元数据和用于详细信息的查询的内容1201-n。
根据一个实施方式，系统100可以提供Spring架构。作为示例，显示设备105可以运行Spring应用程序，Spring应用程序允许由一个或多个移动设备（如设备110）执行的一个或多个应用程序连接到显示设备105，接收与显示设备105的有效内容相关联的信息，并基于所述内容向显示设备105发送指令/命令。Spring应用程序可以对显示设备105的有效媒体上下文提供实时察看，所述媒体上下文定义了用于观看应用程序、TV节目、视频、音乐、图像等的模式或输出配置。使用上下文知识，Spring应用程序可以在移动设备或用户设备（独立于显示设备）上呈现相对于由显示设备105显示的有效内容具有各种子上下文的应用程序。子上下文数据和内容可以允许用户发现更多有关通过显示设备105呈现的媒体的信息，对该内容（如，重放控制）采取措施，修改内容的属性（例如，观看状态、喜好等）和/或与他人（如共享，共享给X等）共享内容。
根据一个实施方式，设备110配置成运行应用程序，如Spring应用程序，其中，所述应用程序配置成基于由显示设备105所显示的内容来呈现用户界面，以及从显示设备105接收数据，其中，所述数据与显示设备105所显示的内容相关联。设备110还配置成基于从显示设备105接收的数据来通过应用程序呈现用户界面，其中，基于显示设备105所显示的内容呈现用户界面的图形元素和功能，并且其中，用户界面的图形元素是可选择的，以产生用于显示设备105的命令。
在某些实施方式中，设备110可以从一个或多个第三方1401-n经由通信网络125请求用于内容和/或补充内容的元数据。第三方1401-n可以涉及一个或多个内容提供商或服务器。请求130和响应135可以基于设备110和第三方1401-n之间的HTTP REST接口。
Spring应用程序可以提供用于设备110和/或显示设备105的一个或多个特征。在一个实施方式中，Spring应用程序可以允许设备110发现显示设备105并连接到显示设备105。例如，该特征允许Spring应用程序搜索网络115，以连接到显示设备105。连接到显示设备105可以包括认证步骤，以确保只有被授权的设备可以访问显示设备105的内容。
在一个实施方式中，Spring应用程序可以允许设备110显示有效的上下文信息。例如，该特征在显示设备105和Spring应用程序之间提供实时反馈。使用该反馈，每当显示设备105的媒体上下文变化时，显示设备105都将通知Spring应用程序。这些改变可以包括在输入、来源或竖井之间切换、和在媒体中心观看视频或从显示设备105的应用程序中心启动应用程序。在另一个实施方式中，Spring应用程序允许有效的上下文信息被显示为集合。例如，该特征允许用户查看有效的集合，其中集合为多条内容的逻辑组合，如相册、音乐唱片和音乐重放列表。
在一个实施方式中，Spring应用程序可以允许设备110提供上下文历史。例如，该特征跟踪最后预定数量的若干用户已表示感兴趣的上下文。用户可以基于激活的子上下文具体表达对媒体信息或上下文信息的兴趣。根据一个实施方式，可以从显示设备105提供用于内容信息的子上下文信息。因此，Spring应用程序的用户可以查看关于由显示设备105已知的有效内容的信息和/或元数据。例如，对于直播TV频道，用户可以查看频道信息（例如，名称、呼号、频道号等）和节目信息（例如，名称、说明、开始时间、持续时间等）。可以从来自外部来源的内容信息提供子上下文信息。使用该特征，设备110可以连到一个或多个第三方1401-n，以了解更多有关显示设备105所呈现的具体片段的内容或媒体的信息。可以对单个片段的媒体提供子上下文信息重放控制。例如，当使用重放子上下文时，可以操作设备110，以基于媒体或内容的类型来通过显示设备105控制有效内容的重放。例如，对于音乐，重放控制可以包括重放、暂停、快进、倒回等。对于照片或图像数据，可能不存在任何重放控制。对于视频内容，重放控制可以是重放、暂停、快进、倒回等。对于TV频道或广播媒体，重放控制可以是频道改变控制。
根据另一个实施方式中，可以提供子上下文信息的重放控制用于媒体集合。例如，当使用重放子上下文时，可以操作设备110，以基于集合的类型控制有效集合的重放。例如，对于相册/幻灯片，重放控制可以包括开始/停止、上一页、下一页、重放等。例如，对于音乐唱片，重放控制可以包括上一曲、下一曲、以及设置重放顺序（重复模式、歌曲顺序-随机、重放等）。例如，对于音乐重放列表，重放控制可以包括上一页、下一页、以及设置重放顺序（重复模式，歌曲顺序-随机、重新排序、从重放列表中删除、从…开始重放等）。
在一个实施方式中，Spring应用程序可以允许设备110提供Spring标记（Springmark）。例如，该特征允许用户通过保存随后由用户激活的特定的上下文信息来使Spring应用程序个性化，并将用户直接带到显示设备105上的内容。
在一个实施方式中，Spring应用程序可以允许设备110为喜好的内容和观看的内容提供任务。对于标记为喜好的内容，Spring应用程序允许用户在显示设备105上将有效上下文设置成喜好的项目。喜好的特征仅适用于可以设置为喜好的媒体上下文。作为示例，应用程序可能在某些实施方式中不能够设置喜好，而视频内容可以。观看的任务允许用户在显示设备105上改变有效内容的“观看”状态。该特征可以被设置为只应用于支持观看的指示器的媒体内容。
在另一个实施方式中，Spring应用程序允许子上下文共享。例如，Spring应用程序可以允许用户用特定的社交网络或通过一般共享（例如，短信（SMS）/彩信（MMS）、电子邮件、电子消息等）来共享有关有效内容的信息。
在另一个实施方式中，Spring应用程序允许启用或禁用字幕和隐藏式字幕的任务特征。例如，对于有效内容，设备110的用户可以使用Spring应用程序来打开/关闭字幕轨道或隐藏式字幕轨道。子上下文可以只适用于支持字幕或隐藏式字幕的媒体上下文。在另一个实施方式中，Spring应用程序允许阻断内容、输入或显示设备105的具体竖井的任务特征。例如，在设备110上的Spring应用程序允许用户激活家长控制，用于基于等级阻止TV节目/视频、阻止有效的TV频道、以及阻止电流输入/竖井中的一者或多者。
在另一个实施方式中，Spring应用程序允许子上下文数据输入。例如，Spring应用程序可以用作显示设备105的输入方法。当显示设备105期望进行文本输入时，Spring应用程序将向用户提供图形键盘，以使得输入数据更容易。
在另一个实施方式中，Spring应用程序允许提供显示、隐藏和/或删除控件的任务特征。例如，Spring应用程序可以允许用户显示、隐藏和/或删除有效内容。这些特征可以限制为仅用于媒体中心内容，但也可以用来隐藏特定的TV频道。
在另一个实施方式中，Spring应用程序允许对有效媒体上下文的属性重新命名的任务特征。例如，该特征可以应用于对有效输入（例如从高清晰度多媒体接口（HDMI）到游戏机Xbox）重新命名和/或改变在媒体中心重放的歌曲的名称（如将轨道01改成“难以呼吸”（Harder to breath））。
在另一个实施方式中，Spring应用程序允许对有效媒体进行屏幕截图的任务特征。屏幕截图可以被保存到显示设备105的本地存储器中。然后图像可用于共享子上下文的一部分。在另一个实施方式中，Spring应用程序允许将有效内容从显示设备105下载到设备110的任务特征。该特征可以适用于显示设备105的媒体中心中可用的照片、相册、音乐、音乐唱片和视频。
在另一个实施方式中，Spring应用程序允许在显示设备105上发出通知的通知特征，以通知用户已成功执行具体任务。通知可以包括共享通知、阻止通知以及进行屏幕截图的通知中的一个或多个，所述共享通知是共享于显示设备105的公告，所述阻止通知将向用户通知内容已经被阻止以及启用家长控制，所述进行屏幕截图的通知将指示屏幕截图被保存的位置。
在另一个实施方式中，Spring应用程序允许搜索特征，以提供用于搜索显示设备105的内容的手段。例如，搜索可以包括对所有内容的全局搜索或在当前上下文中的上下文感知搜索。
图2A示出了根据一个或多个实施方式的用于呈现用户界面的过程。过程200可以配置成呈现与显示设备所呈现的内容相关联的用户界面。
过程200可以通过设备由运行应用程序的设备（例如，设备110）来启动，其中，在框205处，所述应用程序配置成基于显示设备（例如，显示设备105）所显示的内容来呈现用户界面。根据一个实施方式，应用程序是Spring应用程序，该Spring应用程序配置成将设备与显示设备配对，并基于在设备上所呈现的用户界面的操作来给显示设备提供命令。运行应用程序包括执行应用程序，以启动设备和显示设备的配对。至少部分地基于具体的内容标题和与内容标题相关联的媒体类型中的一个或多个，所述应用程序通过应用程序的定制功能和图形元素的呈现来提供上下文功能。
在方框210处，设备从显示设备接收数据，其中该数据是与显示设备所显示的内容相关联的数据。接收数据包括接收用于显示设备所呈现的有效内容的元数据。
在方框215处，基于从显示设备接收的数据，在设备上通过应用程序呈现用户界面，其中，基于显示设备所显示的内容呈现用户界面的图形元素和功能，并且用户界面的图形元素是可选择的，以生成用于显示设备的命令。呈现应用程序包括呈现一个或多个图形元素，以在显示设备上提供对内容的重放的快速访问。在一个实施方式中，应用程序的呈现包括基于一个或多个上下文特征来对用户界面进行配置，所述一个或多个上下文特征与显示设备所呈现的内容相关联，其中用于显示设备所显示的内容的上下文信息通过应用程序在设备上呈现为信息元素。根据另一个实施方式，应用程序的呈现包括多个图形元素的呈现，对于应用程序，所述图形元素是可选择的，以启动存储为书签的具体内容标题的重放。
过程200可以可选地包括，对于显示设备，由应用程序输出控制命令，以控制显示设备的操作，其中在方框220处，控制命令是基于在设备上检测到的用户对应用程序的输入来生成的。过程200还可以包括在设备上通过应用程序存储图像数据和媒体数据中的至少一者，其中图像数据和媒体数据中的至少一者由显示设备上所呈现的内容生成。
图2B示出了根据一个或多个实施方式的用于用户接口命令的过程。过程250可以在框255处通过运行应用程序的设备来启动。
在框260处，应用程序可以配置成加载和/或存储一个或多个书签或Spring标记，应用程序可以使用书签或Spring标记来访问内容。在框265处，运行Spring应用程序的设备可以检测书签的选择。作为示例，选择可以涉及用户界面的触摸命令。在框270处，命令可以通过设备输出到显示设备，用于与书签的选择相关联的内容的选择。
图3A至图3I示出了根据一个或多个实施方式的Spring应用程序的示例性特征的图形表示。根据一个实施方式，如305所示，显示设备（例如，显示设备105）可以呈现媒体，如电影、视频、图像数据等。Spring应用程序在设备（例如，设备110）上可以响应于内容305而呈现一个或多个图形元素、控制和/或显示配置。Spring应用程序可以在设备（例如，设备110）上显示Spring主页306，其可以包括发射台，以改变显示设备（例如，显示设备105）所呈现的内容和/或媒体。Spring应用程序可以显示作为桌面Widget的Spring Widget 307和/或示出运行活动状况的Spring通知308。Spring应用程序可以响应于有效媒体的选择而显示媒体上下文309，其中每个媒体上下文具有多个子上下文中的一个。媒体上下文309可以包括待确定的子上下文310（例如，尚未由Spring应用程序构成）、重放子上下文311、动作子上下文312、信息子上下文313、待确定的子上下文314（例如，与显示设备不同步的媒体上下文）。媒体上下文的历史查看315可以基于先前查看的媒体而呈现。响应于媒体上下文309，Spring应用程序可以呈现媒体任务呈现316，以包括一个或多个媒体任务，如任务分级呈现317。Spring应用程序也可以呈现嵌套内容呈现318。
图3B示出了作为桌面Widget的Spring Widget 307，其包括与可选择的媒体相关联的图形元素319。基于由显示设备所呈现的媒体，图形元素319可以由设备（例如，设备110）进行显示。图3C示出了Spring通知308，其示出了与可选择的媒体相关联的通知栏320。基于由显示设备所呈现的媒体，图形元素319可以由设备（例如，设备110）进行显示。图3D示出了Spring主页306，其包括形成发射台321的可选择元素，以改变由显示设备所呈现的内容和/或媒体。
图3E示出了媒体内容和包括重放控制322的重放子上下文311。图3F示出了媒体内容和信息子上下文313，该信息子上下文313包括媒体内容323的说明。图3G示出了包括动作元素324的动作子上下文312。图3H示出了具有多个共享操作325的媒体任务呈现316。图3I示出了具有消息326的任务分级呈现317，以添加包括共享内容的消息。
图4示出了包括通知405的显示设备的显示窗口400的图形表示，通知405可以在用户设备上通过Spring应用程序来生成和由用户设备传输到显示设备。
图5示出了根据一个或多个实施方式的用户界面的图形表示。Spring应用程序的呈现可以包括Spring主页配置505、历史配置510和当前配置515，Spring主页配置505提供了用于选择或启动媒体或内容的呈现的起点，历史配置510显示了历史内容，当前配置515显示了有效的媒体内容。Spring主页配置505、历史配置510和当前配置515的每一者都可以包括菜单栏506，以允许在配置之间进行切换。Spring主页配置505可以包括图形元素507，图形元素507指示可以被查看或由显示设备所呈现的媒体内容。Spring主页配置505包括一个或多个图形元素508，其可以与媒体的标题或Spring标记相关联。历史配置510包括用于先前被查看或被访问的内容的图形元素509。当前配置515包括用于有效内容的上下文动作510。
图6A至图6D示出了根据一个或多个实施方式的用于Spring应用程序的媒体上下文的图形表示。媒体上下文600可以涉及不同形式的媒体，其可以由显示设备来呈现，并且可以被选择、被查看、或者通过Spring应用程序给用户设备提供上下文信息。媒体上下文600包括视频/图像媒体605，媒体中心媒体610和输入源615。
图6B示出了输入字段606，其可以通过Spring应用程序用来提供文本、注释、命令和/或搜索术语以选择媒体。视频/图像媒体605包括屏幕共享功能607、直播TV媒体608和视频点播（VOD）609。屏幕共享功能607允许Spring应用程序的用户捕获显示设备的屏幕截图。直播TV媒体608包括播送的TV 611和电缆提供商内容612。直播TV媒体608可以包括元数据613，例如频道信息614和显示信息616。视频点播（VOD）609可以包括媒体源617，媒体源617包括用于媒体618和第三方媒体提供商619的通用应用程序。
图6C示出了媒体中心媒体610，其可以与媒体中心竖井620相关联，媒体中心竖井620可以提供用于个人媒体的展示媒体621、用于个人视频的视频集合622、我的照片623、我的音乐624、以及音乐媒体625，音乐媒体625可以提供当前正在重放的音乐626和特定的音乐627的特征。用于连接到其他来源628的媒体中心特征可以与输入源629（例如，通用串行总线（USB）、媒体等）相关联。视频集合622可以包括与用于常见的媒体和特定视频的视频重放相关联的特征630。我的照片623包括与用于常见的图像数据和特定图像的图像呈现相关联的特征631以及用于相册的特征632。我的音乐624可以包括针对特定音乐标题的与音乐重放相关联的特征633和用于唱片的特征634。
图6D示出了输入源615，其包括混合源635、应用程序源636、HDMI源637、视频图形阵列（VGA）源638、组件源639和音频/视频（audio/video，AV）源640。应用程序源636可以包括通用应用程序641，其提供了应用程序名称642、浏览器特征643、设置644和Widget（微件）645。
图7示出了根据一个或多个实施方式的Spring应用程序功能的图形表示。根据一个实施方式，Spring应用程序可以允许设备（例如，移动设备等）与显示设备（例如，TV等）之间的连接性和交互操作性。图7示出了Spring设备705、Spring应用程序710和显示设备715。根据一个或多个实施方式，Spring应用程序还允许与其他配套设备的连接性，如配套设备720、与设备（例如，照相机）的部件相关联的系统725以及显示为730的一个或多个元数据源。Spring应用程序710可以提供多种功能和特征。
配置功能731允许设备的配置，以允许对Spring呈现的定制以及基于一个或多个设置对设备的控制。配对功能732允许设备与显示设备（例如，由CinesenseTM供电的TV等）配对。配对的前提条件包括在设备和TV上都安装了Spring应用程序。配对功能732包括检测用户命令，以发现在同一本地网络上的一个或多个显示设备，Spring应用程序显示了发现的设备的列表，检测用户对要配对的显示设备的选择，Spring应用程序提示用户进入认证，如果个人识别码（PIN）正确，则显示设备添加设备。可以将多个Spring应用程序与单个显示设备配对。
标签733可以用来标记媒体，并且可以与一个或多个标签功能734相关联。标签功能734允许创建和删除Spring标记和标记为喜好的或已观看中的一者或多者，以显示/隐藏内容、以阻止内容、以及对输入重新命名。创建Spring标记允许用户为项目创建导航宏/快捷方式。Spring标记可以用于避免用户界面的多级导航，并且可以允许将用户直接带到所期望的频道或内容。在创建完成后，Spring标记可以被保存，并且在发射台上可供选择。删除Spring标记允许用户删除不再希望用于Spring应用程序的Spring标记。标记为喜好的允许用户将项目（例如特定媒体的标题）或内容由用户标记为喜好的，以在稍后的时间可以快速访问内容。标记为已观看允许观看者快速确定内容是否已经查看过，这有助于确定待观看的下一集。显示/隐藏内容特征可以是标签功能734的一部分，以控制哪些内容作为集合的一部分出现。该特征对于没有被整个家庭共享的内容是有益的。阻止内容允许阻止访问某些项目，如特定的频道或应用程序。对内容重新命名允许通过在设备（例如，设备110）上显示键盘/文本输入面板以向显示设备（例如，105）提供文本来对内容进行重新命名。对输入重新命名允许以类似的方法将输入重新命名以描述与之连接的设备。基于一个或多个标签功能734，Spring应用程序可以提供发布内容特征742和/或发布TV状态743。这些特征可以允许使用与显示设备分开的设备来共享内容、图像或屏幕截图。
浏览器735允许标记媒体并且可以与一个或多个标签功能734相关联。浏览功能734允许浏览Spring应用程序使用历史、浏览有效数据、以及浏览集合。浏览Spring历史允许用户查看先前的Spring上下文，如观看或打开的最后若干个项目的列表。浏览有效内容允许显示设备向Spring应用程序发送有效内容已经改变的通知，以向用户提供具有有效内容的信息。浏览集合允许用户查看与该集合相关联的内容以及集合中的内容。
控制737允许控制功能738中的一个或多个。控制功能738可以包括重放或重放集合、启用字幕、共享、数据输入、进行屏幕截图、删除内容、卸载Spring应用程序、启动Spring标记和下载内容中的一者或多者。重放特征允许重放控制，以从配套设备上的Spring应用程序控制显示设备上的有效内容。重放控制可以在由显示设备所显示的有效内容上出现，以可能地掩盖内容的部分呈现。用户可能能够从配套设备选择和控制重放。重放可以应用于视频、歌曲、图像、视频点播，来自应用程序中心（App Center）的应用程序、TV直播等。重放集合功能允许有效集合的控制，并可以应用于相册、音乐唱片和音乐重放列表中的一个或多个。
启用字幕特征允许用户通过显示设备使用Spring应用程序来启用字幕/隐藏字幕。功能738的共享特征允许共享有关正在观看的内容的消息。共享可以与撰写消息744、拍照745、和选择图片746的特征/功能相关联。
数据输入特征提供了允许将数据输入到显示设备的键盘（例如，显示的/图形的）。进行屏幕截图可以允许用户从配套设备捕获显示设备的屏幕截图。所捕获的数据可以使用社交媒体、电子邮件等进行共享。删除内容的特征允许用户删除显示设备的媒体中心所存储的内容。卸载应用程序的特征允许用户使用Spring应用程序将从应用程序中心下载的应用程序卸载。启动Spring标志允许检测用户对Spring标记的选择以及启动或导航至Spring标记相关联的媒体。下载内容的特征允许用户将显示设备上的有效内容下载到配套设备。
查看739允许用户查看显示设备的当前状态。例如，Spring应用程序允许用户在配套设备上查看显示设备当前呈现的输入中的设置或位置。查看功能740可以包括用于内容信息、外部内容信息、媒体上下文以及通知中的一者或多者的功能。内容信息功能可以允许Spring应用程序提供涉及有效内容的信息，而不必在显示设备（例如，TV）上呈现指南或信息。作为示例，内容信息可以包括频道元数据、事件/节目元数据、音乐唱片元数据、音乐元数据、图像元数据、相册元数据、视频元数据、设备数据和应用程序元数据中的一者或多者。查看外部内容信息的功能允许Spring应用程序从一个或多个第三方服务，诸如媒体数据库、娱乐服务器等，检索所呈现的媒体或有效内容相关联的数据。外部内容信息可以基于发布的控制元数据功能747，其被配置成获取和/或存储用于显示设备所呈现的内容的元数据。通知特征允许将由Spring应用程序进行的动作提供给显示设备。在这种情况下，显示设备可以确认动作并向用户呈现该动作已经完成的消息。
搜索741允许设备的配置进行Spring呈现的定制和基于一个或多个设置进行设备的控制。
根据另一个方面，Spring应用程序可以提供用户体验架构。Spring应用程序可以提供动态的、以内容为中心的以及内容感知的功能。用户体验架构可以提供一个或多个图形元素和过程，以允许上下文的呈现、导航的流线型化。
图8A和图8B示出了用于将设备（例如，设备110）与显示设备（例如，显示设备105）配对的过程800。在框805处，Spring应用程序可以可选地呈现醒目页806，其是包括标识或图标以指示Spring应用程序的启动的起始页面。在方框810处，Spring应用程序可以呈现主页811，其可以包括将设备与显示设备配对的消息。在方框815处，Spring应用程序搜索设备并且呈现816正在通过家庭网络搜索显示设备的指示。在框820中，Spring应用程序呈现允许用户选择一个或多个用于配对的设备的页821。基于通过Spring应用程序检测的选择，可以在825处发送配对请求以及可以呈现出配对列表的呈现826或用于认证码的请求827。除了配对请求，在828处，显示设备还可以呈现对话框或弹出框，对话框或弹出框指示设备正在尝试配对。配对完成后，在830处，Spring应用程序可以呈现应用程序教程，其包括主要功能的呈现837。
图9A至图9F示出了根据一个或多个实施方式的用户体验特征。图9A示出了用户体验特征的概述900，其包括入口点和发射台特征905、媒体竖井910、屏幕共享和混合竖井915、媒体内容920、和媒体中心内容925。用户体验版式可以用于用户体验特征中一个或多个的图形元素。
图9B示出了入口点和发射台特征905。进入Spring应用程序906的入口点可以包括Spring Widget、锁定Spring Widget、Spring应用程序和通知托盘。解除设备配对的特征907可以包括添加设备并搜索设备的特征。将设备与新的TV配对的特征908可以包括FTE、添加设备和搜索设备、验证和教程的特征。导航抽屉的特征909可以包括导航抽屉菜单以及一个或多个发射台的特征。
图9C示出了媒体竖井910，其包括用于具有扫描频道的直播TV的竖井911、用于不具有扫描频道的直播TV的竖井912、用于点播竖井911、应用程序中心竖井914、媒体中心竖井916和输入源竖井917。图9D示出了屏幕共享和混合竖井915，其包括不具有屏幕共享会话控制的屏幕共享竖井918、具有屏幕共享会话控制的屏幕共享竖井919、具有包括的应用程序的混合竖井921以及不具有包括的应用程序的混合竖井922。图9E示出了媒体内容920，其包括电影923、电视节目924、以及应用程序926。图9F示出了媒体中心内容925，其包括文件夹927、视频928、相册929、音乐唱片930和设备931。相册928可以基于个人的照片932。类似地，音乐唱片930可以基于与一个或多个重放列表934相关联的歌曲数据933。可以提供全屏模式935用于图9A至图9F的内容的呈现。
图10示出了根据一个或多个实施方式的示例性的流程图。在过程1000中，通过在1001处通知托盘的呈现、在1002处Spring Widget的呈现，在1003处的Spring应用程序、在1004处的导航抽屉和/或在1005处的发射台可以启动Spring应用程序的呈现。在某些情况下，无论何时重放音乐，都可以提供重放列表抽屉1006的呈现。过程1001在1007处可以包括关注内容的呈现，关注内容例如是信息1008、动作1009和集合1010中的一者或多者，之后是全屏模式1011。
图11示出了Spring应用程序用户界面的一个或多个面板。根据一个实施方式，Spring应用程序的面板1100可以存在于四个主要的层。发射台和导航层1101是第一层和对内容的访问点在第二层1102中。层1102是包括具有信息、动作和相册的上下文面板的第二层。第三层1103可以是正在重放的重放列表。第四层1104可以是从每隔一个面板上的具体动作调出的模式层。
图12示出了根据一个或多个实施方式的发射台呈现的示例性表示。Spring应用程序包括导航抽屉1205，其从发射台是可访问的，导航抽屉1205在选择时向内滑动。导航抽屉1205提供了导航至关注的内容的选项或返回到触摸板的选项，用于可以在抽屉中应用的整体功能。发射台1210包括快捷方式项目以及与关注内容的链接。发射台1210和Spring应用程序可以通过导航手势操作，使得用户可以通过点击工具栏中的抽屉而关闭导航抽屉1205，通过点击快捷方式将用户带到具体的位置，和/或点击关注的项目可以打开上下文面板。从边缘滑动可以提供当在发射台中从左边缘滑动时打开导航抽屉1205和通过从右边缘滑动而关闭导航抽屉1205中的一者或多者。向上或向下滑动可以允许滚动。
发射台1210的特征1215可以包括工具栏、关注区域内容、快捷方式集合以及导航抽屉1205。工具栏可以位于发射台1210和导航抽屉1205两者的顶部，且包括导航抽屉图表、标识、面板瓦片快捷方式、正在重放的指示器、快捷方式快速添加以创建关注的快捷方式、和溢出菜单。发射台1215的关注区域内容与当前重放的或由显示设备显示的内容同步。内容的概要可以重点以主要信息显示，如名称、类型和日期。
图13示出了根据一个或多个实施方式的工具栏溢出菜单的图形表示。溢出菜单1300可以包括搜索功能、与新TV配对，对TV重新命名、与TV解除配对、共享应用程序、检查更新、和显示教程特征中的一者或多者。搜索功能可以在设备上启动数据输入元件，以启动全局搜索。与新TV配对触发了配对过程。对TV重新命名使TV的名字个性化。与TV解除配对允许设备与TV断开。共享应用程序允许与一个或多个其他用户共享应用程序和网络连接的手段。检查更新允许检查Spring应用程序更新的手段。开启教程启动了应用程序的教程。
图14示出根据一个或多个实施方式的上下文面板的图形表示。Spring应用程序的呈现1400可以包括上下文面板1405的呈现。如当用户选择关注的内容时，上下文面板1405可以在同一层级。可以提供上下文面板用于信息（例如，关于关注内容的上下文信息）、动作（例如，用于关注内容的上下文动作）和唱片（例如独家收集的唱片集，其可以包括用于唱片集的网格视图和列表视图）。
图15示出了根据一个或多个其它实施方式的上下文面板的图形表示。上下文面板可以包括一个或多个特征，这些特征包括工具栏、关注区域的内容、标签栏、信息面板、动作和唱片集。工具栏1505可以位于上下文面板的顶部，并且可以使用户返回到发射台。关注区域的内容1506内容可以包括关注内容的概要图像和名称、类型等。信息面板1510包括关于关注内容的总体信息，如主要信息或次要信息。动作1515允许重放、全局动作和/或媒体的具体动作。可以基于媒体的类型来定制或选择动作1515。唱片集1520可以以网格视图的方式来显示。唱片集1525以列表视图的方式来显示。
图16示出了根据一个或多个实施方式的正在重放的重放列表的图形表示。工具栏选择示出为1605，以触发正在重放的重放列表1610的呈现。当用户在显示设备的媒体中心时，正在重放的重放列表可以仅在某些实施方式中可用。在一首歌的重放以及进行选择以将歌曲添加到重放列表期间，当指示器出现在工具栏中时，用于正在重放的重放列表的抽屉可以是可用的。重放列表的触摸命令或点击可以打开重放列表。类似地，滑动命令可以打开和关闭重放列表。
图17示出了根据一个或多个实施方式的全屏模式的图形表示。全屏模式1700可以填充显示面板的屏幕并且覆盖所有面板。呈现的模式内容可以基于命令来触发，以呈现全屏模式。例如，如果全屏模式通过搜索来触发，数据输入字段和搜索历史可以通过Spring应用程序来提供。
根据另一个实施方式，Spring应用程序可以提供一个或多个全局动作。图18示出了根据一个或多个实施方式的用于对关注的内容创建直接链接或快捷方式并且将链接添加到发射台的快捷方式集合的过程。过程1800包括Spring上下文面板1805的显示、用于从发射台创建书签的选择1810、以及将书签添加到发射台1815。
图19示出了根据一个或多个实施方式的用于进行屏幕截图的过程。过程1900包括Spring上下文面板的显示1905、选择1910以及在框1911处将照片库的图像数据添加到发射台，所述选择1910可以是屏幕点击，用于从发射台创建屏幕截图。在框1915处，可以更新通知托盘。
图20示出了共享操作的图形表示。在框2005处，在动作面板上的共享选择2006可以在点击时共享屏幕截图。在框2010处，通过屏幕截图捕获器2011，屏幕截图被捕获并且显示设备的屏幕截图被下载到配套设备或用户设备。在框2015处，可以选择应用程序，以用于共享图像数据，其中Spring应用程序向用户提供共享图像数据的选择2016。在框2020处，TV屏幕截图被共享，且在2021处，Spring应用程序允许用户将消息添加到图像。
根据另一个实施方式中，Spring应用程序可以提供专用于媒体的功能。图21示出了针对媒体的喜好功能。通过Spring应用程序可以使用过程2100来将有效内容设置成喜好的项目。在2105处，显示Spring连接面板以及点击喜好项。在2110处，显示设备更新呈现，以指示喜好项被选择，并且在2115处，配套设备上的Spring应用程序更新呈现，以指示喜好项的选择。
图22示出了用于媒体的观看功能。通过Spring应用程序可以使用过程2200来将有效内容设置为关注项目。在2205处，显示Spring连接面板以及点击已观看的。在2210处，显示设备更新呈现，以指示将媒体标记为已观看，并且在2215处，配套设备上的Spring应用程序更新呈现，以指示已观看项目的选择。
附加的媒体功能可以包括下载功能，以允许Spring应用程序将媒体下载到配套设备。在某些实施方式中，Spring应用程序将阻止下载被保护的材料。其他功能包括隐藏媒体或内容、启用/禁用已隐藏的字幕和字幕、从应用程序数据库卸载应用程序和对显示设备的输入源重新命名。
图23示出了Spring应用程序Widget的图形表示。根据一个实施方式，Widget是最低版本的Spring应用程序，其可以被放置在移动设备的桌面或用户界面屏幕上。Widget2305可以显示在设备的桌面/用户界面屏幕2300上。如同动作按钮2315，快捷方式图标2310可以包括在Widget 2305中，动作按钮2315可以用于与TV的关注内容交互。如图24所示，Spring应用程序Widget可以显示在移动设备的屏幕上。Widget 2405占据了显示窗口的一部分，但可以配置成提供Spring应用程序的相同或相似的特征。
图25示出了根据一个或多个实施方式的用于呈现上下文面板的过程。根据一个实施方式，基于媒体的上下文面板由显示设备呈现。图25示出了用于直播TV的上下文面板的呈现，然而应该理解的是，上下文面板可以针对其它形式的媒体进行呈现。过程2500可以包括将Spring应用程序呈现为通知托盘2505、Spring Widget 2510或Spring应用程序图标2515中的一者或多者。基于用户的操作、导航抽屉2520或发射台2525的操作，Spring应用程序可以基于用户操作显示上下文面板2530。上下文面板的呈现也可以基于呈现的媒体。例如对于直播TV，上下文面板2530可以包括用于播送的节目的一个或多个动作。基于用户动作，Spring应用程序可以显示全屏模式视图2535。
图26A至图26D示出了根据一个或多个实施方式的用于通过Spring应用程序进行上下文面板呈现的示范性配置。图26A示出了Spring应用程序2605的呈现，Spring应用程序包括关注区域2610，以识别竖井图表、竖井名称和消息。图26B示出了全局动作2615，其包括由用户进行选择的快捷方式、屏幕截图和共享功能。图26C示出了关注区域2620，其包括用于重放的节目和播送的信息2625的关注区域。图26D示出了用于全局动作的上下文面板2630和用于媒体特定动作的面板2635，媒体特定动作例如是喜好的频道、喜好的演出、隐藏字幕、隐藏、搜索等。
在图26A至图26D的上下文呈现示出用于直播TV的上下文面板的呈现时，应该理解，上下文面板可以针对其它形式的媒体进行呈现，其它形式的媒体包括视频点播（VOD）、媒体中心内容、音乐和图像数据。
图27A至图27B示出了根据一个或多个实施方式的Spring应用程序和重放控制的图形表示。图27A示出了包括重放控制2705的Spring应用程序2700。根据一个实施方式，可以基于媒体的类型、重放的阶段、命令的适用性来禁止和/或修改重放控制。作为示例，图27B示出了重放命令2710，其中重放命令2715显示为被禁用且不可操作。例如，当不存在待被重放的附加录音时，重放命令2715可以涉及上一录音命令或下一录音命令。
图28示出了根据一个或多个实施方式的用于在设备上提供键盘的过程。过程2800允许通过设备（例如，设备110）来显示键盘。在某些实施方式中，显示设备（例如，显示设备105）可以显示键盘，以允许用户输入文本字符串或字符，用于进行显示设备的操作，如在2806处数据输入字段的呈现。在2810处，在设备（如与显示设备分开的配套设备或移动设备）上将呈现键盘，该键盘包括数据输入模式2811，以允许文本和/或其它字符的数据输入。在2815处，Spring应用程序可以切回到显示设备键盘，包括在显示设备上数据输入的呈现2816。根据一个实施方式，不限制数据输入可以从显示设备切换到配套设备或者从配套设备切换到显示设备的次数的量。
尽管已经参考其示例性的实施方式具体显示并描述了本发明，但是本领域的技术人员可以理解，在不脱离所要求保护的实施方式的范围的情况下，可以在形式和细节上进行各种改变。

Claims (15)

1.一种用于呈现与显示设备所呈现的内容相关联的用户界面的方法，所述方法包括：
在设备上运行应用程序，其中，所述应用程序配置成基于所述显示设备所显示的内容呈现用户界面；运行所述应用程序包括执行所述应用程序，以启动对所述设备与所述显示设备的配对;
接收数据，其中，所述数据与所述显示设备所显示的内容相关联，接收数据包括接收用于所述显示设备所呈现的有效内容的信息和/或元数据；
基于从所述显示设备接收的数据在所述设备上呈现用户界面，其中，基于所述显示设备所显示的内容来呈现所述用户界面的图形元素和功能，所述功能包括查看关于由所述显示设备发送的关于所述有效内容的信息和/或元数据；
根据所述显示设备上的有效内容的信息和/或元数据呈现有效的上下文信息；
当所述显示设备的有效内容发生改变时，接收所述显示设备发出的通知，以更新上下文信息。
2.根据权利要求1所述的方法，其中， 所述应用程序配置成：当显示设备期望进行文本输入时，所述用户界面呈现图形键盘。
3.根据权利要求1所述的方法，其中， 所述方法还包括通过所述应用程序搜索所述显示设备上的内容，所述搜索包括对所有内容的全局搜索或在当前上下文中的上下文感知搜索中的其中一种。
4.根据权利要求1所述的方法，其中，所述应用程序还被配置连接到一个或多个第三方，以了解更多有关于显示设备所呈现的具体片段的内容或媒体信息。
5.根据权利要求1所述的方法，其中，所述应用程序的呈现可以包括主页配置、历史配置和当前配置，主页配置提供了用于选择或启动媒体或内容的呈现的起点，历史配置显示了历史内容，当前配置显示了有效的媒体内容。
6.根据权利要求1所述的方法，在所述用户界面上的一部分区域呈现与所述显示设备相一致的窗口界面，另一部分区域呈现与该窗口界面相关的图层，其中所述图层包括启动层、包括用于内容访问的上下文面板、用于展示播放列表的第三层、以及从面板上动作调出的模式层中的至少一个。
7.根据权利要求1所述的方法，其中，所述方法还包括通过所述应用程序为所述显示设备输出控制命令，以控制所述显示设备的操作，其中，基于检测到的对所述设备上的所述应用程序的用户输入来生成所述控制命令。
8.根据权利要求1所述的方法，其中，所述方法还包括在所述设备上通过所述应用程序存储图像和媒体数据中的至少一者，其中，图像和媒体数据中的所述至少一者由所述显示设备所呈现的内容来生成。
9.一种显示系统，该显示系统包括：
显示设备，该显示设备配置成呈现内容；和
设备，该设备联接到所述显示设备，其中所述设备配置成：
运行应用程序，其中，所述应用程序配置成基于显示设备所显示的内容呈现用户界面；运行所述应用程序包括执行所述应用程序，以启动对所述设备与所述显示设备的配对;
从所述显示设备接收数据，其中，所述数据与所述显示设备所显示的内容相关联，接收数据包括接收用于所述显示设备所呈现的有效内容的信息和/或元数据；
基于从所述显示设备接收的数据在设备上呈现用户界面，其中，基于所述显示设备所显示的内容来呈现所述用户界面的图形元素和功能，并且能够选择所述用户界面的图形元素，以生成用于所述显示设备的命令；所述功能包括查看关于由所述显示设备发送的关于所述有效内容的信息和/或元数据；
根据所述显示设备上的有效内容的信息和/或元数据呈现有效的上下文信息；
当所述显示设备的有效内容发生改变时，接收所述显示设备发出的通知，以更新上下文信息。
10.根据权利要求9所述的显示系统，其中，所述应用程序配置成：当显示设备期望进行文本输入时，所述用户界面呈现图形键盘。
11.根据权利要求9所述的显示系统，其中，所述应用程序还被配置连接到一个或多个第三方，以了解更多有关于显示设备所呈现的具体片段的内容或媒体信息。
12.根据权利要求9所述的显示系统，其中，所述应用程序配置为：搜索所述显示设备上的内容，所述搜索包括对所有内容的全局搜索或在当前上下文中的上下文感知搜索中的其中一种。
13.根据权利要求9所述的显示系统，其中，所述应用程序的呈现包括多个图形元素的呈现，所述多个图形元素是能够选择的，以启动对具体内容标题的重放，所述具体内容标题存储为用于所述应用程序的书签。
14.根据权利要求9所述的显示系统，其中，所述设备还配置成通过所述应用程序为所述显示设备输出控制命令，以控制对所述显示设备的操作，其中，基于检测到的对所述设备上的所述应用程序的用户输入来生成所述控制命令。
15.根据权利要求9所述的显示系统，其中，所述设备还配置成在所述设备上通过所述应用程序存储图像和媒体数据中的至少一者，其中，图像和媒体数据中的所述至少一者由所述显示设备所呈现的内容来生成。
CN201910045819.2A 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法 Active CN109905741B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910045819.2A CN109905741B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361886241P 2013-10-03 2013-10-03
US14/505,459 US9609390B2 (en) 2013-10-03 2014-10-02 System and method for providing contextual functionality for presented content
CN201510623032.1A CN105487830B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法
CN201910045819.2A CN109905741B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201510623032.1A Division CN105487830B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法

Publications (2)

Publication Number Publication Date
CN109905741A CN109905741A (zh) 2019-06-18
CN109905741B true CN109905741B (zh) 2022-04-01

Family

ID=52778040

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910045819.2A Active CN109905741B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法
CN201510623032.1A Active CN105487830B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510623032.1A Active CN105487830B (zh) 2013-10-03 2015-09-25 用于对呈现的内容提供上下文功能的系统和方法

Country Status (2)

Country Link
US (1) US9609390B2 (zh)
CN (2) CN109905741B (zh)

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2014143776A2 (en) 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US10481769B2 (en) * 2013-06-09 2019-11-19 Apple Inc. Device, method, and graphical user interface for providing navigation and search functionalities
US20150293681A1 (en) * 2014-04-09 2015-10-15 Google Inc. Methods, systems, and media for providing a media interface with multiple control interfaces
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
KR20160020903A (ko) * 2014-08-14 2016-02-24 삼성전자주식회사 사용자 단말 장치, 사용자 단말 장치의 제어 방법 및 멀티미디어 시스템
WO2016036552A1 (en) 2014-09-02 2016-03-10 Apple Inc. User interactions for a mapping application
EP3010244A1 (en) * 2014-10-17 2016-04-20 Samsung Electronics Co., Ltd. Method and device for controlling implementation of application and recording medium thereof
AU2016215440B2 (en) * 2015-02-02 2019-03-14 Apple Inc. Device, method, and graphical user interface for establishing a relationship and connection between two devices
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
US10275116B2 (en) 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
WO2017167301A1 (en) * 2016-03-31 2017-10-05 Jamdeo Canada Ltd. System and method for menu interface presentation
CN105915787A (zh) * 2016-04-27 2016-08-31 乐视控股（北京）有限公司 视频直播方法及装置
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
US11816325B2 (en) 2016-06-12 2023-11-14 Apple Inc. Application shortcuts for carplay
US11099731B1 (en) * 2016-08-02 2021-08-24 Amazon Technologies, Inc. Techniques for content management using a gesture sensitive element
US10437614B2 (en) * 2017-11-03 2019-10-08 Salesforce.Com, Inc. System and method for designating multi-object favorites
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
US11863700B2 (en) * 2019-05-06 2024-01-02 Apple Inc. Providing user interfaces based on use contexts and managing playback of media
US11190840B2 (en) * 2019-07-23 2021-11-30 Rovi Guides, Inc. Systems and methods for applying behavioral-based parental controls for media assets
EP4323992A1 (en) 2021-05-15 2024-02-21 Apple Inc. User interfaces for group workouts

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102395012A (zh) * 2011-10-31 2012-03-28 康佳集团股份有限公司 利用手机共享电视屏幕遥控电视的方法、系统及手机
CN103634645A (zh) * 2013-12-10 2014-03-12 青岛海尔软件有限公司 利用手机控制智能电视的方法
CN103916691A (zh) * 2014-03-28 2014-07-09 小米科技有限责任公司 一种电视控制方法和移动终端

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8958018B2 (en) * 2010-12-22 2015-02-17 Google Technology Holdings LLC Remote control device and method for controlling operation of a media display system
US8369893B2 (en) * 2010-12-31 2013-02-05 Motorola Mobility Llc Method and system for adapting mobile device to accommodate external display
US9424052B2 (en) * 2011-03-21 2016-08-23 Amazon Technologies, Inc. Remotely emulating computing devices
US20120324495A1 (en) * 2011-06-17 2012-12-20 Microsoft Corporation Detecting and distributing video content identities

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102395012A (zh) * 2011-10-31 2012-03-28 康佳集团股份有限公司 利用手机共享电视屏幕遥控电视的方法、系统及手机
CN103634645A (zh) * 2013-12-10 2014-03-12 青岛海尔软件有限公司 利用手机控制智能电视的方法
CN103916691A (zh) * 2014-03-28 2014-07-09 小米科技有限责任公司 一种电视控制方法和移动终端

Also Published As

Publication number Publication date
US9609390B2 (en) 2017-03-28
CN105487830B (zh) 2019-02-22
CN109905741A (zh) 2019-06-18
CN105487830A (zh) 2016-04-13
US20150100982A1 (en) 2015-04-09

Similar Documents

Publication Publication Date Title
CN109905741B (zh) 用于对呈现的内容提供上下文功能的系统和方法
US11962836B2 (en) User interfaces for a media browsing application
US20230370401A1 (en) Conversion of text relating to media content and media extension apps
US10554599B2 (en) Conversion of detected URL in text message
US10162496B2 (en) Presentation of metadata and enhanced entertainment media content
AU2013215233B2 (en) Sharing services
KR102488975B1 (ko) 콘텐츠 시청 장치 및 그 콘텐츠 시청 옵션을 디스플레이하는 방법
US20120210275A1 (en) Display device and method of controlling operation thereof
US20090222757A1 (en) Automatic generation of TV history list
US20110161818A1 (en) Method and apparatus for video chapter utilization in video player ui
CN111491196A (zh) 显示设备和用户界面显示方法
KR102552286B1 (ko) 영상 표시 장치 및 그 동작 방법
US20160345059A1 (en) Method and device for switching channel
US10708391B1 (en) Delivery of apps in a media stream
KR20150117212A (ko) 디스플레이 장치 및 그 제어 방법
CN111857899B (zh) 信息处理方法、装置、终端、服务器及存储介质
Paternò et al. Model-based Generation of Interactive Digital TV Applications.
CN116801058A (zh) 一种显示设备及媒资播放的控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 266100 No. 151, Zhuzhou Road, Laoshan District, Shandong, Qingdao

Applicant after: Hisense Visual Technology Co., Ltd.

Address before: 266100 No. 151, Zhuzhou Road, Laoshan District, Shandong, Qingdao

Applicant before: QINGDAO HISENSE ELECTRONICS Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant