CN101233747B - 用于提供多屏幕的设备及动态配置多屏幕的方法 - Google Patents

Abstract

提供一种用于提供多屏幕的设备和方法。该提供多屏幕的设备包括：服务处理模块，提供多个服务；接口模块，通过该接口模块从所述多个服务中独立地选择音频内容；输出模块，输出选择的音频内容。

Description

用于提供多屏幕的设备及动态配置多屏幕的方法

技术领域

与本发明一致的设备和方法涉及配置多屏幕(multi screen)，更具体地讲，涉及在单个物理显示装置上对提供多种内容的多屏幕进行动态配置。

背景技术

诸如数字电视(TV)或数字机顶盒的现有技术的广播接收机仅在单个物理显示装置上提供一个内容要素，或者在单个物理显示装置上同时显示主屏幕和次屏幕。

即使现有技术的广播接收机能够在同一显示装置上同时显示主屏幕和次屏幕二者，现有技术的广播接收机也仅能以有限的几种方式来布置主屏幕和次屏幕。在主屏幕内所显示的内容的情况下，内容的所有要素(即，视频数据、音频数据和其它数据)都被显示。另一方面，在次屏幕内所显示的内容的情况下，仅内容的一些要素被显示。

内容源包括诸如卫星广播器、地面广播器或有线广播器的广播服务、诸如数字通用盘DVD的存储介质或者连接到输入端的外部装置。然而，利用现有的广播接收机将这样的多种内容源所提供的内容显示在显示屏幕是非常困难的。

在交互TV应用程序环境，如多媒体家庭平台(MHP)、高级通用应用平台(ACAP)和开放式有线应用平台(OCAP)下，假设仅在物理显示装置上输出一个屏幕。

在交互TV应用程序环境下，采用例如基于家庭音频/视频交互技术(HAVi)的用户界面(UI)。根据HAVi UI，即使对物理显示装置上显示的屏幕的数量没有强加限制，通常在物理显示装置上仍只显示一个屏幕。

发明公开

技术问题

在这样的环境下，在单独的屏幕上显示多媒体内容时，难以针对显示在屏幕上的多媒体内容之一来执行诸如解码、数字信号处理、用户交互处理等操作。此外，也难以以屏幕为单位来动态控制应用程序的生命周期以及资源的使用。

因此，需要一种在动态配置的屏幕上显示多种内容的方法。

技术解决方案

本发明提供一种在物理显示装置上提供多种内容的多屏幕的动态配置。

本发明还提供一种独立地选择并输出在各个服务中提供的音频内容的方法。

根据本发明的一方面，提供一种用于提供多屏幕的设备，该设备包括：服务处理模块，提供多个服务；用户/应用接口模块，通过该接口模块从所述多个服务中独立地选择音频内容；输出模块，输出选择的音频内容。

根据本发明的另一方面，提供一种用于提供多屏幕的设备，该设备包括：用户/应用接口模块，接收对特定服务的选择；输出模块，独立于选择的服务输出选择的服务的音频内容。

根据本发明的另一方面，提供一种用于提供多屏幕的设备，该设备包括：用户/应用接口模块，通过该接口模块独立地选择特定服务的音频内容；输出模块，输出选择的音频内容。

根据本发明的另一方面，提供一种提供多屏幕的方法，该方法包括：从同时提供的多个服务中独立地选择音频内容；输出选择的音频内容。

根据本发明的另一方面，提供一种提供多屏幕的方法，该方法包括：选择特定服务；从选择的服务提取音频内容；输出提取的音频内容。

根据本发明的另一方面，提供一种提供多屏幕的方法，该方法包括：从特定服务独立地选择音频内容；输出选择的音频内容。

附图说明

通过参照附图对本发明示例性实施例的详细描述，本发明的上述和其他方面将变得更明显，其中：

图1A至图1H是示出根据本发明示例性实施例的PiP屏幕的配置的示图；

图2是示出根据本发明示例性实施例的逻辑屏幕和显示屏幕之间的关系的示图；

图3A至图3E是示出根据本发明示例性实施例的包括映射器的屏幕的配置的示图；

图4是示出根据本发明示例性实施例的服务源的框图；

图5A和图5B是示出根据本发明示例性实施例的非抽象服务和抽象服务的示图；

图6是示出逻辑屏幕和显示屏幕的属性信息类型和接口的示例的示图；

图7是示出根据本发明示例性实施例的逻辑屏幕的“z-order”属性的示图；

图8A和图8B是分别示出根据本发明示例性实施例的逻辑屏幕的属性“Display_Area”的示图；

图9是示出根据本发明示例性实施例的将两个服务映射到显示屏幕的方法的示图；

图10是示出根据本发明示例性实施例的提供多屏幕的设备的配置的框图；

图11是示出根据本发明示例性实施例的动态配置多屏幕的方法的流程图；

图12A和图12B是示出根据本发明示例性实施例的PiP服务提供模式的示图；

图13是示出根据本发明示例性实施例的独立地选择音频内容并输出选择的音频内容的方法的流程图；

图14是示出根据本发明示例性实施例的提供多屏幕的软件架构的示例的示图；

图15是示出根据本发明示例性实施例的构成应用程序接口(API)层的模块之间的关系的示图；

图16是示出根据本发明示例性实施例的通过图15所示的模块在显示屏幕上显示将显示在各个相应的逻辑屏幕上的多个服务的方法的流程图。

具体实施方式

通过参照下面对示例性实施例以及附图的详细描述，本发明的优点和特点及实现其的方法可更容易理解。然而，本发明可以以许多不同的形式实施，而不应被理解为限于这里所阐述的示例性实施例。相反，提供这些示例性实施例是为了使本公开将彻底和完整，并将向本领域技术人员充分传达本发明的构思，本发明将仅由权利要求限定。贯穿说明书，相同的标号表示相同的部件。

以下，参照根据本发明示例性实施例的用户界面、方法和计算机程序产品的流程图描述本发明。应该理解，流程图中的每一方框以及流程图中方框的组合可通过计算机程序指令来实现。这些计算机程序指令可被提供给通用计算机、专用计算机或其它可编程数据处理设备的处理器，以产生机制从而使得经计算机或其它可编程数据处理设的处理器运行的指令创建实现一个流程图方框或多个流程图方框中所指定的功能的机制。

这些计算机程序指令还可被存储在能够引导计算机或其它可编程数据处理设备以特定方式工作的计算机可用或计算机可读存储器中，使得存储在计算机可用或计算机可读存储器中的指令产生包含实现流程图方框中指定的功能的指令装置的产品。

计算机程序指令还可被载入计算机或其它可编程数据处理设备中以使计算机或其它可编程设备上执行一系列操作步骤，以产生计算机实现的处理，从而在计算机或其它可编程设备上运行的指令提供实现流程图方框中指定的功能的步骤。

流程图的每一方框可代表包含用于执行指定的逻辑功能的一个或多个可执行指令的模块、代码段或部分代码。还应该注意的是，在一些可替换实现方式中，方框中示出的功能可以不按顺序发生。例如，根据所包含的功能，连续示出的两个方框实际上可以基本同时执行，或者有时，这两个方框可以以相反的顺序执行。

为了更好地理解本发明，现在将定义本公开中使用的术语。

术语“服务”表示一起显示的一组多媒体内容，即，一组服务组分(servicecomponent)。

服务组分是服务的要素，包括视频组分、音频组分和数据组分。数据组分是服务中的应用程序。

应用可分为未绑定应用和服务绑定应用。未绑定应用不与特定信道相关，因此该应用的执行不受信道切换的影响。此外，未绑定应用通常具有高优先级，因此用于执行未绑定应用的资源被顺利地分配给未绑定应用。监视器应用(monitor application)对应于能够具有最高优先级的特定未绑定应用之一。

同时，服务绑定应用涉及传输流，并且与未绑定应用相比，服务绑定应用通常具有低优先级。服务绑定应用不执行任何关键的系统功能。因此，当发生对资源的竞争时，与未绑定应用相比，服务绑定应用放弃资源分配的可能性更高。服务绑定应用可分为：链接类型的服务绑定应用，其与当前正传输的流协作地运行；非链接类型的服务绑定应用，其不考虑当前正传输的流而运行。

术语“服务上下文”表示能够控制服务的执行的对象，包括提供服务所需的各种资源、装置以及执行状态信息。

术语“物理显示装置”表示实际显示服务的内容的物理空间、输出服务的内容的外部输出端口或者存储服务的存储装置。

术语“显示屏幕”表示实际显示在物理显示装置上的屏幕。任意服务可被直接设置在显示屏幕上，并且显示屏幕可被显示在物理显示装置上。可选地，映射到显示屏幕的特定区域的至少一个逻辑屏幕可被显示在物理显示装置上。

术语“逻辑屏幕”表示显示任意服务的空间。在被映射到显示屏幕之前，逻辑屏幕是虚拟屏幕，因此不被显示在物理显示装置上。

逻辑屏幕和显示屏幕可以是背景静止图像、视频光栅(raster)和图形光栅的组合。图形光栅可以是文本、线、颜色和图像的组合或者视频帧的混合。

术语“主服务”表示由用户通过显示在物理显示装置上的菜单或遥控器选择作为主服务的服务，或者由应用通过API选择作为主服务的服务，显示主服务的屏幕被称为“主屏幕”。

术语“画中画服务(PiP服务)”表示由应用经API，由用户通过显示在物理显示装置上的菜单或遥控器选择作为次服务的服务，PiP服务可被显示在画中画屏幕(PiP屏幕)或主屏幕上。

PiP屏幕包括如图1A至图1D所示的占据另一屏幕的一部分的屏幕，以及如图1E至1F所示的在不与另一屏幕重叠的情况下与另一屏幕同时显示的屏幕。在这种情况下，可以理解，PiP屏幕可包括如图1G和图1H所示的显示在物理显示装置的任意位置或区域上或者与另一屏幕重叠的屏幕。

图2是示出根据本发明示例性实施例的逻辑屏幕和显示屏幕之间的关系的示图。

参照图2，可利用逻辑屏幕210、212和214来显示服务。逻辑屏幕210、212和214通过映射块230被映射到显示屏幕220、222和224。

详细地讲，逻辑屏幕210和212被映射到显示屏幕220，逻辑屏幕212和214被映射到显示屏幕222，逻辑屏幕210、212和214被映射到显示屏幕224。

简言之，至少一个显示服务的逻辑屏幕被映射到显示屏幕的任意区域。

映射块230是将逻辑屏幕映射到显示屏幕所需的各种信息的集合。所述各种信息的例子包括多个逻辑屏幕中的每一个被映射到的显示屏幕上的预定区域的坐标信息、逻辑屏幕和显示屏幕的标识信息以及指定逻辑屏幕被显示在显示屏幕上的次序的信息。

映射块230可改变逻辑屏幕的大小以将其分配到显示屏幕的任意区域中。即，映射块230可执行逻辑屏幕的缩放以及逻辑屏幕的位置的分配，图3A至图3E是示出包括映射器作为映射块的屏幕的配置的示图。

参照图3A，包括背景静止图像B、视频光栅V和图形光栅G的主屏幕被映射器按照正常大小映射到整个显示屏幕。仅包括视频组分的PiP屏幕被映射器按照减小的大小映射到整个显示屏幕。在这种情况下，映射的PiP屏幕被显示在主屏幕上，这基于Z值来确定。参考特征Z指将在随后描述的z次序值。可将覆盖屏幕(overlay screen)与显示屏幕组合。所述覆盖屏幕是被置于最外侧的特定屏幕，可在提供字幕功能时使用。PiP屏幕可如图3A所示仅具有视频组分，或者可如图3B所示具有背景静止图像B、视频光栅V和图形光栅G的组合。

参照图3C，包括背景静止图像B、视频光栅V和图形光栅G的组合的主屏幕被映射器按照正常大小映射到整个显示屏幕。仅具有视频组分的两个PiP屏幕#1和#2被映射器按照减小的大小映射到显示屏幕的任意区域。在这种情况下，映射的PiP屏幕被布置在主屏幕上，并且Z值可保持不变。此外，可将覆盖屏幕与显示屏幕组合。屏幕的配置可如图3C所示具有仅包括视频组分的多个PiP屏幕，或者如图3D所示具有包括背景静止图像B、视频光栅V和图形光栅G的组合的多个PiP屏幕。

图3E示出了画外画(POP)屏幕。应该理解，已知的PiP屏幕显示在主屏幕之内，而POP屏幕显示在主屏幕之外。参照图3E，包括背景静止图像B、视频光栅V和图形光栅G的组合的多个POP屏幕#1和#2被映射器按照减小的大小映射到显示屏幕的任意区域。在这种情况下，映射的POP屏幕#1和#2的Z值可保持不变。此外，可将覆盖屏幕与显示屏幕组合。

映射块230可通过将要运行的各种计算机程序语言所准备的接口或函数来实现，并且映射块230可利用上述信息作为参数创建或改变逻辑屏幕和显示屏幕之间的关系。

可选地，映射块230可通过硬件来实现，以执行逻辑屏幕和显示屏幕之间的映射功能。

此外，由各种服务源提供的服务可被显示在显示屏幕上，并且显示屏幕可被显示在物理显示装置上，如图4所示。

存在提供广播服务的服务源(如地面广播器320和有线广播器330)、提供存储在存储介质中的服务的服务源(如个人视频记录器(PVR)340)以及经有线网络或无线网络提供服务的服务源(图4中未示出)。

广播接收机310接收来自所述服务源的服务，并生成显示接收的每种服务的逻辑屏幕。

然后，通过预定义的方法或者由用户或应用设置的方法将任意服务直接设置在将显示在物理显示装置上的显示屏幕上。或者，将映射到显示屏幕的任意区域的至少一个逻辑屏幕显示在物理显示装置350上。简言之，由地面广播器320、有线广播器330和PVR提供的服务被显示在物理显示装置350上。

图4中示出了地面广播器320、有线广播器330和PVR 340作为服务源，但是本发明不限于此。提供能够一起显示的多媒体内容的任何类型的多媒体内容源都可以是根据本发明的示例性实施例的服务源。

如图5A和图5B所示，根据本发明示例性实施例的服务可分为抽象服务(abstract service)和非抽象服务(non-abstract service)。

抽象服务不是实时传输的广播信号所提供的服务，而是独立于广播信道的服务。抽象服务仅包括广播数据组分，即应用程序，而不包括视频组分和音频组分。抽象服务的例子包括具有基于OCAP标准的未绑定应用的服务。

非抽象服务被认为是除了抽象服务之外的服务。

根据本发明的当前示例性实施例，抽象服务和非抽象服务都具有独立性。例如，抽象服务可被直接设置在物理显示装置上而不通过逻辑屏幕，非抽象服务可被显示在逻辑屏幕上。然后，所述逻辑屏幕可被映射到设置了抽象服务的显示屏幕。之后，可通过物理显示装置输出显示屏幕。这样，抽象服务可独立于非抽象服务被显示在显示屏幕上。此外，抽象服务和非抽象服务可被映射到不同的逻辑屏幕。之后，这些逻辑屏幕可被映射到单个显示屏幕。换言之，抽象服务可独立于非抽象服务被显示在显示屏幕上。

根据本发明的当前示例性实施例，逻辑屏幕和显示屏幕可被分类为不同的对象。可选地，根据一个屏幕对象的属性信息，屏幕可用作逻辑屏幕或显示屏幕。

详细地讲，可通过关于屏幕对象的属性信息中的类型信息来知道屏幕是逻辑屏幕还是显示屏幕。

屏幕对象的属性信息包括多个属性：“Type(类型)”、“z-Order(z次序)”、“Display_Area(显示区域)”、“Visibility(可见性)”、“Associated_Display_Screen(关联显示屏幕)”、“Associated_Service_Contexts(相关服务上下文)”和“OutputPort(输出端口)”。

图6示出关于屏幕对象的属性信息以及用于处理属性信息的接口的类型。

属性“Type”510表示屏幕是逻辑屏幕还是显示屏幕。

属性“z-Order”520用于确定多个逻辑屏幕按照何种次序沿着z轴布置。图7示出针对逻辑屏幕的属性“z-Order”的值的组合，物理显示装置上的逻辑屏幕的配置。

参照图7，第一逻辑屏幕620和第二逻辑屏幕630分别映射到显示屏幕610的预定区域。详细地讲，第一逻辑屏幕620被显示在显示屏幕610上，第二逻辑屏幕630与第一逻辑屏幕620部分重叠地显示在显示屏幕上。换言之，显示屏幕610、第一逻辑屏幕620和第二逻辑屏幕630沿着z轴方向顺次布置。在这种情况下，第一逻辑屏幕620的属性“z-Order”可被设置为值1，第二逻辑屏幕630的属性“z-Order”可被设置为值2。第一逻辑屏幕620和第二逻辑屏幕630的属性“z-Order”可被设置为任何数字或字符，只要这些数字或字符能够表示第一逻辑屏幕620和第二逻辑屏幕630沿着z轴布置的特定次序即可。

属性“Display_Area”530是与逻辑屏幕的显示屏幕区域(如图8A和图8B所示)有关的信息。

图8A示出逻辑屏幕710被映射到显示屏幕720的整个区域，图8B示出逻辑屏幕730被映射到显示屏幕740的部分区域。

属性“Display_Area”可包括指定逻辑屏幕将映射到的显示屏幕的预定部分的二维坐标的信息，或者可包括指定显示屏幕上的预定位置以及指示逻辑屏幕相对于显示屏幕上的所述预定位置偏移了多少的偏移值的信息。

属性“Visibility”540确定逻辑屏幕将被可视地显示在显示屏幕上还是将被不可视地显示在显示屏幕上。可通过改变属性“Visibility”540的值来使逻辑屏幕出现在显示屏幕上或从显示屏幕上消失。

属性“Associated_Display_Screen”550是关于与逻辑屏幕相关联的显示屏幕的信息。不与任何显示屏幕相关联的逻辑屏幕可以不被显示在物理显示装置上，也不被传输给外部输出装置。

属性“Associated_Service_Contexts”560是与连接到逻辑屏幕或显示屏幕的服务上下文有关的信息。设置在这样的服务上下文中的服务可被显示在逻辑屏幕或显示屏幕上。

属性“OutputPort”570是与将输出显示屏幕的装置有关的信息，这样的装置包括显示器屏幕、有线/无线通信媒体以及各种存储媒体。

可提供图6所示的用于识别或改变属性的值的接口。参照图6，所述接口可包括：接口“Set”，用于设置属性值或者将逻辑屏幕连接到显示屏幕；接口“Add”，用于添加属性值或者将逻辑屏幕连接到服务；接口“Get”，用于识别属性值；接口“Remove”，用于删除属性值。这些接口可包括分别执行它们的功能的进程、函数、过程或方法。

例如，方法“getDisplayScreen(void)”返回与当前屏幕相关联的显示屏幕。详细地讲，如果当前屏幕是逻辑屏幕，则方法“getDisplayScreen(void)”返回关联显示屏幕。如果当前屏幕是显示屏幕，则方法“getDisplayScreen(void)”返回与当前屏幕有关的参考信息。此外，如果当前屏幕是逻辑屏幕，但是没有关联显示屏幕，则方法“getDisplayScreen(void)”返回“NULL”值。

根据另一示例，方法“public void setDisplayArea(HScreenRectangle rect)throws SecurityException，IllegalStateException”提供用于将当前逻辑屏幕映射到关联显示屏幕的预定区域的功能。被提供作为参数的实例是包“org.havi.ui”的类“HScreenRectangle，并具有二维位置信息。可进行方法“SecurityException”和“IllegalStateException”的执行，作为方法“setDisplayScreen(HScreen screen)”的例外操作。可在当前屏幕是逻辑屏幕时，或者在与当前逻辑屏幕相关联的显示屏幕的一部分由于主机平台的特性而不能改变时，使用方法“IllegalStateException”。

根据另一示例，方法“getOutputArea(void)”返回当前屏幕的区域信息作为HScreenRectangle信息。如果当前屏幕对应于显示屏幕，则方法“getOutputArea(void)”返回其值与HScreenRectangle(0，0，1，1)相同的HScreenRectangle信息。如果当前屏幕是逻辑屏幕，则方法“getOutputArea(void)”返回与显示屏幕上被当前屏幕占据的区域有关的信息。如果当前屏幕是逻辑屏幕，但是该屏幕未与任何显示屏幕相关联，则方法“getOutputArea(void)”返回“NULL”值。

在下面的描述中始终使用特定术语指代特定接口。然而，本领域技术人员应该理解，对特定函数命名只是为了指示它的功能性。对示例性实施例的详细描述不是为了在名称不同(而非功能不同)的函数之间进行区分。

图9是示出两个服务被设置在被映射到单个显示屏幕的两个逻辑屏幕上的过程的示图。

参照图9，第一服务包括所有的三个服务组分，即视频、音频和数据组分，而第二服务仅包括视频和音频组分。然而，本发明不对服务组分强加任何限制，图9中所示的第一服务和第二服务仅是示意性的。

如图9所示，第一服务和第二服务按照与现有技术中基本相同的方式被显示在物理显示装置上。根据本发明的当前示例性实施例，可在物理显示装置上彼此独立地显示多个服务，而不对一个显示屏幕上能够显示的服务的数量强加任何限制。

图10是根据本发明示例性实施例的提供多屏幕的设备的框图。

参照图10，提供多屏幕的设备900包括数字信号处理模块940、服务处理模块950、输出模块960和用户/应用接口模块965。

此外，设备900包括广播信号接收模块910、存储介质920和外部输入模块930作为服务源，包括显示器屏幕970、存储介质980和外部输出模块990作为服务输出媒体。

这里所使用的术语“模块”表示(但不限于)执行特定任务的软件和/或硬件组件，如现场可编程门阵列(FPGA)或专用集成电路(ASIC)。模块可方便地构造为驻留在可寻址存储介质上，并被构造为在一个或多个处理器上运行。因此，模块可包括(例如)诸如软件组件、面向对象的软件组件、类组件和任务组件的组件、进程、函数、属性、过程、子进程、程序代码段、驱动程序、固件、微码、电路、数据、数据库、数据结构、表、数组和变量。组件和模块中提供的功能可被组合为更少的组件和模块，或者被进一步分为另外的组件和模块。

数字信号处理模块940从广播信号接收模块910、存储介质920或外部输入模块930接收诸如多媒体内容的服务的各种信息，例如视频信息、音频信息或数据信息。

广播信号接收模块910接收卫星广播信号、地面广播信号或有线广播信号，并发送接收的广播信号，存储介质920存储服务的视频信息、音频信息或数据信息，外部输入模块930从外部装置(如连接到网络的网络接口模块)接收服务的视频信息、音频信息或数据信息。

数字信号处理模块940利用接收的服务组分恢复多个服务。恢复的服务包括抽象服务或非抽象服务。

这里，短语“多个服务”表示由广播信号接收模块910发送的两个或更多个服务，或者由广播信号接收模块910和存储介质920分别发送的两个或更多个服务。

数字信号处理模块940可根据用户或应用借助用户/应用接口模块965进行的选择来恢复服务。在这种情况下，用户或应用可选择任意服务与屏幕之间的连接。

服务处理模块950生成一个或多个逻辑屏幕和显示屏幕以显示由数字信号处理模块940恢复的服务。

输出模块960将由服务处理模块950生成的多个逻辑屏幕映射到显示屏幕。可利用预定义的方法或者由用户借助用户/应用接口模块965设置的方法来进行逻辑屏幕到显示屏幕的映射。

由数字信号处理模块940恢复的服务可以不被服务处理模块950处理。相反，由数字信号处理模块940恢复的服务可被直接映射到由输出模块960生成的显示屏幕的特定部分。

由输出模块960提供的显示屏幕可被显示在物理显示装置970上，或者可被存储在存储介质980中。存储介质980的例子包括计算机可读软盘、硬盘、CD-ROM、DVD、DVD-ROM、BD(蓝光盘)和半导体存储器。

此外，由输出模块960提供的显示屏幕可经外部输出模块990被发送到连接到网络的外部装置。

为此，输出模块960可包括多个输出端口，可经所述多个输出端口提供显示屏幕。在这种情况下，可经预先设置为默认的输出端口来提供显示屏幕，或者可经用户借助用户/应用接口模块965所选择的输出端口来提供显示屏幕。

用户或应用可利用用户/应用接口模块965选择多个服务之一或恢复期望的服务。此外，用户可利用用户/应用接口模块965选择多个显示屏幕之一。

由于图10中所示的模块根据它们的功能进行划分，所以其可被连接到其它模块。

图11是示出根据本发明示例性实施例的动态配置多屏幕的方法的流程图。

通常，按照预定的格式(例如，MPEG流格式)来传输构成多媒体内容的视频信息、音频信息和数据信息。在操作S1010，用于提供诸如多媒体内容服务的服务的设备接收视频信息、音频信息和数据信息，并基于所述视频信息、音频信息和数据信息来恢复服务。这里，可由用户或应用选择或预先确定在操作S1010中恢复的服务。用户可利用显示装置上显示的菜单或者遥控器来选择任意屏幕与屏幕之间的连接。应用可利用API来选择所述连接。

此外，数据信息包括与服务的应用程序有关的应用信息，这些应用信息包括指示应用程序是否可在PiP屏幕上执行的信号信息。应用信息的例子包括基于MHP标准的应用信息表(AIT)和基于OCAP标准的扩展应用信息表(XAIT)。信号信息可以被添加到所述应用信息。

之后，在操作S1020，恢复的服务被设置以便能够被显示在逻辑屏幕上。在操作S1030，逻辑屏幕被映射到显示屏幕。在操作S1040，利用显示器屏幕、存储介质或网络将显示屏幕提供给用户。

图11中示出了恢复的服务经逻辑屏幕被显示在物理显示装置上。然而，恢复的服务可被直接显示在物理显示装置上，而不必经过逻辑屏幕。

图11为了简明示出了仅将一个服务映射到显示屏幕的方法。但是，可通过多个逻辑屏幕，或者可不通过逻辑屏幕，将多个服务映射到显示屏幕。当以这样的方式将显示屏幕提供给用户时，用户可执行多个服务。

当用户或应用选择PiP服务时，提供多屏幕的设备900以两种模式来提供PiP服务。图12A示出了这两种模式中的第一模式，图12B示出了这两个模式中的第二模式。

参照图12A，在第一模式下，仅在主屏幕上提供选择的PiP服务的视频组分，而没有为PiP服务创建单独的逻辑屏幕(即，PiP屏幕)。在第一模式下，不执行与PiP服务有关的任何应用，或者与PiP服务有关的应用的操作变为非活动状态。

参照图12B，在第二模式下，用于PiP服务的单独的逻辑屏幕被创建，以在创建的PiP屏幕上提供选择的PiP服务。在第二模式下提供的PiP屏幕可包括用作背景屏幕的背景视频或者视频组分。此外，在第二模式下，可执行与PiP服务有关的应用。可基于上述信号信息来确定是否可执行与PiP服务有关的应用。

优选地，不可同时执行第一模式和第二模式。

可通过用户或应用经用户/应用接口模块965的输入来选择PiP服务提供模式。当用户或应用选择第一模式时，数字信号处理模块940仅恢复选择的PiP服务的视频组分。恢复的视频组分被映射到由输出模块960生成的主屏幕，然后被显示在由输出模块960生成的显示屏幕上。当用户或应用选择第二模式时，数字信号处理模块940恢复选择的PiP服务。恢复的服务被映射到由服务处理模块950创建的PiP屏幕，然后被显示在由输出模块960生成的显示屏幕上。

用户或应用可通过用户/应用接口模块965选择逻辑屏幕上提供的多个服务中的一个特定服务的音频内容，以便能够独立地输出选择的音频内容的输出。图13中示出了这一过程。

首先，用户或应用通过用户/应用接口模块965选择特定服务(S1310)。

然后，数字信号处理模块940从选择的服务提取音频内容，提取的音频内容被映射到由服务处理模块950生成的逻辑屏幕或显示屏幕，并被输出模块960独立地输出到相应的屏幕上(S1320)。这里，“独立地输出”可被理解为例如这样的概念：特定服务的音频内容被选择并通过映射到显示屏幕的输出端口被发送，其中，所述显示屏幕将所述特定服务与同一屏幕上提供的其它服务的音频内容同时地显示，或者排除所述其它服务的音频内容而显示所述特定服务。多个服务的音频内容分别通过不同的媒体被输出、提供或存储也可被理解为“独立地输出”。换言之，音频内容不需要与同一服务的其它组分一起提供，而是可以由用户或应用独立地提供。

用户或应用选择输出模块960，输出模块960通过预定的外部输出模块990来输出音频内容。

当选择了多个音频内容时，可通过单独的外部输出模块990同时独立地输出各个音频内容。

用户或应用可独立于同一服务的其它组分而通过用户/应用接口模块965选择期望的音频内容。

图14是示出根据本发明示例性实施例的提供多屏幕的软件架构的示图。

参照图14，软件架构1400包括装置驱动程序层1410、API层1420和应用层1430。

装置驱动程序层1410从各种多媒体内容源接收服务组分，并对接收的服务组分进行解码。接收的服务组分的例子包括视频信息、音频信息和数据信息。

API层1420产生逻辑屏幕和显示屏幕，并将服务、逻辑屏幕和显示屏幕映射到彼此。

应用层1430提供用户界面以便用户能够动态地配置显示服务的逻辑屏幕，或者向API层1420发送用户命令以便API层1420能够执行该用户命令。

在应用层1430，可由用户或应用独立地选择音频内容，选择的音频内容可被装置驱动程序层1410独立地输出。

用户借助应用层1430来使装置驱动程序层1410能够经物理显示装置提供显示屏幕或者将显示屏幕存储在存储介质中。此外，用户可使装置驱动程序层1410能够经网络将显示屏幕发送给外部装置。

为此，装置驱动程序层1410可包括能够提供显示屏幕的多个输出端口。或者，API层1420可包括所述多个输出端口。

为了动态地在显示屏幕上配置多个逻辑屏幕，API层1420可包括多个软件模块，例如多屏幕管理器模块“MultiScreenManager”、多屏幕上下文模块“MultiScreenContext”、多屏幕上下文监听器模块“MultiScreenContextListener”和多屏幕上下文事件模块“MultiScreenContextEvent”，如图15所示。

多屏幕管理器模块1510管理多屏幕上下文模块1530，搜索期望的屏幕，显示指定哪些装置被屏幕共享的信息，注册多屏幕上下文监听器模块1550，或者取消多屏幕上下文监听器模块1550的注册。

多屏幕上下文模块1530是与屏幕对象1520相关联的接口对象，根据由多屏幕上下文模块1530执行的接口操作确定屏幕对象1520将成为逻辑屏幕还是显示屏幕。图6中所示的各种属性可被设置在多屏幕上下文模块1530中。多屏幕上下文模块1530可提供上面参照图6所描述的函数“Set”、“Add”、“Get”和“Remove”。

当屏幕对象1520的属性信息被多屏幕上下文模块1530改变时，多屏幕上下文事件模块1540用作通告屏幕对象1520的属性信息已被改变的事件类，多屏幕上下文监听器模块1550用作监听器接口对象，该监听器接口对象能够被实现在尝试接收由多屏幕上下文事件模块1540提示的事件的预定应用类中。

应用1560是在应用层1430被驱动的模块。应用1560允许用户选择期望的服务并自由地在显示屏幕上布置多个逻辑屏幕。

详细地讲，应用1560向多屏幕管理器模块1510发送允许用户动态地配置和管理逻辑屏幕的命令，多屏幕管理器模块1510通过多屏幕上下文模块1530来控制与将执行的各种命令对应的操作。

多屏幕上下文模块1530与屏幕对象1520相关联，用于管理如图6所示的屏幕对象1520的属性信息。为了管理屏幕对象1520的属性信息，多屏幕上下文模块1530可包括各种函数或方法。

多屏幕管理器模块1510从装置驱动程序层1410接收由各种服务源提供的服务组分，并可用于将接收的服务组分显示在逻辑屏幕或显示屏幕上。这样的功能可由单独的模块(未示出)来执行。

图16是示出根据本发明示例性实施例的通过图15所示的模块将显示在各个相应的逻辑屏幕上的多个服务显示在显示屏幕上的方法的流程图。

参照图16，在操作S1610，多屏幕管理器模块1510生成显示屏幕和逻辑屏幕，生成的逻辑屏幕的数量与将执行的服务的数量对应。

在操作S1620，多屏幕管理器模块1510将逻辑屏幕连接到从装置驱动程序层1410接收的各个相应的服务。多屏幕管理器模块1510可通过将接收的服务的服务上下文对象设置为用于逻辑屏幕服务的参数，来针对每一逻辑屏幕调用方法“addServiceContext”。方法“addServiceContext”将逻辑屏幕连接到服务，并且可由多屏幕上下文模块1530提供。

在操作1630，当逻辑屏幕被连接到各个服务时，多屏幕管理器模块1510将逻辑屏幕连接到显示屏幕。此时，多屏幕管理器模块1510可通过将逻辑屏幕所连接到的显示屏幕对象设置为参数来针对每一逻辑屏幕调用“setDiplayScreen”方法。方法“setDiplayScreen”将逻辑屏幕连接到显示屏幕，并且可由多屏幕上下文模块1530提供。

方法“setDisplayScreensetDisplayScreen”可被设置为“public voidsetDisplayScreensetDisplayScreen(HScreen screen)throws SecurityException，IllegalStateException”，该方法允许被提供作为参数的实例“HScreen”与当前逻辑屏幕相关联。在这种情况下，实例“HScreen”最好是显示屏幕。

方法“setDisplayScreen(HScreen screen)”的参数可包括“NULL”值。在这种情况下，当方法“setDisplayScreen(HScreen screen)”在没有例外处理的情况下被执行时，当前逻辑屏幕不再与显示屏幕相关联。

可进行方法“SecurityException”和“IllegalStateException”的执行作为方法“setOutputScreen(HScreen screen)”的例外操作。

可在当前屏幕是逻辑屏幕时，或者在与当前逻辑屏幕相关联的显示屏幕的一部分由于主机平台的特性而不能改变时，使用方法“IllegalStateException”。

在操作S1640，确定显示屏幕上的逻辑屏幕将分别被映射到的区域。此时，可调用由多屏幕上下文模块1530提供的预定方法来确定显示屏幕上的将显示逻辑屏幕的区域。

产业上的可利用性

根据本发明，可利用一个物理显示屏幕以各种方式执行由各种源(如，有线广播器、地面广播器、各种存储媒体以及外部输入)提供的多个服务。

尽管已参照本发明的示例性实施例具体地示出和描述了本发明，但是本领域普通技术人员应该理解，在不脱离由权利要求限定的本发明的精神和范围的情况下，可进行各种形成和细节上的改变。因此，应该理解，提供上述示例性实施例仅是处于描述性目的，而不应被理解为对本发明的范围的限制。

Claims (17)

1.一种用于提供多屏幕的设备，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该设备包括：

服务处理模块，通过多个屏幕提供多个服务，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

接口模块，通过该接口模块从服务处理模块所提供的所述多个服务中独立地选择音频组分；

输出模块，输出选择的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

2.如权利要求1所述的设备，其中，所述服务处理模块同时提供所述多个服务。

3.如权利要求1所述的设备，其中，由用户或应用通过所述接口模块选择音频组分。

4.如权利要求1所述的设备，其中，输出模块独立于所述多个服务来输出音频组分。

5.一种用于提供多屏幕的设备，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该设备包括：

接口模块，通过该接口模块从通过多个屏幕提供的多个服务中选择服务，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

输出模块，独立于服务输出该服务的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

6.如权利要求5所述的设备，其中，由用户或应用通过所述接口模块选择服务。

7.一种用于提供多屏幕的设备，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该设备包括：

接口模块，通过该接口模块从通过多个屏幕提供的多个服务中独立地选择音频组分，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

输出模块，输出选择的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

8.如权利要求7所述的设备，其中，由用户或应用通过所述接口模块选择音频组分。

9.如权利要求7所述的设备，其中，输出模块独立于服务输出音频组分。

10.一种提供多屏幕的方法，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该方法包括：

从通过多个屏幕提供的多个服务中独立地选择音频组分，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

输出选择的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

11.如权利要求10所述的方法，其中，由用户或应用选择音频组分。

12.如权利要求10所述的方法，其中，在输出音频组分服务的过程中，独立于所述多个服务输出音频组分。

13.一种提供多屏幕的方法，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该方法包括：

从通过多个屏幕提供的多个服务中选择服务，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

从选择的服务提取音频组分；

输出提取的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

14.如权利要求13所述的方法，其中，由用户或应用选择特定服务。

15.一种提供多屏幕的方法，其中，所述多屏幕包括多个逻辑屏幕和显示屏幕，该方法包括：

从通过多个屏幕提供的多个服务中的服务独立地选择音频组分，其中，每个服务包括视频组分、音频组分和数据组分中的至少一个；

输出选择的音频组分，

其中，所述多个逻辑屏幕的每个与包括音频组分的所述多个服务的每个相关联，

所述多个逻辑屏幕的每个与所述显示屏幕相关联，

所述显示屏幕与至少一个物理输出端口相关联，所述显示屏幕与包括至少一个与音频组分相关联的逻辑屏幕的所述多个逻辑屏幕相关联。

16.如权利要求15所述的方法，其中，由用户或应用选择音频组分。

17.如权利要求15所述的方法，其中，在输出音频组分的过程中，独立于服务输出音频组分。

Images