CN104423805A - 用户终端装置及其控制方法以及扩展的显示系统 - Google Patents

Abstract

提供了用户终端装置、控制用户终端装置的方法及其扩展的显示系统。该方法包括：在应用的执行屏幕正在被显示的时候响应于用户终端装置与外部显示装置配对，获取关于显示装置的信息；基于关于用户终端装置正在执行的应用的信息和获得的关于显示装置的信息中的至少一条信息，显示应用的第一屏幕；以及向显示装置发送应用的第二屏幕的数据。

Description

用户终端装置及其控制方法以及扩展的显示系统

相关申请的交叉引用

本申请要求2013年8月29日向美国专利商标局提交的第61/871,615号美国临时专利申请和2014年5月28日韩国知识产权局提交的第10-2014-0064595号韩国专利申请的优先权，其公开通过引用整体并入本文。

技术领域

与示例性实施例一致的方法和装置涉及用户终端装置、控制用户终端装置的方法和扩展的显示系统，更具体地，涉及重新配置屏幕并在单独的显示器上输出屏幕的用户终端装置、控制用户终端装置的方法及其扩展的显示系统。

背景技术

由于与用户终端装置有关的技术的发展，在最新的用户终端装置上显示的内容正变得更加多样化和复杂化。这些内容可以通过各种应用来提供。存在各种应用，它们的范围从被广泛应用在相关技术的用户终端装置中的、提供发送消息的功能的应用到需要大显示屏幕和高功耗的用于游戏、视频、相机和电子书的应用。

在相关技术的用户终端装置中，显示屏幕的大小存在限制，并且它们具有的功能不足以以光学形式显示屏幕以使得用户可以方便地进行观看。为了解决这些问题，一种技术被开发以将显示屏幕划分成两个或更多个显示屏幕，以便提供方便用户的显示屏幕。但是，仍然存在一个问题，即，这样的屏幕只能在内容元素和信息之间的相互包含关系被预先配置时才可以使用。

此外，还存在不能根据显示器和内容的类型充分管理功耗的问题。

发明内容

示例性实施例提供了用户终端装置及其控制方法和扩展的显示系统，该用户终端装置根据显示特性和应用特性重新配置屏幕并在用户终端装置上显示屏幕。

根据示例性实施例，提供了一种用户终端装置，包括：显示器，被配置为显示应用的执行屏幕；通信器，被配置为与显示装置执行通信；以及控制器，被配置为在显示器显示应用的执行屏幕的时候响应于用户终端装置正在通过通信器与显示装置配对，获取关于显示装置的信息，基于用户终端装置正在执行的应用的信息和获得的关于显示装置的信息中的至少一条信息来控制显示器显示应用的第一屏幕，而且控制通信器向显示装置发送应用的第二屏幕的数据。

关于显示装置的信息可以包括显示装置的显示类型、分辨率、响应时间、色彩、色调、可视角度、色彩范围、连接角度、和连接状态中的至少一个。

关于应用的信息可以包括应用的类别、每个部分的色彩属性、和每个部分的屏幕更新速度中的至少一个。

控制器可以基于关于应用的信息将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的第一集合来配置第一屏幕，而且利用所述多个划分的元素中的第二集合来配置第二屏幕。

控制器可以基于每个部分的屏幕更新速度将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的包括视频的元素来配置划分的屏幕中的第一屏幕，而且利用所述多个划分的元素中的剩余元素来配置划分的屏幕中的第二屏幕。

控制器可以基于每个部分的色彩属性将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的第一色彩的元素来配置划分的屏幕中的第一屏幕，而且利用所述多个划分的元素中的第二色彩的元素来配置划分的屏幕中的第二屏幕。

控制器可以控制显示器继续将应用的执行屏幕显示为第一屏幕，并控制通信器向显示装置发送有关第二屏幕的数据，该数据包括关于应用的执行屏幕的附加信息。

响应于应用的执行屏幕包括文本，控制器可以控制通信器向显示装置发送有关第二屏幕的数据，该数据包括总结了所包括的文本的内容的文本或图像。

响应于应用的执行屏幕包括视频内容，控制器可以控制通信器向显示装置发送有关第二屏幕的数据，该数据包括有关所包括的视频内容的信息或字幕。

响应于正在做出的用户输入指示复制模式，控制器可以控制显示器不显示第一屏幕，而且控制通信器向显示装置发送关于在指示复制模式的用户输入被确定时的应用的执行屏幕的数据。

响应于显示装置不支持用户输入，控制器可以控制通信器向显示装置发送与用户输入相对应的数据。

根据另一示例性实施例，提供了一种控制用户终端装置的方法，该方法包括：在应用的执行屏幕正在被显示的时候，响应于用户终端装置正在与外部显示装置配对，获取关于显示装置的信息；基于关于用户终端装置正在执行的应用的信息和获得的关于显示装置的信息中的至少一条信息，显示应用的第一屏幕；以及向显示装置发送应用的第二屏幕的数据。

关于显示装置的信息可以包括显示装置的显示类型、分辨率、响应时间、色彩、色调、可视角度、色彩范围、连接角度、和连接状态中的至少一个。

关于应用的信息可以包括应用的类别、每个部分的色彩属性、和每个部分的屏幕更新速度中的至少一个。

方法还可以包括：基于关于应用的信息将正在显示的应用的执行屏幕划分为多个元素；以及利用所述多个划分的元素中的第一集合来配置第一屏幕，而且利用所述多个划分的元素中的第二集合来配置第二屏幕。

所述划分可以基于每个部分的屏幕更新速度将正在显示的应用的执行屏幕划分为多个元素，以及所述配置可以利用所述多个划分的元素中的包括视频的元素来配置第一屏幕，而且利用所述多个划分的元素中的剩余元素来配置第二屏幕。

所述划分可以基于每个部分的色彩属性将正在显示的应用的执行屏幕划分为多个元素，所述配置可以利用所述多个划分的元素中的第一色彩的元素来配置第一屏幕，而且利用所述多个划分的元素中的第二色彩的元素来配置第二屏幕。

所述发送可以继续将应用的执行屏幕显示为第一屏幕，并向显示装置发送有关第二屏幕的数据，该数据包括关于应用的执行屏幕的附加信息。

响应于应用的执行屏幕包括文本，所述方法可以向显示装置发送有关第二屏幕的数据，该数据包括总结了所包括的文本的内容的文本或图像。

响应于应用的执行屏幕包括视频内容时，所述方法可以向显示装置发送有关第二屏幕的数据，该数据包括有关所包括的视频内容的信息或字幕。

响应于正在做出的用户输入指示复制模式，所述方法可以不显示第一屏幕，而是可以向显示装置发送关于存在指示复制模式的用户输入时的应用的执行屏幕的数据。

所述方法还可以包括，响应于显示装置不支持用户输入，向显示装置发送与用户输入相对应的数据。

根据另一示例性实施例，提供了扩展的显示系统，其包括：显示装置，被配置为与用户终端装置配对，并且显示从用户终端装置发送的第二屏幕的数据；以及用户终端装置，被配置为在显示器正在显示应用的执行屏幕的时候响应于用户终端装置正在与显示装置配对，获取关于显示装置的信息，基于用户终端装置正在执行的应用的信息和获得的信息中的至少一条信息来显示应用的第一屏幕，而且向显示装置发送关于应用的第二屏幕的数据。

根据上述的各种示例性实施例，可以基于用户终端装置和显示装置的互锁操作使用宽屏幕来具体实施各种用户情境，以光学形式显示屏幕以使得用户可以根据显示特性方便地观看屏幕，并根据显示器和应用中的每一个的功耗特性以低功率显示内容。

附图说明

通过参照附图描述某些示例性实施例，本公开的以上和/或其他方面将更加明显，其中：

图1是示出根据示例性实施例的扩展的显示系统的视图；

图2和图3是示出根据示例性实施例的用户终端装置的配置的框图；

图4是示出存储在用户终端装置的存储器中的模块的框图；

图5是示出根据类别的应用特征的视图；

图6A和图6B是示出根据示例性实施例的根据每个部分的屏幕更新速度的屏幕配置的视图；

图7A到图7C是示出根据示例性实施例的根据每个部分的色彩属性的屏幕配置的视图；

图8A到图8C是示出根据示例性实施例的划分和重新配置屏幕的各种形式的视图；

图9A到图9B是示出根据示例性实施例的划分视频再现应用的屏幕的情况的视图；

图10是示出根据示例性实施例的划分电子书的屏幕的情况的视图；

图11是示出根据示例性实施例的总结并显示网络浏览器屏幕的情况的视图；

图12是示出根据示例性实施例的总结并显示电子书的内容的情况的视图；

图13是示出根据示例性实施例的图形化地显示日程应用的内容的情况的视图；

图14是示出根据示例性实施例的显示与照片有关的元信息的情况的视图；

图15是示出根据示例性实施例的显示关于视频的信息或字幕的情况的视图；

图16是示出根据示例性实施例的显示与网络浏览器屏幕有关的帮助信息的情况的视图；

图17是示出根据示例性实施例的显示与电子书的内容有关的帮助信息的情况的视图；

图18是示出根据示例性实施例的显示摄影构图的情况的视图；

图19A和图19B是示出根据示例性实施例的网络浏览器中的复制模式的视图；

图20是示出根据示例性实施例的电子书的复制模式的视图；

图21是示出根据示例性实施例的支持触摸输入的视图；

图22是示出根据示例性实施例的支持屏幕编辑功能的视图；

图23是根据示例性实施例的在拍摄过程期间识别周围会话并且以声音到文本(Sound-to-Text,STT)格式提供周围会话的视图；

图24A和图24B是示出根据示例性实施例的显示窗口小部件(widget)的情况的视图；

图25是示出根据示例性实施例的显示消息或电子邮件窗口小部件的情况的视图；

图26和图27是示出根据各种示例性实施例的用户终端装置的控制方法的流程图；

图28是示出根据示例性实施例的扩展的显示系统的操作的顺序图；

图29A和图29B是示出根据示例性实施例的具有多个显示器的用户终端装置的视图和框图；以及

图30A到图31C是示出根据示例性实施例的在用户终端装置的壳体中配置显示装置的情况的视图。

具体实施方式

下面参照附图更详细地描述某些示例性实施例。

在下面的描述中，即使在不同的附图中，相同的参考标记被用于相同的元件。描述中定义的、诸如详细结构和元件的事项被提供以便有助于全面理解示例性实施例。然而，示例性实施例可以在没有这些具体定义的事项的情况下实现。此外，没有详细描述公知的功能或结构，因为它们会以不必要的细节模糊本申请。

图1是示出根据示例性实施例的扩展的显示系统的视图。参照图1，扩展的显示系统包括用户终端装置100和显示装置200。

显示装置200从用户终端装置100接收数据，并显示与接收到的数据相对应的屏幕。如图1所示，显示装置可以是，但不限于，智能手表、智能手机或智能眼镜。显示装置可以具体实施为具有显示器的各种装置之一，诸如电子纸、电子相框(E-frame)和平板个人计算机(PC)，但不限于此。此外，包括控制器的诸如智能电话的显示装置200，也可以划分显示屏幕，并执行用户终端装置100的控制器所执行的功能，这将在下文中说明。

当用户终端装置100在显示应用的执行屏幕的时候正在与外部显示装置200配对时，用户终端装置100获取关于该显示装置200的信息。基于正在显示装置200上执行的应用的信息和获得的关于显示装置200的信息中的至少一条信息，用户终端装置100显示应用的第一屏幕。此外，用户终端装置100将应用的第二屏幕的数据发送到显示装置200。

在上述扩展的显示系统中，通过将用户终端装置100与显示装置200配对，可以获得诸如扩展显示屏幕、最大化可视性和高效的功耗的效果。

图2是示意性地示出根据示例性实施例的用户终端装置100的配置的框图。参照图2，用户终端装置100包括显示器110、通信器120和控制器170。在下文中，用户终端装置100被解释为智能电话，但不限于此，并且用户终端装置100可以具体实施为可以在其中执行平板PC等的装置。显示器110显示可以在用户终端装置100中执行的包括应用执行屏幕的各种屏幕。

显示器110可以被设计成各种显示面板之一。也就是说，显示器110可以以各种显示技术来具体实施，诸如液晶显示器(LCD)、有机发光二极管(OLED)、电子纸、等离子显示面板(PDP)、真空荧光显示器(VFD)、场发射显示器(FED)、和电致发光显示器(ELD)。显示面板可以是发光型显示器，但是它也可以被具体实施为反射型显示器。此外，显示器110可以被具体实施为柔性显示器或透明显示器等等。

通信器120向/从外部显示装置200发送/接收数据。通信器120可以包括无线通信模块或有线通信模块，并且可以与显示装置200执行无线通信或有线通信。更具体地，通信器120接收关于显示装置200的信息，并向显示装置200发送将被显示在显示装置200上的第二屏幕的数据。

控制器170控制用户终端装置100的整体配置。具体地，当在显示器110显示应用的执行屏幕的时候通过通信器120与显示装置200配对时，控制器200获取关于显示装置200的信息，并且基于关于用户终端装置100执行的应用的信息和获得的关于显示装置200的信息中的至少一条来控制显示器110显示应用的第一屏幕，并且控制通信器120将应用的第二屏幕的数据发送到显示装置200。

更具体地，控制器170可以基于关于应用的信息将正在显示器110上显示的应用的执行屏幕划分成多个元素，利用多个划分的元素中的一些来配置第一屏幕，而且利用多个划分的元素中的其余元素来配置第二屏幕。根据示例性实施例，控制器170可以基于每个部分的屏幕更新速度将正在显示器110上显示的应用的执行屏幕划分成多个元素，利用多个划分的元素中的包括视频的元素来配置第一屏幕，而且利用多个划分的元素中的其余元素来配置第二屏幕。在视频的情况下，屏幕更新速度应该足够快，并因此视频应该被显示在诸如OLED的显示面板上，而且用于文本等而不是视频的具有较慢屏幕更新速度的屏幕应该被显示在不能跟上视频的屏幕更新速度的显示面板上，诸如电子纸。根据另一示例性实施例，控制器170可以基于每个部分的色彩属性将正在显示器110上显示的应用的执行屏幕划分成多个元素，利用多个划分的元素的第一色彩的元素来配置第一屏幕，而且利用多个划分的元素的第二色彩的元素来配置第二屏幕。存在一种类型的显示器，对其而言，根据显示器的特征，在显示具有接近白色的许多明亮显示的情况下，其功耗增加。例如，OLED具有自发光发射特性，因而在具有接近白色的许多明亮显示的情况下，功耗增加。因此，基于每个部分的色彩属性，控制器170可以控制利用具有许多明亮显示的元素来配置第二屏幕，该明亮显示具有作为白色的第二色彩，并且在OLED中利用具有作为黑色的第一色彩的其余元素来配置第一屏幕。

控制器170可以控制显示器110继续显示应用的执行屏幕作为第一屏幕，并控制通信器120向显示装置200发送包括应用的执行屏幕的附加信息的第二屏幕的数据。例如，在用户只利用用户终端装置100来搜索关于应用的执行屏幕的附加信息的情况下，可能存在必须停止执行应用的不便。如果这样的附加信息被显示在外部显示装置200上，则用户可以能够使用户终端装置100继续执行应用而无需停止。根据示例性实施例，在应用的执行屏幕包括文本的情况下，控制器170可以控制通信器120向显示装置发送第二屏幕的数据，该数据包括总结了所包括的文本的内容的文本或图像。根据另一示例性实施例，在应用的执行屏幕包括视频内容的情况下，控制器170可以控制通信器向显示装置200发送第二屏幕的数据，该数据包括所包含的视频内容的信息或字幕。

此外，响应于存在指示复制模式的用户输入，控制器170可以控制显示器110不显示第一屏幕，并且控制通信器120向显示装置200发送当存在指示复制模式的用户输入时的应用的执行屏幕的数据。例如，在使用电子纸(其使用反射光)作为显示装置200的情况下，由于电子纸的特征在于在改变屏幕之后在不耗电的情况下显示字母和图像，因此用户可以使用复制模式将正在显示器110上显示的屏幕移动到消耗更少电力的电子纸上并将它显示出来。

响应于显示装置不支持用户输入，控制器170可以控制通信器向显示装置200发送与用户输入相对应的数据。例如，为了转换不支持滚动输入的显示装置200的屏幕，在用户终端装置100中接收到滚动输入之后，控制器170可以将滚动输入转换为与滚动输入相对应的、适用于显示装置的数据，诸如页面转换输入等，并向显示装置200发送该数据。

利用上述的用户终端装置100，当使用显示装置时，可以以光学形式显示屏幕，以使得用户在观看屏幕时感觉不麻烦，各种附加信息也可以显示在显示装置200上，并且可以根据用户终端装置100和显示装置200的低功耗特性使用低电力消耗来显示内容。

图3是详细地示出根据示例性实施例的用户终端装置的配置的框图。参照图3，用户终端装置100包括显示器110、通信器120、存储器130、接口140、音频输出器150、相机160和控制器170。

显示器110显示正在用户终端装置100上执行的各种屏幕，包括应用的执行屏幕。当只有用户终端装置100正在被使用时，显示应用的执行屏幕而不管显示器的类型。因此，在具有根据正在显示的屏幕的类型的特定类型的显示的显示器110中，它可能在功率消耗方面不适合。因此，在重新配置屏幕时，期望考虑显示器110的特性来配置要在显示器110上显示的第一屏幕。显示器110的特性，诸如显示类型等将在下文中详细说明。

通信器120向/从外部显示装置200发送/接收数据。通信器120包括无线通信模块或有线通信模块，并且与显示装置200执行无线通信或有线通信。更具体地，通信器120接收显示装置200的信息，并向显示装置200发送将被显示在显示装置200上的第二屏幕的数据。

通信器120可以使用高清晰度多媒体接口(HDMI)、低压差分信号(LVDS)和局域网(LAN)有线通信方法。在通信器120正在通过HDMI(它是未压缩型数字视频/音频接口标准之一)连接到显示装置200的情况下，使用在HDMI本身支持的源和接收端(sink)之间交换属性的标准方法是有优势的。例如，通过使用在源和基于CEA861的信息帧和E-EDID的接收端之间的已定义的方法，接收端装置可以向源装置提供接收端装置的分辨率和与显示相关的其它属性。类似地，当用户终端装置100和显示装置200正在通过HDMI配对时，它可以在E-EDID中记录与显示装置200相关的信息并通过DDC信道提供该信息，并因此通信器120可以接收显示装置200和用户终端装置100的物理连接状态，以及显示装置200的显示属性信息。LVDS是用于将图像数据从图像装置发送到计算机显示器的信号标准，其被用于平板的平板显示链接(Flat Panel Display Link,FPD)或开放LVDS显示接口(OpenLDI)。在通过LVDS类型有线连接进行通信的情况下，通信器120可以通过信号检查有线LVDS的物理连接状态，而且通信器120可以通过新定义信号的保留的或未定义的数据部分来使用保留或未定义的数据部分以用于交换显示属性信息。更具体地，LVDS接口可以根据在划分JEIDA和VESA中的比特和配对的数目而改变，而且LVDS接口可以使用保留的数据部分来交换与显示相关的属性。在用户终端装置100和显示装置200通过有线LAN配对的情况下，关于是否做出连接的信息必须能够通过确定的协议在用户终端装置100和显示装置200之间发送/接收以用于相互识别。以与定义协议类似的方式，还可以定义使用通过通信器120交换数据，诸如显示属性信息等。为此，协议可以通过应用层或表示层来定义，应用层或表示层是OSI 7层模型(开放系统互联7层模型)中的上层。

通信器120可以使用各种方法，诸如近场通信(NFC)、无线LAN、红外(IR)通信、紫蜂通信、WiFi和蓝牙，以用于无线通信。NFC是用于在非常近的距离内执行无线通信的技术，它用于各种服务中，诸如交通、门票和支付等。当前支持的数据通信速度是每秒424千比特。对于用户终端装置100和显示装置200之间的配对和属性信息的交换，NFC读取器和NFC标签可以被分别安装在用户终端装置100和显示装置200内。使用安装在内部的NFC读取器和NFC标签，可以基于彼此接触的用户终端装置100和显示装置200的自然操作来确定是否配对，而且当安装在用户终端装置100内的NFC读取器读出安装在显示装置200内的NFC标签中所记录的信息时，通信器120可以接收显示装置200的显示属性信息。在用户终端装置100和显示装置200通过无线LAN配对的情况下，关于通信连接是否被做出的信息必须能够通过确定的协议被发送/接收，以用于用户终端装置100和显示装置200之间的相互识别。以与上述有线LAN方法相同的方式，可以使用OSI 7层模型中的上层中的应用层或表示层来定义协议，而且通信器120可以使用定义的协议来发送/接收数据。

如上所述，通信器120可以使用各种有线和无线通信方法，但不限于上述通信方法。

存储器130存储操作用户终端装置100所需的各种程序、模块和数据。图4是示出存储在存储器130中的一些模块的框图。如图4所示，存储器130可以包括用于管理显示属性的模块131、用于管理应用属性的模块132、以及用于重新配置屏幕的模块133。

用于管理显示属性的模块131是用于识别和确定显示装置200的显示类型、分辨率、响应时间、色彩、色调、可视角度、色彩范围、连接角度、和连接状态的模块。用于管理显示属性的模块131可以包括用于识别已连接的显示器的类型的模块131-1、用于识别已连接的显示器的属性的模块131-2、用于确定显示器之间的连接角度的模块131-3、以及用于确定显示器的连接状态的模块131-4。

更具体地，用于识别已连接的显示器的类型的模块131-1被用于基于操作方法识别正在配对的显示装置200的显示类型。由于功耗特性基于显示类型而不同，因此必须根据显示类型来区分屏幕显示方法。例如，在液晶显示器(LCD)的情况下，一个像素包括两个透明电极连接到的液晶，并且在两侧存在彼此垂直的偏振过滤器。在正常状态下，液晶的规则排列使光通过，但是当施加电压时，液晶的排列被固定并因此不能使光通过，从而阻挡光。因此，LCD示出一定功耗特性，与显示的屏幕无关。另一例子是有机发光二极管(OLED)，它是薄膜发光二极管，其中，发光层由有机化合物制成。因为它具有自发光的发射特性，所以当存在接近白色的许多显示时，OLED消耗大量的电力。另一例子是电子纸，这是将普通油墨的特性应用于纸张的显示技术。不同于使用背光以使得可以照亮像素的相关技术的平板显示器，电子纸像普通纸一样反射光。通过具有双稳态特性的操作原理，当屏幕改变时，文本和图片可以在不耗电的情况下显示。此外，不同于平板显示器，电子纸可以折叠或弯曲。电子纸是在所有现有的显示器中最可以弯曲的显示器。电子纸与LCD相比具有宽视角，因而具有从薄弱(vulnerate)角度读取字母的优点。然而，由于电子纸使用反射的特性，它不可能使用背光，而且响应时间较慢，这是缺点。另外，在PDP的情况下，由于PDP使用放电(electricaldischarge)，所以几乎没有残像，并提供平滑屏幕从而减少用户眼睛的疲劳，并且每英寸的成本较便宜。然而，PDP需要相对大量的功耗，产生大量的热量，并且较厚，这是缺点。

用于识别已连接的显示器的属性的模块131-2是用于分析显示器的通用属性信息，诸如分辨率、响应时间、色彩和色调的模块。由于配置和显示方法需要根据显示装置200的显示属性而不同，因此需要使用用于识别所连接的显示器的属性的模块131-2。例如，在响应时间的情况下，OLED具有以μS(微秒)为单位的响应时间，LCD具有2到30ms(毫秒)的增加的响应时间，并且电子纸具有大约250ms的响应时间。因此，很难显示需要大约30fps的屏幕更新的图像，诸如一般的视频。在色彩和色调方面，大部分的电子纸具有灰度级，而且只支持一些色彩。

用于确定显示器之间的连接角度的模块131-3是可以经常使用的模块，特别是当用户终端装置100和显示装置200通过电缆连接的时候。可以使用这样的方法：对经由线缆与压电元件连接的部分进行配置，并测量由弯曲角度所引起的压力以识别连接角度。然而，由于连接角度也可以使用用于无线连接的传感器来确定，因此模块131-3不是仅用于有线连接的模块。因为使用用户终端装置100和显示装置200可以显示的情境取决于连接角度而不同，所以必须理解连接角度。例如，当连接角度为0°时，可以假设显示器110接触在显示装置200上显示的部分的状态。可以使用不重叠的部分来显示简单信息。可以存在另一示例性实施例：当连接角度为60°或更小时执行复制模式。另一例子可以是当连接角度为180°时。

在示例性实施例中，大多数的用户终端装置100和显示装置200将通过180°的连接角度进行配对。下文中说明的代表性的示例性实施例是基于连接角度是180°的情况，但是连接角度不必是180°。作为另一例子，当连接角度是270°或更小时，可能存在这样的情境：显示器110和显示装置200的被显示的部分指向相反的方向，并被设置桌子上。可能存在用户设置显示器110和显示装置200的被显示部分而且只在一侧观看屏幕的情况，但是也可能存在两个或更多个用户相互面对并且在另一侧观看屏幕的情况。作为另一例子，与连接角度为0°的情况相反，也可以假设在连接角度是360°的情况下，显示器110和显示装置200的被显示部分被暴露。

用于确定显示器的连接状态的模块131-4是可以用于确定用户终端装置100和显示装置200是否配对以及他们的连接形式的模块。确定方法可以根据在通信器120中使用什么类型的通信方法而不同。

用于管理应用属性的模块132是用于识别和确定在用户终端装置100中正在执行的应用的类别、每个部分的色彩属性、和每个部分的屏幕更新速度的模块。用于管理应用属性的模块132包括用于识别应用类型的模块132-1、用于分析每个部分的屏幕更新速度的模块132-2、和用于分析每个部分的色彩属性的模块132-3。

更具体地，由于根据正在执行的应用的类别需要不同的显示特性，因此用于识别应用类型的模块132-1被用于识别在用户终端装置100中正在执行的应用的类别。图5是示出根据类别的应用属性的视图。各种应用类别中的九个最具代表性的类别是主页和锁定屏幕、网络浏览器、电子书、消息、相机、视频播放器、日历、图库和游戏。如图5所示，如重新配置屏幕的情境那样，电池消耗相对于每个类别是不同的。例如，参照图5，游戏应用每分钟的电池消耗是主页和锁定屏幕应用的5倍以上。

用于分析每个部分的屏幕更新速度的模块132-2是用于根据屏幕更新周期划分应用执行屏幕并且重新配置屏幕的模块。必须分析屏幕更新速度的原因是因为根据显示特征存在可以不显示要求快速屏幕更新速度的内容的装置。例如，当响应时间慢于250ms时，诸如在电子纸中，可以不显示需要快速更新速度的内容，诸如视频。图6A是示出显示应用执行屏幕的用户终端装置100的视图，该屏幕包括显示需要快速更新速度的视频的部分610以及显示不需要被更新的文本的部分620。使用用于分析每个部分的屏幕更新速度的模块132-2，应用执行屏幕可以被区分成两个部分610、620。如图6B所示，期望的是，显示需要快速更新速度的视频的部分610显示在使用具有快速响应时间特性的OLED的用户终端装置100上，而且显示不需要被更新的文本的部分620显示在一旦被更新就不需要额外的功耗的显示装置200上，例如电子纸。

用于分析每个部分的色彩属性的模块132-3可以被用于通过色彩配置获得每个区域的色彩分布直方图，并根据色彩分布提供功耗标准从而提供屏幕重新配置标准。必须分析正在显示的屏幕的每个部分的色彩属性的原因是因为根据显示特性，按照配置屏幕的显示色彩而存在功耗差异。具体地，在应用诸如OLED的自发光发射显示器的情况下，每个部分的色彩属性必须被考虑。图7A示出了用于分析每个部分的色彩属性的每个区域的色彩直方图分析的例子。如图7A所示，色彩分析不仅可以在黑白屏幕上进行，而且也可以在已经放入各种色彩的时候进行。图7B示出了在屏幕的重新配置之前应用在用户终端装置100上正在执行的屏幕710、720。显示视频的部分710可以是具有较暗背景的区域，而显示文本的部分720看起来是白色总体上占主导的区域，因为文字是黑色的而文字的背景是白色的。

利用使用用于分析每个部分的色彩属性的模块132-3进行分析的结果，可以如图7C所示单独显示用户终端装置100的屏幕710和显示装置200的屏幕720。例如，在功耗方面是有利的，因为由OLED配置以显示部分710的用户终端装置100的显示器110在消耗更少功率的黑色屏幕上显示视频，而且由对于白色消耗更少功率的电子纸或LCD配置以显示部分720的显示装置200在白色屏幕上显示文本。

用于重新配置屏幕的模块133是用于使用划分在用户终端装置100上正在执行的应用的元素的方法来重新配置分别在用户终端装置100和显示装置200上显示的屏幕的模块。用于重新配置屏幕的模块133可以包括用于划分应用元素的模块133-1、用于划分应用页面的模块133-2、用于应用操作布局图案的模块133-3、以及用于排列自适应文本的模块133-4。

更具体地，用于划分应用元素的模块133-1是用于执行将一个应用划分成不同元素的功能的模块。在显示结构化为网页的文档的应用的情况下，划分元素的额外处理不是必要的。然而，在一般的应用的情况下，需要根据屏幕属性将应用划分为多个部分的处理。可以通过上述的用于管理应用属性的模块132来提供划分标准。划分方法可以包括通过分割处理进行检测的方法、以及解析应用的布局的方法。

用于划分应用页面的模块133-2是用于确定显示装置200是否适合滚动界面或页面界面，并且当显示装置200适合页面界面时划分页面的模块。例如，在正在提供使用滚动操作显示文本的屏幕的情况下，用户终端装置100可以向使用电子纸的显示装置200发送显示文本的屏幕，并且显示屏幕。由于诸如响应时间的特性，难以将滚动方法应用于电子纸。在这种情况下，用于划分应用页面的模块133-2可以按照每页划分文本，以使得滚动界面不会出现并且向使用电子纸的显示装置200提供经划分的文本。

用于应用操作布局图案的模块133-3是用于提供控制功能的模块，所述控制功能可以在使用用于划分应用元素的模块133-1单独在用户终端装置100和显示装置200上显示经划分的屏幕的情况下自适应地执行每个屏幕。用于应用操作布局图案的模块133-3可以动态地划分屏幕并显示经划分的屏幕，并进一步包括使经划分的屏幕适合屏幕的大小的功能。例如，参照图8A，正在用户终端装置100上显示的执行屏幕可以被划分成五个元素810、820、830、840、850。图8B示出了动态划分执行屏幕的情况。在用户终端装置100上可以显示经划分的元素中的三个元素810、830、850，并且在显示装置200上可以显示剩余的两个元素820、840。图8C示出了动态划分执行屏幕并且使经划分的屏幕适合屏幕的大小的情况。用户终端装置100在重新配置之前根据显示器110的大小改变屏幕的大小和排列结构，并显示三个元素820'、830'、840'。显示装置200还根据屏幕的大小，以比原始大小更大的大小来显示两个元素810'、850'。上文中，对根据屏幕的大小改变元素的大小进行了说明，但是不限于此，因此还可以基于其他特性，诸如显示器的分辨率，来改变元素的大小。

用于排列自适应文本的模块133-4是这样的模块：在显示装置200上显示包括文本的网页的情况下，为了用户的可视性，根据扩大/缩小命令提供自动调整文本流的功能。可以存在系统地一起使用用于划分应用页面的模块133-2和用于排列自适应文本的模块133-4的情境。例如，在向显示装置200发送用于在用户终端装置100上显示的文本屏幕并且显示文本屏幕的情况下，用于排列自适应文本的模块133-4可以提供将字体大小改变为适合显示装置200的大小，并且改变文本以使得文本不会溢出显示装置200的宽度的功能。

接口140使用户终端装置100能够从/向用户接收/发送命令。例如，接口140可以是触摸屏或键盘等。根据示例性实施例，在显示装置200不支持用户输入的情况下，接口140可以接收用户终端装置100中的用户输入，并且通过通信器120向显示装置200发送与用户输入对应的数据。此外，在显示装置200的大小较小并因此难以直接触摸屏幕和编辑屏幕的情况下，可以存在在接口140中从用户接收屏幕编辑命令的输入并且编辑显示装置200的屏幕的示例性实施例。

音频输出器150可以输出正在用户终端装置100上执行的应用的语音信号。

相机160使能提供图像拍摄和视频拍摄功能的应用以执行拍摄。此外，相机160可以与接口140一起执行用户运动的识别。例如，在用户执行与复制模式相对应的手部运动操作的情况下，相机160可以拍摄用户的手部动作操作并且将它提供给接口140或控制器170。

控制器170控制显示器110、通信器120、存储器130、接口140、音频输出器150和相机160。控制器170可以包括只读存储器(ROM)或随机存取存储器(RAM)，其存储用于控制CPU和用户终端装置100的模块和数据。在这种情况下，上述的用于管理显示属性的模块131、用于管理应用属性的模块132、以及用于重新配置屏幕的模块133可以存储在控制器170中。

当显示器110显示应用的执行屏幕的时候，通过通信器120与显示装置200配对时，控制器170获取关于显示装置200的信息，并且基于关于正在由用户终端装置100执行的应用的信息和获得的关于显示装置200的信息中的至少一条信息，控制显示器110显示关于应用的第一屏幕，并且控制通信器120向显示装置200发送关于应用的第二屏幕的数据。

更具体地，基于使用用于划分应用元素的模块133-1获得的、关于正在用户终端装置100上执行的应用的信息，控制器170可以将应用执行屏幕划分成多个元素。利用划分的元素中的一些来配置第一屏幕，而且利用划分的元素中的其余元素来配置第二屏幕。

根据示例性实施例，如图9A所示，由包括视频910的部分和包括文本920的部分组成的执行屏幕可以在用户终端装置100上显示。在将执行屏幕划分成多个元素之前，必须识别关于显示类型和属性的信息。例如，假设图9B中所示的用户终端装置100是具有由OLED组成的显示器110的装置，而且显示装置200是由电子纸组成的装置。OLED的特征在于，在表示白色时消耗大量功率，而电子纸的特征在于，难以显示需要快速屏幕转换的内容，诸如视频。因此，根据每个部分的这种色彩属性和每个部分的屏幕更新速度，控制器170可以将应用执行屏幕划分成包括视频的元素910，而且包括文字的元素920是经划分的屏幕的剩余部分。此外，控制器170可以控制以使得，第一屏幕利用包括视频的元素910来配置，然后在用户终端装置100上显示，并且第二屏幕利用包括文本的元素920来配置，然后由通信器120将关于第二屏幕的数据发送到显示装置200。

根据示例性实施例，图10是示出正在由用户终端装置100和显示装置200显示的一个电子书屏幕的视图。电子书屏幕可以包括具有颜色的图片部分1010和显示文本的部分1020。此外，图片部分1010可以被图片、视频内容和交互内容等替换，或者一起包括图片、视频内容和交互内容等等。假设图10中所示的用户终端装置100是显示器110由OLED组成的装置而且显示装置200是包括电子纸的装置，色彩或视频应该在OLED显示器上显示，而排列大量白色的文本部分应该在消耗更少功率的电子纸上显示。因此，在划分电子书屏幕时，第一屏幕利用包括图片部分的元素1010配置并且在用户终端装置100上显示，而且第二屏幕利用包括文本部分的元素1020配置并且在显示装置200上显示。这将是重新配置屏幕的有效方法。

根据示例性实施例，控制器170可以控制显示器100保持将正在用户终端装置100上执行的应用的执行屏幕显示为第一屏幕，并控制通信器120向显示装置200发送关于第二屏幕的数据，该第二屏幕包括关于执行屏幕的附加信息。

图11是用于说明总结网络浏览器屏幕并显示网络浏览器屏幕的示例性实施例的视图。参照图11，网络浏览器应用正在用户终端装置100上执行，并且网页屏幕1110正在显示器110上显示。可以识别网页屏幕110的内容，总结作为网页屏幕1110的主要内容的诸如“日内瓦”和“车展”的内容，并配置将要在显示装置200上显示的第二屏幕1120。在识别和总结文本时，可以使用自然语言处理技术。为了用户的可视性，存在与词语的出现次数成比例地增大字体大小的方法。配置第二屏幕1120的信息的更新周期可以是在用户终端装置100中每次刷新网络页面时更新，或者在每个预定的时间段更新。图11中所示的示例性实施例可以提供增加文本对于用户的可视性的效果。

图12是示出总结并显示电子书的内容的示例性实施例的视图。参照图12，电子书执行屏幕1210正在用户终端装置100上显示，而且电子书执行屏幕1210的内容被总结为几个句子的屏幕1220正在显示装置200上显示。总结屏幕1220的更新周期可以是每当改变正在用户终端装置100上执行的电子书的页面的时候被更新。如果正在用户终端装置100上执行的电子书应用是通过滚动转换内容的一种类型的应用，则也可以提供在每个预定周期更新的方法。为了识别电子书的内容，可以应用自然语言处理方法。图12仅示出了显示其中电子书的内容被总结为句子的屏幕1220的情况，但是内容可以被表示为图片或图标以便很容易地被用户识别。

图13是示出图形化地显示日程应用的内容的示例性实施例的视图。参照图13，执行包括日程的日历应用的屏幕1310正在用户终端装置100上显示，而且具有卡通格式的与日程的内容有关的整个旅程的第二屏幕1320正在显示装置200上显示。为了以卡通格式配置旅程，不仅考虑日程的内容，而且可以一起考虑关于在日历应用中收集记录的特征的信息以及关于它是否是紧急旅程的信息。第二屏幕1320可以不必以卡通格式配置。第二屏幕1320可以使用在相应旅程的日期由相机160拍摄的图片进行配置。

图14是示出显示与照片有关的元信息的示例性实施例的视图。与照片有关的元信息可以包括照片的分辨率、大小和格式，以及拍摄日期和拍摄装置信息。参照图14，示出照片的图库应用的执行屏幕1410正在用户终端装置100上显示，而且由正在第一屏幕1410上显示的照片的元信息组成的第二屏幕1420正在显示装置200上显示。期望的是，正在第二屏幕1420上显示的元信息的更新周期是在用户终端装置100中每次选择单个照片时更新。根据另一示例性实施例，在显示装置200中也可以做出用户输入的情况下，当一定的元信息值在第二屏幕1420上被选择和搜索时，第一屏幕1410可以利用存储在用户终端装置100中的照片中与搜索条件相对应的照片来配置并被显示。例如，在根据具有5月15日为拍摄时间的元信息来实行搜索的情况下，如果在存储在用户终端装置100中的照片当中存在四个拍摄于5月15日的照片的情况下，第一屏幕1410可以被配置以使得四个照片以格子格式或直线格式排列并被显示。

根据示例性实施例，在用户终端装置100上正在显示的应用的执行屏幕包括视频内容的情况下，控制器170可以控制通信器120向显示装置200发送关于视频内容的信息的数据以及包括字幕的第二屏幕。本文中，关于视频内容的信息可以包括故事情节信息、关于导演或男演员/女演员的信息、以及关于更新下一演出的视频内容的数据的信息。例如，在获得故事情节信息的方法中，信息可以以在用户终端装置100的背景中访问因特网的方法来获得并提供。另外，可以使用包含在视频内容中的信息。图15是示出显示关于视频或字幕的信息的示例性实施例的视图。参照图15，可以再现视频内容的视频播放器应用的执行屏幕1510正在用户终端装置100上显示。在显示装置200上，正在用户终端装置100上显示的视频内容的字幕正在第二屏幕1520中显示。电子纸具有最慢的响应速度而且也具有足以显示字幕的屏幕更新速度，并且因此显示字幕的示例性实施例可以在任何显示类型的显示装置200中实施。

根据另一示例性实施例，在用于显示网页的应用正在用户终端装置100上执行的情况下，可以帮助阅读网页的内容可以在显示装置200上显示。在使用用户终端装置100阅读网页的时候想要搜索相关词语的解释的情况下，用户遇到停止网络浏览以便将正在显示网页的屏幕转换到用于搜索词语的屏幕的不便。然而，如果可以在显示装置200中搜寻相关词语，则用户将能够获得相关信息而不停止网络浏览。图16是示出用于显示与网络浏览器屏幕有关的帮助信息的示例性实施例的视图。网络浏览器应用的执行屏幕1610正在用户终端装置100中显示，而且包括关于网络浏览器屏幕1610中的内容“概念车”的词汇表信息的第二屏幕1620正在显示装置200上显示。需要词汇表信息的部分可以自动地从网页1610的内容中选择，或者它可以由用户通过接口140从第一屏幕1610输入的触摸来选择。例如，在用户从第一屏幕1610的内容选择“日内瓦国际车展”部分的情况下，关于“日内瓦国际车展”的信息可以在第二屏幕1620上显示。配置第二屏幕1620所需的信息可以从存储在用户终端装置100中的字典应用、或通过互联网访问来获得。在自动地选择需要词汇表信息的部分的情况下，信息更新周期可以是在在用户终端装置100中每次刷新网页1610时更新，或者可以被更新以使得关于其他词语的词汇表信息在确定的时间过去时被显示。在用户选择需要词汇表信息的部分的情况下，信息更新周期可以被选择以使得在出现另一用户输入前不执行更新。

图17是示出用于显示与电子书的内容有关的帮助信息的示例性实施例的视图。参照图17，电子书应用的执行屏幕1710正在用户终端装置100上显示，而且关于在电子书中出现的词语的英语字典信息在显示装置200上提供。在电子书中出现的词语它是“Swing”的韩语词，一起显示在第二屏幕1720上。关于构成第二屏幕1720的电子书的信息可以包括字典、关于相关词语的词汇表信息、书签、重点和备忘录，但并不限于此。需要词汇表信息和字典搜索的部分可以从电子书的内容自动选择，或者可以由用户来选择。字典搜索可以基于个人化的数据库使用现有的字典搜索历史以定制的方式操作。信息更新周期可以在用户终端装置100中每次转换电子书的页面时进行。然而，对于如果诸如书签、重点和备忘录的信息被与页面转换无关地显示，则用户发现刚方便，更新周期可以被设置以使得在一定的用户输入之前不进行更新。

安装在用户终端装置100的相机160上的相机装置的性能正在逐渐提高，而且用户使用用户终端装置100拍摄图像已经变为普遍做法。然而，由于普通用户不具有拍摄角度或构图的专业知识，因此向用户提供有关拍摄角度或构图的信息可以是有用的体验。图18是示出在拍摄照片时显示构图信息的示例性实施例的视图。通过相机160显示的拍摄屏幕1810正在用户终端装置100上显示。在用户终端装置100中提供构图信息的情况下，拍摄屏幕1810和构图信息屏幕必须交替可见，并因此用户要依赖于他/她的记忆，这是不方便的。通过向显示装置200提供关于同一地点的构图草图屏幕1820，用户终端装置100使得用户能够更容易地拍摄与推荐的构图相对应的照片。具体地，在著名的旅游景点的情况下，使用可以包括在用户终端装置100中的GPS装置，将有可能向用户提供关于用户当前所在的旅游点的代表性照片构图的信息。

根据另一示例性实施例，在用户终端装置100中执行消息应用的情况下，与对方先前会话的记录、周年纪念日或事件信息可以在显示装置200的第二屏幕上显示。在显示装置200上显示先前会话的记录可以帮助用户与对方进行不间断的会话，并防止用户在会话期间犯错。

根据示例性实施例，当存在指示复制模式的用户输入时，控制器170可以控制显示器110不显示第一屏幕，并且可以当存在指示复制模式的用户输入时控制通信器120向显示装置200发送应用关于应用执行屏幕的数据。

图19A是示出在网络浏览器中存在指示复制模式的用户输入的情况的视图。参照图19A，为了指示复制模式，用户使用他/她的手在用户终端装置100上执行擦动(scrub)操作。通过使用接口140或相机160的关于用户动作的动作识别操作，用户终端装置100识别存在关于复制模式的用户命令。指示复制模式的用户输入可以是不同类型的预定操作。预定操作可以是使用触摸屏或键盘等的用户输入，而不是动作识别。参照图19B，当存在图19A中的关于复制模式的用户输入时在用户终端装置100上显示的屏幕1910被原样复制到显示装置200，然后第二屏幕1910被配置并显示。在屏幕根据复制模式操作被复制到显示装置200之后，在用户终端装置100上可以什么都不显示。然而，不同于图19B所示，可以存在这样的示例性实施例：应用的执行屏幕在用户终端装置100上继续显示，而且当存在指示复制模式的用户输入时只有应用的执行屏幕被复制到显示装置200。使用复制模式的目的之一是降低功耗。在与比用户终端装置100消耗更少功率的显示装置200配对的情况下，可以使消耗更少功率的显示装置显示先前在用户终端装置100上显示的屏幕，而且使用户终端装置100什么都不显示，从而降低了功耗总量。

相比于显示频繁地更新的内容(诸如视频)，复印模式可能在静态屏幕(诸如网页和电子书)中更加有用。图20是用于说明在电子书中执行复制模式的示例性实施例的视图。在显示装置200中，当存在指示复制模式的用户输入时，用于在用户终端装置上显示的电子书屏幕被复制以配置第二屏幕2010然后被显示。用于在用户终端装置上显示的屏幕不再被显示。例如，在电子书的情况下，由于用户读取信件，所以用户将能够通过使用眼睛滚动(这是使用人体的眼睛的运动识别)更容易地指示复制模式，而无需执行附加的操作。根据另一示例性实施例，在用户终端装置100的相机160识别到用户读完被复制并被显示在显示装置200上的电子书屏幕2010的情况下，控制器170可以直接向显示装置200发送与下一页相对应的数据，而无需在用户终端装置100上再次显示屏幕的操作。根据另一示例性实施例，可以提供连同传感器来执行复制模式的功能。在短暂地关闭和打开用于通过用户终端装置100显示的屏幕的情况下，用于在用户终端装置100上显示的第一屏幕可以被复制到显示装置200的第二屏幕并被显示。控制器170将能够识别：关闭和打开显示装置的操作是使用利用磁原理的霍尔传感器、照度传感器、方向/位置传感器和相机160执行的。此外，还可以存在当使用用于确定显示器之间的连接角度的模块131-3确定连接角度为0°时，确定存在指示复制模式的用户命令的方法。

根据示例性实施例，当显示装置200不支持用户输入或者由于它较小的大小而难以编辑屏幕时，控制器170可以控制通信器120向显示装置200发送与用户输入或屏幕编辑命令相对应的数据。

图21是示出支持触摸输入的示例性实施例的视图。参照图21，显示装置200是不支持诸如触摸的用户输入的显示装置。用户将与页面转换相对应的触摸输入到用户终端装置的屏幕2110，而且控制器170控制通信器120向显示装置200发送与用于转换页面的用户输入相对应的数据。使得显示装置200基于接收到的用户输入数据在第二屏幕中执行转换页面的操作。这样的通过用户终端装置中的触摸输入控制显示装置200的功能可以在模块中配置。执行这样的功能的显示装置触摸输入模块131-5(未示出)可以被包括在用于管理显示属性的模块131中。

根据另一示例性实施例，用户可以通过用户终端装置100执行显示装置200的屏幕编辑。图22是示出支持屏幕编辑功能的示例性实施例的视图。在图22中所示的显示装置200是具有小屏幕的装置(诸如智能手表)的情况下，即使显示装置支持用户输入，使用具有更大屏幕的用户终端装置100来编辑屏幕也是更容易的。此外，即使在不提供屏幕编辑功能的显示装置200的情况下，也可以应用提供屏幕编辑功能的示例性实施例。假设显示装置200在处于空闲屏幕或主页屏幕状态下的时候选择性地只显示一些信息，由于始终要被显示的窗口小部件信息对于每个用户而言可能有所不同，因此需要个人化窗口小部件屏幕。通过提供用于在用户终端装置100的主页屏幕编辑模式内编辑已配对的显示装置200的窗口小部件的屏幕、并且在用户终端装置100中编辑与显示装置200相对应的窗口小部件，可以使对应的内容实时地反映在显示装置中。举另一例子，即使在使用电子纸作为显示装置200的情况下，可以支持在进入电子纸布局模式时通过拖放改变位置、或者插入/删除专用于电子纸的小工具。此外，当输入后退按钮时，可以使布局改变以便自动地反映在电子纸中。

根据示例性实施例，在用户终端装置100中执行拍摄照片的应用的情况下，可以一起记录周围声音，并使文本屏幕以声音到文本(STT)格式实时显示在显示装置200上。参照图23，通过相机160显示的屏幕2310可以在用户终端装置100上显示以用于拍摄。根据用户的语音使用用户区分技术(user differentiation technology)和STT技术，在显示装置200上显示示出了拍摄期间两个人之间进行的会话的文本的屏幕2320。此外，通过存储显示在显示装置200上的文本并且稍后提供它，用户可以在拍摄期间使用所存储的文本来识别气氛。在显示装置200的显示类型是具有较慢更新速度的类型(诸如电子纸)的情况下，可能无法实时反映文本。因此，在显示装置200是电子纸类型的情况下，通过仅更新在实时会话期间更新的部分，可以去除在一次全部更新整个屏幕时可能出现的问题。

根据另一示例性实施例，在用户终端装置100的可用电池电力下降到一定级别以下的情况下，可以进行转换以使得用于在用户终端装置100上显示的屏幕被自动显示在显示装置200上。本文中，可以添加仅当用户想要的时候才使屏幕显示在用户终端装置100上的特征。根据另一示例性实施例，在用户终端装置300如图29B所示具有两个显示器310、320的情况下，可以使第一显示器310作为正常时的主显示器，然后如果可用的电池下降到一定级别以下，则使比第一显示器310消耗更小功率的第二显示器320显示屏幕。

根据示例性实施例，在用户终端装置100中配置窗口小部件屏幕的情况下，控制器170可以控制通信器120向显示装置200发送关于经配置的窗口小部件屏幕的数据。参照图24A，在用户终端装置100中配置的窗口小部件屏幕2420在显示装置200上显示，而且主页屏幕2410在用户终端装置100上显示。在用户终端装置100(诸如智能电话)中，可以向左和向右滚动主页屏幕以配置各种屏幕，并进一步将这些屏幕之一编辑为窗口小部件屏幕。用户配置窗口小部件屏幕的原因是，根据每个用户的使用形式，将各种应用制成窗口小部件，并方便地使用窗口小部件。因此，通过使由用户频繁使用的应用组成的窗口小部件屏幕2420始终在显示装置200上显示，即使当在用户终端装置100中使用不同的主页屏幕的时候，也可以快速使用内容。即使当用户终端装置100显示如图24B所示的锁定屏幕2410'时，可以使得显示装置200显示窗口小部件屏幕2420'。更新窗口小部件屏幕的信息可以恰好在转换到锁定屏幕之前进行以包括最新的信息，或者可以在每次对主页屏幕进行转换时被更新。此外，在配置以使得当用户终端装置100被开机的情况时对主页屏幕进行转换而且当用户终端装置100被关机情况时对锁定屏幕进行转换的情况下，可以使用霍尔传感器或照度传感器来识别打开/关闭的情况，并且因此可以配置为每当被打开的情况时更新窗口小部件信息。

根据另一示例性实施例，即使当用户终端装置100的屏幕关闭时，消息或电子邮件应用也接收数据。每当接收消息时开启用户终端装置100的屏幕可能需要较高功耗。因此，显示装置200可以被配置为在锁定屏幕状态期间以窗口小部件格式综合地(comprehensively)显示到达的消息或电子邮件信息。参照图25，用户终端装置100的屏幕处于锁定屏幕状态，并因此什么都没有显示，而显示装置200显示由窗口小部件组成的屏幕2510，该窗口小部件综合地显示消息的内容。在显示装置200上显示的窗口小部件屏幕2510是应用各种数据可视化方法之一在一个屏幕上显示各种数据的例子。可以存在各种可视化方法，包括窗口小部件屏幕被提供为根据接收消息的时间的列表，但是不限于图25所示的例子。

上述各种示例性实施例是当显示器之间的连接角度是大约180°(这是一般的情况)时进行的实施例。然而，示例性实施例可以不必在大约180°的连接角度的情况下进行。在下文中，将说明具有大约270°或360°的显示器的连接角度的示例性实施例。

在确定显示器之间的连接角度大约为270°的情况下，控制器170可以控制以使得在显示装置200上显示的窗口小部件屏幕被更新。为了便于说明，假设有线连接的情况，对于用于发现连接角度为270°的方法，可以将用户终端装置100和显示装置200之间的连接的部分配置为包括压电元件，以便发现两个装置之间的角度。另外，可以存在这样的方法：将经由线缆连接的用户终端装置100和显示装置200设置在桌子上，然后通过用户终端装置100的方向传感器识别用户终端装置100放置在桌子上的角度。除了上述方法，可以应用用于识别用户终端装置100和显示装置200之间的连接角度的各种方法。

在显示器之间的连接角度是360°的情况下，将一般触摸输入与后方(rear)触摸输入区分开是很重要的。用户终端装置100使用用户终端装置100的方向传感器识别用户终端装置的方向，并且还连同相机160识别朝向用户的装置是用户终端装置100还是显示装置200。当用户终端装置100朝向用户的相反方向时做出的触摸输入被确定为后方触摸输入。根据示例性实施例，在用户终端装置100和显示装置200通过360°的连接角度配对而且显示装置200不支持用户输入的情况下，当对用户终端装置100做出后方触摸输入时，认识到已经指示复制模式，控制器170可以控制以使得正在用户终端装置100上显示的屏幕在显示装置200中显示。通过上述的用户终端装置100，提供了用户终端装置100与显示装置200配对的各种示例性实施例。通过这样的配对，用户可以获得诸如扩展显示屏幕、最大化可视性和高效的功耗的效果。

在下文中，将参照图26和图27对用户终端装置的控制方法进行说明。

图26是示出根据示例性实施例的用户终端装置的控制方法的流程图。首先，用户终端装置执行应用，并且在用户终端装置上显示应用的执行屏幕(操作S2610)。为了重新配置正在用户终端装置上显示的屏幕，用户终端装置需要与外部显示装置进行配对。用户终端装置确定它是否与外部显示装置配对(操作S2620)。如果确定未作出配对(操作S2620-否)，则可以继续监测是否进行配对。如果确定做出与外部显示装置的配对(操作S2620-是)，则用户终端装置接收关于与用户终端装置配对的显示装置的信息(操作S2630)。本文中，关于显示装置的信息可以包括显示装置的显示类型、分辨率、响应速度、色彩、色调，可视角度、色彩范围、连接角度、和连接状态中的至少一个。用户终端装置基于获得的显示装置200的信息和关于正在用户终端装置上执行的应用的信息来显示关于应用的第一屏幕，并且向配对的显示装置发送关于应用的第二屏幕的数据。本文中，关于应用的信息可以包括应用的类别、每个部分的色彩属性、和每个部分的屏幕更新速度中的至少一个。

根据示例性实施例，用户终端装置可以继续显示用于在用户终端装置上执行的应用的执行屏幕作为第一屏幕，并向显示装置发送关于第二屏幕的数据，该第二屏幕包括关于应用的执行屏幕的附加信息。根据另一示例性实施例，在应用的执行屏幕包括文本的情况下，可以向显示装置发送有关第二屏幕的数据，该数据包括总结了所包含的文本的内容的文本或图像。根据另一示例性实施例，在应用的执行屏幕包括视频内容的情况下，可以向显示装置发送有关第二屏幕的数据，该数据包括关于所包含的视频内容的信息或字幕。

根据示例性实施例，在存在指示复制模式的用户输入的情况下，用户终端装置可以不显示第一屏幕，而是向显示装置发送有关当存在指示复制模式的用户输入时的应用的执行屏幕的数据。通过另一示例，用户终端装置可以继续显示应用的执行屏幕显示作为第一屏幕，并且向显示装置发送有关当存在指示复制模式的用户输入时的应用的执行屏幕的数据。

根据另一示例性实施例，在配对的显示装置不支持用户输入的情况下，还可以包括向显示装置发送与用户输入对应的数据的操作。

图27是用于详细说明根据另一示例性实施例的用户终端装置的控制方法的流程图。用户终端装置执行应用，而且应用的执行屏幕在用户终端装置上显示(操作S2710)。用户终端装置与外部显示装置配对，并且变得能够向用户提供包括划分屏幕的各种功能。用户终端装置确定它是否与外部显示装置配对(操作S2720)。如果确定用户终端装置未与外部显示装置配对(操作S2720-否)，则用户终端装置继续监视是否做出配对。如果确定用户终端装置与外部显示装置配对(操作S2720-是)，则用户终端装置接收关于与用户终端装置配对的显示装置的信息(操作S2730)。用户终端装置基于关于应用的信息将正在用户终端装置上执行的应用的执行屏幕划分成多个元素(操作S2740)。利用接收到的关于显示装置的信息和关于应用的信息，用户终端装置基于元素应该在哪个装置上显示来确定每个划分的元素应该是第一屏幕的组件还是第二屏幕的组件，以最大化可视性和功耗效率(操作S2750)。如果确定每个划分的元素是应该在用户终端装置上显示的元素，则该元素被配置在第一屏幕中并在用户终端装置上显示(操作S2760)，但是，如果确定每个划分的元素是应该在显示装置上显示的元素，则该元素被配置在第二屏幕中而且用户终端装置向显示装置发送有关第二屏幕的数据(操作S2770)。

根据另一示例性实施例，当用户将应用的执行屏幕划分成多个元素时，用户可以基于每个部分的屏幕更新速度划分成应用的执行屏幕，利用多个划分的元素中包括视频的元素来配置第一屏幕并在用户终端装置上显示第一屏幕，而且利用多个划分的元素中的其余元素来配置第二屏幕。

根据另一示例性实施例，用户终端装置可以基于每个部分的色彩属性将应用的执行屏幕划分成多个元素。此外，用户终端装置可以利用多个划分的元素中的第一色彩的元素来配置第一屏幕，并且利用多个划分的元素中的第二色彩的元素来配置第二屏幕。例如，在用户终端装置的显示类型是OLED，而且配对的显示装置的显示类型是电子纸的情况下，当白色元素在OLED中显示时，功耗由于自发光发射特性而增加，并且因此利用白色元素配置第二屏幕并在显示装置(它是电子纸类型显示器)上显示第二屏幕在功耗效率方面是有利的。

由于上述的用户终端装置的控制方法，用户可以体验扩展的显示环境，并且可以重新配置可以更方便地使用的应用的执行屏幕。

在下文中，将参照图28对扩展的显示系统的顺序进行说明。

参照图28，扩展的显示系统可以按照以下次序显示第一屏幕和第二屏幕。首先，在应用的执行屏幕正在用户终端装置100上显示的情况下(操作S2810)，用户终端装置100与显示装置200配对(操作S2820)。当与用户终端装置100配对时，显示装置200向用户终端装置100发送显示装置信息(操作S2830)。用户终端装置100基于从显示装置发送的显示装置信息和关于正在执行的应用的信息来显示关于应用的第一屏幕(操作S2840)。

此外，用户终端装置100向显示装置200发送关于应用的第二屏幕。而且，显示装置200使用接收到的关于第二屏幕的数据来显示第二屏幕。

上文中，仅对用户终端装置和显示装置每个只有一个显示器的情况进行了说明，但是上述示例性实施例不限于如上说明的两个装置。例如，上述示例性实施例可以应用到具有多个显示器的用户终端装置，或者一个用户终端装置与多个显示装置配对的情况。图29A是示出具有多个显示器310、320的用户终端装置300的视图，而且图29B是用于说明这样的用户终端装置300的框图。在具有多个显示器的用户终端装置300中，第一显示器310和第二显示器320可以被配置为具有不同的显示特性而且被应用于上述示例性实施例。

根据另一示例性实施例，诸如电子纸的显示装置可以被附接到用户终端装置壳体的一侧。图30A是示出包括电子纸的用户终端装置壳体400的视图。用户终端装置壳体400可以包括显示器410、连接器420、电路板430和控制器440。显示器410可以由各种类型的显示装置组成。下文中，为了便于说明，将对显示装置被配置为电子纸的情况进行说明。在用户终端装置壳体400中，连接器420执行连接用户终端装置100将被安装到其上的部分与将闭合用户终端装置100的部分的功能。连接器420可以被配置为柔性印刷电路板(FPCB)，并使显示器410和用户终端装置100能够经由线缆彼此连接和操作。此外，连接器420的弯曲度可以使用压电元件等测量，用户终端装置100可以确定自身与显示器410之间的连接角度。电路板430可以被放置在将要安装用户终端装置100的位置中，并且控制器440可以被包括在电路板430中。图30B是示出安装到用户终端装置壳体400的用户终端装置100的视图。如图30B所示，当使用用户终端装置100的显示器110和用户终端装置壳体400的显示器410时，上述各种示例性实施例可以被应用。当使用用户终端装置壳体400时，可以在便携性方面得到改善用户的便利性。

图31A是示出不同种类的用户终端装置壳体500的视图。这个用户终端装置壳体与图30B中示出的用户终端装置壳体400的不同之处在于，显示器510被附接在它的后侧，而且包括了电源装置550。此外，用户终端装置壳体500可以包括发光器560和光接收器570。图31B是示出附接到用户终端装置壳体500的用户终端装置100的视图。如图31B所示，当用户终端装置壳体500被打开时，用户可以观看的屏幕仅是用户终端装置100的显示器110。因此，当用户终端装置壳体500被打开时，用户可以观看的屏幕仅是用户终端装置100的显示器110。因此，当用户终端装置壳体500被打开时，显示器510不显示屏幕，但是可以由太阳能电池等组成的电源装置550可以被充电以用在显示器510中。当用户终端装置壳体500被关闭时，发光器560接触用户终端装置100的相机以及其中安装了相机或光学传感器的部分560'。此外，光接收器570被配置为对应于用户终端装置的发光元件570'。因此，在用户终端装置壳体500被闭合并覆盖用户终端装置100的情况下，用户终端装置壳体500可以使用发光器560和光接收器570向/从用户终端装置100发送/接收数据，并且使用照度等识别连接角度。图31C是示出用户终端装置壳体500被闭合的情况的视图。即使在用户终端装置壳体500被闭合情况下，用户也可以使用附接在壳体外部的显示器510来检查用户终端装置的窗口小部件屏幕100。关于在显示器510上显示的屏幕的数据可以使用使用光接收器570和NFC标签(未示出)以无线通信方法、或者通过连接器520以有线通信方法来接收。通过用户终端装置壳体500，可以执行各种示例性实施例。具体地，可以应用连接角度为0°的情况的示例性实施例。

此外，用于执行根据各种示例性实施例的上述控制方法的程序代码可以被存储在各种类型的记录介质中。更具体地，程序代码可以被存储在诸如RAM、闪存、ROM、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、寄存器、硬盘、可移动磁盘、存储卡、USB存储器、CD-ROM等的各种类型的计算机可读记录介质中。

尽管已经示出并描述了一些示例性实施例，但是本领域技术人员应当理解，在不脱离本发明的原则和精神情况下，可以对示例性实施例进行改变，本发明的范围由所附权利要求及其等效物限定。

Claims (15)

1.一种用户终端装置，包括：

显示器，被配置为显示应用的执行屏幕；

通信器，被配置为与显示装置执行通信；以及

控制器，被配置为在显示器显示应用的执行屏幕的时候，响应于用户终端装置正在通过通信器与显示装置配对，获取关于显示装置的信息，基于关于应用的信息和获得的关于显示装置的信息中的至少一条信息来控制显示器显示应用的第一屏幕，而且控制通信器向显示装置发送应用的第二屏幕的数据。

2.如权利要求1所述的用户终端装置，

其中，关于显示装置的信息包括显示装置的显示类型、分辨率、响应时间、色彩、色调、可视角度、色彩范围、连接角度和连接状态中的至少一个，以及

关于应用的信息包括应用的类别、每个部分的色彩属性和每个部分的屏幕更新速度中的至少一个。

3.如权利要求1所述的用户终端装置，

其中，所述控制器基于关于应用的信息将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的第一集合来配置第一屏幕，而且利用所述多个划分的元素中的第二集合来配置第二屏幕。

4.如权利要求3所述的用户终端装置，

其中，所述控制器基于每个部分的屏幕更新速度将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的包括视频的元素来配置第一屏幕，而且利用除了包括视频的元素外的元素来配置第二屏幕。

5.如权利要求3所述的用户终端装置，

其中，所述控制器基于每个部分的色彩属性将正在显示器上显示的应用的执行屏幕划分为多个元素，利用所述多个划分的元素中的第一色彩的元素来配置第一屏幕，而且利用所述多个划分的元素中的第二色彩的元素来配置第二屏幕。

6.如权利要求1所述的用户终端装置，

其中，所述控制器控制显示器继续显示应用的执行屏幕作为第一屏幕，并控制通信器向显示装置发送有关第二屏幕的数据，

其中，有关第二屏幕的数据包括关于应用的执行屏幕的附加信息。

7.如权利要求6所述的用户终端装置，

其中，当应用的执行屏幕包括文本时，所述控制器控制通信器向显示装置发送有关第二屏幕的数据，该有关第二屏幕的数据包括总结了文本的内容的文本或图像中的至少一个。

8.如权利要求6所述的用户终端装置，

其中，当应用的执行屏幕包括视频内容时，所述控制器控制通信器向显示装置发送有关第二屏幕的数据，该有关第二屏幕的数据包括有关视频内容的信息和有关视频内容的字幕中的至少一个。

9.如权利要求1所述的用户终端装置，

其中，当指示复制模式的用户输入被输入时，所述控制器控制显示器以使得不显示第一屏幕，而且控制通信器向显示装置发送关于应用的执行屏幕的数据。

10.如权利要求1所述的用户终端装置，

其中，当显示装置不支持用户输入时，所述控制器控制通信器向显示装置发送与用户输入相对应的数据。

11.一种控制用户终端装置的方法，该方法包括：

在用户终端装置上显示应用的执行屏幕的时候，在用户终端装置与外部显示装置配对时获取关于外部显示装置的信息；

基于关于用户终端装置正在执行的应用的信息和获得的关于外部显示装置的信息中的至少一条信息，显示应用的第一屏幕；以及

向外部显示装置发送应用的第二屏幕的数据。

12.如权利要求11所述的方法，还包括：

基于关于应用的信息将正在显示的应用的执行屏幕划分为多个元素；以及

利用所述多个划分的元素中的第一集合来配置第一屏幕，而且利用所述多个划分的元素中的第二集合来配置第二屏幕。

13.如权利要求11所述的方法，

其中，所述划分是基于每个部分的屏幕更新速度将正在显示的应用的执行屏幕划分为多个元素，以及

所述配置是利用所述多个划分的元素中的包括视频内容的元素来配置第一屏幕，而且利用除了视频内容外的划分的元素来配置第二屏幕。

14.如权利要求11所述的方法，

其中所述发送是继续显示应用的执行屏幕作为第一屏幕，并向外部显示装置发送有关第二屏幕的数据，其中，有关第二屏幕的数据包括关于应用的执行屏幕的附加信息。

15.如权利要求11所述的方法，

其中，当做出指示复制模式的用户输入时，所述发送不显示第一屏幕，而是向外部显示装置发送关于应用的执行屏幕的数据。