CN114296623A - 一种显示设备 - Google Patents

Abstract

本申请公开了一种显示设备，用以通过集中管控智能触控电视的各项功能入口，使得用户可以快速找到自己想用的功能，提升用户体验。所述显示设备包括：显示器，所述显示器包括触控屏；用户接口；分别与显示器和用户接口连接的控制器，用于执行：响应于第一输入指令，控制显示器显示全局菜单控件，所述第一输入指令为用户通过手指触摸所述触控屏而输入。

Description

一种显示设备

技术领域

本申请涉及显示技术领域，尤其涉及一种显示设备。

背景技术

目前市场上家用触控显示设备产品种类较少，相关技术中基于触控的交互设计几乎没有。在显示设备的屏幕选择上使用触控屏后，传统遥控器无法体现出触控显示设备的优势，而且用户在想找到自己想要的应用或工具时，操作步骤较为繁琐，用户体验不好。

发明内容

本申请实施例提供一种显示设备，用以通过集中管控智能触控电视的各项功能入口，使得用户可以快速找到自己想用的功能，提升用户体验。

第一方面，提供一种显示设备，包括：

显示器，所述显示器包括触控屏；

用户接口；

分别与显示器和用户接口连接的控制器，用于执行：

响应于第一输入指令，控制显示器显示全局菜单控件，所述第一输入指令为用户通过手指触摸所述触控屏输入。

在一些实施例中，所述控制器，还用于执行：

响应于第二输入指令，控制显示器在用户手指停止移动的位置显示全局菜单控件，所述第二输入指令为用户通过手指按压所述全局菜单控件后并在所述触控屏移动输入。

在一些实施例中，所述控制器，用于执行：

响应于第三输入指令，根据所有手指触控坐标的中心点坐标同步更新全局菜单控件的位置，所述第三输入指令为用户通过至少四个手指触摸所述触控屏输入。

在一些实施例中，所述控制器，还用于执行：

响应于用户选中所述全局菜单控件的指令，控制显示器显示菜单显示区，所述菜单显示区包括菜单编辑控件；

所述菜单显示区还包括至少一个应用或工具控件；

所述菜单显示区还包括全局返回控件。

在一些实施例中，所述控制器，还用于执行：

响应于用户选中所述菜单编辑控件的指令，控制显示器显示菜单编辑区；

响应于用户的第四输入指令，添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，所述第四输入指令为在所述菜单编辑区中用户通过手指点击或拖拽应用或工具控件输入。

第二方面，提供一种显示设备，包括：

显示器，所述显示器包括触控屏；

用户接口；

分别与显示器和用户接口连接的控制器，用于执行：

响应于第一输入指令，控制显示器显示全局菜单控件和全局返回控件，所述第一输入指令为用户通过手指触摸所述触控屏输入。

在一些实施例中，所述控制器，还用于执行：

响应于第二输入指令，控制显示器在用户手指停止移动的位置显示全局菜单控件和全局返回控件，所述第二输入指令为用户通过手指按压所述全局菜单控件和全局返回控件后并在所述触控屏移动输入。

在一些实施例中，所述控制器，还用于执行：响应于第三输入指令，根据所有手指触控坐标的中心点坐标同步更新全局菜单控件和全局返回控件的位置，所述第三输入指令为用户通过至少四个手指触摸所述触控屏输入；

所述根据所有手指触控坐标的中心点坐标同步更新全局菜单控件和全局返回控件的位置，具体包括：

获取每个触控点的触控坐标；

确定所有触控坐标中的坐标最大值和坐标最小值；

计算所述坐标最大值和坐标所述最小值的笛卡尔坐标距离；

如果所述笛卡尔坐标距离大于预设像素，计算所有触控坐标的中心点坐标；

将所述全局菜单控件和全局返回控件显示在所述中心点坐标对应的位置。

在一些实施例中，所述控制器，还用于执行：

响应于用户输入的旋转屏幕的指令，控制旋转组件带动所述显示器旋转；

实时记录所述全局菜单控件和全局返回控件的拖动坐标；

根据旋转前屏幕的状态和所述拖动坐标计算比例系数；

根据所述比例系数和旋转后屏幕的状态计算显示坐标；

在旋转完成后，将所述全局菜单控件和全局返回控件显示在所述显示坐标对应的位置。

在一些实施例中，所述控制器，还用于执行：

响应于用户选中所述全局菜单控件的指令，控制显示器显示菜单显示区，所述菜单显示区包括菜单编辑控件；

所述菜单显示区还包括至少一个应用或工具控件；

响应于用户选中所述菜单编辑控件的指令，控制显示器显示菜单编辑区；

响应于用户的第四输入指令，添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，所述第四输入指令为在所述菜单编辑区中用户通过手指点击或拖拽应用或工具控件输入；

所述添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，具体包括：

如果检测到用户手指触碰所述触控屏，获取用户手指落下点的项目坐标；

如果所述项目坐标是有效坐标且用户手指触控时长超过第一预设时长，获取当前项目坐标对应的应用或工具控件的背景图片，并绘制所述背景图片的悬浮镜像；

隐藏所述应用或工具控件；

根据用户手指移动的位置更新所述悬浮镜像的位置；

如果检测到用户手指离开所述触控屏，更新所述应用或工具控件的显示位置，并隐藏所述悬浮镜像。

在上述实施例中，通过设置和显示全局菜单控件和全局返回控件，充分利用显示设备触控特性，弥补遥控器操作不足，全局菜单控件和全局返回控件也成为智能电视各项功能的统一入口，对各个功能进行集中管控，使得用户可以快速找到自己想用的功能，提升用户体验。

附图说明

图1A示出了根据一些实施例的显示设备的使用场景；

图1B中示例性示出了根据一些实施例的显示设备的后视图；

图2示出了根据一些实施例的控制装置100的硬件配置框图；

图3示出了根据一些实施例的显示设备200的硬件配置框图；

图4示出了根据一些实施例的显示设备200中软件配置图；

图5中示例性示出了根据一些实施例的一种用户界面示意图；

图6-图8中示例性示出了根据一些实施例的一种用户界面示意图；

图9中示例性示出了根据一些实施例的一种菜单显示区的示意图；

图10-图12示例性示出了根据一些实施例的全局菜单控件和全局返回控件的示意图；

图13示例性示出了根据一些实施例的全局菜单控件的示意图；

图14-图16中示例性示出了根据一些实施例的另一种用户界面示意图；

图17-图20中示例性示出了根据一些实施例的另一种菜单显示区的示意图；

图21-图22中示例性示出了根据一些实施例的另一种用户界面示意图；

图23-图27中示例性示出了根据一些实施例的一种菜单编辑区的示意图。

具体实施方式

为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。

需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。

本申请中说明书和权利要求书及上述附图中的术语″第一″、″第二″、″第三″等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。

术语″包括″和″具有″以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。

术语″模块″是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。

图1A为根据实施例中显示设备的使用场景的示意图。如图1A所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100操作显示设备200。

在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。

在一些实施例中，智能设备300可以包括移动终端、平板电脑、计算机、笔记本电脑，AR/VR设备等中的任意一种。

在一些实施例中，也可以使用智能设备300以控制显示设备200。例如，使用在智能设备上运行的应用程序控制显示设备200。

在一些实施例中，也可以使用智能设备300和显示设备进行数据的通信。

在一些实施例中，显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制，例如，可以通过显示设备200设备内部配置的获取语音指令的模块直接接收用户的语音指令控制，也可以通过显示设备200设备外部设置的语音控制装置来接收用户的语音指令控制。

在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。服务器400可以向显示设备200提供各种内容和互动。服务器400可以是一个集群，也可以是多个集群，可以包括一类或多类服务器。

在一些实施例中，一个步骤执行主体执行的软件步骤可以随需求迁移到与之进行数据通信的另一步骤执行主体上进行执行。示例性的，服务器执行的软件步骤可以随需求迁移到与之数据通信的显示设备上执行，反之亦然。

在一些实施例中，如图1B所示，显示设备200包括旋转组件276，控制器250，显示器275，从背板上空隙处伸出的端子接口278以及和背板连接的旋转组件276，旋转组件276可以使显示器275进行旋转。从显示设备正面观看的角度，旋转组件276可以将显示屏旋转到竖屏状态，即屏幕竖向的边长大于横向的边长的状态，也可以将屏幕旋转至横屏状态，即屏幕横向的边长大于竖向的边长的状态。

在一些实施例中，显示器275包括触控屏，触控屏包括电容式触控屏，电容式触控屏是一块四层复合玻璃屏，玻璃屏的内表面和夹层各涂有一层ITO(镀膜导电玻璃)，最外层是一薄层矽土玻璃保护层，ITO涂层作为工作面，四个角上引出四个电极，内层ITO为屏蔽层。

图2示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。

在一些实施例中，通信接口130用于和外部通信，包含WIFI芯片，蓝牙模块，NFC或可替代模块中的至少一种。

在一些实施例中，用户输入/输出接口140包含麦克风，触摸板，传感器，按键或可替代模块中的至少一种。

图3示出了根据示例性实施例中显示设备200的硬件配置框图。

在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。

在一些实施例中控制器包括中央处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。

在一些实施例中，显示器260包括用于呈现画面的显示屏组件，以及驱动图像显示的驱动组件，用于接收源自控制器输出的图像信号，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面等。

在一些实施例中，显示器260可为液晶显示器、OLED显示器、以及投影显示器中的至少一种，还可以为一种投影装置和投影屏幕。

在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。

在一些实施例中，通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。例如：通信器可以包括Wifi模块，蓝牙模块，有线以太网模块等其他网络通信协议芯片或近场通信协议芯片，以及红外接收器中的至少一种。显示设备200可以通过通信器220与控制装置100或服务器400建立控制信号和数据信号的发送和接收。

在一些实施例中，检测器230用于采集外部环境或与外部交互的信号。例如，检测器230包括光接收器，用于采集环境光线强度的传感器；或者，检测器230包括图像采集器，如摄像头，可以用于采集外部环境场景、用户的属性或用户交互手势，再或者，检测器230包括声音采集器，如麦克风等，用于接收外部声音。

在一些实施例中，外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。也可以是上述多个接口形成的复合性的输入/输出接口。

在一些实施例中，控制器250和调谐解调器210可以位于不同的分体设备中，即调谐解调器210也可在控制器250所在的主体设备的外置设备中，如外置机顶盒等。

在一些实施例中，控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。例如：响应于接收到用于选择在显示器260上显示UI对象的用户命令，控制器250便可以执行与由用户命令选择的对象有关的操作。

在一些实施例中，所述对象可以是可选对象中的任何一个，例如超链接、图标或其他可操作的控件。与所选择的对象有关操作有：显示连接到超链接页面、文档、图像等操作，或者执行与所述图标相对应程序的操作。

在一些实施例中控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory，ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。

CPU处理器。用于执行存储在存储器中操作系统和应用程序指令，以及根据接收外部输入的各种交互指令，来执行各种应用程序、数据和内容，以便最终显示和播放各种音视频内容。CPU处理器，可以包括多个处理器。如，包括一个主处理器以及一个或多个子处理器。

在一些实施例中，图形处理器，用于产生各种图形对象，如：图标、操作菜单、以及用户输入指令显示图形等中的至少一种。图形处理器包括运算器，通过接收用户输入各种交互指令进行运算，根据显示属性显示各种对象；还包括渲染器，对基于运算器得到的各种对象，进行渲染，上述渲染后的对象用于显示在显示器上。

在一些实施例中，视频处理器，用于将接收外部视频信号，根据输入信号的标准编解码协议，进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频处理中的至少一种，可得到直接可显示设备200上显示或播放的信号。

在一些实施例中，视频处理器，包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等中的至少一种。其中，解复用模块，用于对输入音视频数据流进行解复用处理。视频解码模块，用于对解复用后的视频信号进行处理，包括解码和缩放处理等。图像合成模块，如图像合成器，其用于将图形生成器根据用户输入或自身生成的GUI信号，与缩放处理后视频图像进行叠加混合处理，以生成可供显示的图像信号。帧率转换模块，用于对转换输入视频帧率。显示格式化模块，用于将接收帧率转换后视频输出信号，改变信号以符合显示格式的信号，如输出RGB数据信号。

在一些实施例中，音频处理器，用于接收外部的音频信号，根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理中的至少一种，得到可以在扬声器中播放的声音信号。

在一些实施例中，用户可在显示器260上显示的图形用户界面(GUI)输入用户命令，则用户输入接口通过图形用户界面(GUI)接收用户输入命令。或者，用户可通过输入特定的声音或手势进行输入用户命令，则用户输入接口通过传感器识别出声音或手势，来接收用户输入命令。

在一些实施例中，″用户界面″，是应用程序或操作系统与用户之间进行交互和信息交换的介质接口，它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(Graphic User Interface，GUI)，是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素，其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素中的至少一种。

在一些实施例中，用户接口280，为可用于接收控制输入的接口(如：显示设备本体上的实体按键，或其他等)。

在一些实施例中，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。

参见图4，在一些实施例中，将系统分为四层，从上至下分别为应用程序(Applications)层(简称″应用层″)，应用程序框架(Application Framework)层(简称″框架层″)，安卓运行时(Android runtime)和系统库层(简称″系统运行库层″)，以及内核层。

在一些实施例中，应用程序层中运行有至少一个应用程序，这些应用程序可以是操作系统自带的窗口(Window)程序、系统设置程序或时钟程序等；也可以是第三方开发者所开发的应用程序。在具体实施时，应用程序层中的应用程序包不限于以上举例。

框架层为应用程序层的应用程序提供应用编程接口(aPPlication programminginterface，API)和编程框架。应用程序框架层包括一些预先定义的函数。应用程序框架层相当于一个处理中心，这个中心决定让应用层中的应用程序做出动作。应用程序通过API接口，可在执行中访问系统中的资源和取得系统的服务。

如图4所示，本申请实施例中应用程序框架层包括管理器(Managers)，内容提供者(Content Provider)等，其中管理器包括以下模块中的至少一个：活动管理器(ActivityManager)用与和系统中正在运行的所有活动进行交互；位置管理器(Location Manager)用于给系统服务或应用提供了系统位置服务的访问；文件包管理器(Package Manager)用于检索当前安装在设备上的应用程序包相关的各种信息；通知管理器(NotificationManager)用于控制通知消息的显示和清除；窗口管理器(Window Manager)用于管理用户界面上的括图标、窗口、工具栏、壁纸和桌面部件。

在一些实施例中，活动管理器用于管理各个应用程序的生命周期以及通常的导航回退功能，比如控制应用程序的退出、打开、后退等。窗口管理器用于管理所有的窗口程序，比如获取显示屏大小，判断是否有状态栏，锁定屏幕，截取屏幕，控制显示窗口变化(例如将显示窗口缩小显示、抖动显示、扭曲变形显示等)等。

在一些实施例中，系统运行库层为上层即框架层提供支撑，当框架层被使用时，安卓操作系统会运行系统运行库层中包含的C/C++库以实现框架层要实现的功能。

在一些实施例中，内核层是硬件和软件之间的层。如图4所示，内核层至少包含以下驱动中的至少一种：音频驱动、显示驱动、蓝牙驱动、摄像头驱动、WIFI驱动、USB驱动、HDMI驱动、传感器驱动(如指纹传感器，温度传感器，压力传感器等)、以及电源驱动等。

在一些实施例中，用户打开显示设备后，进入开机界面或某个应用后，用户用手指触碰显示器的屏幕后，控制器会控制显示器显示全局菜单控件和全局返回控件。

在一些实施例中，用户用手指触碰显示器的屏幕后，控制器会控制显示器只显示全局菜单控件。当用户点击全局菜单控件后再显示全局返回控件。

在一些实施例中，如图5所示，控制器会控制显示器显示全局菜单控件和全局返回控件的步骤包括：

步骤S51：监听显示设备开机广播拉起SoftControlService(软控制服务)；

步骤S52：注册InputFilter(输入过滤)监听；

在一些实施中，显示设备开机后会拉软控制服务，通过注册输入过滤监听可以获取用户发送的手势动作指令或遥控器指令。

步骤S53：通过用户接口接收用户输入的指令；

步骤S54：判断用户输入的指令是否是MotionEvent(触控事件)；

当接收到用户输入的指令后，需要区分输入指令是MotionEvent(触控事件)还是KeyEvent(键盘事件)。

如果是触控事件，执行步骤S55。

步骤S55：对触控事件进行算法匹配处理，根据处理结果确定是否显示全局菜单控件和全局返回控件。

在一些实施例中，算法匹配处理包括pointCount(触控点数量)，flingerdistance(滑动距离)，flinger Vector(滑动向量)等。

示例性的，以触控点数量为例，针对触控事件进行算法匹配处理的方法如下：

触控事件包括以下五种场景：

场景一：只有一只手指触碰屏幕，其坐标点可记录为：pos＝0，X＝156.90448，Y＝533.3757；

场景二：有两只手指触碰屏幕，其坐标点可记录为：pos＝0，X＝156.90448，Y＝533.3757，pos＝1，X＝119.90448，Y＝747.3757；

场景三：有三只手指触碰屏幕，其坐标点可记录为：pos＝0，X＝156.90448，Y＝533.3757，pos＝1，X＝119.90448，Y＝747.3757，pos＝2，X＝229.90448，Y＝678.3757；

场景四：有四只手指触碰屏幕，其坐标点可记录为：pos＝0，X＝156.90448，Y＝533.3757，pos＝1，X＝119.90448，Y＝747.3757，pos＝2，X＝229.90448，Y＝678.3757，pos＝3，X＝236.90448，Y＝603.3757；

场景五：有五只手指触碰屏幕，其坐标点可记录为：pos＝0，X＝156.90448，Y＝533.3757，pos＝1，X＝119.90448，Y＝747.3757，pos＝2，X＝229.90448，Y＝678.3757，pos＝3，X＝236.90448，Y＝603.3757，pos＝4，X＝210.90448，Y＝574.3757。

以上场景一至场景五的触控点数量分别对应1-5。在一些实施例中，只有当触控点数量为1-3时，才控制显示器显示全局菜单控件和全局返回控件。示例性的，当触控点数量为1时，控制显示器显示全局菜单控件和全局返回控件；当触控点数量为2时，需要计算两个触控点的笛卡尔距离，当笛卡尔距离大于100px时，控制显示器显示全局菜单控件和全局返回控件；当触控点数量为3时，需要计算三个触控点的坐标最大值和最小值的笛卡尔距离，当笛卡尔距离大于200px时，控制显示器显示全局菜单控件和全局返回控件。

在一些实施例中，理想状态下当两个手指或三个手指同时触摸到显示器的屏幕后会显示全局菜单控件和全局返回控件，但是用户在触摸显示器的屏幕后手指经常会先后触摸到屏幕，当有一个手指触碰到屏幕后往往会直接显示全局菜单控件和全局返回控件。

在一些实施例中，全局菜单控件与全局返回控件默认展示状态，点击全局菜单控件后展示自定义菜单显示区。全局菜单控件与全局返回控件悬浮于所有应用上层，全场景下可见。

在一些实施例中，显示设备开机后，除了一些特定场景外只要用户手指触碰到显示器的屏幕后均可显示全局菜单控件和全局返回控件。其中，为了不打断ATV搜台进程，在ATV搜台过程中用户手指触碰到显示器的屏幕后不显示全局菜单控件和全局返回控件；在一些需要遥控器操作才能完成的模式下，或是在基础参数设置的过程中，用户手指触碰到显示器的屏幕后不显示全局菜单控件和全局返回控件，例如工厂模式下和开机导航过程中；在手指触摸屏幕以完成图画绘制或是文字标注时，同样不显示全局菜单控件和全局返回控件，例如白板应用中、批注应用中；在显示器旋转过程中显示界面展示旋转动画并不需要展示全局菜单控件和全局返回控件，因此，在显示器旋转过程中用户手指触碰到显示器的屏幕后不显示全局菜单控件和全局返回控件。

在一些实施例中，用户在打开显示设备后，会进入开机首页或是通过遥控器操作进入某一应用中。如图7所示，当用户的手指触碰到显示器屏幕的任意位置后，如图6或8所示，显示设备向显示器提供用户界面示意图。图6的用户界面是在图7的用户界面的基础上增加全局菜单控件61和全局返回控件62。图8的用户界面是在图7的用户界面的基础上增加全局菜单控件61。在图8中，当用户点击全局菜单控件61时，菜单显示区63显示全局返回控件62，如图9所示。全局菜单控件61和全局返回控件62可悬浮或嵌入图7的用户界面。

需要说明的是，控件是指在显示设备中用户界面显示以表示诸如图标、缩略图、视频剪辑、链接等对应内容的视觉对象。

控件的展示形式通常多样化。例如，控件可以包括文本内容和/或用于显示与文本内容相关的缩略图的图像。又如，控件可以是应用程序的文本和/或图标。

在一些实施例中，如图10所示，全局菜单控件61和全局返回控件62可以是简化图形；如图11所示，全局菜单控件61和全局返回控件62可以是文本；如图12所示，全局菜单控件61和全局返回控件62可以是简化图形和文本；如图13所示，全局菜单控件61可以是一个人物图像。

在一些实施例中，当前用户界面显示全局菜单控件和全局返回控件，但是第二预设时长内用户未输入任何指令，控制器控制显示器显示半透明状态的全局菜单控件和全局返回控件；又间隔第三预设时长用户仍未输入任何指令，显示器不显示全局菜单控件和全局返回控件。

在一些实施例中，如图6所示，当调出全局菜单控件61和全局返回控件62后5秒内未接收到用户输入的指令，全局菜单控件61和全局返回控件62变为半透明状态，如图14所示；再过5秒后仍未接收到用户输入的指令，全局菜单控件61和全局返回控件62自动消失，如图7中的用户界面。

在一些实施例中，用户通过至少两个手指在屏幕上旋转滑动或通过遥控器输入旋转屏幕的指令从而实现控制旋转组件带动显示器旋转的操作。

在一些实施例中，显示器的旋转过程中，显示旋转动画并不显示全局菜单控件和全局返回控件。

在接收到用户的旋转指令后，实时记录全局菜单控件和全局返回控件的拖动坐标，有助于确定旋转前全局菜单控件和全局返回控件的实际坐标。

在一些实施例中，全局菜单控件和全局返回控件的拖动坐标可以是全局菜单控件和全局返回控件中心点的坐标，也可以是全局菜单控件和全局返回控件边缘的某一点坐标，还可以是预先设置全局菜单控件和全局返回控件中任意点的坐标。

根据旋转前屏幕的状态和拖动坐标计算比例系数；

比例系数的计算方法：scaleX＝moveX/wide1；scaleY＝moveY/high1；

其中，scaleX和scaleY为比例系数，moveX和moveY为全局菜单控件和全局返回控件的拖动坐标，wide1为旋转前屏幕像素宽度，high1为旋转前屏幕像素高度。

根据比例系数和旋转后屏幕的状态计算显示坐标；

在一些实施例中，显示坐标的计算方法为：

showX＝scaleX/wide2；showY＝scaleY/high2；

其中，scaleX和scaleY为比例系数，showX和showY为全局菜单控件和全局返回控件的显示坐标，wide2为旋转后屏幕像素宽度，high2为旋转后屏幕像素高度。；

示例性的，以分辨率为1920＊1080的显示设备为例，如果旋转前屏幕的状态是竖屏状态，比例系数的计算方法：scaleX＝moveX/1080；scaleY＝moveY/1920；旋转后屏幕的状态则是横屏状态，显示坐标的计算方法：showX＝scaleX/1920；showY＝scaleY/1080；

如果旋转前屏幕的状态是横屏状态，比例系数的计算方法：scaleX＝moveX/1920；scaleY＝moveY/1080；旋转后屏幕的状态则是竖屏状态，显示坐标的计算方法：showX＝scaleX/1080；showY＝scaleY/1920。

在旋转完成后，将全局菜单控件和全局返回控件显示在显示坐标对应的位置；

在一些实施例中，在旋转完成后，调用updateViewLayout(更新界面布局)方法更新全局菜单控件和全局返回控件的位置。

在一些实施例中，在图6中，当用户输入旋转指令后，旋转组件带动显示器旋转，在旋转过程中显示旋转动画，在旋转完成后，显示如图15所示的用户界面。

在一些实施例中，用户通过手指按压全局菜单控件或全局返回控件后并在触控屏移动可带动全局菜单控件和全局返回控件在屏幕上移动。用户可以用手指选中全局菜单控件和全局返回控件，并将全局菜单控件和全局返回控件拖拽到屏幕的任意位置。

在一些实施例中，可通过判定当用户手指在屏幕上的移动距离与预设像素比对，以判定用户对全局菜单控件和全局返回控件进行的是点击操作还是拖拽操作。例如，当用户手指在屏幕上的移动距离大于4px时，可判定用户在进行拖拽操作，将全局菜单控件和全局返回控件移动到手指停下的位置。此时，用户可以将手指停留在屏幕上，以便继续将全局菜单控件和全局返回控件移动到下一个需要的位置。用户还可以将手指离开屏幕，全局菜单控件和全局返回控件不再移动。当用户手指在屏幕上的移动距离不大于4px时，可判定用户在进行点击操作，如果用户点击的是全局菜单控件，执行显示菜单显示区的操作；如果用户点击的是全局返回控件，执行返回上一步操作的指令。

本申请实施例充分利用显示设备的触控特性，支持全局拖拽功能，可以将全局菜单控件和全局返回控件拖拽到任意显示器屏幕的位置，操作方便，提升用户体验。

在一些实施例中，用户通过至少四个手指触摸触控屏，使得全局菜单控件和全局返回控件显示在用户手指的中心点坐标上，实现多指定位。

在一些实施例中，多指定位的步骤包括：

基于InputFilter(输入过滤)机制拦截MotionEvent(触控事件)；

通过拦截触控事件可以获取action_down(向下操作)和action_up(向上操作)多指触控事件。

根据触控事件自定义GestureDetectManager(手势管理类)。

其中，自定义手势管理类包括：

记录一次完整的action_down(向下操作)和action_up(向上操作)多指触控事件，以数组的形式记录每次的点击坐标，即每个触控点的触控坐标；

确定所有触控坐标中的坐标最大值和坐标最小值；

计算坐标最大值和坐标最小值的笛卡尔坐标距离；

如果笛卡尔坐标距离大于预设像素，计算所有触控坐标的中心点坐标；

将全局菜单控件和全局返回控件显示在中心点坐标对应的位置。

示例性的，以五指定位为例，以数组的形式记录每次的点击坐标，如下所示：

pos＝0，X0＝623.98535，Y0＝388.89227；

pos＝1，X1＝778.3119，Y1＝307.42264；

pos＝2，X2＝741.2829，Y2＝381.04852；

pos＝3，X3＝774.5621，Y3＝270.57675；

pos＝4，X4＝737.88464，Y4＝214.87946；

在一些实施例中，确定所有触控点的坐标最大值和最小值的方法如下：

定义初始值minX＝maxX＝X0和minY＝maxY＝Y0；

if(X1＞X0)，maxX＝X1，minX＝X0；

if(X1＜X0)，minX＝X1，maxX＝X0；

依次类推比较五个点的X和Y坐标，得到(minX，minY)和(maxX，maxY)，即(623.98535，214.87946)和(778.3119，388.89227)；

计算以上两个点的笛卡尔坐标距离，笛卡尔坐标距离计算结果为d；

在一些实施例中，触控点数量为5个，预设像素为300px。如果以上两个点的笛卡尔坐标距离d不大于300，判定不是有效的五指操作；如果以上两个点的笛卡尔坐标距离d大于300，可以判定是有效的五指操作。

当手势符合既定算法，即判定为有效的五指操作后，计算中心点坐标；

在一些实施例中，中心点坐标为五个触控点坐标x和y的平均值，本次数据中心点坐标为：centerX＝731.2054，centerY＝312.56396；

根据centerX和centerY坐标同步更新全局菜单控件和全局返回控件的显示位置。

在一些实施例中，如图7所示，当前全局菜单控件和全局返回控件显示在显示器屏幕的左下方。当用户将五个手指触控到显示器屏幕的右下方后，如图16所示，全局菜单控件和全局返回控件显示在显示器屏幕的右下方。

本申请实施例充分利用显示设备的触控特性，可以通过五指定位的方式直接改变全局菜单控件和全局返回控件在显示器屏幕的显示位置，无需拖拽全局菜单控件和全局返回控件，操作方便，提升用户体验。

在一些实施例中，用户点击全局菜单控件后，显示器显示菜单显示区，菜单显示区包括菜单编辑控件，菜单显示区还可包括至少一个应用或工具控件。如果全局返回控件未与全局菜单控件一同显示，菜单显示区还可包括全局返回控件。

在一些实施例中，如图10所示，全局菜单控件61可以用一个展开箭头显示，全局返回控件62可以用一个返回箭头显示；当用户点击全局菜单控件61后，如果当前未添加任意一个工具或应用，如图17所示，菜单显示区63包括添加工具/应用控件64和菜单收起控件66，当用户点击添加工具/应用控件64后，可进入菜单编辑界面，如图22所示；当用户点击菜单收起控件66后，可收起菜单显示区63，如图10所示。如果当前已添加工具或应用，如图18所示，菜单显示区63包括至少一个应用或工具控件、菜单收起控件66以及菜单编辑控件65，当用户点击菜单编辑控件65后，可进入菜单编辑界面，如图22所示。其中，菜单显示区63中的应用或工具控件添加过多时，可通过手指在显示屏幕上左右滑动改变菜单显示区63的显示控件。其中，菜单收起控件66的位置始终在菜单显示区63中显示；当用户手指向右滑动，菜单显示区63如图19所示。在图19中，当用户点击音量控件67后，如图20所示，菜单显示区63中显示音量调节条68，用户可通过手指在显示屏幕上左右滑动改变音量大小。

在一些实施例中，在图17-图19中，自定义时间内用户无任何操作，菜单显示区63自动收起。在图20中，自定义时间内用户无任何操作，音量调节条68自动收起，如图19所示。

在一些实施例中，用户点击菜单编辑控件，显示器显示菜单编辑区；

在菜单编辑区中用户通过手指点击应用或工具控件可添加应用或工具控件到菜单显示区中，或者删除菜单显示区中的应用或工具控件。

在一些实施例中，在图21所示的用户界面中，用户可通过手指选中菜单显示区63并将菜单显示区63拖拽至屏幕任意位置，为保证菜单显示区的内容显示完整，当菜单显示区63的边缘与屏幕边缘重合时，用户无法在原方向继续拖拽，在无法移动时可显示提示信息。用户还可通过多指定位的方式将菜单显示区显示在触屏手指的中心坐标点。在一些实施例中，全局菜单控件61被拖拽至屏幕最右端时，当点击全局菜单控件61时可适应性将菜单显示区63向左移动，以使菜单显示区的内容完整展示。

在图21中，当用户点击菜单编辑控件65后，如图22所示，显示设备向显示器提供用户界面，在该用户界面中包括菜单编辑区71。菜单编辑区71包括已选择菜单区72、待选择菜单区73、重置控件74和完成控件75。已选择菜单区72包括已选择在菜单显示区63显示的应用或工具控件，待选择菜单区73包括未选择在菜单显示区显示的应用或工具控件。当用户点击重置控件74时，将已选择菜单区72内的应用或工具控件清空；当用户点击完成控件75时，返回到图21所示的用户界面。其中，菜单显示区63显示的应用或工具控件为点击完成控件75前已选择菜单区72内的应用或工具控件。

如图23所示的菜单编辑区，当用户点击待选择菜单区73中的亲友圈控件76时，如图24所示，亲友圈控件76从待选择菜单区73移动至已选择菜单区72中，其中，点击待选择菜单区73中的应用或工具控件，可将该应用或工具控件添加至已选择菜单区72末尾处。当已选择菜单区72内应用或工具控件个数达到预先设置的个数时，如果用户继续添加应用或工具控件，弹出提示信息″最多可添加13个应用或工具″。

在图24中，当用户点击亲友圈控件76上的删除控件77，如图23所示，亲友圈控件76从已选择菜单区72移动至待选择菜单区73中。在一些实施例中，当用户删除已选择菜单区72的应用或工具控件，该应用或工具控件可在工具或应用列表的第一位显示。

在一些实施例中，在菜单编辑区中用户通过手指拖拽应用或工具控件可添加应用或工具控件到菜单显示区中，或者删除菜单显示区中的应用或工具控件。

在一些实施例中，添加应用或工具控件到菜单显示区中，或者，删除菜单显示区中的应用或工具控件的步骤具体包括：

检测是否发生action_down事件；

如果检测到发生action_down事件，即检测到用户手指触碰到触控屏，pointToPosition(落点位置函数)获取落下位置的item坐标(项目坐标)；

判断item坐标是否有效；

在一些实施例中，判断item坐标是否有效的方法为判断该item坐标是否有应用或工具控件。如果item坐标没有任何应用或工具控件，则item坐标无效；如果item坐标在某一应用或工具控件的范围内，则item坐标有效；

如果item坐标无效，执行检测是否发生action_down事件的步骤；

如果item坐标有效，发送长按判断消息；

判断action_down事件是否超过第一预设时长，即用户手指触控时长是否超过第一预设时长；在一些实施例中，第一预设时长为800毫秒；

如果action_down事件是否超过第一预设时长，获取当前项目坐标对应的应用或工具控件的背景图片，并通过window manager(窗口管理)绘制背景图片的悬浮镜像；

隐藏应用或工具控件；

检测action_move(移动操作)事件，更新镜像位置，即根据用户手指移动的位置更新悬浮镜像的位置；

检测是否发生action_up事件；

如果检测到发生action_up事件，即检测到用户手指离开触控屏，更新应用或工具控件的显示位置，并隐藏悬浮镜像。

在一些实施例中，应用或工具控件的显示位置可更新至用户手指离开触控屏的位置，也可以更新至预先设定的位置，如已选择应用或工具控件的末尾处。

如果未检测到发生action_up事件，执行检测action_move事件，更新镜像位置的步骤。

在一些实施例中，用户可将待选择菜单区73中应用或工具控件拖拽至已选择菜单区72的范围内即可。当用户将待选择菜单区73中的应用或工具控件拖拽至已选择菜单区72的范围内，可将该应用或工具控件添加至已选择菜单区72末尾处。如图23所示的菜单编辑区，当用户选中待选择菜单区73中的亲友圈控件76时，并如图25所示的手势拖拽方式，将亲友圈控件76从待选择菜单区73拖拽至已选择菜单区72中，如图24所示。当已选择菜单区72内应用或工具控件个数达到预先设置的个数时，如果用户继续添加应用或工具控件，弹出提示信息″最多可添加13个应用或工具″。

在一些实施例中，用户可将待选择菜单区73中应用或工具控件拖拽至已选择菜单区72的指定位置。如果该指定位置位于两个已选应用或工具控件之间，将拖拽的应用或工具控件显示在后一个已选应用或工具控件的位置，而后一个已选应用或工具控件移动至下一个位置处，其他应用或工具控件依次向下一个位置移动。如果该指定位置没有应用或工具控件占用，拖拽的应用或工具控件可直接添加至该指定位置或添加至已选择菜单区72末尾处。如果该位置已有应用或工具控件占用，拖拽的应用或工具控件将添加到该指定位置；而该位置的原应用或工具控件可直接移动至待选择菜单区73中工具或应用列表的第一位，实现两个应用或工具控件位置替换。

在一些实施例中，在图26中，当用户将待选择菜单区73中的批注控件78拖拽至已选择菜单区72的主页控件79的位置上时，该位置已有主页控件79占用，如图27所示，批注控件78将添加至该位置；而该位置的原主页控件79可以按顺序移动至下一个位置，而其他应用或工具控件依次向下一个位置移动。如果已选择菜单区72内应用或工具控件个数达到预先设置的个数时，可将原菜单末尾处的应用或工具控件移动至待选择菜单区73。

在图24中，当用户选中已选择菜单区72中的亲友圈控件76，并将亲友圈控件76从已选择菜单区72拖拽至待选择菜单区73中，如图23所示。在一些实施例中，当用户删除已选择菜单区72的应用或工具控件，该应用或工具控件可在待选择菜单区73中工具或应用列表的第一位。

本申请实施例充分利用显示设备的触控特性，可以自定义菜单选项，对各个功能进行集中管控，提升用户体验。

在上述实施例中，通过设置和显示全局菜单控件和全局返回控件，充分利用显示设备触控特性，弥补遥控器操作不足，全局菜单控件和全局返回控件也成为智能电视各项功能的统一入口，对各个功能进行集中管控，使得用户可以快速找到自己想用的功能，提升用户体验。

最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备，其特征在于，包括：

显示器，所述显示器包括触控屏；

用户接口；

分别与显示器和用户接口连接的控制器，用于执行：

响应于第一输入指令，控制显示器显示全局菜单控件，所述第一输入指令为用户通过手指触摸所述触控屏输入。

2.根据权利要求1所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于第二输入指令，控制显示器在用户手指停止移动的位置显示全局菜单控件，所述第二输入指令为用户通过手指按压所述全局菜单控件后并在所述触控屏移动输入。

3.根据权利要求1所述的显示设备，其特征在于，所述控制器，用于执行：

响应于第三输入指令，根据所有手指触控坐标的中心点坐标同步更新全局菜单控件的位置，所述第三输入指令为用户通过至少四个手指触摸所述触控屏输入。

4.根据权利要求1所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于用户选中所述全局菜单控件的指令，控制显示器显示菜单显示区，所述菜单显示区包括菜单编辑控件；

所述菜单显示区还包括至少一个应用或工具控件；

所述菜单显示区还包括全局返回控件。

5.根据权利要求4所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于用户选中所述菜单编辑控件的指令，控制显示器显示菜单编辑区；

响应于用户的第四输入指令，添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，所述第四输入指令为在所述菜单编辑区中用户通过手指点击或拖拽应用或工具控件输入。

6.一种显示设备，其特征在于，包括：

显示器，所述显示器包括触控屏；

用户接口；

分别与显示器和用户接口连接的控制器，用于执行：

响应于第一输入指令，控制显示器显示全局菜单控件和全局返回控件，所述第一输入指令为用户通过手指触摸所述触控屏输入。

7.根据权利要求6所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于第二输入指令，控制显示器在用户手指停止移动的位置显示全局菜单控件和全局返回控件，所述第二输入指令为用户通过手指按压所述全局菜单控件和全局返回控件后并在所述触控屏移动输入。

8.根据权利要求7所述的显示设备，其特征在于，所述控制器，还用于执行：响应于第三输入指令，根据所有手指触控坐标的中心点坐标同步更新全局菜单控件和全局返回控件的位置，所述第三输入指令为用户通过至少四个手指触摸所述触控屏输入；

所述根据所有手指触控坐标的中心点坐标同步更新全局菜单控件和全局返回控件的位置，具体包括：

获取每个触控点的触控坐标；

确定所有触控坐标中的坐标最大值和坐标最小值；

计算所述坐标最大值和坐标所述最小值的笛卡尔坐标距离；

如果所述笛卡尔坐标距离大于预设像素，计算所有触控坐标的中心点坐标；

将所述全局菜单控件和全局返回控件显示在所述中心点坐标对应的位置。

9.根据权利要求6所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于用户输入的旋转屏幕的指令，控制旋转组件带动所述显示器旋转；

实时记录所述全局菜单控件和全局返回控件的拖动坐标；

根据旋转前屏幕的状态和所述拖动坐标计算比例系数；

根据所述比例系数和旋转后屏幕的状态计算显示坐标；

在旋转完成后，将所述全局菜单控件和全局返回控件显示在所述显示坐标对应的位置。

10.根据权利要求6所述的显示设备，其特征在于，所述控制器，还用于执行：

响应于用户选中所述全局菜单控件的指令，控制显示器显示菜单显示区，所述菜单显示区包括菜单编辑控件；

所述菜单显示区还包括至少一个应用或工具控件；

响应于用户选中所述菜单编辑控件的指令，控制显示器显示菜单编辑区；

响应于用户的第四输入指令，添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，所述第四输入指令为在所述菜单编辑区中用户通过手指点击或拖拽应用或工具控件输入；

所述添加应用或工具控件到所述菜单显示区中，或者，删除所述菜单显示区中的应用或工具控件，具体包括：

如果检测到用户手指触碰所述触控屏，获取用户手指落下点的项目坐标；

如果所述项目坐标是有效坐标且用户手指触控时长超过第一预设时长，获取当前项目坐标对应的应用或工具控件的背景图片，并绘制所述背景图片的悬浮镜像；

隐藏所述应用或工具控件；

根据用户手指移动的位置更新所述悬浮镜像的位置；

如果检测到用户手指离开所述触控屏，更新所述应用或工具控件的显示位置，并隐藏所述悬浮镜像。

Images