CN113077858B - 显示设备控件的控制方法、显示设备及服务器 - Google Patents

显示设备控件的控制方法、显示设备及服务器 Download PDF

Info

Publication number
CN113077858B
CN113077858B CN202110296134.2A CN202110296134A CN113077858B CN 113077858 B CN113077858 B CN 113077858B CN 202110296134 A CN202110296134 A CN 202110296134A CN 113077858 B CN113077858 B CN 113077858B
Authority
CN
China
Prior art keywords
control
target
node
path
page
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110296134.2A
Other languages
English (en)
Other versions
CN113077858A (zh
Inventor
高伟
姜俊厚
岳国华
李佳琳
祝欣培
贾亚洲
李文超
李保成
初德进
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hisense Visual Technology Co Ltd
Original Assignee
Hisense Visual Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hisense Visual Technology Co Ltd filed Critical Hisense Visual Technology Co Ltd
Priority to CN202110296134.2A priority Critical patent/CN113077858B/zh
Publication of CN113077858A publication Critical patent/CN113077858A/zh
Application granted granted Critical
Publication of CN113077858B publication Critical patent/CN113077858B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H15/00—ICT specially adapted for medical reports, e.g. generation or transmission thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H80/00—ICT specially adapted for facilitating communication between medical practitioners or patients, e.g. for collaborative diagnosis, therapy or health monitoring

Landscapes

  • Engineering & Computer Science (AREA)
  • Medical Informatics (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Epidemiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Primary Health Care (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Biomedical Technology (AREA)
  • Pathology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供了一种显示设备控件的控制方法、显示设备及服务器。服务器可以针对显示设备中同一类型的控件生成控件树。显示设备从用户输入控制指令中识别出目标控件之后，可以根据目标控件对应的控件树获取到预先配置好的与目标控件对应的目标控制路径。显示设备再依据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件，进而完成用户输入的控制指令。本申请的方案可针对显示设备上所有可点击的控件预先配置对应的控制路径，这样，当用户通过控制指令控制任何一个控件时，显示设备都可以根据控制路径将其找到，该方案可以提高显示设备控制功能的准确性和全面性，进而保证用户的使用体验。

Description

显示设备控件的控制方法、显示设备及服务器
技术领域
本申请涉及显示技术领域和自动化控制技术领域，尤其涉及一种显示设备控件的控制方法、显示设备及服务器。
背景技术
用户在使用显示设备的过程中，有时会出现不方便使用遥控器手动控制的情况。这种情况下，用户可以使用显示设备中的语音控制功能，控制显示设备的显示页面自动跳转至目标页面或者跳转至目标功能项对应的页面等。
目前，常见的语音控制方法就是，显示设备识别出用户输入的语音控制指令中的内容，然后在显示设备的语音控制系统中找到相关的功能项控件，再控制显示设备跳转至该功能项控件对应的页面。这种语音自动化控制方法可以实现的前提是，语音控制系统中保存相关的功能项控件。然而，当前显示设备中的功能日益强大，功能项控件的数量也在不断地增加，语音控制系统中难以保证保存有全部的功能项控件；并且，多数语音控制系统只针对同一厂商的系统平台内部资源添加索引，被添加索引的资源就可以通过语音控制，但是未被添加索引的就无法控制，添加索引的过程即为优化的过程。由于语音控制系统对第三方应用的支持性较差，很多未被优化的第三方功能项控件也都不能存在于语音控制系统中。进而造成了目前这种语音控制方法难以针对用户的语音控制指令进行全部功能项控件的控制。
发明内容
本申请提供了一种显示设备控件的控制方法、显示设备及服务器，以解决目前用户在显示设备上不能利用语音控制指令控制全部控件的问题。
第一方面，本申请提供了一种显示设备，包括：
显示器；
控制器，被配置为：
根据用户输入的控制指令，识别出可以在显示设备上实现对应功能的目标控件；
获取与所述目标控件的类型相对应的目标控制路径；所述目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息；
依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
在一些实施例中，所述控制器，还被配置为：
从服务器获取与所述目标控件的类型相对应的控件树；所述控件树中各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
从父控件节点开始遍历所述控件树，获得从所述父控件节点逐级定位到所述目标控件对应的子控件节点的目标节点路径；
利用所述目标节点路径上所有控件节点的按键信息，形成目标控制路径。
在一些实施例中，所述控制器，还被配置为：
在控制焦点根据所述目标控制路径上的当前按键信息定位到显示页面上的第一控件上之后，检测所述第一控件是否与所述目标节点路径上的预设控件节点匹配；所述预设控件节点用于表示在所述目标节点路径上根据当前按键信息可以定位到的下一个控件节点；
在所述第一控件与所述预设控件节点匹配的情况下，继续控制焦点从所述第一控件开始根据所述预设控件节点的按键信息进行定位。
在一些实施例中，所述控制器，还被配置为：
在所述第一控件与所述预设控件节点不匹配的情况下，检测所述第一控件与所述目标节点路径上当前按键信息所属的当前控件节点是否匹配；
在所述第一控件与所述当前控件节点匹配的情况下，控制焦点重新根据所述当前按键信息进行定位。
在一些实施例中，所述控制器，还被配置为：
在所述第一控件与所述预设控件节点不匹配，以及所述第一控件与所述当前控件节点也不匹配的情况下，检测所述第一控件在所述目标节点路径中是否存在其他匹配的控件节点；
在所述第一控件与所述预设控件节点不匹配，以及所述第一控件与所述当前控件节点也不匹配的情况下，检测所述第一控件在所述目标节点路径中是否存在其他匹配的控件节点；
在所述第一控件在所述目标节点路径中存在匹配的控件节点的情况下，继续控制焦点从所述第一控件开始根据所述目标控制路径中第一控件节点对应的按键信息进行定位。
在一些实施例中，所述控制器，还被配置为：
在所述第一控件在所述目标节点路径中不存在匹配的控件节点的情况下，控制焦点重新根据所述目标控制路径中的按键信息进行定位。
在一些实施例中，所述控制器，还被配置为：
根据所述目标控件的类型，控制显示器显示同一类型页面中的一级页面；
依据所述目标控制路径中的所述按键信息，控制焦点在所述一级页面和/或所述一级页面下的各子页面上逐级定位各个控件，直至找到目标控件。
第二方面，本申请提供了一种服务器，包括：
控制器，被配置为：
将显示设备上的全部控件根据所属页面的类型进行分类；
针对同一页面类型的控件生成对应的控件树；所述控件树的父控件节点表示同一类型页面中一级页面上的首个控件，所述控件树的各个子控件节点分别表示所述一级页面上其他控件和/或一级页面下的各子页面上的控件；以及，在所述控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
将所述控件树发送给所述显示设备，以使所述显示设备可以根据所述控件树获取到目标控制路径，进而依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
第三方面，本申请提供了一种显示设备控件的控制方法，包括：
根据用户输入的控制指令，识别出可以在显示设备上实现对应功能的目标控件；
获取与所述目标控件的类型相对应的目标控制路径；所述目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息；
依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
第四方面，本申请还提供了一种显示设备控件的控制方法，包括：
将显示设备上的全部控件根据所属页面的类型进行分类；
针对同一页面类型的控件生成对应的控件树；所述控件树的父控件节点表示同一类型页面中一级页面上的首个控件，所述控件树的各个子控件节点分别表示所述一级页面上其他控件和/或一级页面下的各子页面上的控件；以及，在所述控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
将所述控件树发送给所述显示设备，以使所述显示设备可以根据所述控件树获取到目标控制路径，进而依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
由上述内容可知，本申请技术方案中提供了一种显示设备控件的控制方法、显示设备及服务器。服务器可以针对显示设备中同一类型的控件生成控件树。显示设备从用户输入的控制指令中识别出目标控件之后，可以根据目标控件对应的控件树获取到目标控制路径，其中，目标控制路径中保存了在显示页面上为了找到目标控件而依次选择各控件时的按键信息。显示设备再依据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件，进而完成用户输入的控制指令。本申请的方案可针对显示设备上所有可点击的控件预先配置对应的控制路径，这样，当用户通过控制指令控制任何一个控件时，显示设备都可以根据控制路径将其找到，该方案可以提高显示设备控制功能的准确性和全面性，进而保证用户的使用体验。
附图说明
为了更清楚地说明本申请的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1示出了根据一些实施例的显示设备的使用场景的示意图；
图2示出了根据一些实施例的控制装置100的硬件配置框图；
图3示出了根据一些实施例的显示设备200的硬件配置框图；
图4示出了根据一些实施例的显示设备200中软件配置图；
图5示出了根据一些实施例的显示设备200中应用程序的图标控件界面显示图；
图6示出了根据一些实施例的一种语音识别网络架构示意图；
图7示出了根据一些实施例的设置菜单页面的示意图；
图8示出了根据一些实施例的控件树的一种示意图；
图9示出了根据一些实施例的控件树的第二种示意图；
图10示出了根据一些实施例的控件树生成的流程示意图；
图11示出了根据一些实施例的图像模式页面的示意图；
图12示出了根据一些实施例的一种控件控制方法的流程图；
图13示出了根据一些实施例的另一种控件控制方法的流程图；
图14示出了根据一些实施例的控件判断方法的流程图。
具体实施方式
为使本申请的目的和实施方式更加清楚，下面将结合本申请示例性实施例中的附图，对本申请示例性实施方式进行清楚、完整地描述，显然，描述的示例性实施例仅是本申请一部分实施例，而不是全部的实施例。
需要说明的是，本申请中对于术语的简要说明，仅是为了方便理解接下来描述的实施方式，而不是意图限定本申请的实施方式。除非另有说明，这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体，而不必然意味着限定特定的顺序或先后次序，除非另外注明。应该理解这样使用的用语在适当情况下可以互换。
术语“包括”和“具有”以及他们的任何变形，意图在于覆盖但不排他的包含，例如，包含了一系列组件的产品或设备不必限于清楚地列出的所有组件，而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
术语“模块”是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合，能够执行与该元件相关的功能。
图1示出了根据一些实施例的显示设备的使用场景的示意图。如图1所示，显示设备200还与服务器400进行数据通信，用户可通过智能设备300或控制装置100操作显示设备200。
在一些实施例中，控制装置100可以是遥控器，遥控器和显示设备的通信包括红外协议通信或蓝牙协议通信，及其他短距离通信方式中的至少一种，通过无线或有线方式来控制显示设备200。用户可以通过遥控器上按键、语音输入、控制面板输入等至少一种输入用户指令，来控制显示设备200。
在一些实施例中，智能设备300可以包括移动终端、平板电脑、计算机、笔记本电脑，AR/VR设备等中的任意一种。可以使用智能设备300以控制显示设备200。显示设备200还可以采用除了控制装置100和智能设备300之外的方式进行控制。
在一些实施例中，显示设备200还与服务器400进行数据通信。可允许显示设备200通过局域网(LAN)、无线局域网(WLAN)和其他网络进行通信连接。图2示出了根据一些实施例的控制装置100的硬件配置框图。
如图2所示，控制装置100包括控制器110、通信接口130、用户输入/输出接口140、存储器、供电电源。控制装置100可接收用户的输入操作指令，且将操作指令转换为显示设备200可识别和响应的指令，起用用户与显示设备200之间交互中介作用。
在一些实施例中，通信接口130用于和外部通信，包含WIFI芯片，蓝牙模块，NFC或可替代模块中的至少一种。用户输入/输出接口140包含麦克风，触摸板，传感器，按键或可替代模块中的至少一种。
图3示出了根据一些实施例的显示设备200的硬件配置框图。在一些实施例中，显示设备200包括调谐解调器210、通信器220、检测器230、外部装置接口240、控制器250、显示器260、音频输出接口270、存储器、供电电源、用户接口中的至少一种。
在一些实施例中控制器包括中央处理器，视频处理器，音频处理器，图形处理器，RAM，ROM，用于输入/输出的第一接口至第n接口。
显示器260包括用于呈现画面的显示屏组件，进行显示视频内容、图像内容以及菜单操控界面的组件以及用户操控UI界面等。显示器260可为液晶显示器、OLED显示器、以及投影显示器中的至少一种，还可以为一种投影装置和投影屏幕。
在一些实施例中，调谐解调器210通过有线或无线接收方式接收广播电视信号，以及从多个无线或有线广播电视信号中解调出音视频信号，如以及EPG数据信号。
通信器220是用于根据各种通信协议类型与外部设备或服务器进行通信的组件。
检测器230用于采集外部环境或与外部交互的信号。
外部装置接口240可以包括但不限于如下：高清多媒体接口接口(HDMI)、模拟或数据高清分量输入接口(分量)、复合视频输入接口(CVBS)、USB输入接口(USB)、RGB端口等任一个或多个接口。
控制器250，通过存储在存储器上中各种软件控制程序，来控制显示设备的工作和响应用户的操作。控制器250控制显示设备200的整体操作。
在一些实施例中，控制器包括中央处理器(Central Processing Unit，CPU)，视频处理器，音频处理器，图形处理器(Graphics Processing Unit，GPU)，RAM Random AccessMemory，RAM)，ROM(Read-Only Memory,ROM)，用于输入/输出的第一接口至第n接口，通信总线(Bus)等中的至少一种。
图形处理器，用于产生各种图形对象。视频处理器，用于根据输入信号的标准编解码协议，进行解压缩、解码、缩放等视频处理中的至少一种，可得到直接可显示设备200上显示或播放的信号。音频处理器，用于根据输入信号的标准编解码协议，进行解压缩和解码，以及降噪、数模转换、和放大处理等处理中的至少一种，得到可以在扬声器中播放的声音信号。
如图4所示，显示设备的系统可以包括内核(Kernel)、命令解析器(shell)、文件系统和应用程序。内核、shell和文件系统一起组成了基本的操作系统结构，它们让用户可以管理文件、运行程序并使用系统。上电后，内核启动，激活内核空间，抽象硬件、初始化硬件参数等，运行并维护虚拟内存、调度器、信号及进程间通信(IPC)。内核启动后，再加载Shell和用户应用程序。应用程序在启动后被编译成机器码，形成一个进程。将显示设备的系统分为三层，从上至下分别为应用层、中间件层和硬件层。
在一些实施例中，显示设备启动后可以直接进入预置的视频点播程序的界面，视频点播程序的界面可以如图5中所示，至少包括导航栏510和位于导航栏510下方的内容显示区，内容显示区中显示的内容会随导航栏中被选中控件的变化而变化。
用户在使用智能设备的过程中，有时会出现不方便使用遥控器手动控制的情况。这种情况下，用户可以使用智能设备中的语音控制功能，控制智能设备的显示页面自动跳转至目标页面或者跳转至目标功能项对应的页面等。
图6为本申请实施例提供的一种语音识别网络架构示意图。图6中，智能设备用于接收用户输入的控制信息以及输出对该控制信息的处理结果。
其中，语音识别服务设备为部署有语音识别服务的电子设备，智能设备可在接收到通过语音输入的查询语句后，将该查询语句的音频上传至语音识别服务设备，以由语音识别服务设备通过语音识别服务将该音频识别为文本后返回至智能设备。
语义服务设备为部署有语义服务的电子设备，智能设备将语音识别服务识别出的查询语句的文本上传至语义服务设备，以由语义服务设备通过语义服务对该文本进行语义解析，得到文本的业务领域、意图等。
业务服务设备为部署有业务服务的电子设备，语义服务设备根据对查询语句的文本的语义解析结果，向相应的业务服务设备下发查询指令以获取业务服务给出的查询结果。智能设备可从语义服务设备获取该查询结果并输出。
这里的电子设备可包括服务器、计算机等，这里的语音识别服务、语义服务(也可称为语义引擎)和业务服务为可部署在电子设备上的web服务，其中，语音识别服务用于将音频识别为文本，语义服务用于对文本进行语义解析，业务服务用于提供具体的服务如应用A的天气查询服务、应用B的音乐查询服务等。
基于上述图6的内容，当用户无法使用控制装置100控制显示设备200时，可以通过语音自动化控制方法对显示设备200进行控制。例如，用户可以通过遥控器等控制装置100上的方向键等将焦点定位到如图5中所示的“历史记录”的控件上，然后再按下控制装置100上的确认键，确认选择“历史记录”控件，而后显示设备200的显示页面可以跳转至历史记录的页面。当用户通过语音控制指令控制显示设备200显示历史记录页面时，用户需要先向显示设备200输入例如“观看历史记录”等语音控制指令，显示设备200接收到该语音控制指令后，基于语音识别、语义理解等过程识别出在当前显示页面上需要点击“历史记录”控件，而后基于语义响应等过程，将焦点定位到“历史记录”控件上并点击该控件，使显示页面跳转至历史记录页面。
可见，基于当前图6所示的语音识别网络架构，显示设备200已经可以实现语音自动化控制控件的方法，但是实现这种方法发前提是，识别出的控件项可以在语音识别网络的业务服务中查询到，即业务服务中保存有对应的控件项内容。然而，当前显示设备200中的功能日益强大，各种功能项控件的数量也在不断地增加，例如如图5所示的一个页面上就可以存在很多控件，再加上系统控件的不断更新，业务服务中并不能完全保存有全部的功能项控件。例如，如果业务服务中并没有保存“购物”控件的内容，即使基于语音识别和语义理解，获得了目标控件“购物”，也无法控制焦点选择到“购物”控件上。这就造成了目前这种通过语音自动控制控件的方法难以针对用户的语音控制指令进行全部功能项控件的控制。
另外，目前的显示设备200中通常安装的是同一厂商的语音控制系统或者语音识别系统，这种系统大多数情况下只对自己品牌系统内部的资源添加索引，被添加索引的资源就可以通过语音进行控制。而这种系统对非同一品牌的第三方应用支持性较差，会导致很多第三方应用的资源未被添加索引，进而第三方应用的内容就无法通过语音控制。添加索引的过程可以看作是显示设备200上系统对各个功能项控件的优化过程。可见，未被优化的功能项控件也无法通过语音控制系统进行控制。进而也会造成用户难以通过语音控制指令进行全部功能项控件的控制。
为了避免上述这种用户难以通过语音的方式控制全部控件的问题，本申请实施例中提供了一种显示设备200，其中配置了如前述实施例中的控制器250用以执行一些控件的控制过程。并且，本申请实施例中还提供了一种服务器400，其中也配置了控制器用以执行一些内容的生成、获取和发送的过程。
在本申请实施例中，服务器400的控制器被配置为：可以在用户进行语音控制之前，先针对显示设备200上可以被点击的控件，按照控件所属的页面类型对应生成不同的控件树。
其中，页面类型可以大致分为显示设备200的设置菜单中包含设置项的页面、显示设备200的用于显示图像的UI显示页面等等。以及，设置菜单下各级设置页面上全部的设置项均为同一类型的控件，例如图7中所示的“图像模式”、“声音”、“基本设置”等；UI显示页面上全部的功能项均为同一类型的控件，例如如图5中所示的“精选”、“媒资1”、“应用”等，并且，如图5中显示的由第三方应用提供资源的“媒资3”和“媒资4”等控件也均属于UI显示页面上的同一类型的控件。
控件树就是一种由控件节点组成的树结构，其中，控件树的父控件节点表示同一类型页面中一级页面上的首个控件，例如图5中的“搜索”控件；控件树的各个子控件节点分别表示一级页面上其他控件和/或一级页面下的各子页面上的控件，例如图5中显示的一级页面上的“VIP”、“足迹”、“精选”、“历史记录”等控件。在控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息，本申请实施例中所说的按键信息是指模拟用户在使用遥控器等控制装置100时需按下的“down(下)、right(右)、center(确认)”等按键，例如，从“搜索”控件选择到“VIP”控件需要按“down”；从“VIP”控件选择到“足迹”控件，需要按“right”。
图8示出了根据一些实施例的控件树的一种示意图。当在显示设备200的UI页面的首页上选择“教育”控件时，可以显示由“搜索”、“VIP”、“足迹”、“精选”、“历史记录”、“知识”、“媒资1”等控件组成的如图5所示的页面。图5中由部分控件组成的控件树如图8所示。图8中仅是示例性的示出了控件树中到达某个控件的几种分支路径，例如用户在UI页面上实际进行选择的时候，既可以由“开通VIP”通过“down”和“right”定位到“媒资4”，也可以由“历史记录”通过“right”和“down”定位到“媒资4”等。
再以图7中所示的设置菜单为例，服务器400的控制器对其生成的控件树可以参见图9。其中，显示设备200的控制器250在识别出用户的想要通过语音控制的目标控件后，可以直接根据目标控件的类型，控制显示器260显示出同一类型页面的一级页面，例如，控制器250识别出目标控件为设置菜单中的控件，那么会控制显示器250直接设置页面的一级页面，并且焦点会直接定位在首个控件“图像”上，如图7所示，该一级页面上不仅包括最左侧一列的“图像”、“声音”、“网络”、“蓝牙”、“AI”、“通用”、“关于”等一级控件，还包括首个控件“图像”对应的二集页面，即图像设置页面。如图9所示，当焦点定位在图7上的“图像”时，按下“center”和“right”，都会控制焦点向右定位到图像设置页面上的“图像模式”控件；而当焦点定位在“图像”时，按下“down”，则会控制焦点向下定位到“声音”控件上，进而控制器250会控制显示器260再显示出二级页面，即声音设置页面。当焦点定位在二级页面上的“图像模式”控件时，按下“center”和“right”，都会控制显示器260显示出三级页面，即模式设置页面，用户可以在该页面上选择相应的模式；当焦点定位在二级页面上的“图像模式”控件时，按下“down”，则会控制焦点向下定位到“基本设置”控件上，进而控制器250会控制显示器260再显示出三级页面，即基本设置页面。如图7所示的控件树中，各个控件节点对应一个可以被点击的控件，控件树中的层级结构也对应了各个控件在设置菜单中的层级位置，并且各个控件节点中也保存了用于表示从当前控件选择到下一个控件的按键信息，例如，父控件节点“图像”中分别保存了三个按键信息“center”、“right”和“down”，以及三个按键信息分别对应下一个控件“图像模式”、“图像模式”和“声音”。
本申请实施例中，服务器400的控制器中内置控件树模型，并且该控件树模型利用如上所述的方式，针对任一类型页面的每个控件都要采用递归的方式对其进行每个按键操作，根据层级页面之间的结构以及页面上控件的布局等关系遍历完所有的控件，进而可以针对于任一类型页面的生成一个控件树。
图10示出了根据一些实施例的控件树生成的流程示意图。
如图10所示，在一些实施例中，在服务器400的控制器遍历某一个类型页面上控件以生成控件树的过程中，服务器400的控制器还被配置为检测各个控件是否为异常类控件。异常类型包括但不限于重置、一般异常、严重异常、约束项异常等。其中，如果控件为重置类控件，说明当前控件被选择后，会影响其他多个控件；如果控件为一般类控件，说明当前控件被选择后焦点位置不会发生变化，例如具有开关功能的控件等；如果控件为严重异常类控件，说明当前控件被选择后会跳转到其他类型的页面；如果控件为约束项异常类控件，说明该控件当前存在相关联的其他的控件，当前控件的状态不能被随意改变。
以及，如图10所示，在检测出控件为异常类控件之后，服务器400的控制器还被配置为针对于控件针对不同异常类型的控件判断其是否需要在控件树中增加对应的下一层级控件节点。
例如，针对于重置类控件，不能对其执行“center”、“right”的按键操作，否则会控制某项内容重置或者控制显示设备200重置，因此，服务器400的控制器只需要为其添加一个按键“down”的信息，并且在控件树中形成按下“down”后的下一个层级控件节点；针对于一般异常类控件，由于选择后焦点不会发生变化，那么服务器400的控制器也无需对其添加“center”、“right”的按键信息，只添加“down”的按键信息和对应的下一个层级控件节点即可；针对于严重异常类控件，为了避免出现选择后跳转到其他类型页面而无法继续按照当前类型控件树进行控制的情况，服务器400的控制器无需为其添加任何按键信息，使其在控件树中作为最后一个层级控件节点；针对于约束项异常类控件，由于其状态不能被随意改变，为了避免选择该类控件后无法控制焦点定位在哪个相关联的控件上，无需为其添加“center”、“right”的按键操作，只需添加“down”的按键信息和对应的下一个层级控件节点即可。
或者，在一些子层级页面上，例如图11中所示的“图像模式”对应的三级页面上，只横向展示“标准模式”、“鲜艳模式”、“电影模式”等控件项，那么在该层级页面上的控件节点就不能进行“down”的按键操作，服务器400的控制器只能对其添加“right”和“left”的按键信息。
值得说明的是，本申请实施例中，仅仅以用户通常使用的遥控器等控制装置100上的“center”、“right”和“down”三个方向键为例，对显示设备200页面上控件的定位和选择进行说明。在其他一些实施例中，如果控制装置100上具有可实现定位和选择的其他功能键，其也可以作为本申请实施例中的所说“按键”并且按键信息也可以保存在对应的控件节点中。
前述实施例中，在用户并未开始使用语音控制方法之前，服务器400就可以针对各个类型页面进行控件树的生成。并且，显示设备200在使用的过程中，其操作系统、系统应用或者其上安装的第三方应用等均会升级更新，进而各个类型的页面也可能出现不同程度的变化，页面上的控件等也会相应的增加或者删除。为了保证控件树尽可能包含同一类型页面下全部的控件节点，服务器400的控制器还可以实时检测各类型页面是否更新，并在有页面更新的情况下，检测更新的内容，重新判断是否需要在控件树中增加控件点或者删除控件节点，以生成新的控件树。
当用户在更新后的页面上通过语音控制控件时，显示设备200可以从服务器400中获取到该类型页面对应的更新后的控件树。并且，在实际应用中，各个显示设备200的型号不同，也可能会导致不同显示设备之间相同类型页面上控件设置的区别，因此，在一些实施例中，显示设备200在从服务器400中获取控件树时，不仅要确定获取的是哪一种类型页面对应的控件树，还要中确定出与显示设备200的型号相对应的控件树。
在一些实施例中，为了提高用户体验，针对显示设备200端的控件树，还可以采取联网更新的方式，即服务器400端实时更新控件树，并同步到各显示设备200端。
另外，为了避免控件树中的控件节点出现冗余的问题，针对于同一层级上相同的控件节点，服务器400的控制器可以只针对一个控件节点进行下一级控件节点的添加。例如，图9中所示的控件树中，在“图像”控件上按下“center”和“right”都可以控制焦点移动到“图像模式”控件上，因此在“图像”控件节点的下一层级上就出现了两个“图像模式”控件节点。这两个控件节点所代表的控件是相同的，为了避免控件树的冗余情况，服务器400的控制器可以只针对“center”按键下“图像模式”控件节点继续添加“center”、“right”和“down”的按键信息。或者，服务器400的控制器也可以只针对“right”按键下的“图像模式”控件节点继续添加“center”、“right”和“down”的按键信息。
可见，本申请上述实施例中预先生成控件树的方式，服务器400可以将显示设备200上的控件进行分类，并且通过遍历的方式将同一类别的控件又都尽可能地保存在了同一控件树中。进而使得图6所示的语音识别网络架构中可以包含更多更全面的功能项控件，可以满足用户任何的控件控制需求。并且，当用户使用语音控制的方式对显示设备200上某一控件进行控制时，显示设备200的控制器250可以根据控件树上的层级结构快速并且地找到控件，这也提高了语音控制方式的效率。
并且，即使很多控件并被显示设备200的系统进行优化，通过上述的方式，也可以将未被优化的控件添加在控件树中。进而也会使得图6所示的语音识别网络架构中可以包含更多更全面的功能项控件，可以满足用户任何的控件控制需求。
在服务器400上已经配置好各类页面的控件树后，显示设备200就可以接收用户输入的语音控制指令，从服务器400上获取到对应类型的控件树进行使用。进而显示设备200根据控件树在显示页面上显示出用户想要控制内容。在此过程中，显示设备200的控制器250还被配置为根据用户输入的语音控制指令，识别出对应的目标控件。控制器250识别的过程可以参见前述实施例中的语音识别、语义理解等过程。
语音控制指令通常是用户输入的一句话或者一些词等，例如“打开设置页面”、“打开应用A”、“设置对比度”等。
控制器250可以根据语音控制指令识别出实现对应功能的目标控件，例如，“打开设置页面”对应的目标控件为“设置”控件、“打开应用A”对应的目标控件为表示“应用A”控件、“设置对比度”对应的目标控件为“对比度设置”控件等。而后，控制器250在根据目标控件的类型从服务器400中获取到对应的控件树，例如，识别出的目标控件为“对比度设置”，那么控制器250可以判断出该目标控件属于设置菜单页面中的控件，进而可以从服务器400中获取到显示设备200中设置菜单页面对应的控件树。
在一些实施例中，一些控件可能不会存在于显示设备200当前显示的页面上，而是存在于一些子页面上。因此，为了能到在显示设备200上快速地找到目标控件，如图12所示，控制器250还被配置为：在目标控件类型对应的控件树中获得找到目标控件的目标控制路径，而后根据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
其中，目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息，例如前述实施例中的“center”、“right”和“down”等。
以图9中所示的控件树为例。如果控制器250识别出目标控件为“网络”，那么该目标控件对应的页面类型为设置菜单页面，控制器250可以从图9所示的控件树中从父控件节点“图像”开始进行前序遍历，直至找到“网络”控件节点，此过程中获取到的目标控制路径为<down，down>，即在如图7所示的设置菜单页面上，在控件“图像”上按下按键“down”之后，当焦点再次定位到下一个控件“声音”上时，再按下按键“down”之后，焦点就可以定位到目标控件“网络”上，这样就完成了目标控件的定位。
可以理解的是，由控件树中控件节点层级结构生成的目标控制路径是一种参考路径，即理想情况下，控制器250根据该目标控制路径的指示，可以找到最终的目标控件。但是实际应用中，也会出现一些不可控的因素，进而造成控制器250无法根据目标控制路径找到目标控件，例如，网络信号较差导致控制过程中断或者延迟而无法正常进行控件的定位等等。
为了避免上述这种情况，在一些实施例中，如图13所示，控制器250还被配置为：从父控件节点开始遍历控件树，获得从父控件节点逐级定位到所述目标控件对应的子控件节点的目标节点路径；利用目标节点路径上所有控件节点的按键信息，形成目标控制路径。进而，在控件定位时，可以根据目标节点路径上的控件节点对应判断根据目标控制路径的每个按键信息定位后的控件是否是正确的控件。如果正确，则可以继续进行下一个控件的定位；如果不正确，则需要确定出焦点为何定位失败，再依据相应的情况选择如何进行下一个控件的定位。
其中，目标节点路径中保存的是各个控件节点的层级关系，并且，目标节点路径中最后一个层级的控件往往是目标控件。例如，根据图9中的控件树生成的目标控件“网络”对应的目标节点路径为<图像，声音，网络>。
由于各个控件节点中均保存了定位到下一级控件节点的按键信息，因此，根据目标节点路径<图像，声音，网络>可以生成的目标控制路径为<down，down>。
或者，根据图9中的控件树生成的目标控件“高级设置”对应的目标节点路径为<图像，图像模式，基本设置，高级设置>，根据目标节点路径可以生成的目标控制路径为<center，down，down>。
在一些实施例中，可以根据如图14所示的方式判断定位后的控件是否是正确，其中，控制器250可以被配置为：在控制焦点根据目标控制路径上的当前按键信息定位到显示页面上的第一控件上之后，检测第一控件是否与目标节点路径上的预设控件节点匹配。
其中，预设控件节点用于表示在目标节点路径上根据当前按键信息可以定位到的下一个控件节点，例如，目标节点路径为<图像，图像模式，基本设置，高级设置>，目标控制路径为<center，down，down>，目标控制路径上当前按键信息为“center”，那么焦点根据当前按键信息“center”可以定位到的第一控件为“图像模式”，而在目标节点路径上的预设控件节点即为“图像模式”，可见，当前的第一控件与预设控件节点相匹配；或者，目标控制路径上当前按键信息为第一个“down”，那么焦点根据当前按键信息“down”可以定位到的第一控件为“基本设置”，而在目标节点路径上的预设控件节点即为“基本设置”，可见，当前的第一控件与预设控件节点相匹配。
并且，在第一控件与预设控件节点匹配的情况下，控制器250还可以被配置为：继续控制焦点从第一控件开始根据预设控件节点的按键信息进行定位。例如，第一控件“图像模式”，与预设控件节点“图像模式”相匹配时，预设控件节点的按键信息为“down”，此时控制器250可以继续控制焦点从“图像模式”控件的位置向下定位到“基本设置”控件。
而如果第一控件与预设控件节点不匹配，那么控制器250还可以被配置为：检测第一控件与目标节点路径上当前按键信息所属的当前控件节点是否匹配。例如，目标节点路径为<图像，图像模式，基本设置，高级设置>，目标控制路径为<center，down，down>，目标控制路径上当前按键信息为“center”，理论上焦点根据当前按键信息“center”可以定位到的第一控件为“图像模式”，但是如果显示设备200出现了一些不可控的问题，可能会造成焦点并没有移动，当前的第一控件是“图像模式”上一级的“图像”；而在目标节点路径上的预设控件节点为“图像模式”，可见，当前的第一控件与预设控件节点并不匹配。
此时，当前按键信息所述的当前控件节点为目标节点路径中的“图像”，在第一控件与当前控件节点匹配的情况下，控制器250还可以被配置为控制焦点重新根据当前按键信息进行定位，即控制焦点从“图像”控件上根据“center”信息继续定位下一个控件。
而如果第一控件与当前控件节点也不匹配，例如显示设备200出现了一些不可控的问题，造成焦点移动到了“基本设置”控件的位置，此时第一控件为“基本设置”，而该第一控件与当前控件节点“图像”也不匹配。
这种情况下，控制器250还被配置为继续检测第一控件在目标节点路径中是否存在其他匹配的控件节点；并且，在第一控件在目标节点路径中存在匹配的控件节点的情况下，继续控制焦点从第一控件开始根据目标控制路径中第一控件节点对应的按键信息进行定位。例如，第一控件节点“基本设置”在目标节点路径中存在匹配的控件节点“基本设置”，那么控制器250可以继续控制焦点从“基本设置”节点对应的按键信息“down”定位下一个控件“高级设置”。
在一些情况下，第一控件节点可能是目标节点路径中最后一个控件节点，此时第一控件节点在目标控制路径中并无对应的按键信息。因此，在一些实施例中，控制器250还被配置为结束控件定位流程。
而如果第一控件在目标节点路径中不存在匹配的控件节点，控制器250还被配置为控制焦点重新根据目标控制路径中的按键信息进行定位。例如，显示设备200出现了一些不可控的问题，造成焦点移动到了第一控件“声音调节”上，而目标节点路径为目标节点路径为<图像，图像模式，基本设置，高级设置>。可见，当前第一控件在目标节点路径中不存在匹配的控件节点，因此，控制器250需要重新根据目标控制路径<center，down，down>中的按键信息从控件“图像”开始再次进行控件定位。
依照如上所述的方式，可以结合目标节点路径上的控件节点确定根据目标控制路径定位的控件是否正确，从而避免实际应用中，出现一些不可控的因素，造成的控制器250无法根据目标控制路径找到目标控件的情况。
以上实施例中，均是以结构较为复杂的设置菜单页面为例对本申请提供的显示设备的控件控制方法进行具体的说明，针对于本申请实施例中其他类型的页面，本申请前述实施例中的控制方法也可以使用。
由前述内容可知，本申请实施例中的服务器400可以针对显示设备200中同一类型的控件生成控件树。显示设备200从用户输入语音控制指令中识别出目标控件之后，可以根据目标控件对应的控件树获取到目标控制路径，其中，目标控制路径中保存了在显示页面上为了找到目标控件而依次选择各控件时的按键信息。显示设备200再依据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件，进而完成用户输入的语音控制指令。本申请的方案可针对显示设备200上所有可点击的控件预先配置对应的控制路径，这样，当用户通过语音控制指令控制任何一个控件时，显示设备200都可以根据控制路径将其找到，该方案可以提高显示设备200语音控制功能的准确性和全面性，进而保证用户的使用体验。
本申请实施例中还提供了一种显示设备控件的控制方法，可应用于前述实施例中的显示设备200中，并且显示设备200包括用于显示各类型页面的显示器260以及控制器250。所述方法包括以下步骤：根据用户输入的控制指令，识别出可以在显示设备上实现对应功能的目标控件；获取与目标控件的类型相对应的目标控制路径；目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息；以及，目标控制路径上的控件均为可被点击的控件；依据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
同时，本申请实施例中还提供了另一种显示设备控件的控制方法，可应用于前述实施例中的服务器400中，并且服务器400中也包括了控制器。所述方法可以包括以下步骤：将显示设备200上的全部控件根据所属页面的类型进行分类；针对同一页面类型的控件生成对应的控件树；其中，控件树的父控件节点表示同一类型页面中一级页面上的首个控件，控件树的各个子控件节点分别表示一级页面上其他控件和/或一级页面下的各子页面上的控件；以及，在控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；将控件树发送给显示设备200，以使显示设备200可以根据控件树获取到目标控制路径，进而依据目标控制路径中的按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
由于本申请实施例中所述的显示设备控件的控制方法可以应用于如前述实施例中显示设备200和服务器400中，可以由显示设备200中的控制器250以及服务器400中的控制器分别进一步执行这些方法，因此，关于本申请实施例中显示设备控件的控制方法的其他方法内容可以参照前述实施例的相似部分相互参见。
最后应说明的是：以上各实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述各实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
为了方便解释，已经结合具体的实施方式进行了上述说明。但是，上述示例性的讨论不是意图穷尽或者将实施方式限定到上述公开的具体形式。根据上述的教导，可以得到多种修改和变形。上述实施方式的选择和描述是为了更好的解释原理以及实际的应用，从而使得本领域技术人员更好的使用所述实施方式以及适于具体使用考虑的各种不同的变形的实施方式。

Claims (10)

1.一种显示设备，其特征在于，包括：
显示器；
控制器，被配置为：
根据用户输入的控制指令，识别出可以在显示设备上实现对应功能的目标控件；
从服务器获取与所述目标控件的类型相对应的控件树；所述控件树中各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
从父控件节点开始遍历所述控件树，并在遍历所述控件树的过程中检测各个控件是否为异常类控件；
如果所述控件是异常类控件，则根据所述控件的异常类型增加按键信息和所述按键信息对应的下一个层级控制节点；
获取遍历之后从所述父控件节点逐级定位到所述目标控件对应的子控件节点的目标节点路径；
利用所述目标节点路径上所有控件节点的按键信息，形成目标控制路径；
所述目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息；
依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
2.根据权利要求1所述的显示设备，其特征在于，所述异常类控件包括重置类控件、一般异常类控件、严重异常类控件、约束项异常类控件；所述根据所述控件的异常类型增加按键信息和所述按键信息对应的下一个层级控制节点，所述控制器还被配置为：
判断所述控件的异常类型；
如果所述控件为严重异常类控件，则将所述控件作为所述控件树中的最后一个控件节点。
3.根据权利要求1所述的显示设备，其特征在于，所述控制器，还被配置为：
在控制焦点根据所述目标控制路径上的当前按键信息定位到显示页面上的第一控件上之后，检测所述第一控件是否与所述目标节点路径上的预设控件节点匹配；所述预设控件节点用于表示在所述目标节点路径上根据当前按键信息可以定位到的下一个控件节点；
在所述第一控件与所述预设控件节点匹配的情况下，继续控制焦点从所述第一控件开始根据所述预设控件节点的按键信息进行定位。
4.根据权利要求3所述的显示设备，其特征在于，所述控制器，还被配置为：
在所述第一控件与所述预设控件节点不匹配的情况下，检测所述第一控件与所述目标节点路径上当前按键信息所属的当前控件节点是否匹配；
在所述第一控件与所述当前控件节点匹配的情况下，控制焦点重新根据所述当前按键信息进行定位。
5.根据权利要求4所述的显示设备，其特征在于，所述控制器，还被配置为：
在所述第一控件与所述预设控件节点不匹配，以及所述第一控件与所述当前控件节点也不匹配的情况下，检测所述第一控件在所述目标节点路径中是否存在其他匹配的控件节点；
在所述第一控件在所述目标节点路径中存在匹配的控件节点的情况下，继续控制焦点从所述第一控件开始根据所述目标控制路径中第一控件节点对应的按键信息进行定位。
6.根据权利要求5所述的显示设备，其特征在于，所述控制器，还被配置为：
在所述第一控件在所述目标节点路径中不存在匹配的控件节点的情况下，控制焦点重新根据所述目标控制路径中的按键信息进行定位。
7.根据权利要求1所述的显示设备，其特征在于，所述控制器，还被配置为：
根据所述目标控件的类型，控制显示器显示同一类型页面中的一级页面；
依据所述目标控制路径中的所述按键信息，控制焦点在所述一级页面和/或所述一级页面下的各子页面上逐级定位各个控件，直至找到目标控件。
8.一种服务器，其特征在于，包括：
控制器，被配置为：
将显示设备上的全部控件根据所属页面的类型进行分类；
针对同一页面类型的控件生成对应的控件树；所述控件树的父控件节点表示同一类型页面中一级页面上的首个控件，所述控件树的各个子控件节点分别表示所述一级页面上其他控件和/或一级页面下的各子页面上的控件；以及，在所述控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
将所述控件树发送给所述显示设备，以使所述显示设备可以从父控件节点开始遍历所述控件树，并在遍历所述控件树的过程中检测各个控件是否为异常类控件；
如果所述控件是异常类控件，则根据所述控件的异常类型增加按键信息和所述按键信息对应的下一个层级控制节点；
获取遍历之后从所述父控件节点逐级定位到目标控件对应的子控件节点的目标节点路径；
利用所述目标节点路径上所有控件节点的按键信息，形成目标控制路径；
进而依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
9.一种显示设备控件的控制方法，其特征在于，所述方法包括：
根据用户输入的控制指令，识别出可以在显示设备上实现对应功能的目标控件；
从服务器获取与所述目标控件的类型相对应的控件树；所述控件树中各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
从父控件节点开始遍历所述控件树，并在遍历所述控件树的过程中检测各个控件是否为异常类控件；
如果所述控件是异常类控件，则根据所述控件的异常类型增加按键信息和所述按键信息对应的下一个层级控制节点；
获取遍历之后从所述父控件节点逐级定位到目标控件对应的子控件节点的目标节点路径；
利用所述目标节点路径上所有控件节点的按键信息，形成目标控制路径；所述目标控制路径用于表示预先配置好的在显示页面上为了找到目标控件而依次选择各控件时的按键信息；
依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
10.一种显示设备控件的控制方法，其特征在于，所述方法包括：
将显示设备上的全部控件根据所属页面的类型进行分类；
针对同一页面类型的控件生成对应的控件树；所述控件树的父控件节点表示同一类型页面中一级页面上的首个控件，所述控件树的各个子控件节点分别表示所述一级页面上其他控件和/或一级页面下的各子页面上的控件；以及，在所述控件树中，各个控件节点均对应预设有用于表示从当前控件选择到下一个控件的按键信息；
将所述控件树发送给所述显示设备，以使所述显示设备可以从父控件节点开始遍历所述控件树，并在遍历所述控件树的过程中检测各个控件是否为异常类控件；
如果所述控件是异常类控件，则根据所述控件的异常类型增加按键信息和所述按键信息对应的下一个层级控制节点；
获取遍历之后从所述父控件节点逐级定位到目标控件对应的子控件节点的目标节点路径；
利用所述目标节点路径上所有控件节点的按键信息，形成目标控制路径；进而依据所述目标控制路径中的所述按键信息，控制焦点在显示页面上逐级定位各个控件，直至找到目标控件。
CN202110296134.2A 2021-03-19 2021-03-19 显示设备控件的控制方法、显示设备及服务器 Active CN113077858B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110296134.2A CN113077858B (zh) 2021-03-19 2021-03-19 显示设备控件的控制方法、显示设备及服务器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110296134.2A CN113077858B (zh) 2021-03-19 2021-03-19 显示设备控件的控制方法、显示设备及服务器

Publications (2)

Publication Number Publication Date
CN113077858A CN113077858A (zh) 2021-07-06
CN113077858B true CN113077858B (zh) 2022-11-29

Family

ID=76612843

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110296134.2A Active CN113077858B (zh) 2021-03-19 2021-03-19 显示设备控件的控制方法、显示设备及服务器

Country Status (1)

Country Link
CN (1) CN113077858B (zh)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110737840A (zh) * 2019-10-22 2020-01-31 青岛海信电器股份有限公司 语音控制方法及显示设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105551492A (zh) * 2015-12-04 2016-05-04 青岛海信传媒网络技术有限公司 语音控制的方法、装置与终端
CN109428972A (zh) * 2017-09-05 2019-03-05 天津三星通信技术研究有限公司 终端中的语音控制方法和设备
CN108733343B (zh) * 2018-05-28 2021-08-06 北京小米移动软件有限公司 生成语音控制指令的方法、装置及存储介质
CN111722893A (zh) * 2019-03-20 2020-09-29 华为技术有限公司 一种电子设备图形用户界面交互方法、装置和终端设备
CN110085224B (zh) * 2019-04-10 2021-06-01 深圳康佳电子科技有限公司 智能终端全程语音操控处理方法、智能终端及存储介质

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110737840A (zh) * 2019-10-22 2020-01-31 青岛海信电器股份有限公司 语音控制方法及显示设备

Also Published As

Publication number Publication date
CN113077858A (zh) 2021-07-06

Similar Documents

Publication Publication Date Title
CN110737840B (zh) 语音控制方法及显示设备
WO2021189697A1 (zh) 视频展示方法、终端及服务器
US20140156277A1 (en) Information processing device and content retrieval method
CN112000820A (zh) 一种媒资推荐方法及显示设备
CN112004157B (zh) 一种多轮语音交互方法及显示设备
CN111405322B (zh) 获取登录信息的方法及装置
CN111866568B (zh) 一种显示设备、服务器及基于语音的视频集锦获取方法
CN111083538A (zh) 一种背景图像的显示方法及设备
CN113077858B (zh) 显示设备控件的控制方法、显示设备及服务器
CN114928760B (zh) 控制装置的按键设置方法及显示设备
CN113784186B (zh) 终端设备、服务器和通信控制方法
CN115202604A (zh) 显示设备和键盘语言切换方法
CN114968031A (zh) 一种任务管理方法及显示设备
CN115695844A (zh) 一种显示设备、服务器及媒资内容推荐方法
CN114627864A (zh) 显示设备与语音交互方法
CN115348475B (zh) 一种显示设备及频道显示方法
CN113076427B (zh) 一种媒资资源搜索方法、显示设备及服务器
CN115514998B (zh) 显示设备和网络媒资切换方法
US20230119195A1 (en) Display apparatus
US20240053957A1 (en) Display apparatus and display method
CN113207042B (zh) 一种媒资播放方法及显示设备
US20230119868A1 (en) Display apparatus and signal transmission method for display apparatus
CN116320564A (zh) 显示设备、终端设备和设备控制方法
CN113849664A (zh) 显示设备、服务器和媒资搜索方法
CN117615213A (zh) 一种显示设备及分屏状态下焦点控制方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant