CN115576472A - 一种屏幕控制方法、装置、存储介质及终端设备 - Google Patents

Abstract

本申请实施例提供一种屏幕控制方法、装置、存储介质及终端设备，该方法包括：根据显示终端的当前显示内容识别用户的操作意图；根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；获取包含用户所选所述子区域的目标图像；提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。本申请实施例能够让不具备触控屏的普通显示屏同样具备无需借助实体按键便能与显示屏进行交互的效果，降低显示屏的制作成本以及简化加工工艺。

Description

一种屏幕控制方法、装置、存储介质及终端设备

技术领域

本申请涉及电子通信技术领域，尤其涉及一种屏幕控制技术领域，特别涉及一种屏幕控制方法、装置、存储介质及终端设备。

背景技术

目前市面上与电视机实现交互的方式大多分为通过遥控器操控或者通过触屏操控，其中通过触屏操控实现与电视机交互被广泛应用，触屏操控的方式也让用户的使用体验明显提升，而目前市面上为了让电视机能够实现触屏操控的效果大多离不开触摸屏，也有在屏幕四周附加额外的检测设备以此达到相应的效果。

但是，上述这些实现方案都需要增加不少的硬件成本，而且制作工艺要求非常之高，即使是成本可以接受，也会因制作工艺等问题而无法普及，尤其是应用到主流的65/75寸或者尺寸更大的屏幕，相应的制作成本非常高，同时还严重影响其外观设计的表现。

发明内容

本申请实施例提供一种屏幕控制方法、装置、存储介质及终端设备，可以让不具备触控屏的普通显示屏同样具备无需借助实体按键便能与显示屏进行交互的效果，同时能够降低显示屏的制作成本以及简化加工工艺。

本申请实施例一方面提供了一种屏幕控制方法，包括：

根据显示终端的当前显示内容识别用户的操作意图；

根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取包含用户所选所述子区域的目标图像；

提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

在本申请实施例所述的屏幕控制方法中，所述标识生成规则包括：

根据所述操作意图的意图类别，从预先创建的意图类别与位置分布策略之间的映射关系表中获取与所述意图类别对应的位置分布策略。

在本申请实施例所述的屏幕控制方法中，在所述从预先创建的意图类别与位置分布策略之间的映射关系表中获取与所述意图类别对应的位置分布策略之后，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

在本申请实施例所述的屏幕控制方法中，所述标识生成规则还包括：

根据预先设定的显示优化规则分别计算不同子区域上所述预设标识的画面清晰度；

基于所述画面清晰度对不同子区域对应的预设标识进行清晰度调整。

在本申请实施例所述的屏幕控制方法中，所述获取包含用户所选所述子区域的目标图像，包括：

获取由拍摄终端拍摄并上传的目标图像，所述目标图像包括所述显示终端上被遮挡的子区域及与被遮挡的子区域对应的预设标识。

在本申请实施例所述的屏幕控制方法中，所述拍摄设备上设有控件，所述控件被配置为当该控件被触发时，所述拍摄终端获取所述显示终端的当前画面的原始图像，并对该原始图像进行标记作为所述目标图像，将不带有标记的原始图像过滤。

相应的，本申请实施例另一方面还提供了一种屏幕控制装置，包括：

识别模块，用于根据显示终端的当前显示内容识别用户的操作意图；

生成模块，用于根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取模块，用于获取包含用户所选所述子区域的目标图像；

执行模块，用于提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

相应的，本申请实施例另一方面还提供了一种存储介质，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行如上所述的屏幕控制方法。

相应的，本申请实施例另一方面还提供了一种终端设备，包括处理器和存储器，所述存储器存储有多条指令，所述处理器加载所述指令以执行如上所述的屏幕控制方法。

本申请实施例提供了一种屏幕控制方法、装置、存储介质及终端设备，该方法通过根据显示终端的当前显示内容识别用户的操作意图；根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；获取包含用户所选所述子区域的目标图像；提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。本申请实施例能够让不具备触控屏的普通显示屏同样具备无需借助实体按键便能与显示屏进行交互的效果，尤其是应用在大尺寸显示屏中可以降低显示屏的制作成本以及简化加工工艺，在外观上也能够更加简洁更受用户欢迎。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的屏幕控制方法的流程示意图。

图2为本申请实施例提供的屏幕控制方法的一具体展示方式示意图。

图3为本申请实施例提供的屏幕控制方法中预设标识的构成策略示意图。

图4为本申请实施例提供的屏幕控制装置的结构示意图。

图5为本申请实施例提供的屏幕控制装置的另一种结构示意图。

图6为本申请实施例提供的终端设备的结构示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述。显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域技术人员在没有付出创造性劳动前提下所获得的所有其他实施例，都属于本申请的保护范围。

本申请实施例提供一种屏幕控制方法，所述屏幕控制方法可以应用于终端设备中。所述终端设备可以是智能手机、平板电脑等设备。具体地，利用本申请实施例提供的屏幕控制方法，能够让不具备触控屏的普通终端设备同样具备脱离实体控件实现与终端设备进行交互的功能，通俗来讲，就是可以不需要依赖遥控器或者其他实体按键便能够实现例如文字输入或操控APP等功能，尤其是应用在主流的65/75寸或者尺寸更大的屏幕中能够降低显示屏的制作成本以及简化加工工艺，在外观上也能够更加简洁。

请参阅图1，图1为本申请实施例提供的屏幕控制方法的流程示意图。所述屏幕控制方法，应用于终端设备中，所述方式可以包括以下步骤：

步骤101，根据显示终端的当前显示内容识别用户的操作意图。

在本实施例中，当用户需要通过基于本申请提供的屏幕控制方法实现的终端设备进行交互时，终端设备首先会根据显示终端(例如液晶显示屏)的当前显示内容来识别用户的操作意图。具体地，可以通过底层线程，找出当前终端设备正在运行的子线程，同时结合显示终端当前的显示画面，确认出用户当前操作的应用。例如，终端设备当前运行的子线程为“音乐播放器搜索框”，而当前的显示画面为“虚拟键盘”，此时可以判断用户的操作意图是想通过虚拟键盘在音乐播放器搜索框中输入文字。

在其他实施例中，操作意图还可以是通过在画图APP中进行画画等。

步骤102，根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识。

在本实施例中，当用户的操作意图被终端设备所识别后，根据预先设定的标识生成规则分别在显示终端的当前画面预划分的各个子区域上生成预设标识。

其中，标识生成规则包括：

根据所述操作意图的意图类别，从预先创建的意图类别与位置分布策略之间的映射关系表中获取与所述意图类别对应的位置分布策略，其中，位置分布策略包括在每个子区域上对应的预设标识类别以及子区域的划分规则。

需要说明的是，操作意图的意图类别与位置分布策略之间的映射关系表可以理解为预先将各种操作意图的意图类别与指定的位置分布策略进行一一对应，当获取到某一用户的操作意图的意图类别后便可通过查表方式得到与其对应的预设标识位置分布策略。举例来说，假设操作意图对应的意图类别是文字输入，则与该意图类别对应的位置分布策略，即子区域的划分规则是对虚拟键盘上每个按键进行划分，每个子区域上对应的预设标识类别为文字输入，继续以文字输入为例，该意图类别的预设标识可以包含该预设标识所在子区域的位置坐标以及该子区域对应的按键信息(例如数字或字母)。可参数图2所示，图2左边为不具备预设标识的常规界面图，图2右边为设置了预设标识的界面图。

在另一实施例中，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

在本实施例中，构成策略用于构建不同子区域上的预设标识，构成策略包括预设标识类别及其他信息。如图3所示，图3为一种预设标识的构成策略的示意图，预设标识类别信息记载在标识头和标识尾中。

构成策略代号的计算过程为：

F1＝a1*APL/255+a2*P/255+a3*(((APL+P)/2)/255)^2.2；

其中，F1为构成策略代号；

APL为平均信号电平，以8bit信号为例，信号分布从0到255，在此即是先得到每阶信号i对应的信号数量SN(i)，然后

APL＝(SN(0)*0+SN(1)*1+……+SN(255)*255)/(SN(0)+SN(1)+……+SN(255))；

P为画面纯净度，以8bit信号为例，P初始值为0，若对应的SN(i)>5％*(SN(0)+SN(1)+……+SN(255)),则P+1。i从0到255以此类推。a1＝0.3,a2＝0.2,a3＝0.5。

在一些实施例中，所述标识生成规则还包括：

根据预先设定的显示优化规则分别计算不同子区域上所述预设标识的画面清晰度；

基于所述画面清晰度对不同子区域对应的预设标识进行清晰度调整。

在本实施例中，由于不同显示终端的画面像素级别以及显示效果不同，不同APP展示出来的背景画面明暗程度也不同，如果不根据不同情况来调整预设标识的展示效果便会引出用户观看感或拍摄终端的获取效果。因为为了确保预设标识在画面上展示时不会影响观看感，需要尽可能地淡化甚至不被肉眼所获知，但同时需要满足拍摄终端拍摄到的目标图像中能够捕捉到预设标识包含的信息。因此，需要通过预先设定的显示优化规则调整预设标识在不同子区域上的画面清晰度，满足预设标识在画面上展示时不会影响观看感，同时拍摄终端拍摄到的目标图像中能够捕捉到预设标识包含的信息。

其中，显示优化规则包括：

计算待生成预设标识的子区域对应的APL(average picture level，平均信号电平)值；

根据计算得到的APL值，利用预先确定的清晰度算法计算得出预设标识在相应子区域上的画面清晰度。

清晰度算法：

F2(APL)＝a+b*(APL/255)^2.2；

其中，F2为画面清晰度，a＝0.3,b＝0.7。

步骤103，获取包含用户所选所述子区域的目标图像。

在本实施例中，终端设备获取由拍摄终端拍摄并上传的目标图像。

需要解释的是，拍摄终端指的是具备拍摄功能和数据传输功能的设备，在此不做限定。目标图像包括显示终端上被遮挡的子区域及与被遮挡的子区域对应的预设标识。在具体的应用场景中，当用户在终端设备的当前显示终端上进行操作，例如进行文字输入时，拍摄终端拍摄当前包含用户进行文字输入操作的目标图像，假设目标图像中显示某一个子区域被用户的手指遮挡住时，获取该被选择的子区域对应的预设标识，并根据选择的预设标识包含的信息进行相应的操作。

进一步地，为了能够让拍摄终端有效获取到子区域上的预设标识，还可以在每个子区域中设置多个相同的预设标识，确保拍摄终端能够捕捉到预设标识。

进一步地，还可以在拍摄设备上设置控件，该控件被配置为当该控件被触发时，拍摄终端获取显示终端的当前画面的原始图像，并对该原始图像进行标记作为目标图像，将不带有标记的原始图像过滤。

由于用户在某一子区域停留可能并不是确定了选择该子区域，为了避免拍摄终端将该情况下获取到的图像作为目标图像，造成误判。因此，在实施例中，可以将拍摄终端设置为手持式拍摄设备，让用户在显示终端上进行操作的同时手持该设备，在确定某一子区域时将手指遮挡该该子区域，并按下拍摄终端上的控件进行确定，此时拍摄终端获取显示终端的当前画面的原始图像，并对该原始图像进行标记作为目标图像，将不带有标记的原始图像过滤，即只有被标记的原始图像才会被上传到终端设备进行下一步的预设标识提取操作。

步骤104，提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

在本实施例中，提取目标图像中子区域对应的预设标识，根据预设标识在显示终端上执行与预设标识对应的操作指令，当预设标识对应的类别是文字输入时，与之对应的操作指令则将该预设标识对应的子区域上的数字或文字输入搜索框中，即实现时类似触摸屏的操作效果，与终端设备进行实时交互。

其中，可以通过halcon算法提取目标图像中子区域对应的预设标识，具体地，halcon算法包括以下步骤：

1.框选目标图像的特征区域，对特征区域进行裁剪得到第一图像；

2.对第一图像做灰度转换得到第二图像，完成rgb到gray之间的转换；

3.对第二图像的特征区域进行噪点处理，使用模糊或滤波算法对图像噪声及杂点处理得到第三图像；

4.利用阈值提取第三图像中特征区域的特征边缘；

5.利用连通区域以及面积信息，选取特征区域，得到目标图像中的预设标识。

上述所有可选技术方案，可以采用任意结合形成本申请的可选实施例，在此不再一一赘述。

具体实施时，本申请不受所描述的各个步骤的执行顺序的限制，在不产生冲突的情况下，某些步骤还可以采用其它顺序进行或者同时进行。

由上可知，本申请实施例提供的屏幕控制方法通过根据显示终端的当前显示内容识别用户的操作意图；根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；获取包含用户所选所述子区域的目标图像；提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。本申请实施例能够让不具备触控屏的普通显示屏同样具备无需借助实体按键便能与显示屏进行交互的效果，尤其是应用在主流的65/75寸或者尺寸更大的屏幕中能够降低显示屏的制作成本以及简化加工工艺，在外观上也能够更加简洁。

本申请实施例还提供一种屏幕控制装置，所述屏幕控制装置可以集成在终端设备中。所述终端设备可以是智能手机、平板电脑等设备。

请参阅图4，图4为本申请实施例提供的屏幕控制装置的结构示意图。屏幕控制装置30可以包括：

识别模块31，用于根据显示终端的当前显示内容识别用户的操作意图；

生成模块32，用于根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取模块33，用于获取包含用户所选所述子区域的目标图像；

执行模块34，用于提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

在一些实施例中，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

在一些实施例中，所述获取模块33，用于获取由拍摄终端拍摄并上传的目标图像，所述目标图像包括所述显示终端上被遮挡的子区域及与被遮挡的子区域对应的预设标识。

在一些实施例中，所述拍摄设备上设有控件，所述控件被配置为当该控件被触发时，所述拍摄终端获取所述显示终端的当前画面的原始图像，并对该原始图像进行标记作为所述目标图像，将不带有标记的原始图像过滤。

在一些实施例中，每个所述子区域中包含一个或多个相同的预设标识。

具体实施时，以上各个模块可以作为独立的实体来实现，也可以进行任意组合，作为同一或若干个实体来实现。

由上可知，本申请实施例提供的屏幕控制装置30，通过识别模块31根据显示终端的当前显示内容识别用户的操作意图；生成模块32根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；获取模块33获取包含用户所选所述子区域的目标图像；执行模块34提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

请参阅图5，图5为本申请实施例提供的屏幕控制装置的另一结构示意图，振动屏幕控制装置30包括存储器120、一个或多个处理器180、以及一个或多个应用程序，其中该一个或多个应用程序被存储于该存储器120中，并配置为由该处理器180执行；该处理器180可以包括第一获取模块31，第二获取模块32，选择模块33，以及控制模块34。例如，以上各个部件的结构和连接关系可以如下：

存储器120可用于存储应用程序和数据。存储器120存储的应用程序中包含有可执行代码。应用程序可以组成各种功能模块。处理器180通过运行存储在存储器120的应用程序，从而执行各种功能应用以及数据处理。此外，存储器120可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器120还可以包括存储器控制器，以提供处理器180对存储器120的访问。

处理器180是装置的控制中心，利用各种接口和线路连接整个终端的各个部分，通过运行或执行存储在存储器120内的应用程序，以及调用存储在存储器120内的数据，执行装置的各种功能和处理数据，从而对装置进行整体监控。可选的，处理器180可包括一个或多个处理核心；优选的，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等。

具体在本实施例中，处理器180会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行代码加载到存储器120中，并由处理器180来运行存储在存储器120中的应用程序，从而实现各种功能：

识别模块31，用于根据显示终端的当前显示内容识别用户的操作意图；

生成模块32，用于根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取模块33，用于获取包含用户所选所述子区域的目标图像；

执行模块34，用于提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

在一些实施例中，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

在一些实施例中，所述获取模块33，用于获取由拍摄终端拍摄并上传的目标图像，所述目标图像包括所述显示终端上被遮挡的子区域及与被遮挡的子区域对应的预设标识。

在一些实施例中，所述拍摄设备上设有控件，所述控件被配置为当该控件被触发时，所述拍摄终端获取所述显示终端的当前画面的原始图像，并对该原始图像进行标记作为所述目标图像，将不带有标记的原始图像过滤。

在一些实施例中，每个所述子区域中包含一个或多个相同的预设标识。

本申请实施例还提供一种终端设备。所述终端设备可以是智能手机、平板电脑等设备。

请参阅图6，图6示出了本申请实施例提供的终端设备的结构示意图，该终端设备可以用于实施上述实施例中提供的振动调节方法。该终端设备1200可以为智能手机或平板电脑。

如图6所示，终端设备1200可以包括RF(Radio Frequency，射频)电路110、包括有一个或一个以上(图中仅示出一个)计算机可读存储介质的存储器120、输入单元130、显示单元140、传感器150、音频电路160、传输模块170、包括有一个或者一个以上(图中仅示出一个)处理核心的处理器180以及电源190等部件。本领域技术人员可以理解，图6中示出的终端设备1200结构并不构成对终端设备1200的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

RF电路110用于接收以及发送电磁波，实现电磁波与电信号的相互转换，从而与通讯网络或者其他设备进行通讯。RF电路110可包括各种现有的用于执行这些功能的电路元件，例如，天线、射频收发器、数字信号处理器、加密/解密芯片、用户身份模块(SIM)卡、存储器等等。RF电路110可与各种网络如互联网、企业内部网、无线网络进行通讯或者通过无线网络与其他设备进行通讯。

存储器120可用于存储软件程序以及模块，如上述实施例中振动调节方法对应的程序指令/模块，处理器180通过运行存储在存储器120内的软件程序以及模块，从而执行各种功能应用以及数据处理，可以根据终端设备所处的当前场景来自动选择振动提醒模式来进行屏幕控制，既能够保证会议等场景不被打扰，又能保证用户可以感知来电，提升了终端设备的智能性。存储器120可包括高速随机存储器，还可包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器120可进一步包括相对于处理器180远程设置的存储器，这些远程存储器可以通过网络连接至电子设备1200。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

输入单元130可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地，输入单元130可包括触敏表面131以及其他输入设备132。触敏表面131，也称为触摸显示屏或者触控板，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面131上或在触敏表面131附近的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触敏表面131可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给处理器180，并能接收处理器180发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面131。除了触敏表面131，输入单元130还可以包括其他输入设备132。具体地，其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端设备1200的各种图形用户接口，这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元140可包括显示面板141，可选的，可以采用LCD(Liquid CrystalDisplay，液晶显示器)、OLED(Organic Light-Emitting Diode,有机发光二极管)等形式来配置显示面板141。进一步的，触敏表面131可覆盖显示面板141，当触敏表面131检测到在其上或附近的触摸操作后，传送给处理器180以确定触摸事件的类型，随后处理器180根据触摸事件的类型在显示面板141上提供相应的视觉输出。虽然在图4中，触敏表面131与显示面板141是作为两个独立的部件来实现输入和输出功能，但是在某些实施例中，可以将触敏表面131与显示面板141集成而实现输入和输出功能。

终端设备1200还可包括至少一种传感器150，比如光传感器、运动传感器以及其他传感器。具体地，光传感器可包括环境光传感器及接近传感器，其中，环境光传感器可根据环境光线的明暗来调节显示面板141的亮度，接近传感器可在终端设备1200移动到耳边时，关闭显示面板141和/或背光。作为运动传感器的一种，重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小，静止时可检测出重力的大小及方向，可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等；至于终端设备1200还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器，在此不再赘述。

音频电路160、扬声器161，传声器162可提供用户与终端设备1200之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号，传输到扬声器161，由扬声器161转换为声音信号输出；另一方面，传声器162将收集的声音信号转换为电信号，由音频电路160接收后转换为音频数据，再将音频数据输出处理器180处理后，经RF电路110以发送给比如另一终端，或者将音频数据输出至存储器120以便进一步处理。音频电路160还可能包括耳塞插孔，以提供外设耳机与终端设备1200的通信。

终端设备1200通过传输模块170(例如Wi-Fi模块)可以帮助用户收发电子邮件、浏览网页和访问流式媒体等，它为用户提供了无线的宽带互联网访问。虽然图4示出了传输模块170，但是可以理解的是，其并不属于终端设备1200的必须构成，完全可以根据需要在不改变发明的本质的范围内而省略。

处理器180是终端设备1200的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在存储器120内的软件程序和/或模块，以及调用存储在存储器120内的数据，执行终端设备1200的各种功能和处理数据，从而对手机进行整体监控。可选的，处理器180可包括一个或多个处理核心；在一些实施例中，处理器180可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器180中。

终端设备1200还包括给各个部件供电的电源190(比如电池)，在一些实施例中，电源可以通过电源管理系统与处理器180逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源190还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

尽管未示出，终端设备1200还可以包括摄像头(如前置摄像头、后置摄像头)、蓝牙模块等，在此不再赘述。具体在本实施例中，终端设备1200的显示单元140是触摸屏显示器，终端设备1200还包括有存储器120，以及一个或者一个以上的程序，其中一个或者一个以上程序存储于存储器120中，且经配置以由一个或者一个以上处理器180执行一个或者一个以上程序包含用于进行以下操作的指令：

根据显示终端的当前显示内容识别用户的操作意图；

根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取包含用户所选所述子区域的目标图像；

提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

在一些实施例中，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

在一些实施例中，所述拍摄设备上设有控件，所述控件被配置为当该控件被触发时，所述拍摄终端获取所述显示终端的当前画面的原始图像，并对该原始图像进行标记作为所述目标图像，将不带有标记的原始图像过滤。

在一些实施例中，每个所述子区域中包含一个或多个相同的预设标识。

本申请实施例还提供一种终端设备。所述终端设备可以是智能手机、平板电脑等设备。

由上可知，本申请实施例提供了一种终端设备1200，所述终端设备1200执行以下步骤：根据显示终端的当前显示内容识别用户的操作意图；根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；获取包含用户所选所述子区域的目标图像；提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。本申请实施例能够让不具备触控屏的普通显示屏同样具备无需借助实体按键便能与显示屏进行交互的效果，尤其是应用在主流的65/75寸或者尺寸更大的屏幕中能够降低显示屏的制作成本以及简化加工工艺，在外观上也能够更加简洁。

本申请实施例还提供一种存储介质，所述存储介质中存储有计算机程序，当所述计算机程序在计算机上运行时，所述计算机执行上述任一实施例所述的屏幕控制方法。

需要说明的是，对本申请所述屏幕控制方法而言，本领域普通测试人员可以理解实现本申请实施例所述屏幕控制方法的全部或部分流程，是可以通过计算机程序来控制相关的硬件来完成，所述计算机程序可存储于一计算机可读存储介质中，如存储在终端设备的存储器中，并被该终端设备内的至少一个处理器执行，在执行过程中可包括如所述振动调节方法的实施例的流程。其中，所述存储介质可为磁碟、光盘、只读存储器(ROM，ReadOnly Memory)、随机存取记忆体(RAM，Random Access Memory)等。

对本申请实施例的所述振动调节装置而言，其各功能模块可以集成在一个处理芯片中，也可以是各个模块单独物理存在，也可以两个或两个以上模块集成在一个模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读存储介质中，所述存储介质譬如为只读存储器，磁盘或光盘等。

以上对本申请实施例所提供的屏幕控制方法、装置、存储介质及终端设备进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想；同时，对于本领域的技术人员，依据本申请的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本申请的限制。

Claims (10)

1.一种屏幕控制方法，其特征在于，包括：

根据显示终端的当前显示内容识别用户的操作意图；

根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取包含用户所选所述子区域的目标图像；

提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

2.如权利要求1所述的屏幕控制方法，其特征在于，所述标识生成规则包括：

根据所述操作意图的意图类别，从预先创建的意图类别与位置分布策略之间的映射关系表中获取与所述意图类别对应的位置分布策略。

3.如权利要求2所述的屏幕控制方法，其特征在于，在所述从预先创建的意图类别与位置分布策略之间的映射关系表中获取与所述意图类别对应的位置分布策略之后，所述标识生成规则还包括：

根据不同子区域的画面纯净度及APL值计算不同子区域对应的构成策略代号；

根据所述构成策略代号，从预先创建的构成策略代号与构成策略之间的映射关系表中获取与所述构成策略代号对应的构成策略，所述构成策略包括预设标识类别；

基于所述构成策略构建不同所述子区域对应的预设标识。

4.如权利要求3所述的屏幕控制方法，其特征在于，所述标识生成规则还包括：

根据预先设定的显示优化规则分别计算不同子区域上所述预设标识的画面清晰度；

基于所述画面清晰度对不同子区域对应的预设标识进行清晰度调整。

5.如权利要求1所述的屏幕控制方法，其特征在于，所述获取包含用户所选所述子区域的目标图像，包括：

获取由拍摄终端拍摄并上传的目标图像，所述目标图像包括所述显示终端上被遮挡的子区域及与被遮挡的子区域对应的预设标识。

6.如权利要求5所述的屏幕控制方法，其特征在于，所述拍摄设备上设有控件，所述控件被配置为当该控件被触发时，所述拍摄终端获取所述显示终端的当前画面的原始图像，并对该原始图像进行标记作为所述目标图像，将不带有标记的原始图像过滤。

7.如权利要求1所述的屏幕控制方法，其特征在于，每个所述子区域中包含一个或多个相同的预设标识。

8.一种屏幕控制装置，其特征在于，包括：

识别模块，用于根据显示终端的当前显示内容识别用户的操作意图；

生成模块，用于根据所述操作意图及预先设定的标识生成规则，分别在所述显示终端的当前画面预划分的各个子区域上生成预设标识；

获取模块，用于获取包含用户所选所述子区域的目标图像；

执行模块，用于提取所述目标图像中所述子区域对应的预设标识，根据所述预设标识在所述显示终端上执行与所述预设标识对应的操作指令。

9.一种存储介质，其特征在于，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行权利要求1至7任一项所述的屏幕控制方法。

10.一种终端设备，其特征在于，包括处理器和存储器，所述存储器存储有多条指令，所述处理器加载所述指令以执行权利要求1至7任一项所述的屏幕控制方法。

Images