CN106293034A - 一种信息输出的方法及终端 - Google Patents

Abstract

本发明实施例公开了一种信息输出的方法，包括：当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；执行所述语音输出指令，确定所述触摸显示屏上的触摸操作所对应的视图对象；获取所述视图对象内的文本信息；将所述文本信息转换为语音信息，并输出。本发明实施例同时还公开了一种终端。

Description

一种信息输出的方法及终端

技术领域

本发明涉及终端应用领域，尤其涉及一种信息输出的方法及终端。

背景技术

随着科学技术的不断发展，电子技术也得到了飞速的发展，电子产品的种类也越来越多，人们也享受到了科技发展带来的各种便利。现在人们可以通过各种类型的电子设备，享受随着科技发展带来的舒适生活。

目前，以智能手机为例，当用户处于阳光比较强烈的户外，或者光线直射在手机的屏幕上时，用户是无法看清楚当前屏幕上显示的内容，也就无法获取相应的信息，影响用户使用。所以，为了消除该影响，在上述情况下，用户可以通过快捷键等方式，控制终端对当前屏幕进行截屏，获得显示内容的图像，然后，对该图像中的文本信息进行识别，并转化为语音信号输出给用户。但是，由于截屏区域为整个屏幕，使得截屏图像中所包含的内容较多，可能存在大量的冗余信息，导致文本识别不准确，这样，最后通过语音信号输出给用户的信息就会存在一定的误差。

发明内容

有鉴于此，本发明实施例期望提供一种信息输出的方法及终端，以提高对应用程序窗口中内容识别的准确度，减少误差信息的输出，提供良好的用户体验。

为达到上述目的，本发明的技术方案是这样实现的：

第一方面，本发明实施例提供一种信息输出的方法，包括：当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；执行所述语音输出指令，确定所述触摸显示屏上的触摸操作所对应的视图对象；获取所述视图对象内的文本信息；将所述文本信息转换为语音信息，并输出。

在上述方案中，所述获得一语音输出指令，包括：基于用户操作，获得所述语音输出指令；或，检测照射在所述触摸显示屏上的环境光强值，并在所述环境光强值大于门限值时，获得所述语音输出指令。

在上述方案中，所述确定所述触摸显示屏上的触摸操作所对应的视图对象，包括：检测所述触摸显示屏上是否存在触摸操作；当所述触摸显示屏上存在所述触摸操作时，根据所述触摸操作的位置，确定所述视图对象。

在上述方案中，所述应用程序窗口包含至少一层视图对象；所述根据所述触摸操作的位置，确定所述视图对象，包括：在所述至少一层视图对象中查找出所述触摸操作的位置所属的最内层的视图对象；将所述最内层的视图对象确定为所述视图对象。

在上述方案中，所述获取所述视图对象内的文本信息，包括：从所述最内层的视图对象开始，按照从内到外的顺序，依次从所述至少一层视图对象内获取文本信息；将获取到的文本信息确定为所述文本信息。

第二方面，本发明实施例提供一种终端，包括：指令获得单元，用于当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；指令执行单元，用于执行所述语音输出指令，确定所述触摸显示屏上的触摸操作所对应的视图对象；文本获取单元，获取所述视图对象内的文本信息；语音转换单元，用于将所述文本信息转换为语音信息；语音输出单元，用于输出所述语音信息。

在上述方案中，所述指令获得单元，具体用于基于用户操作，获得所述语音输出指令；或，检测照射在所述触摸显示屏上的环境光强值，并在所述环境光强值大于门限值时，获得所述语音输出指令。

在上述方案中，所述指令执行单元，具体用于检测所述触摸显示屏上是否存在触摸操作；当所述触摸显示屏上存在所述触摸操作时，根据所述触摸操作的位置，确定所述视图对象。

在上述方案中，所述应用程序窗口包含至少一层视图对象；所述指令执行单元，具体用于在所述至少一层视图对象中查找出所述触摸操作的位置所属的最内层的视图对象；将所述最内层的视图对象确定为所述视图对象。

在上述方案中，所述文本获取单元，具体用于从所述最内层的视图对象开始，按照从内到外的顺序，依次从所述至少一层视图对象内获取文本信息；将获取到的文本信息确定为所述文本信息。

本发明实施例提供了一种信息输出的方法及终端，当终端的触摸显示屏上显示有一应用程序窗口时，终端获得一语音输出指令，然后，执行该语音输出指令，确定触摸显示屏上的触摸操作所对应的视图对象，接下来，获取上述确定出来的视图对象内的文本信息，最后，将所述文本信息转换为语音信息，并输出。可见，终端是根据用户在触摸屏上的触摸操作确定视图对象的，而并不如现有技术一般无差别对待所有视图对象，那么，确定出来的文本信息会不包含或者包含最小量的冗余信息，使得文本信息在转换为语音信息后，更加准确，提高了对应用程序窗口中内容识别的准确度，减少误差信息的输出，提供良好的用户体验。

附图说明

图1为本发明实施例中的应用程序窗口的示意图；

图2为本发明实施例中的信息输出的方法流程示意图；

图3为本发明实施例中的终端的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述。

本发明实施例提供一种信息输出的方法，该方法应用于智能手机、平板电脑、电子阅读器、智能手表、智能眼镜等终端上。在这些终端上均设置有触摸显示屏，在触摸显示屏能够显示一应用程序窗口。

在实际应用中，上述终端内可以运行Android系统、iOS系统、Windows系统等。本发明不做具体限定。在下面一个或者多个实施例中，以Android系统为例进行说明。

Android系统提供一个应用程序窗口(Activity)与用户进行交互，以完成某项功能。在一个Android应用中，Activity是基本的页面单元，一个Activity通常就是一个单独的屏幕，它上面可以显示一些对象，也可以监听并处理用户的事件做出响应。在一个Activity的内部包含一个窗口(Window)对象，在Window对象上可以绘制至少一个视图(View)对象。在所有View对象中，有一个叫Decor View的View对象，是Window对象的最高级别的视图对象，作为容器(View Group)来使用。在Decor View对象中还包括含有Title View、Content View等View对象。

可见，每一个Activity都有一个关联的Window对象，用来描述一个应用程序窗口，每一个Window对象内部又包含有一个Decor View对象，用来描述应用程序窗口的视图，每一个Decor View对象中又包含着至少一个其他View对象。例如，参见图1所示，该Activity11关联着一个Window对象12，该Window对象12包含一Decor View对象13，Decor View对象13中包括Title View对象14和Content View对象15。

下面结合图1，对本发明实施例提供的信息输出的方法进行说明。

参见图2所示，该方法包括：

S201：当终端的触摸显示屏上显示有一Activity时，获得一语音输出指令；

具体来说，终端的触摸显示屏上显示有上述Activity，由于外部光线太强或者光线直射在终端的触摸显示屏上，导致用户无法看清楚该Activity中的内容，此时，根据用户操作，获得上述语音输出指令；或，检测照射在终端的触摸显示屏上的环境光强，并在环境光强满足预设条件时，获得上述语音输出指令。

例如，当用户无法看清楚该Activity中的内容时，用户可以进行如长按Home键、同时按下音量键等手动的方式，触发终端生成语音输出指令；或者，用户通过终端的麦克风进行语音输入，如输入“这里显示的是什么？”来触发终端生成语音输出指令；或者，在触摸显示屏的边缘设置一光强传感器，用来检测照射在触摸显示屏上的环境光强值，当检测到的环境光强值大于门限值时，就表示照射在触摸显示屏上的光线过强，此时，终端生成语音输出指令。

S202：执行语音输出指令，确定触摸显示屏上的触摸操作所对应的View对象；

具体来说，用户在看不清楚Activity中的内容时，可以用手指点触所要的获取信息所在的位置，此时，终端执行语音输出指令，检测触摸显示屏上是否存在触摸操作；若是，根据触摸操作的位置，确定对应View对象；若否，流程结束。例如，参见图1所示，假设用户想要获取Title View对象的内容，那么，用户就可以将手指点触Title View对象内任意位置，终端执行语音输出指令，检测触摸显示屏上是否存在触摸操作，检测到后，根据触摸操作在触摸显示屏上的位置，就能够确定出对应的View对象，即Title View对象。

在具体实施过程中，由于View对象都是多层嵌套的，一个外层View对象的内部可以嵌套至少一层View对象，所以，上述根据触摸操作的位置，确定对应View对象的步骤可以包括：在至少一层View对象中查找出上述触摸操作的位置所属的最内层的视图对象；将最内层的视图对象确定为触摸操作所对应的View对象。例如，终端可以从最外层对象，即Decor View对象开始，判断触摸操作的位置属于该View对象内部的哪个View对象，然后，再传递到该内部View对象，如Title View，并将触摸操作在触摸显示屏上的坐标换算成相对该内部View对象的坐标，进一步判断该触摸操作的位置属于该内部View对象内部的哪个View对象，重复上述流程，直到查找该触摸操作的位置所在的最内层View对象。

在另一实施例中，用户在S201中触发终端获得语音输出指令的操作与S202中在触摸显示屏上的触摸操作可以为同一操作。比如，当用户无法看清楚该Activity中的内容时，用户用手指点Title View对象内任意位置，并保持预设时间，如3s、5s等，此时，终端生成获得语音输出指令，并执行S202。当然，在实际应用中，触发终端获得语音输出指令的方式还有很多种，本发明不做具体限定。

S203：获取触摸操作所对应的View对象的文本信息；

具体来说，终端在确定出触摸操作所对应的View对象之后，读取View对象中的文本信息，此时，该文本信息中没有冗余信息或者仅包含了最少量的冗余信息，也就是说，该文本信息就是用户要获取的信息。

在实际应用中，由于终端确定出的触摸操作所对应的View对象是触摸操作的位置所在的最内层View对象，该View对象内可能并没有文本信息，那么，此时，S203可以包括：从最内层的视图对象开始，按照从内到外的顺序，依次从至少一层视图对象内获取文本信息；将获取到的文本信息确定为上述触摸操作所对应的View对象的文本信息。也就是说，当最内层View对象不包含文本信息时，终端就重新回到倒数第二层View对象，取其中的文本信息，或者其内部其他View对象中的文本信息，如果都没有，再回到倒数第三层View对象，以此类推，直到获取到文本信息为止，将该文本信息确定为触摸操作对应的View对象的文本信息。

S204：将文本信息转换为语音信息，并输出。

也就是说，终端将S203中获得的文本信息转换为语音信息，然后通过播放的方式输出给用户。

至此，终端就完成了信息输出的流程了。

由上述可知，终端是根据用户在触摸屏上的触摸操作确定视图对象的，而并不如现有技术一般无差别对待所有视图对象，那么，确定出来的文本信息会不包含或者包含最小量的冗余信息，使得文本信息在转换为语音信息后，更加准确，提高了对应用程序窗口中内容识别的准确度，减少误差信息的输出，提供良好的用户体验。

基于同一发明构思，本发明实施例还提供一种终端，该终端与上述一个或者多个实施例中的终端一致。

参见图3所示，该终端包括：指令获得单元31，用于当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；指令执行单元32，用于执行语音输出指令，确定触摸显示屏上的触摸操作所对应的视图对象；文本获取单元33，获取视图对象内的文本信息；语音转换单元34，用于将文本信息转换为语音信息；语音输出单元35，用于输出语音信息。

在上述方案中，指令获得单元31，具体用于基于用户操作，获得语音输出指令；或，检测照射在触摸显示屏上的环境光强值，并在环境光强值大于门限值时，获得语音输出指令。

在上述方案中，指令执行单元32，具体用于检测触摸显示屏上是否存在触摸操作；当触摸显示屏上存在触摸操作时，根据触摸操作的位置，确定视图对象。

在上述方案中，应用程序窗口包含至少一层视图对象；指令执行单元32，具体用于在至少一层视图对象中查找出触摸操作的位置所属的最内层的视图对象；将最内层的视图对象确定为视图对象。

在上述方案中，文本获取单元33，具体用于从最内层的视图对象开始，按照从内到外的顺序，依次从至少一层视图对象内获取文本信息；将获取到的文本信息确定为文本信息。

在实际应用中，上述指令获得单元31、指令执行单元32、文本获取单元33及语音转换单元34均可以设置在上述终端中的CPU、ARM、DSP等处理器的内部，语音输出单元35可以设置在声卡或者扬声器的内部；进一步地，语音转换单元34也可以设置在声卡内部，本发明不做具体限定。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (10)

1.一种信息输出的方法，其特征在于，包括：

当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；

执行所述语音输出指令，确定所述触摸显示屏上的触摸操作所对应的视图对象；

获取所述视图对象内的文本信息；

将所述文本信息转换为语音信息，并输出。

2.根据权利要求1所述的方法，其特征在于，所述获得一语音输出指令，包括：

基于用户操作，获得所述语音输出指令；或，

检测照射在所述触摸显示屏上的环境光强值，并在所述环境光强值大于门限值时，获得所述语音输出指令。

3.根据权利要求1所述的方法，其特征在于，所述确定所述触摸显示屏上的触摸操作所对应的视图对象，包括：

检测所述触摸显示屏上是否存在触摸操作；

当所述触摸显示屏上存在所述触摸操作时，根据所述触摸操作的位置，确定所述视图对象。

4.根据权利要求3所述的方法，其特征在于，所述应用程序窗口包含至少一层视图对象；所述根据所述触摸操作的位置，确定所述视图对象，包括：

在所述至少一层视图对象中查找出所述触摸操作的位置所属的最内层的视图对象；

将所述最内层的视图对象确定为所述视图对象。

5.根据权利要求4所述的方法，其特征在于，所述获取所述视图对象内的文本信息，包括：

从所述最内层的视图对象开始，按照从内到外的顺序，依次从所述至少一层视图对象内获取文本信息；

将获取到的文本信息确定为所述文本信息。

6.一种终端，其特征在于，包括：

指令获得单元，用于当终端的触摸显示屏上显示有一应用程序窗口时，获得一语音输出指令；

指令执行单元，用于执行所述语音输出指令，确定所述触摸显示屏上的触摸操作所对应的视图对象；

文本获取单元，获取所述视图对象内的文本信息；

语音转换单元，用于将所述文本信息转换为语音信息；

语音输出单元，用于输出所述语音信息。

7.根据权利要求6所述的终端，其特征在于，所述指令获得单元，具体用于基于用户操作，获得所述语音输出指令；或，检测照射在所述触摸显示屏上的环境光强值，并在所述环境光强值大于门限值时，获得所述语音输出指令。

8.根据权利要求6所述的终端，其特征在于，所述指令执行单元，具体用于检测所述触摸显示屏上是否存在触摸操作；当所述触摸显示屏上存在所述触摸操作时，根据所述触摸操作的位置，确定所述视图对象。

9.根据权利要求8所述的终端，其特征在于，所述应用程序窗口包含至少一层视图对象；

所述指令执行单元，具体用于在所述至少一层视图对象中查找出所述触摸操作的位置所属的最内层的视图对象；将所述最内层的视图对象确定为所述视图对象。

10.根据权利要求9所述的终端，其特征在于，所述文本获取单元，具体用于从所述最内层的视图对象开始，按照从内到外的顺序，依次从所述至少一层视图对象内获取文本信息；将获取到的文本信息确定为所述文本信息。