CN114281454A - 信息辅助处理方法、装置、设备和计算机可读存储介质 - Google Patents

Abstract

本申请实施例公开了一种信息辅助处理方法、装置、设备和计算机可读存储介质。该方法包括：显示当前界面，在当前界面显示提示信息；在通过解析当前界面的控件结构确定提示信息为预设消息通知时，基于控件结构，获取提示信息的显示内容；预设消息通知表征实时性的通知消息；控件结构用于表征显示屏幕上的显示内容的布局；检测场景的当前状态；在当前状态表征处于待辅助情景时，利用辅助提示方式提示显示内容；待辅助情景表征用户操作障碍的场景。

Description

信息辅助处理方法、装置、设备和计算机可读存储介质

技术领域

本申请涉及计算机技术领域，尤其涉及一种信息辅助处理方法、装置、设备和计算机可读存储介质。

背景技术

随着移动技术的发展，移动设备在多种应用场景发挥着作用。例如，运动记步、驾驶导航以及浏览等。移动设备在接收到新的实时性通知消息的情况下，会通过弹窗对通知消息进行通知；由于弹窗显示的时间有限，显示的消息内容也可能不完整；如此，在驾驶、运动等障碍场景中，由于用户不方便操作移动设备，通过系统层面的接口无法获取完整的消息内容，或者漏掉通知消息。

发明内容

本申请实施例提供一种信息辅助处理方法、装置、设备和计算机可读存储介质。

本申请的技术方案是这样实现的：

本申请实施例提供了一种信息辅助处理方法，包括：

显示当前界面，在所述当前界面显示提示信息；在通过解析当前界面的控件结构，确定所述提示信息为预设消息通知时，基于所述控件结构，获取所述提示信息的显示内容；所述预设消息通知表征实时性的通知消息；所述控件结构用于表征显示屏幕上的所述显示内容的布局；在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容；所述待辅助情景表征用户操作障碍的场景。

本申请实施例提供了一种信息辅助处理装置，所述装置包括：

显示模块，用于显示当前界面，在所述当前界面显示提示信息；

获取模块，用于在通过解析当前界面的控件结构确定所述提示信息为预设消息通知时，基于所述控件结构，获取所述提示信息的显示内容；所述预设消息通知表征实时性的通知消息；所述控件结构用于表征显示屏幕上的所述显示内容的布局；

提示模块，用于在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容；所述待辅助情景表征用户操作障碍的场景。

本申请实施例提供了一种信息辅助处理设备，所述设备包括：

存储器和处理器，所述存储器存储有可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述信息辅助处理方法。

本申请实施例提供了一种计算机可读存储介质，其上存储有可执行指令，用于被处理器执行时，实现上述信息辅助处理方法。

本申请实施例所提供的一种信息辅助处理方法、装置、设备和计算机可读存储介质，显示当前界面，在当前界面显示提示信息；在通过解析当前界面的控件结构确定提示信息为预设消息通知时，基于控件结构，获取提示信息的显示内容；预设消息通知表征实时性的通知消息；控件结构用于表征显示屏幕上的显示内容的布局；在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示显示内容；待辅助情景表征用户操作障碍的场景；也就是说，本申请通过底层接口解析控件结构获取提示信息的显示内容，即使预设消息通知显示时间短，信息辅助处理设备仍然能够及时获取到预设消息通知，基于此，在用户无法进行操作的情况下，信息辅助设备可以根据待辅助情景，使用最佳的辅助提示方式提示用户，从而使用户可以获知完整消息通知。

附图说明

图1为本申请实施例提供的一种可选的信息辅助处理方法的流程图；

图2为本申请实施例提供的一种可选的控件树结构示意图；

图3为本申请实施例提供的一种可选的信息辅助处理方法的流程图；

图4为本申请实施例提供的一种可选的信息辅助处理方法的流程图；

图5为本申请实施例提供的一种可选的信息辅助处理方法的流程图；

图6a为本申请实施例提供的一种可选的终端显示界面示意图；

图6b为本申请实施例提供的一种可选的控件树结构示意图；

图7a为本申请实施例提供的一种可选的终端显示界面示意图；

图7b为本申请实施例提供的一种可选的控件树结构示意图；

图8a为本申请实施例提供的一种可选的终端显示界面示意图；

图8b为本申请实施例提供的一种可选的控件树结构示意图；

图9为本申请实施例提供的一种可选的信息辅助处理方法的流程图；

图10为本申请实施例提供的一种可选的信息辅助处理装置的结构组成示意图；

图11为本申请实施例提供的一种可选的信息辅助处理设备的结构组成示意图。

具体实施方式

为了使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请作进一步地详细描述，所描述的实施例不应视为对本申请的限制，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。

在以下的描述中，涉及到“一些实施例”，其描述了所有可能实施例的子集，但是可以理解,“一些实施例”可以是所有可能实施例的相同子集或不同子集，并且可以在不冲突的情况下相互结合。

在以下的描述中，所涉及的术语“第一\第二\第三”仅仅是是区别类似的对象，不代表针对对象的特定排序，可以理解地，“第一\第二\第三”在允许的情况下可以互换特定的顺序或先后次序，以使这里描述的本申请实施例能够以除了在这里图示或描述的以外的顺序实施。

除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的，不是旨在限制本申请。

为便于理解本方案，在对本申请实施例进行说明之前，对本申请实施例中的应用背景进行说明。

通常，若移动设备上有通知消息到来，将会在移动设备显示屏上弹出通知窗口来提示用户通知消息到来，通知消息在通知窗口上显示的内容并不完整，且显示弹窗的时间有限，此时，若用户正在运动、驾驶等障碍场景中，将不方便操作手机查看通知消息，特别是在驾驶中，操作移动设备将带来安全隐患；并且，随着小屏幕移动设备的应用，如智能手表，也可以通过弹窗提示通知消息到来，但非常不利于用户获知通知消息。

目前，用户通常会使用手机连接耳机一边听音乐一边健身，或者，通过手机，跟着视频健身锻炼。此时，如果有消息到来，可能导致用户没有及时看到而错过重要消息；或者，用户需要暂停视频，点击弹窗查看消息，从而中断用户的健身活动；也就是说，在障碍场景中，非常影响用户获取完整的通知消息。

本申请实施例提供一种信息辅助处理方法、装置、设备和计算机可读存储介质，能够提高用户获知通知消息的准确率。下面说明本申请实施例提供的通信设备的示例性应用，本申请实施例提供的信息辅助处理设备可以实施为笔记本电脑，平板电脑，台式计算机，机顶盒，移动设备(例如，移动电话，便携式音乐播放器，个人数字助理，专用消息设备，便携式游戏设备，智能手表)等各种类型的用户终端。下面，将说明信息辅助处理设备实施为终端时的示例性应用。

需要说明的是，终端可以包括各种具有无线通信功能的手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其他处理设备，以及各种形式的用户设备，移动台(Mobile Station，MS)等等。为方便描述，上面提到的设备统称为终端。终端可以与网络设备之间通过某种空口技术互相通信，例如Uu接口。

将结合本申请实施例提供的终端的示例性应用和实施，说明本申请实施例提供的信息辅助处理方法。

参见图1，图1是本申请实施例提供的信息辅助处理的一个可选的流程示意图，将结合图1示出的步骤进行说明。

S101、显示当前界面，在当前界面显示提示信息。

在本申请实施例中，终端获取到实时性的通知消息，将在当前界面上显示弹窗以提示用户有通知消息到达。这里，当前界面可以是锁屏界面，即终端的屏幕运行状态在非显示状态下，当前界面也可以是终端的屏幕运行状态在显示状态下的界面，例如，终端桌面界面或任意一个应用程序的应用界面等，对此，本申请实施例不作限制。

示例性的，提示信息可以为：低电量报警、耳机插入、蓝牙连接状态等终端的状态通知消息，也可以为实时接收到的通信消息；对此，本申请实施例不作限制。

S102、在通过解析当前界面的控件结构确定提示信息为预设消息通知时，基于控件结构，获取提示信息的显示内容；预设消息通知表征实时性的通知消息。

在本申请实施例中，终端可以通过底层接口解析当前界面，得到当前界面的控件结构，基于控件结构的差异，确定当前界面是否有实时的通知信息。

需要说明的是，控件结构可以为控件树结构(view树)，控件树结构包括一个根节点(root)、至少一个容器节点(view group)以及至少一个叶子节点(view)；其中，根节点用于组织布局容器节点；容器节点为用于组织布局叶子节点的容器；这里，叶子节点代表显示屏幕上的一块可绘制空间，在该绘制空间内，叶子节点可以进行图形绘制和事件处理；也就是说，根节点用于表征整个显示屏幕，叶子节点表征在显示屏幕上显示的内容。

这里，根节点下可以包括容器节点，也可以包括叶子节点；容器节点还可以包括下一级容器节点，也可以包括叶子节点。

如图2所示，控件树结构包括一个根节点，根节点包括容器节点1、容器节点2和叶子节点4。其中，容器节点1包括叶子节点1和叶子节点2，容器节点2包括子容器节点3、容器节点3包括叶子节点3。

在本申请实施例中，每个叶子节点都有自己的节点信息。节点信息包括用于显示在屏幕上的内容。示例性的，叶子节点1表征一个图标，叶子节点1的节点信息可以包括：图标、显示位置、显示尺寸以及显示图片等；叶子节点2表征一个提示信息，叶子节点2的节点信息可以包括：信息主题、信息发送方以及信息内容等。

这里，对于节点信息，可以根据需要设置，对此，本申请实施例不作限制。

在本申请实施例中，终端可以根据当前界面的控件树结构，在确定出当前界面显示提示信息，即当前界面对应的控件树结构，存在新增叶子节点的情况下，根据该叶子节点的节点信息确定该提示信息是否为预设通知消息，在该提示信息为预设通知消息的情况下，可以获取该叶子节点的信息内容作为提示信息的信息内容。

在本申请实施例中，需要实时性通知的预设通知消息可以包括：终端状态预警信息、重要事件短信信息、用户关注的应用推广信息等，对此，可以根据需要设置，本申请实施例不作限制。

在本申请实施例中，终端状态预警信息可以为：电量低、温度高、网络中断等，对此，可以根据需要设置，本申请实施例不作限制。

在本申请的一些实施例中，重要事件短信信息可以为预先设置在终端系统中的，例如，信息内容中包含事件和地点的信息，信息发送方为通讯录中已保存有的信息等等，对此，本申请实施例不作限制。

在本申请的一些实施例中，重要事件短信信息也可以为用户手动设置的。

示例性的，用户近期需要参加XY展览会，可以提前设置预设通知信息的关键字“XY”，如此，终端确定出新的叶子节点的节点信息，如信息内容中包括“XY”时，可以确定该提示信息为预设通知信息；或者，将XY展览会的短信信息的信息发送方设置为关键字，这里，信息发送方的关键字可以为名称或者号码段，如此，终端确定出新的叶子节点的节点信息中，信息发送方包含预设通知信息的关键字，则可以确定该提示信息为预设通知信息。

可以理解的是，通过底层接口解析控件树结构来确定当前界面上显示的提示信息是否为预设消息通知，可以使更多的应用采用该方法，从而提高应用的扩展性。

S103、在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示显示信息内容；待辅助情景表征用户操作障碍的场景。

在本申请实施例中，终端在提取提示信息的信息内容之后，需要检测场景的当前状态。这里，场景的当前状态用于表征用户当前是否处于无法操作终端的状态。

在本申请实施例中，终端可以采用陀螺仪、加速度传感器、震动传感器以及摄像装置等工具来检测当前状态。

在本申请的一些实施例中，终端可以根据加速度传感器和震动传感器确定用户当前处于静止状态还是非静止状态，在静止状态下还可以从摄像装置采集的图片中识别出用户当前是否能够对终端进行操作；在非静止状态的情况下，直接确定用户当前无法对终端进行操作。

需要说明的是，终端可以根据加速度传感器和震动传感器确定出终端的移动速度、移动范围和震动幅度，从而确定用户当前是否处于静止状态。

示例性的，当终端的移动速度大于或等于预设静止速度时，可以确定终端处于静止状态，否则，确定终端处于非静止状态。可以理解的是，在终端的移动速度小于预设静止速度时，用户在缓缓移动，如此，用户仍然可以操作终端。

在本申请的一些实施例中，终端可以直接从摄像装置采集的图片中识别出用户当前是否能够对终端进行操作。

在本申请的一些实施例中，在确定终端处于静止状态的情况下，还可以进一步检测用户当前是否正在使用肢体，若用户正在使用肢体，则可以确定用户操作终端存在障碍，即用户当前无法操作终端。

示例性的，用户正在跟着终端上显示的运动视频进行运动时，则终端可以从摄像装置采集的图片中识别出用户的肢体正在移动，如此，终端可以确定用户操作终端存在障碍。

在本申请的一些实施例中，在确定终端处于非静止状态的情况下，如果检测到用户的视线直视显示屏，则确定用户当前正在使用终端，可以对终端进行操作，查看信息内容。

在本申请实施例中，终端在检测出当前状态后，可以判定当前状态是否表征处于待辅助情景，如果确定当前状态表征处于待辅助情景时，则利用辅助提示方式提示显示内容。其中，待辅助情景表征用户操作终端存在障碍的场景。

在本申请的一些实施例中，不同的待辅助情景可以对应不同的辅助提示方式。进而使终端可以对当前状态采用最佳辅助提示方式提示显示内容。

需要说明的是，由于待辅助情景为用户操作终端存在障碍的情景，因此，辅助提示方式可以为语音播报，从而使用户可以直接听到显示内容；在用户视线注视显示屏时，辅助提示方式可以为信息突出显示。

在本申请实施例中，信息突出显示可以包括：字体放大、颜色为预设的醒目颜色、字体颜色闪烁等等，对此，可以根据需要设置，本申请实施例不作限制。

在一些实施例中，预设的醒目颜色可以为当前界面颜色的对比色。

示例性的，用户正在驾驶的情况下，终端可以采用语音播报的方式提示信息内容；用户在运动，且终端与耳机连接的状态下，终端可以采用语音播报的方式提示信息内容；用户在运动，且视线为直视终端显示屏时，终端可以放大字体提示显示内容。

可以理解的是，在终端获取预设通知消息的信息内容后，结合场景的当前状态来确定对应的辅助提示方式，可以使用户获得当前状态下的最佳提示方式，提高了提示预设通知消息的智能性。

在本申请的一些实施例中，S102中基于控件结构，获取提示信息的显示内容之前，如图3所示，该方法可以包括：S201-S202。

S201、解析当前界面，得到第一控件结构，以及获取解析的历史界面的第二控件结构；第一控件结构和第二控件结构中各自包含有容器类型节点，容器类型节点下包含有用于展示的叶子节点。

在本申请实施例中，终端可以解析显示界面，得到对应的控件结构。这里，终端可以实时解析当前界面；也可以按照预设时间间隔解析当前界面，对此，本申请实施例不做限制。

在本申请实施例中，终端可以将当前解析出的控件结构作为第一控件结构，将上一次解析出的控件结构作为第二控件结构；也就是说，第一控件结构为当前界面对应的控件结构，第二控件结构为历史界面对应的控件结构。

在本申请实施例中，第一控件结构实施为控件树结构时，包含用于显示的叶子节点；第二控件结构实施为控件树结构时也包含用于显示的叶子节点。其中，根节点包含有容器类型节点，容器类型节点下包含叶子节点；而一个容器类型节点下包含的所有叶子节点均由该容器类型节点组织布局。

在本申请的一些实施例中，在当前界面的显示内容与历史界面的显示内容相同的情况下，第一控件结构和第二控件结构相同。

在本申请的一些实施例中，在当前界面的显示内容与历史界面的显示内容不同的情况下，第一控件结构和第二控件结构不同。

这里，控件结构相同，则控件树结构的容器节点相同，各容器节点下的叶子节点也相同。

S202、基于第一控件结构和第二控件结构的结构差异，确定产生的新叶子节点；新叶子节点为当前界面显示的提示信息对应的节点。

在本申请实施例中，终端在获取第一控件结构和第二控件结构后，可以确定出第一控件结构和第二控件结构的结构差异；这里，结构差异表示第一控件结构相比第二控件结构叶子节点的变化。

在本申请实施例中，结构差异包括：叶子节点增加和/或叶子节点减少。

在本申请的一些实施例中，S202中基于第一控件结构和第二控件结构的结构差异，确定产生的新叶子节点的方法，如图4所示，可以包括：S301-S302。

S301、对第一控件结构和第二控件结构进行结构对比，确定结构差异的叶子节点。

在本申请实施例中，终端可以将解析出的第一控件结构和第二控件结构进行对比，确定结构差异的叶子节点。需要说明的是，第一控件结构相比第二控件结构，可能不存在结构差异的叶子节点，可能增加了叶子节点，可能减少了叶子节点，还有可能既增加又减少了叶子节点。若第一控件结构相比第二控件结构，不存在结构差异的叶子节点，表示当前界面与历史界面的显示内容一致；若第一控件结构相比第二控件结构，存在增加的叶子节点，表示当前界面相比历史界面存在新增的显示内容；若第一控件结构相比第二控件结构，存在减少的叶子节点，表示当前界面相比历史界面存在减少的显示内容。

S302、将结构差异的叶子节点中第一控件结构未出现过的叶子节点，确定为新叶子节点。

在本申请实施例中，终端可以将增加的叶子节点确定为新叶子节点，如此，新叶子节点的显示内容即为当前界面相比历史界面所增加的显示内容，增加的显示内容中可能包括预设通知消息。

可以理解的是，通过解析的控件结构中结构差异的叶子节点，即使当前界面新增的显示内容的显示时间短，终端仍然可以准确的获取新增的显示内容。

S203、获取新叶子节点对应的节点信息。

S204、基于节点信息判定提示信息为预设消息通知；提示信息的显示内容包含于新叶子节点的节点信息中。

在本申请实施例中，终端确定出新叶子节点后，可以获取该新叶子节点的节点信息；如此，终端可以从新叶子节点的节点信息中判断出，该新叶子节点对应的提示信息是否为预设通知消息。

在本申请的一些实施例中，节点信息包括：信息主题、显示内容和显示位置信息中的至少一种；S204中，基于节点信息判定提示信息为预设消息通知，可以包括以下至少一种：若显示位置信息满足消息通知显示位置，则判定提示信息为预设消息通知；若显示主题符合实时通信消息的主题，则判定提示信息为预设消息通知；若识别出显示内容为非应用推广宣传信息，则判定提示信息为预设消息通知。

在本申请实施例中，终端可以根据信息主题、显示内容和显示位置中的至少一个判定提示信息是否为预设通知消息。

在本申请的一些实施例中，节点信息包括显示位置；终端可以根据显示位置判定提示信息是否为预设通知消息。

示例性的，预设通知消息通常在显示屏幕顶部进行弹窗显示；如此，终端在获取节点信息中的显示位置后，在确定显示位置为显示屏幕顶部和/或显示宽度与显示屏幕宽度相同的情况下，确定该叶子节点对应的提示信息为预设通知消息。

在本申请的一些实施例中，节点信息包括显示主题，这里，显示主题可以包括：实时通信信息、图标以及应用程序的通知消息等等，对此本申请实施例不作限制。如此，终端可以根据显示主题判定提示信息是否为预设通知消息。

示例性的，预设通知消息可以为实时通信信息，如此，终端在获取节点信息的显示主题后，在确定叶子节点的显示主题为实时通信信息的情况下，确定该叶子节点对应的提示信息为预设通知消息。

在本申请的一些实施例中，节点信息包括显示内容；终端可以根据显示内容判定提示信息是否为预设通知消息。

示例性的，预设通知消息可以为非应用推广宣传信息，示例性的，应用推广宣传消息可以为品牌方发送的广告信息；如此，终端可以从显示内容中筛除这样的信息，将非应用推广宣传信息确定为预设通知消息。

在本申请实施例中，终端可以对信息内容进行关键字过滤，将过滤得到的提示信息作为预设通知消息；也就是说，终端可以在提示信息中将包括关键字的重要信息作为预设通知消息，及时提示给用户，提高了信息提示的智能性。

在本申请的一些实施例中，节点信息包括显示位置、显示主题和显示内容；终端可以根据显示位置、显示主题和显示内容一起判定提示信息是否为预设通知消息。

示例性的，新叶子节点包括叶子节点1、叶子节点2和叶子节点3，其中，叶子节点1、叶子节点2和叶子节点3显示位置均在显示屏幕顶部；叶子节点1的节点信息包括：图标、图标图片、图标位置和图标尺寸，叶子节点2的节点信息包括：实时通知信息、健康监控和信息内容“3521步，82千卡”，叶子节点3的节点信息包括：实时通知消息、发送方号码段和信息内容“Y年M月D日11:00，请到会议室2参加技术讨论会议”；如此，终端可以从叶子节点1、叶子显示位置在显示屏幕顶部且显示主题为实时通知消息的叶子节点2和叶子节点3中，进行关键字过滤，这里关键字包括时间和地点，因此，终端可以将叶子节点3对应的提示信息确定为预设通知消息。

在本申请的一些实施例中，S101中显示当前界面，在当前界面显示提示信息的方法，如图5所示，可以包括：S401-S402。

S401、显示当前界面，显示当前界面的当前内容。

在本申请实施例中，终端的当前界面上显示有当前内容。示例性的，如图6a所示，当前界面的当前内容包括底部显示的4个图标，从左到右依次为：电话、短信、相机和浏览器；终端解析出当前界面的控件树结构如图6b所示，包括：一个根节点，该根节点包括容器节点1和容器节点2。其中，容器节点1包括4个叶子节点，这4个叶子节点从左到右依次表征电话、短信、相机和浏览器这4个图标。

S402、在当前界面的第一弹窗显示提示信息；第一弹窗未遮挡当前内容。

在本申请实施例中，终端的显示屏在当前界面上还显示了第一弹窗，第一弹窗显示了提示信息，且第一弹窗未遮挡当前内容。示例性的，基于图6a，如图7a所示，当前界面在显示屏幕顶部显示了弹窗消息：消息A，同时当前界面上的当前内容，即显示屏幕底部的4个图标从左到右仍然显示了电话、短信、相机和浏览器这4个图标。终端基于图7a解析出控件树结构如图7b所示，相比图6b中的控件树结构，容器节点1上挂载的4个叶子节点没有改变，容器节点2挂载了新的叶子节点，新的叶子节点表征消息A。

可以理解的是，终端在确定出第一控件结构与第二控件结构相比仅存在新增叶子节点，且原叶子节点没有变化的情况下，可以直接在当前界面的基础上对新增叶子节点对应的提示信息进行提示，提高了显示效率。

在本申请的一些实施例中，S101中显示当前界面，在当前界面显示提示信息，可以包括：S501-S502。

S501、显示当前界面，显示当前界面的当前内容。

在本申请实施例中，终端的当前界面上显示有当前内容。以控件树结构为例，如图8a所示，当前界面的当前内容包括屏幕底部显示的4个图标和屏幕顶部显示的2个图标：图标A和图标B，4个图标从左到右依次为：电话、短信、相机和浏览器；终端解析出图8a中当前界面的控件树结构如图8b所示，包括：一个根节点，该根节点包括容器节点1和容器节点2。其中，容器节点1包括4个叶子节点，这4个叶子节点从左到右依次表征电话、短信、相机和浏览器这4个图标，容器节点2包括2个叶子节点，从左到右依次表征图标A和图标B。

S502、在当前界面的第二弹窗显示提示信息；第二弹窗遮挡了至少部分当前内容。

在本申请实施例中，终端的显示屏在当前界面上还显示了第二弹窗，第二弹窗显示了提示信息，且第二弹窗遮挡住了至少部分当前内容。

示例性的，如图7a所示，当前界面在显示屏幕顶部显示了弹窗消息：消息A，同时当前界面上的当前内容中，显示屏幕底部的4个图标从左到右仍然显示了电话、短信、相机和浏览器这4个图标；而显示屏幕顶部的图标A和图标B被第二弹窗显示的消息A遮挡。相比图7b中的控件树结构，图8b中容器节点1上挂载的4个叶子节点没有改变，容器节点2挂载了新叶子节点，新叶子节点表征消息A；并且，容器节点2原来挂载的2个叶子节点消失。

可以理解的是，终端在确定出第一控件树结构与第二控件树相比，存在新增叶子节点的同时也存在减少的叶子节点的情况下，可以直接在当前界面的基础上对新增叶子节点对应的提示信息进行提示，同时不再显示减少的叶子节点对应的显示内容，从而提高了显示效率。

在本申请的一些实施例中，提示信息可以包括多个通知消息；如此，S101中显示当前界面，在当前界面显示提示信息的方法，还可以包括：S601-S602。

S601、作用于当前屏幕的查看消息操作，显示表征通知消息项的当前界面。

在本申请实施例中，终端显示的提示信息可能内容较多，导致弹窗内信息显示不完整，或者，终端显示连续两次提示信息的时间间隔太短，第一次显示的提示信息用户来不及查看，则终端可以通过接收用户作用于当前屏幕的查看消息操作，显示表征通知消息项的当前界面；如此，用户可以通过表征通知消息项的当前界面查看到所有未查看的提示信息；表征通知消息项的当前界面可能不存在未查看的提示信息，也可能存在至少一个未查看的提示信息。

在本申请的一些实施例中，至少一个未查看的提示信息可以为实时更新的通知消息，如此，表征通知消息项的当前页面至少可以显示该实时更新的通知消息，例如，步数监控等。

在本申请实施例中，作用于当前屏幕的查看消息操作可以为点击提示信息，或按住提示信息后向屏幕底部下拉，还可以从屏幕顶部下拉等等，对此，可以根据需要设置，本申请实施例不作限制。

S602、在当前界面显示多个通知消息。

在本申请实施例中，终端显示表征通知消息项的当前界面后，所有未查看的提示信息可以按照时间顺序由近及远排列，也可以按照时间顺序由远及近排列，还可以按照提示信息重要等级从高到低排列，或者按照提示信息重要等级从低到高排列；其中，排列方式可以从屏幕顶部到屏幕底部，也可以从屏幕底部到屏幕顶部，对此，本申请实施例不作限制。

需要说明的，提示信息重要等级可以为预先设置好的，也可以在使用过程中接收调整操作进行调整。例如，终端监控预警的等级高于实时通信信息。

可以理解的是，终端通过作用于当前屏幕的查看消息操作，显示表征通知消息项的当前界面，从而方便用户获取所有已更新的通知或者未及时查看的通知，避免用户错过通知消息，提高用户查看提示信息的准确率。

在本申请的一些实施例中，S103中检测到场景的当前状态，包括以下至少一种：检测用户的运动数据，若运动数据表征处于运动状态，则得到表征处于待辅助情景的当前状态；检测场景的图像信息，若根据图像信息识别出场景为非操作情形，则到表征处于待辅助情景的当前状态。

在本申请实施例中，运动数据包括以下至少一种：移动速度、步幅频率以及震动幅度。如此，终端可以根据运动数据，在确定用户处于运动状态的情况下，确定终端处于待辅助情景的当前状态。

在本申请实施例中，终端可以在以下至少一种情况下，确定用户处于运动状态：移动速度大于预设速度；步幅频率大于预设频率；震动幅度大于预设幅度。其中，预设速度、预设频率和预设幅度可以根据需要设置，对此，本申请实施例不作限制。

在本申请的一些实施例中，终端可以通过摄像装置采集场景的图像，通过检测该图像的图像信息，识别当前是否处于非操作情形；若确定当前处于非操作情形，则确定当前状态处于待辅助情景。

示例性的，终端在采集的图像中如果检测到用户肢体动作以及厨具，则可以确定当前场景为烹饪情形，即非操作情形。

在本申请实施例中，摄像装置可以为终端自带的摄像装置，例如，终端为手机，手机的前置摄像头和/或后置摄像头，也可以是终端通过网络连接的外置摄像头，对此，本申请实施例不作限制。

在本申请实施例中，非操作情形为用户肢体被占用的情形。在一些实施例中，非操作情形包括以下至少一种：驾驶情形、运动情形、烹饪情形和使用肢体的其他劳动情形。对于非操作情形的设置，本申请实施例不作限制。

可以理解的是，终端可以在用户不便操作终端的情况下，如运动状态或非操作情形下，确认当前状态为待辅助情景，从而选择辅助提示方式来提示预设通知消息的信息内容。

在本申请的一些实施例中，在S103中在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示显示内容之前，该方法还包括以下至少一种：采集设备的姿态信息、用户视线信息或用户图像信息，若基于设备的姿态信息、用户视线信息或用户图像信息，确定出设备正在被注视，则确定信息突出显示的辅助提示方式；采集设备的语音接口信息，若语音接口信息被接入，则确定语音播报的辅助提示方式；采集屏幕运行状态，若屏幕运行状态处于非显示状态，则确定语音播报的辅助提示方式；若屏幕运行状态处于显示状态，则确定语音播报和/或信息突出显示的辅助提示方式。

在本申请实施例中，在当前状态表征处于待辅助情景时，利用辅助提示方式提示显示内容之前，终端还需要确定合适的辅助提示方式来提示显示内容。

在本申请的一些实施例中，终端可以采集终端自身的姿态信息和用户视线信息，根据终端的姿态信息和用户的实现信息，在确定出终端正在被用户注视的情况下，确定辅助提示方式为信息突出显示的方式。

示例性的，在终端的姿态信息为正面向上水平放置，且用户的视线自上向下垂直于终端正面的情况下，终端可以确定终端的显示屏幕正在被用户注视。

在本申请的一些实施例中，终端可以采集设备的语音接口信息，若语音接口信息表征语音接口接入语音工具，则确定辅助提示方式为语音播报方式。

这里，语音接口可以为硬件接口，也可以为蓝牙接口；示例性的，终端可以在耳机插入耳机孔，或蓝牙连接有蓝牙耳机的情况下，确定辅助提示方式为语音播报方式。

在本申请的一些实施例中，终端可以采集屏幕运行状态，根据屏幕运行状态确定辅助提示方式。

这里，屏幕运行状态包括非显示状态和显示状态。在非显示状态，如锁屏状态下，确定辅助提示方式为语音播报方式；在显示状态下，终端可以采用语音播报方式，也可以采用信息突出显示方式。

在本申请的一些实施例中，终端可以根据屏幕运行状态和语音接口信息确定辅助提示方式。例如，终端可以在屏幕运行状态为显示状态，且语音接口被接入，则确定辅助提示方式为语音播报方式。

可以理解的是，对于小屏幕终端，其对文字显示的方式不太友好，不利于用户查看预设通知消息，如此，通过语音播报的方式，可以提高用户获取预设通知消息的效率和准确性。

在本申请的一些实施例中，终端中设置有待辅助情景与辅助提示方式的对应关系，如此，终端在确定当前状态所表征的待辅助情景后，可以通过该对应关系，确定出对应的辅助提示方式。

可以理解的是，终端可以在待辅助情景下，确定最佳辅助提示方式，从而提高了信息辅助处理的智能性。

图9为本申请实施例提供一种可选的信息辅助处理方法的流程图，如图9所示，该方法可以包括：

S01、启动信息辅助处理应用程序。

在本申请实施例中，信息辅助应用程序可以为终端自带的设置，也可以为一个可下载的应用程序，通过点击该应用程序的应用图标来打开信息辅助应用。终端只有在启动了信息辅助应用程序的情况下，才会采用信息辅助处理的方法显示提示信息。

S02、解析当前界面的控件树结构；

S03、根据控件树结构确定当前界面显示的提示信息是否为预设通知消息；若是，则继续执行S04；否则，返回执行S02；

在本申请实施例中，终端可以通过对比当前次解析得到的控件树结构和前次解析得到的控件树结构，得到新叶子节点；在新叶子节点表征预设通知消息的情况下，继续执行下一步，从而使终端能够根据场景的当前状态确定最佳辅助提示方式来显示预设通知消息。在新叶子节点表征不是预设通知消息的情况下，则继续解析控件树结构进行当前次和前次的对比，也就是说，终端不断的进行控件树结构对比，在得到新叶子节点，且新叶子节点为预设通知消息的情况下继续执行下一步。

S04、提取预设通知消息的显示内容；

S05、检测场景的当前状态；

S06、在当前状态表征处于待辅助情景的情况下，确定辅助提示方式；

S07、利用确定的辅助提示方式提示预设通知消息的显示内容；

S08、判断信息辅助应用程序是否终止运行；若是，则执行S09；否则，返回继续执行S02；

S09、结束信息辅助处理。

需要说明的是，在本申请实施例中，终端需要检测信息辅助处理程序的运行状态，如果信息辅助处理程序已经终止运行，则终端不再采用信息辅助处理方法。

可以理解的是，终端通过信息辅助程序的启动和终止来控制信息辅助处理方法的应用，如此，终端仅在需要进行信息辅助处理的情况下才执行信息辅助处理方法，提高了信息辅助处理的灵活性。

基于本申请实施例的信息辅助处理方法，本申请实施例提供了一种可选的信息辅助处理装置20，该信息辅助处理装置20包括：

显示模块2001，用于显示当前界面，在所述当前界面显示提示信息；

获取模块2002，用于在通过解析当前界面的控件结构确定所述提示信息为预设消息通知时，基于所述控件结构，获取所述提示信息的显示内容；所述预设消息通知表征实时性的通知消息；所述控件结构用于表征显示屏幕上的所述显示内容的布局；

提示模块2003，用于在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容；所述待辅助情景表征用户操作障碍的场景。

在一些实施例中，在基于所述控件结构，获取所述提示信息的显示内容之前，所述获取模块2002，还用于解析当前次的当前界面，得到第一控件结构，以及获取解析的前次的历史界面的第二控件结构；所述第一控件结构和所述第二控件结构中各自包含有容器类型节点，容器类型节点下包含有用于展示的叶子节点；基于所述第一控件结构和所述第二控件结构的结构差异，确定产生的新叶子节点；所述新叶子节点为所述当前界面显示的所述提示信息对应的节点；获取所述新叶子节点对应的节点信息；基于所述节点信息判定所述提示信息为所述预设消息通知；所述提示信息的显示内容包含于所述新叶子节点的节点信息中。

在一些实施例中，所述获取模块2002，还用于对所述第一控件结构和所述第二控件结构进行结构对比，确定结构差异的叶子节点；将所述结构差异的叶子节点中所述第一控件结构未出现过的叶子节点，确定为所述新叶子节点。

在一些实施例中，所述节点信息包括：显示主题、显示内容和显示位置信息中的至少一种；所述获取模块2002，还用于若所述显示位置信息满足消息通知显示位置，则判定所述提示信息为所述预设消息通知；若所述显示主题符合实时通信消息的主题，则判定所述提示信息为所述预设消息通知；若识别出所述显示内容为非应用推广宣传信息，则判定所述提示信息为所述预设消息通知。

在一些实施例中，所述显示模块2001，还用于显示所述当前界面，显示所述当前界面的当前内容；在所述当前界面的第一弹窗显示所述提示信息；所述第一弹窗未遮挡所述当前内容。

在一些实施例中，所述显示模块2001，还用于显示所述当前界面，显示所述当前界面的当前内容；在所述当前界面的第二弹窗显示所述提示信息；所述第二弹窗遮挡了至少部分所述当前内容。

在一些实施例中，所述提示信息包括多个通知消息；所述显示模块2001，还用于作用于当前屏幕的查看消息操作，显示表征通知消息项的所述当前界面；在所述当前界面显示所述多个通知消息。

在一些实施例中，所述检测到场景的当前状态，包括以下至少一种：检测用户的运动数据，若所述运动数据表征处于运动状态，则得到表征处于待辅助情景的所述当前状态；检测场景的图像信息，若根据所述图像信息识别出场景为非操作情形，则到表征处于待辅助情景的所述当前状态。

在一些实施例中，所述在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容之前，所述提示模块2003，还用于包括以下至少一种：采集设备的姿态信息、用户视线信息或用户图像信息，若基于所述设备的姿态信息、所述用户视线信息或所述用户图像信息，确定出设备正在被注视，则确定信息突出显示的辅助提示方式；采集设备的语音接口信息，若所述语音接口信息被接入，则确定语音播报的辅助提示方式；采集屏幕运行状态，若所述屏幕运行状态处于非显示状态，则确定语音播报的辅助提示方式；若所述屏幕运行状态处于显示状态，则确定语音播报和/或信息突出显示的辅助提示方式。

在一些实施例中，所述提示模块2003，还用于从所述控件结构中的新叶子节点的节点信息中，提取所述显示内容。

在一些实施例中，所述图像信息出场景为非操作情形包括以下至少一种：驾驶情形、运动情形、烹饪情形和使用肢体的其他劳动情形。

图11为本申请实施例提供的一种可选的信息辅助处理设备的结构组成示意图，如图11所示，信息辅助处理设备21包括存储器2107、处理器2108及存储在存储器2107上并可在处理器2108上运行的计算机程序；其中，处理器2108用于运行所述计算机程序时，执行如前述实施例中的信息辅助处理方法。

可以理解，信息辅助处理设备2101还包括总线系统2109；信息辅助处理设备21中的各个组件通过总线系统2109耦合在一起。可理解，总线系统2109用于实现这些组件之间的连接通信。总线系统2109除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。

本实施例中的存储器可以包括易失性存储器和/或非易失性存储器，非易失性存储器可以是只读存储器(Read Only Memory，ROM)、可编程只读存储器(ProgrammableRead-Only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read-OnlyMemory，EPROM)、电可擦除可编程只读存储器(Electrically Erasable ProgrammableRead-Only Memory，EEPROM)、磁性随机存取存储器(Ferromagnetic Random AccessMemory，FRAM)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CompactDisc Read-Only Memory，CD-ROM)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RandomAccess Memory，SRAM)、同步静态随机存取存储器(Synchronous Static Random AccessMemory，SSRAM)、动态随机存取存储器(Dynamic Random Access Memory，DRAM)、同步动态随机存取存储器(Synchronous Dynamic Random Access Memory，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data Rate Synchronous Dynamic Random AccessMemory，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced Synchronous DynamicRandom Access Memory，ESDRAM)、同步连接动态随机存取存储器(SyncLink DynamicRandom Access Memory，SLDRAM)、直接内存总线随机存取存储器(Direct Rambus RandomAccess Memory，DRRAM)。本申请实施例描述的存储器旨在包括但不限于这些和任意其它适合类型的存储器。

上述本申请实施例揭示的方法可以应用于处理器中，或者由处理器实现。处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、DSP，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本申请实施例所公开的方法的步骤，可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成信息辅助处理方法的步骤。

本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，在计算机可读存储介质位于网络设备时，该计算机程序被处理器执行时实现本申请实施例信息辅助处理方法中的步骤。

在本申请所提供的几个实施例中，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述模块的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个模块或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或模块的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

以上所述，仅为本申请的实施例而已，并非用于限定本申请的保护范围。凡在本申请的精神和范围之内所作的任何修改、等同替换和改进等，均包含在本申请的保护范围之内。

Claims (14)

1.一种信息辅助处理方法，其特征在于，所述方法包括：

显示当前界面，在所述当前界面显示提示信息；

在通过解析当前界面的控件结构，确定所述提示信息为预设消息通知时，基于所述控件结构，获取所述提示信息的显示内容；所述预设消息通知表征实时性的通知消息；所述控件结构用于表征显示屏幕上的所述显示内容的布局；

在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容；所述待辅助情景表征用户操作障碍的场景。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：

解析当前界面，得到第一控件结构，以及获取解析的历史界面的第二控件结构；所述第一控件结构和所述第二控件结构中各自包含有容器类型节点，容器类型节点下包含有用于展示的叶子节点；

基于所述第一控件结构和所述第二控件结构的结构差异，确定产生的新叶子节点；所述新叶子节点为所述当前界面显示的所述提示信息对应的节点；

获取所述新叶子节点对应的节点信息；

基于所述节点信息判定所述提示信息为所述预设消息通知；所述提示信息的显示内容包含于所述新叶子节点的节点信息中。

3.根据权利要求2所述的方法，其特征在于，所述基于所述第一控件结构和所述第二控件结构的结构差异，确定产生的新叶子节点，包括：

对所述第一控件结构和所述第二控件结构进行结构对比，确定结构差异的叶子节点；

将所述结构差异的叶子节点中所述第二控件结构未出现过的叶子节点，确定为所述新叶子节点。

4.根据权利要求2或3所述的方法，其特征在于，所述节点信息包括：显示主题、显示内容和显示位置信息中的至少一种；

所述基于所述节点信息判定所述提示信息为所述预设消息通知，包括以下至少一种：

若所述显示位置信息满足消息通知显示位置，则判定所述提示信息为所述预设消息通知；

若所述显示主题符合实时通信消息的主题，则判定所述提示信息为所述预设消息通知；

若识别出所述显示内容为非应用推广宣传信息，则判定所述提示信息为所述预设消息通知。

5.根据权利要求1至4任一项所述的方法，其特征在于，所述显示当前界面，在所述当前界面显示提示信息，包括：

显示所述当前界面，显示所述当前界面的当前内容；

在所述当前界面的第一弹窗显示所述提示信息；所述第一弹窗未遮挡所述当前内容。

6.根据权利要求1至4任一项所述的方法，其特征在于，所述显示当前界面，在所述当前界面显示提示信息，包括：

显示所述当前界面，显示所述当前界面的当前内容；

在所述当前界面的第二弹窗显示所述提示信息；所述第二弹窗遮挡了至少部分所述当前内容。

7.根据权利要求1至4任一项所述的方法，其特征在于，所述提示信息包括多个通知消息；

所述显示当前界面，在所述当前界面显示提示信息，包括：

作用于当前屏幕的查看消息操作，显示表征通知消息项的所述当前界面；

在所述当前界面显示所述多个通知消息。

8.根据权利要求1所述的方法，其特征在于，所述检测到场景的当前状态，包括以下至少一种：

检测用户的运动数据，若所述运动数据表征处于运动状态，则得到表征处于待辅助情景的所述当前状态；

检测场景的图像信息，若根据所述图像信息识别出场景为非操作情形，则到表征处于待辅助情景的所述当前状态。

9.根据权利要求1或8所述的方法，其特征在于，所述在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容之前，所述方法还包括以下至少一种：

采集设备的姿态信息、用户视线信息或用户图像信息，若基于所述设备的姿态信息、所述用户视线信息或所述用户图像信息，确定出设备正在被注视，则确定信息突出显示的辅助提示方式；

采集设备的语音接口信息，若所述语音接口信息被接入，则确定语音播报的辅助提示方式；

采集屏幕运行状态，若所述屏幕运行状态处于非显示状态，则确定语音播报的辅助提示方式；若所述屏幕运行状态处于显示状态，则确定语音播报和/或信息突出显示的辅助提示方式。

10.根据权利要求2所述的方法，其特征在于，所述基于所述控件结构，获取所述提示信息的显示内容，包括：

从所述控件结构中的新叶子节点的节点信息中，提取所述显示内容。

11.根据权利要求8所述的方法，其特征在于，

所述非操作情形包括以下至少一种：驾驶情形、运动情形、烹饪情形和使用肢体的其他劳动情形。

12.一种信息辅助处理装置，其特征在于，所述装置包括：

显示模块，用于显示当前界面，在所述当前界面显示提示信息；

获取模块，用于在通过解析当前界面的控件结构确定所述提示信息为预设消息通知时，基于所述控件结构，获取所述提示信息的显示内容；所述预设消息通知表征实时性的通知消息；所述控件结构用于表征显示屏幕上的所述显示内容的布局；

提示模块，用于在检测到场景的当前状态表征处于待辅助情景时，利用辅助提示方式提示所述显示内容；所述待辅助情景表征用户操作障碍的场景。

13.一种信息辅助处理设备，其特征在于，所述设备包括存储器和处理器，所述存储器存储有可在处理器上运行的计算机程序，所述处理器执行所述程序时实现权利要求1-11任一项所述方法。

14.一种计算机可读存储介质，其特征在于，其上存储有可执行指令，用于被处理器执行时，实现权利要求1-11任一项所述的方法。

Images