CN114564265A - 有屏智能设备的交互方法、装置以及电子设备 - Google Patents

Abstract

本公开提供了一种有屏智能设备的交互方法、装置以及电子设备，涉及人工智能技术领域，尤其涉及自然语言处理、计算机视觉、语音技术领域，具体实现方案为：接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，提高交互效率。

Description

有屏智能设备的交互方法、装置以及电子设备

技术领域

本公开涉及人工智能技术领域，尤其涉及自然语言处理、计算机视觉、语音技术领域，尤其涉及有屏智能设备的交互方法、装置以及电子设备。

背景技术

目前，有屏智能设备的交互方法中，有屏智能设备的页面较复杂，设置有较多的控件，且存在控件复用的情况。当需要在有屏智能设备上应用视觉辅助功能时，需要对复用的控件进行不同的适配，适配量大，且交互效率差。

发明内容

本公开提供了一种有屏智能设备的交互方法、装置以及电子设备。

根据本公开的一方面，提供了一种有屏智能设备的交互方法，包括：接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，所述视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；所述简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在所述当前显示页面为非简洁模式下的页面时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能。

根据本公开的另一方面，提供了一种有屏智能设备的交互装置，包括：接收模块，用于接收视觉辅助功能开启指令；第一开启模块，用于在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，所述视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；所述简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；第二开启模块，用于在所述当前显示页面为非简洁模式下的页面时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能。

根据本公开的又一方面，提供了一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行本公开上述提出的有屏智能设备的交互方法。

根据本公开的再一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，所述计算机指令用于使所述计算机执行本公开上述提出的有屏智能设备的交互方法。

根据本公开的再一方面，提供了一种计算机程序产品，包括计算机程序，所述计算机程序在被处理器执行时实现本公开上述提出的有屏智能设备的交互方法的步骤。

应当理解，本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征，也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。

附图说明

附图用于更好地理解本方案，不构成对本公开的限定。其中：

图1是根据本公开第一实施例的示意图；

图2是根据本公开第二实施例的示意图；

图3是根据本公开第三实施例的示意图；

图4是根据本公开第四实施例的示意图；

图5是用来实现本公开实施例的电子设备的框图。

具体实施方式

以下结合附图对本公开的示范性实施例做出说明，其中包括本公开实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本公开的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

目前，有屏智能设备的交互方法中，有屏智能设备的页面较复杂，设置有较多的控件，且存在控件复用的情况。当需要在有屏智能设备上应用视觉辅助功能时，需要对复用的控件进行不同的适配，适配量大，且交互效率差。

针对上述问题，本公开提出一种有屏智能设备的交互方法、装置以及电子设备。

图1是根据本公开第一实施例的示意图，需要说明的是，本公开实施例的有屏智能设备的交互方法可应用于有屏智能设备的交互装置，该装置可被配置于电子设备中，以使该电子设备可以执行有屏智能设备的交互功能。

其中，电子设备可以为任一具有计算能力的设备，例如可以为个人电脑(PersonalComputer，简称PC)、移动终端、服务器等，移动终端例如可以为车载设备、手机、平板电脑、个人数字助理、穿戴式设备等具有各种操作系统、触摸屏和/或显示屏的硬件设备。其中，执行有屏智能设备的交互功能的电子设备例如可以为有屏智能设备。有屏智能设备例如可以为有屏智能音箱，有屏智能冰箱、有屏智能手机等，可以根据实际需要进行设置。

如图1所示，该有屏智能设备的交互方法可以包括如下步骤：

步骤101，接收视觉辅助功能开启指令。

在本公开实施例中，有屏智能设备的交互装置执行步骤101的过程例如可以为，检测语音指令，并确定语音指令对应的文本内容；在文本内容为视觉辅助功能开启指令相关的内容时，确定接收到视觉辅助功能开启指令；在文本内容不为视觉辅助功能开启指令相关的内容时，确定未接收到视觉辅助功能开启指令。

在本公开实施例中，通过检测语音指令，基于语音指令对应的文本内容，确定是否接收到视觉辅助功能开启指令，方便交互对象通过语音方式与有屏智能设备交互，并开启视觉辅助功能，提高交互对象与有屏智能设备的交互效率。

在本公开实施例中，有屏智能设备的交互装置确定文本内容是否为视觉辅助功能开启指令相关的内容的过程例如可以为，对文本内容进行解析，获取文本内容中的动作词语以及功能名称词语；在预设的动作词语库中包括动作词语，且预设的功能名称库中包括功能名称词语时，确定文本内容为视觉辅助功能开启指令相关的内容；在动作词语库中未包括动作词语，或者，功能名称库中未包括功能名称词语时，确定文本内容不为视觉辅助功能开启指令相关的内容。

其中，预设的动作词语库可以包括以下动作词语中的至少一种：“打开”、“启用”和“开启”。预设的功能名称库可以包括以下功能名称词语中的至少一种：“读屏”、“读屏软件”、“无障碍”、“无障碍功能”、“视觉辅助功能”、“屏幕阅读器”和“屏幕阅读软件”。视觉辅助功能开启指令例如可以为，“打开读屏”、“启用无障碍功能”或“开启视觉辅助功能”等。

在本公开实施例中，通过对文本内容进行动作词语解析以及功能名称词语解析，并结合动作词语库和功能名称库进行比对，判断解析得到的动作词语是否为动作词语库中的词语，判断解析得到的功能名称词语是否为功能名称库中的词语，基于判断结果确定文本内容是否为视觉辅助功能开启指令相关的内容，从而能够准确基于语音指令开启视觉辅助功能，避免视觉辅助功能的误开启，进一步提高交互对象与有屏智能设备的交互效率。

在本公开实施例中，在步骤101之后，有屏智能设备的交互装置可以通过NLP(Natural Language Processing，自然语言处理)技术核实语音指令对应的文本内容是否为视觉辅助功能开启指令相关的内容；若是，向有屏智能设备的交互装置提供确认指令，以便有屏智能设备的交互装置根据确定结果确定是否接收到视觉辅助功能开启指令；若否，向有屏智能设备的交互装置提供校正指令，以指示有屏智能设备的交互装置对确定结果进行校正，根据校正后的确定结果确定是否接收到视觉辅助功能开启指令。

在本公开实施例中，确认指令、校正指令例如可以为语音指令。其中，通过核实文本内容并校正错误的确定结果，进一步提高语音指令识别的准确度，进一步提高交互对象与有屏智能设备的交互效率。

步骤102，在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值。

在本公开实施例中，页面模式有两种，分别为简洁模式和非简洁模式。其中，简洁模式指的是控件较少，控件复用情况较少的页面模式；非简洁模式指的是控件较多，控件复用情况较多的页面模式。其中，控件例如，图像处理控件、文档处理控件、用户界面控件等。

其中，简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值。非简洁模式的页面中，控件数量大于第一数量阈值，或者，控件复用次数大于第二数量阈值。也就是说，非简洁模式的页面中，部分页面的控件数量较多，部分页面的控件复用次数较多；而简洁模式的页面，控件数量较少，且控件复用次数较少，从而在有屏智能设备上应用视觉辅助功能时，对控件的适配量较少，交互效率好。

在本公开实施例中，在简洁模式下开启视觉辅助功能，在不减少主要功能和内容的情况下，有屏智能设备的交互对象更容易理解有屏智能设备上页面的内容，降低了交互对象借助视觉辅助功能使用页面中各类资源的难度。

在本公开实施例中，在开启视觉辅助功能后，有屏智能设备的交互装置可以语音播报第一提示信息，以提示视觉辅助功能已开启。其中，第一提示信息例如可以为，“已打开读屏。”，语音播报指的是使用TTS(Text To Speech，从文本到语音)告知交互对象。其中，第一提示信息的语音播放，方便交互对象及时了解视觉辅助功能已开启，并进行后续交互，进一步提高交互对象与有屏智能设备的交互效率。

在本公开实施例中，在视觉辅助功能开启后，有屏智能设备的交互装置可以检测当前显示页面上的被选中位置；语音播报被选中位置的显示内容，方便交互对象了解当前显示页面上被选中位置的显示内容，进一步提高交互效率。

步骤103，在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能。

在本公开实施例中，简洁模式下与当前显示页面相关的页面，即简洁模式下包括当前显示页面中主要内容、主要控件的页面；或者，简洁模式下与当前显示页面相关的页面，与当前显示页面的内容相似度或控件相似度大于对应的相似度阈值。

在本公开实施例中，在将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能之后，有屏智能设备的交互装置可以语音播报第二提示信息，以提示切换至简洁模式下的页面，且视觉辅助功能已开启。其中，第二提示信息例如可以为，“打开读屏并为您切换至简洁模式”。其中，第二提示信息的语音播放，方便交互对象及时了解视觉辅助功能已开启，且切换至简洁模式下的页面，并进行后续交互，进一步提高交互对象与有屏智能设备的交互效率。

本公开实施例的有屏智能设备的交互方法，通过接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，提高交互效率。

如图2所示，图2是根据本公开第二实施例的示意图，在本公开实施例中，开启视觉辅助功能后，根据视觉辅助功能关闭指令，关闭视觉辅助功能，图2所示实施例可以包括以下步骤：

步骤201，接收视觉辅助功能开启指令。

步骤202，在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值。

步骤203，在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能。

步骤204，在开启视觉辅助功能后，在接收到简洁模式退出指令时，将简洁模式下的当前显示页面切换至非简洁模式下与当前显示页面相关的页面，且关闭视觉辅助功能。

在本公开实施例中，有屏智能设备的交互装置执行步骤204的过程例如可以为，在接收到简洁模式退出指令时，语音播报第三提示信息，以提示交互对象确认是否退出简洁模式；在接收到确认指令时，将简洁模式下的当前显示页面切换至非简洁模式下与当前显示页面相关的页面，且关闭视觉辅助功能。其中，第三提示信息的语音播放，方便交互对象及时确认是否退出简洁模式，避免误退出简洁模式的情况，进一步提高交互效率。

其中，第三提示信息例如可以为，“退出后将无法使用读屏，确认退出吗？”，若接收到交互对象的确认指令，则确定退出简洁模式，则将当前显示界面切换至非简洁模式下与当前显示页面相关的页面，并关闭视觉辅助功能。例如，当前显示页面可以为拨打电话的页面，确定退出简洁模式后，将当前显示界面切换到非简洁模式下拨打电话的相关页面。

在本公开实施例中，有屏智能设备的交互装置确定接收到简洁模式退出指令的过程例如可以为，检测语音指令，并确定语音指令对应的文本内容；对文本内容进行解析，获取文本内容中的动作词语以及功能名称词语；确定简洁模式退出指令相关的动作词语库和功能名称库；并根据文本内容中的动作词语查询退出指令相关的动作词语库，以及根据文本内容中的功能名称词语查询功能名称库，若均查询到，则确定接收到简洁模式退出指令。

其中，简洁模式退出指令相关的动作词语库可以包括以下动作词语中的至少一种：“退出”、“关闭”。简洁模式退出指令相关的功能名称库可以包括以下功能名称词语中的至少一种：“简洁”、“简洁模式”和“简单”。简洁模式退出指令例如可以为，“退出简洁模式”。

其中，在接收到简洁模式退出指令时，将简洁模式下的当前显示页面切换至非简洁模式下与当前显示页面相关的页面，且关闭视觉辅助功能，能够确保在视觉辅助功能开启的情况下，当前显示页面为简洁模式下的页面，避免视觉辅助功能开启但当前显示页面为非简洁模式下页面的情况，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，进一步提高交互效率。

在本公开实施例中，在当前显示页面为非简洁模式下的页面时，接收简洁模式开启指令；判断是否存在视觉辅助功能的历史开启记录；在存在视觉辅助功能的历史开启记录时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，且开启视觉辅助功能；在不存在视觉辅助功能的历史开启记录时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面。

其中，在存在视觉辅助功能的历史开启记录时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，且开启视觉辅助功能，避免交互对象再次通过语音指令开启视觉辅助功能，减少开启视觉辅助功能的交互，进一步提高交互对象与有屏智能设备的交互效率。

步骤205，在开启辅助功能后，在接收到视觉辅助功能关闭指令时，关闭视觉辅助功能。

在本公开实施例中，有屏智能设备的交互装置确定接收到视觉辅助功能关闭指令的过程例如可以为，检测语音指令，并确定语音指令对应的文本内容；对文本内容进行解析，获取文本内容中的动作词语以及功能名称词语；确定视觉辅助功能关闭指令相关的动作词语库和功能名称库；并根据文本内容中的动作词语查询关闭指令相关的动作词语库，以及根据文本内容中的功能名称词语查询功能名称库，若均查询到，则确定接收到视觉辅助功能关闭指令。

其中，视觉辅助功能关闭指令相关的动作词语库可以包括以下动作词语中的至少一种：“关闭”、“退出”。视觉辅助功能关闭指令相关的功能名称库可以包括以下功能名称词语中的至少一种：“读屏”、“读屏软件”、“无障碍”、“无障碍功能”、“视觉辅助功能”、“屏幕阅读器”和“屏幕阅读软件”。视觉辅助功能关闭指令例如可以为，“关闭读屏”、“退出无障碍功能”或“关闭视觉辅助功能”等。

在本公开实施例中，在接收到视觉辅助功能关闭指令后，有屏智能设备的交互装置可以通过NLP(Natural Language Processing，自然语言处理)技术核实语音指令对应的文本内容是否为视觉辅助功能关闭指令相关的内容；若是，向有屏智能设备的交互装置提供确认指令，以便交互装置确定是否接收到视觉辅助功能关闭指令；若否，向有屏智能设备的交互装置提供校正指令，以指示有屏智能设备的交互装置对确定结果进行校正，根据校正后的确定结果确定是否接收到视觉辅助功能关闭指令。

其中，需要说明的是，步骤201、步骤202、步骤203的详细内容，可以参考图1所示实施例中的步骤101、步骤102和步骤103，此处不再进行详细说明。

综上，通过接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能，在开启视觉辅助功能后，在接收到简洁模式退出指令时，将简洁模式下的当前显示页面切换至非简洁模式下与当前显示页面相关的页面，且关闭视觉辅助功能，在开启辅助功能后，在接收到视觉辅助功能关闭指令时，关闭视觉辅助功能，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，提高交互效率。

为了实现上述实施例，本公开还提出一种有屏智能设备的交互装置。

如图3所示，图3根据本公开第三实施例的示意图。该有屏智能设备的交互装置300包括：第一接收模块301、第一处理模块302和第二处理模块303。

其中，第一接收模块301，用于接收视觉辅助功能开启指令；第一处理模块302，用于在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，所述视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；所述简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；第二处理模块303，用于在所述当前显示页面为非简洁模式下的页面时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能。

作为本公开实施例的一种可能实现方式，所述第一接收模块301具体用于，检测语音指令，并确定所述语音指令对应的文本内容；在所述文本内容为视觉辅助功能开启指令相关的内容时，确定接收到视觉辅助功能开启指令；在所述文本内容不为视觉辅助功能开启指令相关的内容时，确定未接收到视觉辅助功能开启指令。

综上，通过接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，提高交互效率。

图4根据本公开第四实施例的示意图。结合图4，有屏智能设备的交互装置400可以包括：第一接收模块401、第一处理模块402、第二处理模块403、获取模块404、第一确定模块405和第二确定模块406。

其中，关于第一接收模块401、第一处理模块402、第二处理模块403的详细描述请参考图3所示实施例中第一接收模块301、第一处理模块302和第二处理模块303的说明，此处不在进行描述。

其中，所述获取模块404，用于对所述文本内容进行解析，获取所述文本内容中的动作词语以及功能名称词语；第一确定模块405，用于在预设的动作词语库中包括所述动作词语，且预设的功能名称库中包括所述功能名称词语时，确定所述文本内容为视觉辅助功能开启指令相关的内容；第二确定模块406，用于在所述动作词语库中未包括所述动作词语，或者，所述功能名称库中未包括所述功能名称词语时，确定所述文本内容不为视觉辅助功能开启指令相关的内容。

作为本公开实施例的一种可能实现方式，所述装置还包括：第一提示模块和第二提示模块。

其中，所述第一提示模块，用于在开启视觉辅助功能后，语音播报第一提示信息，以提示视觉辅助功能已开启；或者，所述第二提示模块，用于在将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能之后，语音播报第二提示信息，以提示切换至简洁模式下的页面，且视觉辅助功能已开启。

作为本公开实施例的一种可能实现方式，所述装置还包括：检测模块和播报模块。

其中，所述检测模块，用于在视觉辅助功能开启后，检测所述当前显示页面上的被选中位置；所述播报模块，用于语音播报所述被选中位置的显示内容。

作为本公开实施例的一种可能实现方式，所述装置还包括：第三处理模块和第四处理模块。

其中，所述第三处理模块，用于在接收到简洁模式退出指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能；或者，所述第四处理模块，用于在接收到视觉辅助功能关闭指令时，关闭视觉辅助功能。

作为本公开实施例的一种可能实现方式，所述第三处理模块具体用于，在接收到简洁模式退出指令时，语音播报第三提示信息，以提示交互对象确认是否退出简洁模式；在接收到确认指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能。

作为本公开实施例的一种可能实现方式，所述装置还包括：第二接收模块、判断模块和第五处理模块。

其中，所述第二接收模块，用于在当前显示页面为非简洁模式下的页面时，接收简洁模式开启指令；所述判断模块，用于判断是否存在视觉辅助功能的历史开启记录；所述第五处理模块，用于在存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，且开启视觉辅助功能在不存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面。

本公开实施例的有屏智能设备的交互装置，通过接收视觉辅助功能开启指令；在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；在当前显示页面为非简洁模式下的页面时，将当前显示页面切换至简洁模式下与当前显示页面相关的页面，并开启视觉辅助功能，从而能够减少页面中复用的控件在视觉辅助功能时的适配量，提高交互效率。

本公开的技术方案中，所涉及的用户个人信息的收集、存储、使用、加工、传输、提供和公开等处理，均在征得用户同意的前提下进行，并且均符合相关法律法规的规定，且不违背公序良俗。

根据本公开的实施例，本公开还提供了一种电子设备、一种可读存储介质和一种计算机程序产品。

图5示出了可以用来实施本公开的实施例的示例电子设备500的示意性框图。电子设备旨在表示各种形式的数字计算机，诸如，膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置，诸如，个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。

如图5所示，电子设备500包括计算单元501，其可以根据存储在只读存储器(ROM)502中的计算机程序或者从存储单元508加载到随机访问存储器(RAM)503中的计算机程序，来执行各种适当的动作和处理。在RAM 503中，还可存储设备500操作所需的各种程序和数据。计算单元501、ROM 502以及RAM 503通过总线504彼此相连。输入/输出(I/O)接口505也连接至总线504。

电子设备500中的多个部件连接至I/O接口505，包括：输入单元506，例如键盘、鼠标等；输出单元507，例如各种类型的显示器、扬声器等；存储单元508，例如磁盘、光盘等；以及通信单元509，例如网卡、调制解调器、无线通信收发机等。通信单元509允许电子设备500通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

计算单元501可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元501的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元501执行上文所描述的各个方法和处理，例如有屏智能设备的交互方法。例如，在一些实施例中，有屏智能设备的交互方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元508。在一些实施例中，计算机程序的部分或者全部可以经由ROM 502和/或通信单元509而被载入和/或安装到电子设备500上。当计算机程序加载到RAM 503并由计算单元501执行时，可以执行上文描述的有屏智能设备的交互方法的一个或多个步骤。备选地，在其他实施例中，计算单元501可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行有屏智能设备的交互方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括：实施在一个或者多个计算机程序中，该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释，该可编程处理器可以是专用或者通用可编程处理器，可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令，并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互，可以在计算机上实施此处描述的系统和技术，该计算机具有：用于向用户显示信息的显示装置(例如，CRT(阴极射线管)或者LCD(液晶显示器)监视器)；以及键盘和指向装置(例如，鼠标或者轨迹球)，用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互；例如，提供给用户的反馈可以是任何形式的传感反馈(例如，视觉反馈、听觉反馈、或者触觉反馈)；并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如，作为数据服务器)、或者包括中间件部件的计算系统(例如，应用服务器)、或者包括前端部件的计算系统(例如，具有图形用户界面或者网络浏览器的用户计算机，用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如，通信网络)来将系统的部件相互连接。通信网络的示例包括：局域网(LAN)、广域网(WAN)和互联网。

计算机系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器，也可以为分布式系统的服务器，或者是结合了区块链的服务器。

应该理解，可以使用上面所示的各种形式的流程，重新排序、增加或删除步骤。例如，本发公开中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行，只要能够实现本公开公开的技术方案所期望的结果，本文在此不进行限制。

上述具体实施方式，并不构成对本公开保护范围的限制。本领域技术人员应该明白的是，根据设计要求和其他因素，可以进行各种修改、组合、子组合和替代。任何在本公开的精神和原则之内所作的修改、等同替换和改进等，均应包含在本公开保护范围之内。

Claims (18)

1.一种有屏智能设备的交互方法，包括：

接收视觉辅助功能开启指令；

在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，所述视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；所述简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；

在所述当前显示页面为非简洁模式下的页面时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能。

2.根据权利要求1所述的方法，其中，所述接收视觉辅助功能开启指令，包括：

检测语音指令，并确定所述语音指令对应的文本内容；

在所述文本内容为视觉辅助功能开启指令相关的内容时，确定接收到视觉辅助功能开启指令；

在所述文本内容不为视觉辅助功能开启指令相关的内容时，确定未接收到视觉辅助功能开启指令。

3.根据权利要求2所述的方法，其中，所述方法还包括：

对所述文本内容进行解析，获取所述文本内容中的动作词语以及功能名称词语；

在预设的动作词语库中包括所述动作词语，且预设的功能名称库中包括所述功能名称词语时，确定所述文本内容为视觉辅助功能开启指令相关的内容；

在所述动作词语库中未包括所述动作词语，或者，所述功能名称库中未包括所述功能名称词语时，确定所述文本内容不为视觉辅助功能开启指令相关的内容。

4.根据权利要求1所述的方法，其中，所述方法还包括：

在开启视觉辅助功能后，语音播报第一提示信息，以提示视觉辅助功能已开启；

或者，

在将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能之后，语音播报第二提示信息，以提示切换至简洁模式下的页面，且视觉辅助功能已开启。

5.根据权利要求1所述的方法，其中，所述方法还包括：

在视觉辅助功能开启后，检测所述当前显示页面上的被选中位置；

语音播报所述被选中位置的显示内容。

6.根据权利要求1所述的方法，其中，所述方法还包括：

在接收到简洁模式退出指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能；

或者，

在接收到视觉辅助功能关闭指令时，关闭视觉辅助功能。

7.根据权利要求6所述的方法，其中，在接收到简洁模式退出指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能，包括：

在接收到简洁模式退出指令时，语音播报第三提示信息，以提示交互对象确认是否退出简洁模式；

在接收到确认指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能。

8.根据权利要求6所述的方法，其中，所述方法还包括：

在当前显示页面为非简洁模式下的页面时，接收简洁模式开启指令；

判断是否存在视觉辅助功能的历史开启记录；

在存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，且开启视觉辅助功能；

在不存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面。

9.一种有屏智能设备的交互装置，包括：

第一接收模块，用于接收视觉辅助功能开启指令；

第一处理模块，用于在有屏智能设备的当前显示页面为简洁模式下的页面时，开启视觉辅助功能；其中，所述视觉辅助功能的开启，用于指示检测并语音播报被选中位置的显示内容；所述简洁模式下的页面中，控件数量小于或者等于第一数量阈值，且控件复用次数小于或者等于第二数量阈值；

第二处理模块，用于在所述当前显示页面为非简洁模式下的页面时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能。

10.根据权利要求9所述的装置，其中，所述第一接收模块具体用于，

检测语音指令，并确定所述语音指令对应的文本内容；

在所述文本内容为视觉辅助功能开启指令相关的内容时，确定接收到视觉辅助功能开启指令；

在所述文本内容不为视觉辅助功能开启指令相关的内容时，确定未接收到视觉辅助功能开启指令。

11.根据权利要求10所述的装置，其中，所述装置还包括：获取模块、第一确定模块和第二确定模块；

所述获取模块，用于对所述文本内容进行解析，获取所述文本内容中的动作词语以及功能名称词语；

第一确定模块，用于在预设的动作词语库中包括所述动作词语，且预设的功能名称库中包括所述功能名称词语时，确定所述文本内容为视觉辅助功能开启指令相关的内容；

第二确定模块，用于在所述动作词语库中未包括所述动作词语，或者，所述功能名称库中未包括所述功能名称词语时，确定所述文本内容不为视觉辅助功能开启指令相关的内容。

12.根据权利要求9所述的装置，其中，所述装置还包括：第一提示模块和第二提示模块；

所述第一提示模块，用于在开启视觉辅助功能后，语音播报第一提示信息，以提示视觉辅助功能已开启；

或者，

所述第二提示模块，用于在将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，并开启视觉辅助功能之后，语音播报第二提示信息，以提示切换至简洁模式下的页面，且视觉辅助功能已开启。

13.根据权利要求9所述的装置，其中，所述装置还包括：检测模块和播报模块；

所述检测模块，用于在视觉辅助功能开启后，检测所述当前显示页面上的被选中位置；

所述播报模块，用于语音播报所述被选中位置的显示内容。

14.根据权利要求9所述的装置，其中，所述装置还包括：第三处理模块和第四处理模块；

所述第三处理模块，用于在接收到简洁模式退出指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能；

或者，

所述第四处理模块，用于在接收到视觉辅助功能关闭指令时，关闭视觉辅助功能。

15.根据权利要求14所述的装置，其中，所述第三处理模块具体用于，

在接收到简洁模式退出指令时，语音播报第三提示信息，以提示交互对象确认是否退出简洁模式；

在接收到确认指令时，将所述简洁模式下的当前显示页面切换至非简洁模式下与所述当前显示页面相关的页面，且关闭视觉辅助功能。

16.根据权利要求14所述的装置，其中，所述装置还包括：第二接收模块、判断模块和第五处理模块；

所述第二接收模块，用于在当前显示页面为非简洁模式下的页面时，接收简洁模式开启指令；

所述判断模块，用于判断是否存在视觉辅助功能的历史开启记录；

所述第五处理模块，用于在存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面，且开启视觉辅助功能；

在不存在视觉辅助功能的历史开启记录时，将所述当前显示页面切换至简洁模式下与所述当前显示页面相关的页面。

17.一种电子设备，包括：

至少一个处理器；以及

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-8中任一项所述的方法。

18.一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行根据权利要求1-8中任一项所述的方法。

Images