CN111966931A - 控件的渲染方法及装置 - Google Patents

Abstract

本发明提供了一种控件的渲染方法，包括：获取用户语音信息；对语音信息进行处理，确定语音信息对应的命中意图；根据命中意图，确定下行协议中命中意图对应的控件渲染地址；控件渲染地址为控件云渲染服务地址；根据控件渲染地址，确定对应的资源接口协议的数据；根据资源接口协议的数据，确定与资源接口协议的数据绑定的占位符ID；根据占位符ID，确定占位符ID对应的页面布局和样式渲染；根据页面布局和样式渲染，对控件渲染地址对应的控件进行渲染。由此，提供统一的资源服务接口，资源服务接口对应语音对话数据、第三方业务数据、从而在控件不升级的情况下，动态变更渲染数据，提高了控件的渲染效率。

Description

控件的渲染方法及装置

技术领域

本发明涉及数据处理技术领域，尤其涉及一种控件的渲染方法及装置。

背景技术

对于有屏智能设备，在语音对话过程的运行期，终端无升级的情况下，低成本解决支持可视化布局定制，多渠道数据内容定制的动态渲染能力是实际应用中急需解决的问题。

现有技术中，可以通过提供在线编辑可视化模版，每个模版固定展示元素，提供给开发者编写样式代码能力，从而控制元素布局、样式，提供实时预览，并由语音提供商在语音对话运行时运行开发者代码完成云渲染。

也可以提供离线模版工程，开发者基于此模版工程本地完成控件的自定义的编码工作，通过本地环境预览自定义效果，然后通过上传自定义工程，加入语音提供商的运行目录，从而在语义过程运行工程代码。

现有技术存在的问题是：元素固定，无法扩展，在语音交互过程中不支持合作商务数据展示。

虽然支持业务数据和本地数据展示，但定制成本高，需要下载模版工程，并离线开发，且无法预览完整自定义效果，还需上传自定义工程，虽然支持离线预览，却不能保证离线工程的线上表现和实际运行时表现一致。

发明内容

本发明实施例的目的是提供一种控件的渲染方法及装置，以解决现有技术中存在的元素固定，无法扩展，在语音交互过程中不支持合作商务数据展示、定制成本高，需要下载模版工程，并离线开发，且无法预览完整自定义效果，还需上传自定义工程，虽然支持离线预览，却不能保证离线工程的线上表现和实际运行时表现一致的问题。

为解决上述问题，第一方面，本发明提供了一种控件的渲染方法，所述控件的渲染方法包括：

获取用户的语音信息；

对所述语音信息进行处理，确定所述语音信息对应的命中意图；

根据所述命中意图，确定下行协议中所述命中意图对应的控件渲染地址；所述控件渲染地址为控件云渲染服务地址；

根据所述控件渲染地址，确定对应的资源接口协议的数据；

根据所述资源接口协议的数据，确定与所述资源接口协议的数据绑定的占位符ID；

根据所述占位符ID，确定所述占位符ID对应的页面布局和样式渲染；

根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染。

在一种可能的实现方式中，所述方法之前还包括：

在资源管理服务器中确定资源服务接口，所述资源服务接口对应资源接口协议；其中，所述资源接口协议对应不同的资源，所述资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置；

接收控件编辑器发送的控件配置；所述控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

在一种可能的实现方式中，所述资源类型包括网络资源和本地资源；

所述请求参数包括参数名称，类型，默认值；

所述响应数据包括响应数据名称和类型。

在一种可能的实现方式中，所述对所述语音信息进行处理，确定所述语音信息对应的命中意图具体包括：

控件配置将ASR语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，将所述语音信息和所述控件配置的所述焦点意图槽位数据进行匹配，确定所述语音信息对应的命中意图。

在一种可能的实现方式中，所述根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染具体包括：

云端编码器根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件信息渲染。

第二方面，本发明提供了一种控件的渲染装置，所述控件的渲染装置包括：

获取模块，所述获取模块用于获取用户的语音信息；

处理模块，所述处理模块用于对所述语音信息进行处理，确定所述语音信息对应的命中意图；

确定模块，所述确定模块用于根据所述命中意图，确定下行协议中所述命中意图对应的控件渲染地址；所述控件渲染地址为控件云渲染服务地址；

所述确定模块还用于，根据所述控件渲染地址，确定对应的资源接口协议的数据；

所述确定模块还用于，根据所述资源接口协议的数据，确定与所述资源接口协议的数据绑定的占位符ID；

所述确定模块还用于，根据所述占位符ID，确定所述占位符ID对应的页面布局和样式渲染；

渲染模块，所述渲染模块用于根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染。

在一种可能的实现方式中，所述装置还包括接收模块；

所述确定模块还用于，在资源管理服务器中确定资源服务接口，所述资源服务接口对应资源接口协议；其中，所述资源接口协议对应不同的资源，所述资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置；

所述接收模块用于接收控件编辑器发送的控件配置；所述控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

在一种可能的实现方式中，所述资源类型包括网络资源和本地资源；

所述请求参数包括参数名称，类型，默认值；

所述响应数据包括响应数据名称和类型。

在一种可能的实现方式中，所述确定模块具体用于：

通过控件配置将ASR语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，将所述语音信息和所述控件配置的所述焦点意图槽位数据进行匹配，确定所述语音信息对应的命中意图。

在一种可能的实现方式中，所述渲染模块具体用于：

通过云端编码器根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件信息渲染。

第三方面，本发明提供了一种设备，包括存储器和处理器，存储器用于存储程序，处理器用于执行第一方面任一所述的方法。

第四方面，本发明提供了一种包含指令的计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行如第一方面任一所述的方法。

第五方面，本发明提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如第一方面任一所述的方法。

通过应用本发明实施例提供的控件的渲染方法及装置，提供统一的资源服务接口，资源服务接口对应语音对话数据、第三方业务数据、从而在控件不升级的情况下，动态变更渲染数据，提高了控件的渲染效率。

附图说明

图1为本发明实施例一提供的控件的渲染方法流程示意图；

图2为本发明实施例二提供的控件的渲染装置结构示意图。

具体实施方式

下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释相关发明，而非对该发明的限定。另外还需要说明的是，为便于描述，附图中仅示出了与有关发明相关的部分。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。

图1为本发明实施例一提供的控件的渲染方法流程示意图，该方法的执行主体为处理器，如图1所示，该方法包括以下流程：

步骤110，获取用户的语音信息。

具体的，针对有屏幕的用户终端，当进行人机语音交互时，首先获取到用户的语音信息，比如，以平板电脑为例，用户需要启动某个软件时，可以输入语音信息“请启动xx”。

步骤120，对语音信息进行处理，确定语音信息对应的命中意图。

具体的，控件配置将自动语音识别技术(Automatic Speech Recognition，ASR)语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，可以将语音信息与控件配置项中的数据进行匹配，从而将语音信息和焦点意图槽位数据进行匹配，确定语音信息对应的命中意图。比如，可以识别到语音信息的意图为：启动xx应用程序。

步骤130，根据命中意图，确定下行协议中命中意图对应的控件渲染地址；控件渲染地址为控件云渲染服务地址。

具体的，在下行协议中，封装有控件渲染地址。

在执行步骤130之前，还可以包括：

在资源管理服务器中确定资源服务接口，资源服务接口对应资源接口协议；其中，资源接口协议对应不同的资源，资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置。资源服务接口协议对应的资源表1所示：

表1

接收控件编辑器发送的控件配置；控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

具体的，控件编辑器可以接收用户输入的占位符，占位符{{}}绑定上述资源服务接口中选择的资源接口协议中数据，通过<div id＝xx>标签嵌套占位符中ID，并将占位符ID对应页面布局和样式渲染。比如，可以编写<style>脚本编码控制占位符ID的页面布局和样式渲染。

其中，还可以将文档对象模型(Document Object Model，DOM)对应的资源数据绑定到H5页面，以便于后续回调时。

由此，可以在确定命中意图后，通过下行协议中该命中意图对应的控件渲染地址，即可确定云渲染服务的地址。

步骤140，根据控件渲染地址，确定对应的资源接口协议的数据。

具体的，控件渲染地址对应资源接口协议的数据，比如控件渲染地址可以对应网络资源接口协议的数据或者对应本地资源接口协议的数据，从而，根据资源管理服务器中该资源接口协议的数据，可以确定与该资源接口协议的数据绑定的占位符ID。

步骤150，根据资源接口协议的数据，确定与资源接口协议的数据绑定的占位符ID。

具体的，在确定资源接口协议的数据后，就可以确定该资源接口协议的数据对应的占位符ID。该占位符已经预先与页面布局和样式进行了绑定，从而可以在确定占位符ID后，确定页面布局和样式渲染。

步骤160，根据占位符ID，确定占位符ID对应的页面布局和样式渲染。

步骤170，根据页面布局和样式渲染，对控件渲染地址对应的控件进行渲染。

具体的，云端编码器在确定占位符ID后，就可以根据页面布局和样式渲染，从而确定控件渲染地址对应的控件进行渲染，在进行渲染时，可以调用资源管理器中的资源进行渲染。

下面，结合具体的示例进行说明。

在网络资源渲染时，以Android系统为例,在Activity的layout文件里添加webview控件,设置WebSettings的权限，插件，缓存等配置,WebView通过LoadUrl访问渲染服务,驱动程序开发系统(Windows Driver Kit，WDK)解析OpenAPI下行协议并封装成dom,WDK判断dom中若有主资源，回调,WDK判断dom中若有对话数据，回调,WDK判断dom中若有其他互联网资源,同步调用全局功能,WDK解析全局功能返回资源，回调已实现的功能。

在本地资源渲染时，在网页视图中创建网页视图客户端，重写网页视图客户端的控件，重写URL加载中拦截本地协议接口对应的本地协议，网页视图调用URL中解析出来的本地响应方法，网页视图解析本地方法响应数据，回调。

通过应用本发明实施例提供的控件的渲染方法，提供统一的资源服务接口，资源服务接口对应语音对话数据、第三方业务数据、从而在控件不升级的情况下，动态变更渲染数据，提高了控件的渲染效率。

图2为本发明实施例二提供的控件的渲染装置结构示意图，该控件的渲染装置应用在实施例一中的控件的渲染方法中，如图2所示，该控件的渲染装置包括：获取模块210、处理模块220、确定模块230和渲染模块240。

获取模块210用于获取用户语音信息；

处理模块220用于对语音信息进行处理，确定语音信息对应的命中意图；

确定模块230用于根据命中意图，确定下行协议中命中意图对应的控件渲染地址；控件渲染地址为控件云渲染服务地址；

确定模块230还用于，根据控件渲染地址，确定对应的资源接口协议的数据；

确定模块230还用于，根据资源接口协议的数据，确定与资源接口协议的数据绑定的占位符ID；

确定模块230还用于，根据占位符ID，确定占位符ID对应的页面布局和样式渲染；

渲染模块240用于根据页面布局和样式渲染，对控件渲染地址对应的控件进行渲染。

进一步的，还包括接收模块250；

确定模块230还用于，在资源管理服务器中确定资源服务接口，资源服务接口对应资源接口协议；其中，资源接口协议对应不同的资源，资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置；

接收模块250用于接收控件编辑器发送的控件配置；控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

进一步的，资源类型包括网络资源和本地资源；

请求参数包括参数名称，类型，默认值；

响应数据包括响应数据名称和类型。

进一步的，确定模块230具体用于：通过控件配置将ASR语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，将语音信息和控件配置的焦点意图槽位数据进行匹配，确定语音信息对应的命中意图。

进一步的，渲染模块240具体用于：通过云端编码器根据页面布局和样式渲染，对控件渲染地址对应的控件信息渲染。

通过应用本发明实施例提供的控件的渲染装置，提供统一的资源服务接口，资源服务接口对应语音对话数据、第三方业务数据、从而在控件不升级的情况下，动态变更渲染数据，提高了控件的渲染效率。

专业人员应该还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

结合本文中所公开的实施例描述的方法或算法的步骤可以用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。

以上的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种控件的渲染方法，其特征在于，所述控件的渲染方法包括：

获取用户的语音信息；

对所述语音信息进行处理，确定所述语音信息对应的命中意图；

根据所述命中意图，确定下行协议中所述命中意图对应的控件渲染地址；所述控件渲染地址为控件云渲染服务地址；

根据所述控件渲染地址，确定对应的资源接口协议的数据；

根据所述资源接口协议的数据，确定与所述资源接口协议的数据绑定的占位符ID；

根据所述占位符ID，确定所述占位符ID对应的页面布局和样式渲染；

根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染。

2.根据权利要求1所述的方法，其特征在于，所述方法之前还包括：

在资源管理服务器中确定资源服务接口，所述资源服务接口对应资源接口协议；其中，所述资源接口协议对应不同的资源，所述资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置；

接收控件编辑器发送的控件配置；所述控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

3.根据权利要求2所述的方法，其特征在于，所述资源类型包括网络资源和本地资源；

所述请求参数包括参数名称，类型，默认值；

所述响应数据包括响应数据名称和类型。

4.根据权利要求1所述的方法，其特征在于，所述对所述语音信息进行处理，确定所述语音信息对应的命中意图具体包括：

控件配置将ASR语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，将所述语音信息和所述控件配置的所述焦点意图槽位数据进行匹配，确定所述语音信息对应的命中意图。

5.根据权利要求1所述的方法，其特征在于，所述根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染具体包括：

云端编码器根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件信息渲染。

6.一种控件的渲染装置，其特征在于，所述控件的渲染装置包括：

获取模块，所述获取模块用于获取用户的语音信息；

处理模块，所述处理模块用于对所述语音信息进行处理，确定所述语音信息对应的命中意图；

确定模块，所述确定模块用于根据所述命中意图，确定下行协议中所述命中意图对应的控件渲染地址；所述控件渲染地址为控件云渲染服务地址；

所述确定模块还用于，根据所述控件渲染地址，确定对应的资源接口协议的数据；

所述确定模块还用于，根据所述资源接口协议的数据，确定与所述资源接口协议的数据绑定的占位符ID；

所述确定模块还用于，根据所述占位符ID，确定所述占位符ID对应的页面布局和样式渲染；

渲染模块，所述渲染模块用于根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件进行渲染。

7.根据权利要求6所述的装置，其特征在于，所述装置还包括接收模块；

所述确定模块还用于，在资源管理服务器中确定资源服务接口，所述资源服务接口对应资源接口协议；其中，所述资源接口协议对应不同的资源，所述资源包括资源类型、接口URL地址、请求方法、请求参数的配置和响应数据的配置；

所述接收模块用于接收控件编辑器发送的控件配置；所述控件配置包括与占位符ID绑定的资源服务接口的协议数据；通过标签表示占位符ID的页面布局和样式渲染。

8.根据权利要求7所述的装置，其特征在于，所述资源类型包括网络资源和本地资源；

所述请求参数包括参数名称，类型，默认值；

所述响应数据包括响应数据名称和类型。

9.根据权利要求6所述的装置，其特征在于，所述确定模块具体用于：

通过控件配置将ASR语音识别数据，焦点意图槽位数据，NLG数据，人机交互对话数据清单通过下行协议进行封装，当接收到语音信息时，将所述语音信息和所述控件配置的所述焦点意图槽位数据进行匹配，确定所述语音信息对应的命中意图。

10.根据权利要求6所述的装置，其特征在于，所述渲染模块具体用于：

通过云端编码器根据所述页面布局和样式渲染，对所述控件渲染地址对应的控件信息渲染。

Images