CN111628956A

CN111628956A - 一种网络请求传输数据的格式转换方法、装置和系统

Info

Publication number: CN111628956A
Application number: CN201910151383.5A
Authority: CN
Inventors: 宋玉伟; 李彬; 曹伟; 于明明
Original assignee: Alibaba Group Holding Ltd
Current assignee: Alibaba Group Holding Ltd
Priority date: 2019-02-28
Filing date: 2019-02-28
Publication date: 2020-09-04
Anticipated expiration: 2039-02-28
Also published as: CN111628956B

Abstract

本发明公开了一种网络请求传输数据的格式转换方法、装置和系统。所述方法包括：从网络请求传输数据使用的网络接口的描述文档中获取设定的信息要素，建立信息要素集；根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定信息要素所属的数据类型；根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具；当获取到网络接口传输的需转换的网络请求数据时，使用转换工具，对网络请求数据中的各信息要素进行格式转换。能够准确高效的完成网络请求传输数据的格式转换。

Description

一种网络请求传输数据的格式转换方法、装置和系统

技术领域

本发明涉及网络接口技术领域，特别涉及一种网络请求传输数据的格式转换方法、装置和系统。

背景技术

网络接口中的应用程序编程接口(Application Programming Interface，API)是服务端对外提供的一类各种信息和数据获取的接口，各客户端可以通过这些接口向服务端发送网络请求，服务端根据请求信息生成回复信息并向相应的客户端发送回复信息，如城市天气信息、地图信息、手机号码归属地、卫星定位等等。

为了节约流量，减轻网络传输压力，服务端通过网络API接口向客户端发送针对网络请求的回复信息时，通常将回复信息进行Protocol Buffer化改造后再发送，而客户端接收到Protocol Buffer格式的回复信息后，需要先将其转换成Json格式才能进一步解析。

上述Protocol Buffer是一种轻便高效的数据存储格式；Json是一种可读性强的数据格式，易于阅读和编写，同时也易于机器解析和生成。

现有技术中将Protocol Buffer格式的回复信息转换成Json格式，通常是采用反射的方式，转换大约1400字段耗时可达秒级，故尤其是对于数据量大的复杂接口，反射的转换方式耗时严重，且反射的方式对信息转换的准确度较低。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的一种网络请求传输数据的格式转换方法、装置和系统。

第一方面，本发明实施例提供一种网络请求传输数据的格式转换方法，包括：

从网络请求传输数据使用的网络接口的描述文档中获取设定的信息要素，建立包含获取的所述信息要素的信息要素集；

根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型；

根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与所述信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具；

当获取到所述网络接口传输的需转换的网络请求数据时，使用所述转换工具，对网络请求数据中的各信息要素进行格式转换。

在一些可选的实施例中，预先建立数据类型和转换方法的对应关系，包括：

从多种预选转换方法中，按照预设规则确定指定数据类型从源格式到目标格式的最佳转换方法；

根据确定出的最佳转换方法建立数据类型与从源格式到目标格式的转换方法的对应关系。

在一些可选的实施例中，按照预设规则确定指定数据类型从源格式到目标格式的最佳转换方法，包括：

筛选将指定数据类型从源格式到目标格式转换速度最快的预选转换方法，作为指定数据类型从源格式到目标格式的最佳转换方法；或，

筛选将指定数据类型从源格式到目标格式转换准确度最高的预选转换方法，作为指定数据类型从源格式到目标格式的最佳转换方法；或，

筛选将指定数据类型从源格式到目标格式转换速度与转换准确度综合指数最高的预选转换方法，作为指定数据类型从源格式到目标格式的最佳转换方法。

在一些可选的实施例中，所述指定数据类型包括下列类型之一：

整型、浮点型、布尔型和文本。

在一些可选的实施例中，从网络请求使用的网络接口的描述文档中获取设定的信息要素，包括：

从网络请求使用的网络接口的描述文档中获取请求参数和返回结果，所述请求参数包括：请求内容、请求方式和网络签名。

在一些可选的实施例中，当使用所述转换工具，对网络请求数据中的各信息要素进行格式转换失败时，还包括：

查找到转换失败的信息要素，根据转换失败的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定转换失败的信息要素所属的数据类型；

根据确定出的转换失败的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与转换失败的信息要素所属的数据类型相匹配的转换方法；

根据转换失败的信息要素和匹配的转换方法更新所述转换工具。

在一些可选的实施例中，当根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型失败时，还包括：

更新预设的要素名称和数据类型映射关系；对应的，根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与所述信息要素所属的数据类型相匹配的转换方法失败时，还包括：

更新预先建立的数据类型和转换方法的对应关系。

第二方面，本发明实施例提供一种网络请求传输数据的格式转换装置，包括：

第一建立模块，用于从网络请求使用的网络接口的描述文档中获取设定的信息要素，建立包含获取的所述信息要素的信息要素集；

确定模块，用于根据所述第一建立模块建立的信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型；

获得模块，用于根据所述确定模块确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与所述信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具；

转换模块，用于当获取到所述网络接口传输的需转换的网络请求数据时，使用所述获得模块得到的所述转换工具，对网络请求数据中的各信息要素进行格式转换。

第三方面，本发明实施例提供一种网络请求传输数据的格式转换系统，包括：服务器和至少一个客户端；所述客户端设置有上述网络请求传输数据的格式转换装置；

所述客户端通过所述网络接口接收原格式的回复信息，将所述回复信息转换成目标格式。

第四方面，本发明实施例提供一种计算机可读存储介质，其上存储有计算机指令，当该指令被处理器执行时实现上述网络请求传输数据的格式转换方法。

第五方面，本发明实施例提供一种电子设备，包括：存储器、处理器及存储于存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述网络请求传输数据的格式转换方法。

本发明实施例提供的上述技术方案的有益效果至少包括：

从网络请求传输数据使用的网络接口的描述文档中获取设定的信息要素，建立信息要素集；根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定信息要素所属的数据类型；根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具；当获取到网络接口传输的需转换的网络请求数据时，使用转换工具，对网络请求数据中的各信息要素进行格式转换。能够准确高效的完成网络请求传输信息的数据格式转换。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1为本发明实施例一中网络请求传输数据的格式转换方法的流程图；

图2为本发明实施例一中预先建立数据类型和转换方法的对应关系的具体实现流程图；

图3为本发明实施例二中网络请求回复信息的格式转换方法的具体实现流程图；

图4为本发明实施例中网络请求传输数据的格式转换装置的结构示意图；

图5为本发明实施例中网络请求传输数据的格式转换系统的结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

为了解决现有技术中存在的Protocol Buffer格式转换成Json格式耗时长、转换准确率低的问题，本发明实施例提供一种网络请求传输数据的格式转换方法，能够准确高效的完成网络请求传输数据的数据格式转换。

实施例一

本发明实施例一提供一种网络请求传输数据的格式转换方法，其流程如图1所示，包括如下步骤：

步骤S11：从网络请求传输数据使用的网络接口的描述文档中获取设定的信息要素，建立包含获取的信息要素的信息要素集。

每个网络API往往都有对应的描述文档，其中包括对网络接口的请求和享有相关的描述信息。

从网络请求传输数据使用的网络接口的描述文档中获取设定的信息要素，具体的，可以是，从网络请求使用的网络接口的描述文档中获取请求参数和返回结果，请求参数包括：请求内容、请求方式和网络签名。

例如，通过网络接口搜索美食，请求参数里的请求内容可以是美食；请求方式可以是语音方式，也可以是通过客户端的用户输入的方式；网络签名是客户端的访问权限，因为有些接口不是所有的客户端都可以访问，设置网络签名可以限制没有权限的客户端的访问。

从网络请求传输数据使用的网络接口的描述文档中获取完设定的每个信息要素后，建立信息要素集。每个信息要素包括要素的名称和要素的具体内容。

步骤S12：根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定信息要素所属的数据类型。

预先统计每个要素名称对应的要素内容的数据类型，建立要素名称和数据类型的映射关系。可选的，预设的要素名称和数据类型映射关系，可以是实时更新的。例如，当根据信息要素集中的信息要素的要素名称，查询不到数据类型时，可以通过其他途径获取对应的数据类型，将要素名称和数据类型填加到上述到映射关系中。

步骤S13：根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具。

如果步骤S11中建立的信息要素集是从网络请求传输数据使用的一个网络接口的描述文档中获取的，那生成的转换工具只适用于这一个网络接口。

步骤S14：当获取到述网络接口传输的需转换的网络请求数据时，使用转换工具，对网络请求数据中的各信息要素进行格式转换。

由于转换工具包含信息要素集中的信息要素及其匹配的转换方法，故使用转换工具，对网络请求数据中的各信息要素进行格式转换。

可选的，当使用所述转换工具，对网络请求数据中的各信息要素进行格式转换失败时，可能是：网络请求数据中转换失败的信息要素的要素名称不包含在转换工具中，此时可以：

查找到转换失败的信息要素，根据转换失败的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定转换失败的信息要素所属的数据类型；根据确定出的转换失败的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与转换失败的信息要素所属的数据类型相匹配的转换方法；根据转换失败的信息要素和匹配的转换方法更新所述转换工具。

参照图2所示，上述数据类型和转换方法的对应关系可以通过下述步骤预先建立：

步骤S21：从多种预选转换方法中，按照预设规则确定指定数据类型从源格式到目标格式的最佳转换方法。

具体的，可以是筛选将指定数据类型从源格式到目标格式转换速度最快的预选转换方法，作为指定数据类型从源格式到目标格式的最佳转换方法；或，

可选的，也可以根据其他的方式确定指定数据类型从源格式到目标格式的最佳转换方法。

具体的，指定数据类型可以包括下列类型之一：

整型、浮点型、布尔型和文本。

步骤S22：根据确定出的最佳转换方法建立数据类型与从源格式到目标格式的转换方法的对应关系。

在一些可选的实施例中，步骤S12中根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定信息要素所属的数据类型失败时，可能是预设的要素名称和数据类型映射关系中不包含确定数据类型失败的信息要素的要素名称，此时可以更新预设的要素名称和数据类型映射关系，具体可以是，通过其他途径获取查询失败的要素名称对应的雅俗内容的数据类型，将查询失败的要素名称和数据类型填加到预设的要素名称和数据类型映射关系中。

在一些可选的实施例中，步骤S13中根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与信息要素所属的数据类型相匹配的转换方法失败时，可能是数据类型和转换方法的对应关系中不包括确定转换方法失败的数据类型，此时，可以更新预先建立的数据类型和转换方法的对应关系，具体可以是，通过其他途径获取确定转换方法失败的数据类型对应的转换方法，将确定转换方法失败的数据类型及其转换方法填加到数据类型和转换方法的对应关系中。

实施例二

本发明实施例二提供网络请求回复信息的格式转换的一种具体实现方法，以接收到的网络请求回复信息的原格式为Protocol Buffer格式，转换成Json格式为例，其流程如图3所示，包括如下步骤：

步骤S31：从网络请求回复信息对应的网络接口的描述文档中获取设定的信息要素，建立包含获取的信息要素的信息要素集。

步骤S32：根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定信息要素所属的数据类型。

步骤S33：根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和由PB格式转Json格式的转换方法的对应关系，确定与信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具。

步骤S34：当获取到网络接口传输的需转换的网络请求回复信息时，使用转换工具，将PB格式的网络请求转换成Json格式。

步骤S31-步骤S34与上述步骤S11-步骤S14的相似之处，此处不做赘述。

基于同一发明构思，本发明实施例还提供一种网络请求传输数据的格式转换装置，其结构如图4所示，包括：

第一建立模块41，用于从网络请求使用的网络接口的描述文档中获取设定的信息要素，建立包含获取的所述信息要素的信息要素集；

确定模块42，用于根据所述第一建立模块41建立的信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型；

获得模块43，用于根据所述确定模块42确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与所述信息要素所属的数据类型相匹配的转换方法，得到包含信息要素集中的信息要素及其匹配的转换方法的转换工具；

转换模块44，用于当获取到所述网络接口传输的需转换的网络请求数据时，使用所述获得模块43得到的所述转换工具，对网络请求数据中的各信息要素进行格式转换。

在一些可选的实施例中，上述装置还包括：

第二建立模块45，用于预先从多种预选转换方法中，按照预设规则确定指定数据类型从源格式到目标格式的最佳转换方法；根据确定出的最佳转换方法建立数据类型与从源格式到目标格式的转换方法的对应关系。

在一些可选的实施例中，所述第二建立模块45，具体用于：

在一些可选的实施例中，所述第一建立模块41，具体用于：

在一些可选的实施例中，上述装置还包括：

更新模块46，用于当使用所述转换工具，对网络请求数据中的各信息要素进行格式转换失败时，查找到转换失败的信息要素，根据转换失败的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定转换失败的信息要素所属的数据类型；根据确定出的转换失败的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与转换失败的信息要素所属的数据类型相匹配的转换方法；根据转换失败的信息要素和匹配的转换方法更新所述转换工具。

在一些可选的实施例中，所述更新模块46，具体用于：当根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型失败时，更新预设的要素名称和数据类型映射关系；对应的，所述更新模块46，还用于：根据确定出的信息要素所属的数据类型，以及预先建立的数据类型和转换方法的对应关系，确定与所述信息要素所属的数据类型相匹配的转换方法失败时，更新预先建立的数据类型和转换方法的对应关系。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

基于同一发明构思，本发明实施例还提供一种网络请求传输数据的格式转换系统，其结构如图5所示，包括：服务器51和至少一个客户端52；所述客户端52设置有上述任一所述的网络请求传输数据的格式转换装置；

所述客户端52通过所述网络接口接收所述原格式的回复信息，将所述回复信息转换成目标格式。

基于同一发明构思，本发明实施例还提供一种计算机可读存储介质，其上存储有计算机指令，当该指令被处理器执行时实现上述网络请求传输数据的格式转换方法。

基于同一发明构思，本发明实施例还提供一种电子设备，包括：存储器、处理器及存储于存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述网络请求传输数据的格式转换方法。

除非另外具体陈述，术语比如处理、计算、运算、确定、显示等等可以指一个或更多个处理或者计算系统、或类似设备的动作和/或过程，所述动作和/或过程将表示为处理系统的寄存器或存储器内的物理(如电子)量的数据操作和转换成为类似地表示为处理系统的存储器、寄存器或者其他此类信息存储、发射或者显示设备内的物理量的其他数据。信息和信号可以使用多种不同的技术和方法中的任何一种来表示。例如，在贯穿上面的描述中提及的数据、指令、命令、信息、信号、比特、符号和码片可以用电压、电流、电磁波、磁场或粒子、光场或粒子或者其任意组合来表示。

应该明白，公开的过程中的步骤的特定顺序或层次是示例性方法的实例。基于设计偏好，应该理解，过程中的步骤的特定顺序或层次可以在不脱离本公开的保护范围的情况下得到重新安排。所附的方法权利要求以示例性的顺序给出了各种步骤的要素，并且不是要限于所述的特定顺序或层次。

在上述的详细描述中，各种特征一起组合在单个的实施方案中，以简化本公开。不应该将这种公开方法解释为反映了这样的意图，即，所要求保护的主题的实施方案需要清楚地在每个权利要求中所陈述的特征更多的特征。相反，如所附的权利要求书所反映的那样，本发明处于比所公开的单个实施方案的全部特征少的状态。因此，所附的权利要求书特此清楚地被并入详细描述中，其中每项权利要求独自作为本发明单独的优选实施方案。

本领域技术人员还应当理解，结合本文的实施例描述的各种说明性的逻辑框、模块、电路和算法步骤均可以实现成电子硬件、计算机软件或其组合。为了清楚地说明硬件和软件之间的可交换性，上面对各种说明性的部件、框、模块、电路和步骤均围绕其功能进行了一般地描述。至于这种功能是实现成硬件还是实现成软件，取决于特定的应用和对整个系统所施加的设计约束条件。熟练的技术人员可以针对每个特定应用，以变通的方式实现所描述的功能，但是，这种实现决策不应解释为背离本公开的保护范围。

结合本文的实施例所描述的方法或者算法的步骤可直接体现为硬件、由处理器执行的软件模块或其组合。软件模块可以位于RAM存储器、闪存、ROM存储器、EPROM存储器、EEPROM存储器、寄存器、硬盘、移动磁盘、CD-ROM或者本领域熟知的任何其它形式的存储介质中。一种示例性的存储介质连接至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于ASIC中。该ASIC可以位于用户终端中。当然，处理器和存储介质也可以作为分立组件存在于用户终端中。

对于软件实现，本申请中描述的技术可用执行本申请所述功能的模块(例如，过程、函数等)来实现。这些软件代码可以存储在存储器单元并由处理器执行。存储器单元可以实现在处理器内，也可以实现在处理器外，在后一种情况下，它经由各种手段以通信方式耦合到处理器，这些都是本领域中所公知的。

上文的描述包括一个或多个实施例的举例。当然，为了描述上述实施例而描述部件或方法的所有可能的结合是不可能的，但是本领域普通技术人员应该认识到，各个实施例可以做进一步的组合和排列。因此，本文中描述的实施例旨在涵盖落入所附权利要求书的保护范围内的所有这样的改变、修改和变型。此外，就说明书或权利要求书中使用的术语“包含”，该词的涵盖方式类似于术语“包括”，就如同“包括，”在权利要求中用作衔接词所解释的那样。此外，使用在权利要求书的说明书中的任何一个术语“或者”是要表示“非排它性的或者”。

Claims

1.一种网络请求传输数据的格式转换方法，其特征在于，包括：

2.如权利要求1所述的方法，其特征在于，预先建立数据类型和转换方法的对应关系，包括：

3.如权利要求2所述的方法，其特征在于，按照预设规则确定指定数据类型从源格式到目标格式的最佳转换方法，包括：

4.如权利要求2或3所述的方法，其特征在于，所述指定数据类型包括下列类型之一：

整型、浮点型、布尔型和文本。

5.如权利要求1所述的方法，其特征在于，从网络请求使用的网络接口的描述文档中获取设定的信息要素，包括：

6.如权利要求1-3、5任一所述的方法，其特征在于，当使用所述转换工具，对网络请求数据中的各信息要素进行格式转换失败时，还包括：

7.如权利要求1-3、5任一所述的方法，其特征在于，当根据信息要素集中的信息要素的要素名称，查询预设的要素名称和数据类型映射关系，确定所述信息要素所属的数据类型失败时，还包括：

更新预先建立的数据类型和转换方法的对应关系。

8.一种网络请求传输数据的格式转换装置，其特征在于，包括：

9.一种网络请求传输数据的格式转换系统，其特征在于，包括：服务器和至少一个客户端；所述客户端设置有如权利要求8所述的所述网络请求传输数据的格式转换装置；

10.一种计算机可读存储介质，其上存储有计算机指令，其特征在于，当该指令被处理器执行时实现如权利要求1-7任一所述的网络请求传输数据的格式转换方法。