CN111752602B - 一种生成在GO语言中运行的protobuf文件的方法 - Google Patents

Abstract

本发明公开了一种生成在GO语言中运行的protobuf文件的方法，包括：导入步骤，将数据导入protobuf软件，得到中间文件；创建步骤，使用胶水语言创建第一模板文件；生成步骤，使用第一模版文件从中间文件获取部分信息，并根据部分信息生成最终模板文件；转换步骤，使用最终模板文件生成中间文件的GO语言文件。本发明中，利用符合protobuf协议的中间文件生成可以在GO语言环境中运行的文件，实现在高级语言环境下完成可在Go语言环境执行的符合Protobuf协议标准的数据传输文件或代码，有效降低错误率，编程实现较为友好，缩短了后期开发周期。

Description

一种生成在GO语言中运行的protobuf文件的方法

技术领域

本发明涉及一种生成在GO语言中运行的protobuf文件的方法、装置、存储介质和系统。

背景技术

在数据通信相关的测试开发领域，软件编程过程中，数据传输都是数据流的方式，流分为输出和输入，如果需要远程通信，都是先要把二进制数据压入内存，再推到发送这块数据的就绪位置，再通过管道(通信信道)进行传输。

传统的数据通信传输采用直接将二进制数据写入内存的方式，都是自己定义存放对象的数据格式，数据按二进制形式直接压入内存再推到就绪位置排列发射，很容易出错。

Protobuf是一种结构化数据定义标准协议，主要用于约束开发人员对于通信机制上面的定义，与传统的直接将二进制数据压入内存段的方式不同，该协议定义了一系列数据格式和约束机制，使用该协议传输数据时，是先将数据压入到Protobuf约束的描述文件下，即把内容放入Protobuf文件格式内再转换成二进制，更不容易出错，支持客户端和服务端良好的通信。

在某些应用中，需要Go语言平台环境下使用Protobuf协议传输数据，但是Go语言对于Protobuf的支持还是限于静态文件的方式。根据Go语言当前版本的语法特性，比如不支持集合和泛型，所以无论是直接使用还是转换为测试模式使用都不是很方便。

发明内容

本发明提供一种生成在GO语言中运行的protobuf文件的方法，该方法包括：

导入步骤，将数据导入protobuf软件，得到中间文件，该中间文件未.proto文件；

创建步骤，使用胶水语言创建第一模板文件；

生成步骤，使用所述第一模版文件从中间文件获取部分信息，并根据部分信息生成最终模板文件；

转换步骤，使用最终模板文件生成中间文件的GO语言文件。

其中，生成步骤进一步包括检索步骤，根据GO语言的应用需要，使用第一模版文件从中间文件检索出部分信息。

其中，中间文件包含多个message和多个Enum，部分信息是多个message和多个Enum中与GO语言的应用需要相关的部分message和部分Enum。

其中，生成步骤包括：编排步骤，对部分message进行编排，生成第二模板文件；填充步骤，使用部分message和部分Enum对第二模板文件进行填充，生成最终模板文件。

本发明还提供一种生成在GO语言中运行的protobuf文件的装置，其特征在于，包括：

导入单元，将数据导入protobuf软件，得到中间文件；

创建单元，使用胶水语言创建第一模板文件；

生成单元，使用第一模版文件从中间文件获取部分信息，并根据部分信息生成最终模板文件；

转换单元，使用最终模板文件生成中间文件的GO语言文件。

其中，生成单元进一步包括检索单元，根据GO语言的应用需要，使用第一模版文件从中间文件检索出部分信息，

其中，中间文件包含多个message和多个Enum，部分信息是多个message和多个Enum中与GO语言的应用需要相关的部分message和部分Enum。

其中，生成单元进一步包括：编排单元，对部分message进行编排，生成第二模板文件；填充单元，使用部分message和部分Enum对第二模板文件进行填充，生成最终模板文件。

本发明还提供一种计算机可读的存储介质，存储介质具有存储在其中的指令，其特征在于，当指令被执行时，使得计算机执行如上的生成在GO语言中运行的protobuf文件的方法。

本发明还提供一种系统，包括：

存储器，用于存储由系统的一个或多个处理器执行的指令，以及

处理器，用于执行如上的生成在GO语言中运行的protobuf文件的方法。

本发明利用胶水语言对中间文件.Proto(即，protobuf协议文件)进行上述处理，省去了现有技术中调用中间文件的步骤，可以有效降低错误率；另外，本发明可以将符合protobuf协议的中间文件.proto转换成可以在GO语言环境中运行的文件，实现在高级语言环境下完成可在Go语言环境执行的符合Protobuf协议标准的数据传输文件或代码，相对于传统的通信方式，有效降低错误率，且可以兼容高级语言环境，编程实现较为友好，缩短了后期开发周期。

附图说明

图1是根据本发明实施例的生成在GO语言中运行的protobuf文件的方法的系统的硬件结构框图；

图2是根据本发明实施例的生成在GO语言中运行的protobuf文件的装置的结构图；

图3是根据本发明实施例的生成在GO语言中运行的protobuf文件的方法的流程图；

图4是图2中的生成单元的具体结构图；

图5是图3中的生成步骤的具体流程图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明的实施方式作进一步地详细描述。

现在参考图1，所示为根据本申请的一个实施例的系统100(例如服务器系统100)的框图。服务器系统100可以包括耦合到控制器中枢103的一个或多个处理器101，对于至少一个实施例，控制器中枢103经由诸如前端总线(Front Side Bus,FSB)之类的多分支总线、诸如快速通道互连(QuickPath Interconnect,QPI)之类的点对点接口、或者类似的连接106与处理器101进行通信。处理器401执行控制一般类型的数据处理操作的指令。在一实施例中，控制器中枢103包括，但不局限于，图形存储器控制器中枢(Graphics&MemoryController Hub,GMCH)(未示出)和输入/输出中枢(Input Output Hub,IOH)(其可以在分开的芯片上)(未示出)，其中GMCH包括存储器和图形控制器并与IOH耦合。

服务器系统100还可包括耦合到控制器中枢103的协处理器102和存储器104。或者，存储器和GMCH中的一个或两者可以被集成在处理器内(如本申请中所描述的)，存储器104和协处理器102直接耦合到处理器101以及控制器中枢103，控制器中枢103与IOH处于单个芯片中。

存储器104可以是例如动态随机存取存储器(Dynamic Random Access Memory,DRAM)、相变存储器(Phase Change Memory,PCM)或这两者的组合。存储器104中可以包括用于存储数据和/或指令的一个或多个有形的、非暂时性计算机可读介质。计算机可读存储介质中存储有指令，具体而言，存储有该指令的暂时和永久副本。该指令可以包括：由处理器中的至少一个执行时导致电子设备实施如图3、-图5所示方法的指令。当指令在计算机上运行时，使得计算机执行本申请上述实施方式公开的生成在GO语言中运行的protobuf文件的方法。

在一个实施例中，协处理器102是专用处理器，诸如例如高吞吐量集成众核(ManyIntegrated Core,MIC)处理器、网络或通信处理器、压缩引擎、图形处理器、图形处理单元上的通用计算(General-purpose computing on graphics processing units，GPGPU)、或嵌入式处理器等等。协处理器102的任选性质用虚线表示在图1中。

在一个实施例中，服务器系统100可以进一步包括网络接口(Network InterfaceController,NIC)106。网络接口106可以包括收发器，用于为服务器系统100提供无线电接口，进而与任何其他合适的设备(如前端模块，天线等)进行通信。在各种实施例中，网络接口106可以与服务器系统100的其他组件集成。网络接口106可以实现上述实施例中的通信单元的功能。

服务器系统100可以进一步包括输入/输出(Input/Output,I/O)设备105。I/O105可以包括：用户界面，该设计使得用户能够与服务器系统100进行交互；外围组件接口的设计使得外围组件也能够与服务器系统100交互；和/或传感器设计用于确定与服务器系统100相关的环境条件和/或位置信息。

值得注意的是，图1仅是示例性的。即虽然图1中示出了服务器系统100包括处理器101、控制器中枢103、存储器104等多个器件，但是，在实际的应用中，使用本申请各方法的设备，可以仅包括服务器系统100各器件中的一部分器件，例如，可以仅包含处理器101和NIC106。

下面结合图2-5对本发明的实施例进行详细描述。

图2是根据本发明实施例的生成在GO语言中运行的protobuf文件的装置20的结构图，该装置20包括导入单元21、创建单元22、生成单元23和转换单元24。

图3是根据本发明实施例的生成在GO语言中运行的protobuf文件的方法的流程图。

下面结合图2和图3对本发明的实施例进行详细描述。

在导入步骤S31，导入单元21采用go.mod软件将二进制数据导入到第三方软件protobuf中，并生成中间文件(例如中间文件.proto)。导入第三方库例如是github的基础库，其他的处理Protobuf的库也可以。

接着，在创建步骤S32，创建单元22利用胶水语言创建第一模板文件。其中胶水语言是如java和Python这种经常和其他语言做串联开发的语言。本发明的实施例以java为例进行详细描述，通过java编写第一模板文件(例如第一.vm模板文件)。其他语言环境下的模板也可以。其中第一模板文件中包含需要进行填充的预设变量，预设变量为Go语言的应用中所需的部分信息。

模板文件是对于一些有一定规律的模式提供轮廓文件，通过轮廓文件的开发是一种现有的开发思想，比如vue.js就是基于模板文件。

在生成步骤S33，使用第一模版文件从中间文件获取部分信息，并根据部分信息生成最终模板文件。

在转换步骤S34，使用最终模板文件生成中间文件的GO语言文件。本实施例的应用环境是java，故文件代码只能在java环境生成，在其他高级语言环境也类似。本实施例中，例如，通过命令行驱动一个java文件运行就可以生成中间文件的GO语言文件。

图4是图2中的生成单元23的具体结构图，如图4所示，生成单元23包括检索单元231、编排单元232以及填充单元233。和图5是图3中的生成步骤S33的具体流程图。以下结合图4、图5进行详细说明。

Protobuf文件里面有重要的属性message和Enum，根据业务需求，Protobuf文件中可能会定义多个message和多个Enum，但是在Go语言的应用中只需要其中一部分，另外，还需要确保各message之间的关联关系(即，各message之间父子嵌套关系)，确保相关联的message不被遗漏。

如图5所示，在检索步骤S331，检索单元231根据GO语言的应用需要，使用第一模版文件从中间文件.proto检索出部分信息。其中，部分信息包括多个message和多个Enum中与GO语言的应用需要相关的部分message和部分Enum。检索包括对各message信息之间关系的检索，以满足在业务需求的情况下，检索对相关联(例如父子节点关系)的对象进行代码转换时，需要同步转换的条件。

本实施例中，可以采用递归迭代的方式进行检索的关系确认，生成需求精准的Go语言代码。

在编排步骤S332，编排单元232对部分message进行编排，使得检索出的部分message可以按照父子嵌套关系进行排列，从而生成第二模板文件。

在填充步骤S333，填充单元233使用部分message和部分Enum对第二模板文件的预设变量进行填充，生成最终模板文件。

进一步，由于protobuf协议可以有多个版本(例如两个版本：proto3和proto2)，且版本的差异主要取决于业务需求，因此本发明的实施例在进行检索之前，还包括对中间文件.proto的版本进行识别的步骤，以适应Go语言的特性。

进一步，中间文件.proto中包含文件头部(例如，定义为：Package common)。针对Go语言的应用需要，文件头部可以为main执行模块，也可以是对应的中间文件.proto的名称，并且还涉及多个版本的protobuf协议的语法差异区分。在java逻辑代码里，主要面向关键字。这里不考虑proto3与proto2之前Protobuf本身带来的序列化等内容。本发明的实施例在进行检索之前，还包括根据Go语言的应用需要，对中间文件.proto中的文件头部进行替换的步骤，以进一步适应Go语言的特性。

进一步，Go语言里面各类对象的首字母小写默认为私有属性，这种属性的对象不能对外部可见，也就不能被外部使用；可以被外部可见的是首字母大写格式。因此需要将Protobuf协议(中间文件.proto)中定义的小写对象修改为首字母大写。本发明中，先将中间文件.proto中的对象名称的字符串类型转换为字符数组类型，然后索引0ascii-32就可以判断大小写，再转回去字符串格式。因此，较佳的，本发明还包括将中间文件.proto中定义的小写对象修改为首字母大写，使得最终生成的中间文件的GO语言文件里统一为首字母大写，以进一步适应Go语言的特性。

本发明利用胶水语言对中间文件.Proto(即，protobuf协议文件)进行上述处理，省去了现有技术中调用中间文件的步骤，可以有效降低错误率；另外，本发明可以将符合protobuf协议的中间文件.proto转换成可以在GO语言环境中运行的文件，实现在高级语言环境下完成可在Go语言环境执行的符合Protobuf协议标准的数据传输文件或代码，相对于传统的通信方式，有效降低错误率，且可以兼容高级语言环境，编程实现较为友好，缩短了后期开发周期。

本发明还提供一种计算机可读的存储介质，该存储介质具有存储在其中的指令，当指令被执行时，使得计算机执行如上所述的生成在GO语言中运行的protobuf文件的方法。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本发明并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

Claims (8)

1.一种生成在GO语言中运行的protobuf文件的方法，其特征在于，所述方法包括：

导入步骤，将数据导入protobuf软件，得到中间文件；

创建步骤，使用胶水语言创建第一模板文件；

获取步骤，使用所述第一模版文件从所述中间文件获取部分message和部分Enum；

编排步骤，对所述部分message进行编排，生成第二模板文件；

填充步骤，使用所述部分message和所述部分Enum对所述第二模板文件进行填充，生成最终模板文件；

转换步骤，使用所述最终模板文件生成所述中间文件的GO语言文件。

2.如权利要求1所述的方法，其特征在于，所述获取步骤进一步包括：

检索步骤，根据所述GO语言的应用需要，使用所述第一模版文件从所述中间文件检索出所述部分message和所述部分Enum。

3.如权利要求2所述的方法，其特征在于，所述中间文件包含多个message和多个Enum，所述部分message和所述部分Enum是所述多个message和所述多个Enum中与所述GO语言的应用需要相关的部分message和部分Enum。

4.一种生成在GO语言中运行的protobuf文件的装置，其特征在于，所述装置包括：

导入单元，将数据导入protobuf软件，得到中间文件；

创建单元，使用胶水语言创建第一模板文件；

获取单元，使用所述第一模版文件从所述中间文件获取部分message和部分Enum；

编排单元，对所述部分message进行编排，生成第二模板文件；

填充单元，使用所述部分message和所述部分Enum对所述第二模板文件进行填充，生成最终模板文件；

转换单元，使用所述最终模板文件生成所述中间文件的GO语言文件。

5.如权利要求4所述的装置，其特征在于，所述获取单元进一步包括：

检索单元，根据所述GO语言的应用需要，使用所述第一模版文件从所述中间文件检索出所述部分message和所述部分Enum。

6.如权利要求5所述的装置，其特征在于，所述中间文件包含多个message和多个Enum，

所述所述部分message和所述部分Enum是所述多个message和所述多个Enum中与所述GO语言的应用需要相关的部分message和部分Enum。

7.一种计算机可读的存储介质，所述存储介质具有存储在其中的指令，其特征在于，当所述指令被执行时，使得所述计算机执行如权利要求1-3中任一项所述的生成在GO语言中运行的protobuf文件的方法。

8.一种系统，其特征在于，包括：

存储器，用于存储由系统的一个或多个处理器执行的指令，以及

处理器，用于执行如权利要求1-3中任一项所述的生成在GO语言中运行的protobuf文件的方法。