CN114492316A - 数据交换编解码方法和系统 - Google Patents
数据交换编解码方法和系统 Download PDFInfo
- Publication number
- CN114492316A CN114492316A CN202210054462.6A CN202210054462A CN114492316A CN 114492316 A CN114492316 A CN 114492316A CN 202210054462 A CN202210054462 A CN 202210054462A CN 114492316 A CN114492316 A CN 114492316A
- Authority
- CN
- China
- Prior art keywords
- data
- coding
- type data
- decoding
- type
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 58
- 238000007667 floating Methods 0.000 claims abstract description 26
- 230000015654 memory Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 7
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 210000001503 joint Anatomy 0.000 abstract description 4
- 239000003795 chemical substances by application Substances 0.000 description 13
- 238000005516 engineering process Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000003032 molecular docking Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000004174 erythrosine Substances 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000007723 transport mechanism Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/126—Character encoding
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/12—Use of codes for handling textual entities
- G06F40/151—Transformation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/20—Network architectures or network communication protocols for network security for managing network security; network security policies in general
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/04—Protocols for data compression, e.g. ROHC
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Signal Processing (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computing Systems (AREA)
- Computer Hardware Design (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本发明公开了一种数据交换编解码方法和系统,包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。极大减少了网络带宽的开销,数据交换具有极高的安全性,实现了多方平台之间的高效对接,实现了工业界编解码民用化。
Description
技术领域
本发明涉及数据交换编解码技术领域,尤其是涉及一种数据交换编解码方法和系统。
背景技术
随着物联网、5G等新型技术的快速发展,很多领域迎来了高速发展的新信息时代。终端与服务器之间的网络中,无时无刻不充斥着高速传输的海量数据,而这些数据也正是企业赖以发展和提效的基础。
现有的数据交换编解码方法包括ASN.1(Abstract Syntax Notation.One)、XML(Extensible Markup Language)和JSON(JavaScript Object Notation)等等。其中ASN.1在通信领域使用较多,而XML和JSON则在互联网领域中更为常见。
基于XML和JSON等编解码格式进行交换的数据,如果希望提升传输效率或者改善安全性,往往是通过对部分关键数据进行压缩或者加密的方法,但这样的局部优化有时会事倍功半,并不能保证每次的都能获得比较好的成效。而基于ASN.1编解码的方法,虽然编解码传输效率和安全性都很高,但是门槛很高,数据抽象描述对非专业人士很不友好,导致此技术在很多企业和工业软件里没有应用。
发明内容
本发明的目的在于克服上述技术不足,提出一种数据交换编解码方法和系统,解决现有技术中编解码方法占据较大的网络带宽,多方平台之间的对接不便,且使用的技术门槛较高的技术问题。
为达到上述技术目的,第一方面,本发明的技术方案提供一种数据交换编解码方法,包括步骤:
在规则解释器中配置编解码规则;
获取程序数据,所述程序数据包括基本类型数据和结构体类型数据;
在编码器中根据所述编解码规则对所述程序数据进行编码得到编码后码流,并发送到解码端;
在解码端接收所述编码后码流,在解码器中根据所述编解码规则对所述编码后码流进行解码得到所述程序数据。
与现有技术相比,本发明提供数据交换编解码方法的有益效果包括:
极大减少了网络带宽的开销:使用本发明编解码方法,能够极大地压缩网络数据的大小,减少了网络带宽的开销,本发明编码后数据在信息不丢失情况下极大地减少码流带宽的占有。经本发明数据交换编解码方法编码后的数据与使用XML格式编码的数据相比,带宽占用能减少80%以上,特别在数据描述信息比较多的情况下有很好的效果。
数据交换具有极高的安全性:编解码规则随版本发布,并不会在网络中传输。只要没有编解码规则,无论网络中的交换数据被如何截获,都不会被破解。编解码规则相当于扮演了“私钥”的角色,这使得数据交换具备了极高的安全性。
多方平台之间的高效对接:使用本发明的编解码方法,多方平台间的对接,无需再关注各个平台的编程语言、也无需关注各个平台对外提供的API接口声明方式,只需要各方平台根据编解码规则,实现数据的编码和解码即可高效完成彼此间的对接。
工业界编解码民用化:工业界编解码如ASN.1是经典的数据交换解决方案,但是由于门槛过高,导致企业级软件里没有得到应用。本发明的编解码设计方法不仅能做到高效和安全,还可以大幅降低学习门槛,易用性极高。
根据本发明的一些实施例,所述基本类型数据至少包括以下一种:
整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
根据本发明的一些实施例,当所述整数类型数据为uint8类型,所述编解码规则包括:
当需要编码的整型数值在0到255的范围,对所述整型数值编码得到编码结果,所述编码结果为所述整型数值。
根据本发明的一些实施例,当所述整数类型数据为uint16类型,所述编解码规则包括:
当需要编码的整型数值在0到65535的范围,对所述整型数值编码得到编码结果,所述编码结果包括N1和N0,N1是对256取整的结果,N0是对256取余的结果。
根据本发明的一些实施例,当所述整数类型数据为uint32类型,所述编解码规则包括:
当需要编码的整型数值在0到4294967295的范围,对所述整型数值编码得到编码结果,所述编码结果包括N3、N2、N1和N0,所述整型数值对65536取整得到D1,所述整型数值对65536取余得D2,N3是D1对256取整的结果,N2是D1对256取余的结果,N1是D2对256取整的结果,N0是D2对256取余的结果。
根据本发明的一些实施例,所述浮点类型数据编解码规则包括:
根据所述浮点类型数据的符号位、有效数字和指数位对所述浮点类型数据进行编码得到第一数值,再将所述第一数值按照uint32类型的编解码规则进行编码。
根据本发明的一些实施例,所述比特类型数据编解码规则包括:
当所述比特类型数据为1,编码结果为1;
当所述比特类型数据为0,编码结果为0。
根据本发明的一些实施例,所述字符串类型数据编解码规则包括:
根据所述字符串类型数据的数据长度,和所述字符串类型数据的字符转换成十进制的ASCII码对所述字符串类型数据进行编码。
根据本发明的一些实施例,所述结构体类型数据编解码规则包括:
将所述结构体类型数据的基本类型元素顺序展开,并对所述基本类型元素进行编码。
根据本发明的一些实施例,当所述整数类型数据为int8类型,所述编解码规则包括:如果被编码的整数不在-128到127的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到127的范围,则直接返回被编码整数。例如,对数字18进行编码,编码后的结果就是18。
(2)如果被编码整数在-128到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到最终编码后的结果N1。例如,对数字-128进行编码,首先取绝对值得到D1为128,对D1按位取反得到D2,再对D2+1得到最终结果N0。
根据本发明的一些实施例,当所述整数类型数据为int16类型,所述编解码规则包括:如果被编码的整数不在-32768到32767的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到32767的范围,则同uint16类型编码。例如,对数字258进行编码,编码后的结果就是1,2。
(2)如果被编码整数在-32768到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到D3,再对D3进行uint16类型编码。例如,对数字-1进行编码,首先得到D1为1(二进制:0000 0000 0000 0001),对D1按位取反得到D2(1111 1111 1111 1110),再对D2+1得到D3=65535(1111 1111 1111 1111),进而按照uint16编码得到255,255。
根据本发明的一些实施例,当所述整数类型数据为int32类型,所述编解码规则包括:
如果被编码的整数不在-2147483648到2,47483647的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到2147483647的范围,则同uint32类型编码。例如,对数字65793进行编码,编码后的结果就是0,1,1,1。
(2)如果被编码整数在-2147483648到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到D3,再对D3进行uint32类型编码。例如,对数字-10进行编码,首先得到D1为10(二进制:0000 0000 0000 0000 00000000 0000 1010),对D1按位取反得到D2(1111 1111 1111 1111 1111 1111 1111 0101),再对D2+1得到D3=2147483648(1111 1111 1111 1111 1111 1111 1111 0110),进而按照uint32编码得到255,255,255,246。
根据本发明的一些实施例,所述布尔类型数据编解码规则包括:
如果被编码的数据不为true或者false,则报错,否则将true转换成1,false转换成0,再按照uint8进行编码。例如,对false进行编码,编码后结果为0。
第二方面,本发明提供了一种数据交换编解码系统,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面中任意一项所述的数据交换编解码方法。
本发明的附加方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明的上述和/或附加的方面和优点从结合下面附图对实施例的描述中将变得明显和容易理解,其中摘要附图要与说明书附图的其中一幅完全一致:
图1为本发明一个实施例提供的数据交换编解码方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
需要说明的是,虽然在系统示意图中进行了功能模块划分,在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于系统中的模块划分,或流程图中的顺序执行所示出或描述的步骤。说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本发明提供了一种数据交换编解码方法,极大减少了网络带宽的开销:使用本发明编解码方法,能够极大地压缩网络数据的大小,减少了网络带宽的开销。数据交换具有极高的安全性:编解码规则随版本发布,并不会在网络中传输。只要没有编解码规则,无论网络中的交换数据被如何截获,都不会被破解。编解码规则相当于扮演了“私钥”的角色,这使得数据交换具备了极高的安全性。
下面结合附图,对本发明实施例作进一步阐述。
参照图1,图1为本发明一个实施例提供的数据交换编解码方法的流程图,数据交换编解码方法包括但是不仅限于步骤S110至步骤S140。
步骤S110,在规则解释器中配置编解码规则;
步骤S120,获取程序数据,程序数据包括基本类型数据和结构体类型数据;
步骤S130,在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;
步骤S140,在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。
本实施例提供的数据交换编解码方法极大减少了网络带宽的开销:使用本发明编解码方法,能够极大地压缩网络数据的大小,减少了网络带宽的开销。本实施例提供的数据交换编解码方法的数据交换过程具有极高的安全性:编解码规则随版本发布,并不会在网络中传输。只要没有编解码规则,无论网络中的交换数据被如何截获,都不会被破解。编解码规则相当于扮演了“私钥”的角色,这使得数据交换具备了极高的安全性。
本实施例提供的数据交换编解码方法实现了多方平台之间的高效对接:使用本发明的编解码方法,多方平台间的对接,无需再关注各个平台的编程语言、也无需关注各个平台对外提供的API接口声明方式,只需要各方平台根据编解码规则,实现数据的编码和解码即可高效完成彼此间的对接。本实施例提供的数据交换编解码方法实现了工业界编解码民用化:工业界编解码如ASN.1是经典的数据交换解决方案,但是由于门槛过高,导致企业级软件里没有得到应用。本发明的编解码设计方法不仅能做到高效和安全,还可以大幅降低学习门槛,易用性极高。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
当整数类型数据为uint8类型,编解码规则包括:当需要编码的整型数值在0到255的范围,对整型数值编码得到编码结果,编码结果为整型数值。如果被编码的整数不在0到255的范围,则报错,否则编码直接返回被编码的整数。例如,对数字18进行编码,编码后的结果就是18。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
当整数类型数据为uint16类型,编解码规则包括:当需要编码的整型数值在0到65535的范围,对整型数值编码得到编码结果,编码结果包括N1和N0,N1是对256取整的结果,N0是对256取余的结果。如果被编码的整数不在0到65535的范围,则报错,否则编码返回两个0-255的整数:N1,N0。其中,N1是表示对256取整的结果,N0表示对256取余的结果。例如,对数字258进行编码,编码后的结果就是1,2。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
当整数类型数据为uint32类型,编解码规则包括:当需要编码的整型数值在0到4294967295的范围,对整型数值编码得到编码结果,编码结果包括N3、N2、N1和N0,整型数值对65536取整得到D1,整型数值对65536取余得D2,N3是D1对256取整的结果,N2是D1对256取余的结果,N1是D2对256取整的结果,N0是D2对256取余的结果。如果被编码的数字不在0到4294967295的范围,则报错,否则编码返回四个0-255的整数:N3,N2,N1,N0。假设被编码数对65536取整得到D1,对65536取余得D2,那么N3是表示D1对256取整的结果,N2是表示D1对256取余的结果,N1是表示D2对256取整的结果,N0是表示D2对256取余的结果。例如,对数字65793进行编码,编码后的结果就是0,1,1,1。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
浮点类型数据编解码规则包括:根据浮点类型数据的符号位、有效数字和指数位对浮点类型数据进行编码得到第一数值,再将第一数值按照uint32类型的编解码规则进行编码。
如果被编码的浮点类型数据不在1.2E-38到3.4E+38的范围,则报错,否则按照如下原则进行编码:
浮点类型数据F都可以用(-1)^SM2^E来表示,其中S代表符号位,M代表有效数字,E代表指数位。浮点类型数据的编码过程就是确定S、M和E的过程。S、M和E参考国际标准IEEE754,一共占4个字节,按照SEEE EEEE EMMM MMMM MMMM MMMM MMMM MMMM进行组织。
如果被编码浮点数≥0则S=0,否则S=1;
将浮点数去掉符号位后的数值转换成二进制F1,并移动F1小数点E1位(向左移动为正,向右移动为负),使得移动后的二进制数F2形如1.xxxx,则E=127+E1;
F2的第一个数始终是1,如果不在M中保存该数(在解码的时候自行添加首位1),那么M便可以多保存一位小数数字,提升表示精度,若小数点后的数据如果不足23位则补0,最终得到M=xxx x000 0000 0000 0000 0000;
最后,拼接S、E和M得到D1,再对D1进行uint32进行编码。
例如,浮点数为9.5,转换成二进制则为1001.1,即1.0011*2^3,所以S=0,E=130,M=001 1000 0000 0000 0000 0000,合并S、E和M后得到0100 0001 0001 1000 0000 00000000 0000,对其进行uint32编码得到65,24,0,0。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
比特类型数据编解码规则包括:当比特类型数据为1,编码结果为1;当比特类型数据为0,编码结果为0。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
字符串类型数据编解码规则包括:根据字符串类型数据的数据长度,和字符串类型数据的字符转换成十进制的ASCII码对字符串类型数据进行编码。string(字符串)类型编码后的格式为L1,A1,A2,...,AN。其中,L1表示字符串的字符个数(限定最大255),是十进制的正整数,A1-AN均表示字符转换成十进制的ASCII码。例如,被编码字符串为“Tom”,编码后的结果为3,84,111,109,其中3是表示字符串一共3个字符,而84,111,109则分别代表了字母“T”,“o”和“m”的十进制ASCII码。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
结构体类型数据编解码规则包括:将结构体类型数据的基本类型元素顺序展开,并对基本类型元素进行编码。
在一实施例中,数据交换编解码方法包括步骤:在规则解释器中配置编解码规则;获取程序数据,程序数据包括基本类型数据和结构体类型数据;在编码器中根据编解码规则对程序数据进行编码得到编码后码流,并发送到解码端;在解码端接收编码后码流,在解码器中根据编解码规则对编码后码流进行解码得到程序数据。基本类型数据至少包括以下一种:整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
在一实施例中,当整数类型数据为int8类型,编解码规则包括:如果被编码的整数不在-128到127的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到127的范围,则直接返回被编码整数。例如,对数字18进行编码,编码后的结果就是18。
(2)如果被编码整数在-128到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到最终编码后的结果N1。例如,对数字-128进行编码,首先取绝对值得到D1为128,对D1按位取反得到D2,再对D2+1得到最终结果N0。
在一实施例中,当整数类型数据为int16类型,编解码规则包括:如果被编码的整数不在-32768到32767的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到32767的范围,则同uint16类型编码。例如,对数字258进行编码,编码后的结果就是1,2。
(2)如果被编码整数在-32768到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到D3,再对D3进行uint16类型编码。例如,对数字-1进行编码,首先得到D1为1(二进制:0000 0000 0000 0001),对D1按位取反得到D2(1111 1111 1111 1110),再对D2+1得到D3=65535(1111 1111 1111 1111),进而按照uint16编码得到255,255。
在一实施例中,当整数类型数据为int32类型,编解码规则包括:
如果被编码的整数不在-2147483648到2,47483647的范围,则报错,否则按照如下原则进行编码:
(1)如果被编码整数在0到2147483647的范围,则同uint32类型编码。例如,对数字65793进行编码,编码后的结果就是0,1,1,1。
(2)如果被编码整数在-2147483648到-1的范围,则先对被编码整数取绝对值得到D1,然后将D1按照位取反(即0→1,1→0)得到D2,最后将D2+1得到D3,再对D3进行uint32类型编码。例如,对数字-10进行编码,首先得到D1为10(二进制:0000 0000 0000 0000 00000000 0000 1010),对D1按位取反得到D2(1111 1111 1111 1111 1111 1111 1111 0101),再对D2+1得到D3=2147483648(1111 1111 1111 1111 1111 1111 1111 0110),进而按照uint32编码得到255,255,255,246。
在一实施例中,布尔类型数据编解码规则包括:
如果被编码的数据不为true或者false,则报错,否则将true转换成1,false转换成0,再按照uint8进行编码。例如,对false进行编码,编码后结果为0。
解码,从本质上理解,就是将收到的字节流转换成程序中目标变量的过程,相当于编码的逆向过程。和编码相同,解码也需要基于规则,并且规则必须与编码规则保持一致。
解码侧,根据规则中描述的数据类型(基本类型/结构体类型),按照结构体的层次,顺序提取字节数据并赋值到指定变量。
一、基本类型的解码
1、uint8类型
读取1个字节,并直接返回该字节的数值。例如,当前字节的数值是18,则解码后的结果就是18。
2、uint16类型
顺序读取2个字节,假设依次为N1,N0,则解码后的数值为N1256+N0。例如,当前读取到的的字节数值依次为1,2时,解码后的结果则为1256+2,即258。
3、uint32类型
顺序读取4个字节,假设依次为N3,N2,N1,N0,则解码后的结果为N3256^3+N2256^2+N1256+N0。例如,当前读取到的的字节数值依次为0,1,1,1时,解码后的结果则为0256^3+1256^2+1256+1,即65793。
4、int8类型
读取1个字节,如果首位是0,则表示为正数,直接返回该字节对应的数值;如果首位是1,则表示为负数,先将其减1,再按位取反得到D1,返回-D1。例如,当前字节的数值是128,则解码后的结果就是-128。
5、int16类型
顺序读取2个字节,假设依次为N1,N0,如果N1的首位是0,则表示正数,则解码后的结果为N1256+N0;如果N1的首位是1,则表示负数,将N1256+N0得到D1,将D1减1后再按位取反得到D2,则解码后的结果为-D2。例如,当前读取到的的字节数值依次为128,1时,返回-32767。
6、int32类型
顺序读取4个字节,假设依次为N3,N2,N1,N0,如果N3的首位是0,则表示正数,则解码后的数值为N3256^3+N2256^2+N1256+N0;如果N3的首位是1,则表示负数,计算N3256^3+N2256^2+N1256+N0得到D1,将D1减1后再按位取反得到D2,则解码后的结果为-D2。例如,当前读取到的的字节数值依次为255,255,255,255时,返回-1。
7、float(浮点)类型
顺序读取4个字节,假设依次为N3,N2,N1,N0,计算N3256^3+N2256^2+N1256+N0得到D1,按照SEEE EEEE EMMM MMMM MMMM MMMM MMMM MMMM的位排列规则从D1中提取S、E和M的值,进而对M前面补1,得到M1=1.M,E1=E-127,最后将S、E1和M1代入(-1)^SM1*2^E即可得到解码后的二进制浮点数F。例如,当前读取的字节数值依次为65,24,0,0,则D1=01000001 0001 1000 0000 0000 0000 0000,所以S=0,E1=3,M1=1.0011,进而二进制F=1001.1,即十进制9.5。
8、bit(比特)类型
读取1个字节,并直接返回该字节的数值。
9、bool(布尔)类型
读取1个字节,如果是1,则返回true;如果是0则返回false。
10、string(字符串)类型
首先读取1个字节,该数值的大小L1表示了字符串的字符个数,接下来顺序读取L1个字节,并将每个字节的数值(十进制ASCII码)转换成对应的字符。例如,当前读取到的字节数值依次为3,84,111,109时,L1即为3,表示一共有3个字符,接下来顺序读取84,111和109三个字符,根据ASCII码表可以知道,分别对应字母“T”,“o”和“m”,因而解码得到了字符串“Tom”。
二、结构体类型的解码
结构体类型的解码,首先是根据规则中key的定义,在程序中生成对应的数据结构变量,再依次将基本类型数据解码后的结果赋值给每个key对应的value即可。解码端收到的字节流中是不会包含结构体中的key信息,只能依赖规则在程序中生成。
在一实施例中,编解码设计方法是基于BNF范式(Backus-Naur Form)实现编解码规则的分析和解释。
BNF范式是种上下文无关文法(CFG,context-free grammar),它的语法结构为形如name::=expansion,其中:
name代表了非终止符(非终止,意味着它会进一步被其它内容替换/定义),使用尖括号表示,例如<non-terminal>;
::=表示“可替换为”或者“可定义为”,表示将用::=右侧内容替换/定义左侧的非终止符;
expansion是由非终止符和终止符(终止,表示该符号无需再被替换/定义)组成的表达式。
通过BNF范式多个语法规则间的组合和递归,进而实现了全部编解码规则的解释和分析。
本发明用于解释数据的BNF范式描述如下:
<SPEC>::=<ELEMS>
<ELEMS>::=<ELEM>+
<ELEM>::=<KEY><DEF><TYPE>
<TYPE>::=<WORD>|<STRUCT>
<STRUCT>::=<WORD><DEF><LBRACKET><ELEMS><RBRACKET>
<KEY>::=<WORD>
<WORD>::="[a-zA-Z_0-9]+"
<DEF>::=":"
<LBRACKET>::="{"
<RBRACKET>::="}"
其中,<SPEC>、<ELEMS>等均表示非终止符,“:”、"{"等表示终止符,"+"表示匹配前面的元素至少一次,“|”表示“或”的关系。例如,<ELEMS>是由多个<ELEM>组成,<TYPE>是由<WORD>或者<STRUCT>组成,<WORD>是表示字符串(由大小写字母、数字或者‘_’组成),<STRUCT>中嵌套了<ELEMS>(实现递归)等等。
通过本发明的解释方法可以:
生成目标程序语言的结构体代码,编译后随版本发布,进而实现实时编解码,提升编解码效率;
生成解释器,结合规则,实现对码流逐字节的解释和翻译。
本发明还提供了一种数据交换编解码系统,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如上述的数据交换编解码方法。
处理器和存储器可以通过总线或者其他方式连接。
存储器作为一种非暂态计算机可读存储介质,可用于存储非暂态软件程序以及非暂态性计算机可执行程序。此外,存储器可以包括高速随机存取存储器,还可以包括非暂态存储器,例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施方式中,存储器可选包括相对于处理器远程设置的存储器,这些远程存储器可以通过网络连接至该处理器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
需要说明的是,本实施例中的数据交换编解码系统,可以包括有业务处理模块、边缘端数据库、服务端版本信息寄存器、数据同步模块,处理器执行计算机程序时实现如上述应用在数据交换编解码系统的数据交换编解码方法。
以上所描述的装置实施例仅仅是示意性的,其中作为分离部件说明的单元可以是或者也可以不是物理上分开的,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
此外,本发明的一个实施例还提供了一种计算机可读存储介质,该计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被一个处理器或控制器执行,例如,被上述终端实施例中的一个处理器执行,可使得上述处理器执行上述实施例中的数据交换编解码方法。
本领域普通技术人员可以理解,上文中所公开方法中的全部或某些步骤、系统可以被实施为软件、固件、硬件及其适当的组合。某些物理组件或所有物理组件可以被实施为由处理器,如中央处理器、数字信号处理器或微处理器执行的软件,或者被实施为硬件,或者被实施为集成电路,如专用集成电路。这样的软件可以分布在计算机可读介质上,计算机可读介质可以包括计算机存储介质(或非暂时性介质)和通信介质(或暂时性介质)。如本领域普通技术人员公知的,术语计算机存储介质包括在用于存储信息(诸如计算机可读指令、数据结构、程序模块或其他数据)的任何方法或技术中实施的易失性和非易失性、可移除和不可移除介质。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字多功能盘(DVD)或其他光盘存储、磁盒、磁带、磁盘存储或其他磁存储装置、或者可以用于存储期望的信息并且可以被计算机访问的任何其他的介质。此外,本领域普通技术人员公知的是,通信介质通常包含计算机可读指令、数据结构、程序模块或者诸如载波或其他传输机制之类的调制数据信号中的其他数据,并且可包括任何信息递送介质。
以上是对本发明的较佳实施进行了具体说明,但本发明并不局限于上述实施方式,熟悉本领域的技术人员在不违背本发明精神的前提下还可作出种种的等同变形或替换,这些等同的变形或替换均包含在本发明权利要求所限定的范围内。
以上所述本发明的具体实施方式,并不构成对本发明保护范围的限定。任何根据本发明的技术构思所做出的各种其他相应的改变与变形,均应包含在本发明权利要求的保护范围内。
Claims (10)
1.一种数据交换编解码方法,其特征在于,包括步骤:
在规则解释器中配置编解码规则;
获取程序数据,所述程序数据包括基本类型数据和结构体类型数据;
在编码器中根据所述编解码规则对所述程序数据进行编码得到编码后码流,并发送到解码端;
在解码端接收所述编码后码流,在解码器中根据所述编解码规则对所述编码后码流进行解码得到所述程序数据。
2.根据权利要求1所述的数据交换编解码方法,其特征在于,所述基本类型数据至少包括以下一种:
整数类型数据、浮点类型数据、比特类型数据、布尔类型数据、字符串类型数据。
3.根据权利要求2所述的数据交换编解码方法,其特征在于,当所述整数类型数据为uint8类型,所述编解码规则包括:
当需要编码的整型数值在0到255的范围,对所述整型数值编码得到编码结果,所述编码结果为所述整型数值。
4.根据权利要求2所述的数据交换编解码方法,其特征在于,当所述整数类型数据为uint16类型,所述编解码规则包括:
当需要编码的整型数值在0到65535的范围,对所述整型数值编码得到编码结果,所述编码结果包括N1和N0,N1是对256取整的结果,N0是对256取余的结果。
5.根据权利要求2所述的数据交换编解码方法,其特征在于,当所述整数类型数据为uint32类型,所述编解码规则包括:
当需要编码的整型数值在0到4294967295的范围,对所述整型数值编码得到编码结果,所述编码结果包括N3、N2、N1和N0,所述整型数值对65536取整得到D1,所述整型数值对65536取余得D2,N3是D1对256取整的结果,N2是D1对256取余的结果,N1是D2对256取整的结果,N0是D2对256取余的结果。
6.根据权利要求2所述的数据交换编解码方法,其特征在于,所述浮点类型数据编解码规则包括:
根据所述浮点类型数据的符号位、有效数字和指数位对所述浮点类型数据进行编码得到第一数值,再将所述第一数值按照uint32类型的编解码规则进行编码。
7.根据权利要求2所述的数据交换编解码方法,其特征在于,所述比特类型数据编解码规则包括:
当所述比特类型数据为1,编码结果为1;
当所述比特类型数据为0,编码结果为0。
8.根据权利要求2所述的数据交换编解码方法,其特征在于,所述字符串类型数据编解码规则包括:
根据所述字符串类型数据的数据长度,和所述字符串类型数据的字符转换成十进制的ASCII码对所述字符串类型数据进行编码。
9.根据权利要求1所述的数据交换编解码方法,其特征在于,所述结构体类型数据编解码规则包括:
将所述结构体类型数据的基本类型元素顺序展开,并对所述基本类型元素进行编码。
10.一种数据交换编解码系统,其特征在于,包括:存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如权利要求1至9中任意一项所述的数据交换编解码方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210054462.6A CN114492316A (zh) | 2022-01-18 | 2022-01-18 | 数据交换编解码方法和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210054462.6A CN114492316A (zh) | 2022-01-18 | 2022-01-18 | 数据交换编解码方法和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN114492316A true CN114492316A (zh) | 2022-05-13 |
Family
ID=81511532
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210054462.6A Pending CN114492316A (zh) | 2022-01-18 | 2022-01-18 | 数据交换编解码方法和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114492316A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115834736A (zh) * | 2022-11-14 | 2023-03-21 | 四川启睿克科技有限公司 | 一种二进制报文的声明式报文解码方法 |
CN117278053A (zh) * | 2023-11-17 | 2023-12-22 | 南京智盟电力有限公司 | 一种gltf-json格式数据压缩方法、系统及装置 |
-
2022
- 2022-01-18 CN CN202210054462.6A patent/CN114492316A/zh active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115834736A (zh) * | 2022-11-14 | 2023-03-21 | 四川启睿克科技有限公司 | 一种二进制报文的声明式报文解码方法 |
CN117278053A (zh) * | 2023-11-17 | 2023-12-22 | 南京智盟电力有限公司 | 一种gltf-json格式数据压缩方法、系统及装置 |
CN117278053B (zh) * | 2023-11-17 | 2024-02-09 | 南京智盟电力有限公司 | 一种gltf-json格式数据压缩方法、系统及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Ambainis et al. | Dense quantum coding and a lower bound for 1-way quantum automata | |
CN114492316A (zh) | 数据交换编解码方法和系统 | |
KR100424130B1 (ko) | 데이터 압축 장치, 데이터베이스 시스템, 데이터 통신시스템, 데이터 압축 방법, 기억 매체 및 프로그램 전송장치 | |
CN109104405B (zh) | 二进制协议编码、解码方法和装置 | |
CN113889076B (zh) | 语音识别及编解码方法、装置、电子设备及存储介质 | |
CN110264361A (zh) | 一种区块链的数据解析方法及装置 | |
CN111131403A (zh) | 一种物联网设备的消息编解码方法及装置 | |
CN116506073A (zh) | 一种工业计算机平台数据快速传输方法及系统 | |
CN114020272A (zh) | 一种序列化编码、解码方法、装置及电子设备 | |
CN112884120A (zh) | 图神经网络表示架构 | |
CN112417515A (zh) | 组态软件协议处理方法及系统 | |
Yang et al. | Vehicle text data compression and transmission method based on maximum entropy neural network and optimized huffman encoding algorithms | |
CN114614829A (zh) | 卫星数据帧的处理方法、装置、电子设备和可读存储介质 | |
CN115604365B (zh) | 数据编解码方法、装置、电子设备及可读存储介质 | |
CN112188211A (zh) | 一种转码实现方法和装置 | |
JPH10164374A (ja) | パタン符号化方式及び復号化方式とこの方式を用いた符号化装置及び復号化装置 | |
CN115314121B (zh) | 量子通信方法、装置及电子设备 | |
US9235610B2 (en) | Short string compression | |
CN105808549A (zh) | 基于映射文件自动组帧及分析帧的客户端方法 | |
CN116566397A (zh) | 编码、解码方法、编码器、解码器、电子设备及存储介质 | |
CN116863949A (zh) | 通信接收方法及其装置 | |
CN102891730B (zh) | 基于bcd码卫星短报文的编码方法和装置 | |
US9722631B2 (en) | Method and apparatus for calculating estimated data compression ratio | |
Ramanathan | Unishox: A hybrid encoder for short unicode strings | |
AU2021100433A4 (en) | A process for reducing execution time for compression techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Country or region after: China Address after: 210000 East Side, 11th Floor, Building A, Jiangbei International Smart Valley, No.1 Xinbei Road, Pukou District, Nanjing City, Jiangsu Province Applicant after: Nanjing Chenggong Kaiwu Technology Co.,Ltd. Address before: 214000 180-8-601-7, Linghu Avenue, Xinwu District, Wuxi City, Jiangsu Province Applicant before: CHENGONG (Wuxi) Industrial Technology Co.,Ltd. Country or region before: China |