CN103888448A - 数据传输、存储方法和装置及系统 - Google Patents
数据传输、存储方法和装置及系统 Download PDFInfo
- Publication number
- CN103888448A CN103888448A CN201410075214.5A CN201410075214A CN103888448A CN 103888448 A CN103888448 A CN 103888448A CN 201410075214 A CN201410075214 A CN 201410075214A CN 103888448 A CN103888448 A CN 103888448A
- Authority
- CN
- China
- Prior art keywords
- data
- division
- formatted
- transmission
- data division
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Storage Device Security (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本发明提出一种数据传输、存储方法和装置及系统,为降低数据量和提高保密性。该数据传输方法包括根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;向服务器传输数据,所述传输的数据包括所述第一数据部分。该方法能够降低数据量,并提高数据保密性。
Description
技术领域
本发明涉及数据处理技术领域,由于涉及一种数据传输、存储方法和装置及系统。
背景技术
随着计算世界的发展,各公司都积累了大量的数据。各种规模的组织开始有了处理大数据的需求,而目前关系型数据库在可缩放方面几乎已经达到极限。一个解决方案可以是使用键值(Key-Value)存储数据库,其数据按照键值对的形式进行组织、索引和存储。键值方式表示的数据可以分为格式数据部分和剩余数据部分,格式数据部分是大量数据组都包含的部分,剩余数据部分是每组数据的特有部分。例如,用键值方式表示的多组数据如下:
account=json,password=1234;
account=tom,password=1357;
account=marry,password=2468。
上述多组数据的格式数据部分是account和password,而每组数据的剩余数据部分分别是:
json,1234;
tom,1357;
marry,2468。
相关技术中,在数据传输时,是将上述的每组数据全部,包括格式数据部分,明文方式或加密处理后传输。
这种方式一方面会造成传输量加大,加重传输负担;另一方面,传输数据被解密后会对解密者明确获知传输内容,造成保密性不足。
发明内容
本发明旨在至少在一定程度上解决相关技术中的技术问题之一。
为此,本发明的一个目的在于提出一种数据传输方法,该方法可以降低数据传输量且增强保密性。
本发明的另一个目的在于提出一种数据存储方法,该方法可以降低数据存储量且增强保密性。
本发明的另一个目的在于提出一种数据传输装置。
本发明的另一个目的在于提出一种数据存储装置。
本发明的另一个目的在于提出一种数据处理系统。
为达到上述目的,本发明第一方面实施例提出的数据传输方法,包括:根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;向服务器传输数据,所述传输的数据包括所述第一数据部分。
本发明第一方面实施例提出的数据传输方法,通过在要传输的数据中去除格式数据部分,使得在传输时不再传输格式数据部分,可以降低传输数据量,并且,由于仅传输了部分内容,破解者不知道传输的数据的全部内容,提高了数据的保密性。
为达到上述目的,本发明第二方面实施例提出的数据存储方法,包括:接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;存储所述第一数据部分。
本发明第二方面实施例提出的数据存储方法,通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。为达到上述目的,本发明第三方面实施例提出的数据传输装置,包括:处理模块,用于根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;传输模块,用于向服务器传输数据,所述传输的数据包括所述第一数据部分。
本发明第三方面实施例提出的数据传输装置,通过在要传输的数据中去除格式数据部分,使得在传输时不再传输格式数据部分,可以降低传输数据量,并且,由于仅传输了部分内容,破解者不知道传输的数据的全部内容,提高了数据的保密性。
为达到上述目的,本发明第四方面实施例提出的数据存储装置,包括:接收模块,用于接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;存储模块,用于存储所述第一数据部分。
本发明第四方面实施例提出的数据存储装置,通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
为达到上述目的,本发明第五方面实施例提出的数据处理系统,包括:第三方面实施例提出的数据传输装置和第四方面实施例提出的数据存储装置。
本发明第五方面实施例提出的数据处理系统,在传输时通过在要传输的数据中去除格式数据部分,使得在传输时不再传输格式数据部分,可以降低传输数据量,并且,由于仅传输了部分内容,破解者不知道传输的数据的全部内容,提高了数据的保密性;在存储时通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
为达到上述目的,本发明第六方面实施例提出的客户端设备,包括:壳体、处理器、存储器、电路板和电源电路,其中,所述电路板安置在所述壳体围成的空间内部,所述处理器和所述存储器设置在所述电路板上;所述电源电路,用于为所述客户端设备的各个电路或器件供电;所述存储器用于存储可执行程序代码;所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序,以用于:根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;向服务器传输数据,所述传输的数据包括所述第一数据部分。
本发明第六方面实施例提出的客户端设备,通过在要传输的数据中去除格式数据部分,使得在传输时不再传输格式数据部分,可以降低传输数据量,并且,由于仅传输了部分内容,破解者不知道传输的数据的全部内容,提高了数据的保密性。
为达到上述目的,本发明第七方面实施例提出的服务器,包括:壳体、处理器、存储器、电路板和电源电路,其中,所述电路板安置在所述壳体围成的空间内部,所述处理器和所述存储器设置在所述电路板上;所述电源电路,用于为所述服务器各个电路或器件供电;所述存储器用于存储可执行程序代码;所述处理器通过读取所述存储器中存储的可执行程序代码来运行与所述可执行程序代码对应的程序,以用于:接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;存储所述第一数据部分。
本发明第七方面实施例提出的服务器,通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
本发明附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本发明的实践了解到。
附图说明
本发明上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本发明实施例提出的一种数据传输方法的流程示意图;
图2为本发明实施例提供的另一种数据传输方法的流程示意图;
图3为本发明实施例提供的另一种数据传输方法的流程示意图;
图4为本发明实施例提供的另一种数据传输方法的流程示意图;
图5为本发明实施例提供的一种数据存储方法的流程示意图;
图6为本发明实施例提供的另一种数据存储方法的流程示意图;
图7为本发明实施例提供的另一种数据存储方法的流程示意图;
图8为本发明实施例提供的一种数据传输装置的结构示意图;
图9为本发明实施例提供的一种数据存储装置的结构示意图;
图10为本发明实施例提供的另一种数据存储装置的结构示意图;
图11为本发明实施例提供的一种数据处理系统的结构示意图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本发明,而不能理解为对本发明的限制。相反,本发明的实施例包括落入所附加权利要求书的精神和内涵范围内的所有变化、修改和等同物。
图1为本发明实施例提出的一种数据传输方法的流程示意图,包括:
S11:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
其中,在客户端和服务器中可以预先设定对应的格式库,格式库中包含至少一个的格式文件。
例如,可以设定格式文件是,account=string,password=shortint
在要传输的数据为:account=json,password=1234时,就可以去除格式数据部分,也就是account和password,因此,得到的第一数据部分为:
json,1234。
S12:客户端向服务器传输数据,所述传输的数据包括所述第一数据部分。
相关技术中,客户端是向服务器传输全部的数据,包括格式数据部分,而本发明实施例不传输格式数据部分。
以上述例子进行说明,相关技术中,传输的数据为:
account=json,password=1234
而本发明实施例传输的数据为:
json,1234。
本实施例通过去除要传输的数据中的格式数据部分,可以降低传输的数据量。并且,由于仅传输了部分内容,破解者即使获取了这些数据也不能获知这些数据的用途,天然具有保密效果,提高了保密性。
上述通过传输第一数据部分可以降低数据量,进一步的,当对第一数据部分进行优化处理后,还可以进一步降低数据量。
该优化处理可以具体参见下述的实施例。
图2为本发明实施例提供的另一种数据传输方法的流程示意图,该方法包括:
S21:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11,在此不再赘述。
S22:客户端在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
例如,相关技术中,传输的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将传输的整型数据表示为二进制的数值,可以进一步降低数据量。
图3为本发明实施例提供的另一种数据传输方法的流程示意图,该方法包括:
S31:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11,在此不再赘述。
S32:客户端在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行传输。
在实际传输数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要传输的数据包括多个位数据时,例如,要传输的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要传输的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将传输的位数据进行合并,可以进一步降低数据量。
在一个实施例中,要传输数据可能具有不同的格式,为了服务器可以正确恢复数据,可以在传输的数据中包含指示信息。
图4为本发明实施例提供的另一种数据传输方法的流程示意图,该方法包括:
S41:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11,在此不再赘述。
S42:客户端向服务器传输数据,所述传输的数据包括所述第一数据部分和指示信息,所述指示信息用于指示所述要传输的数据对应的格式文件,以使所述服务器端根据所述指示信息确定所述第一数据部分对应的格式文件。
客户端和服务器中设置的格式库中可以包含多个格式文件,例如,一个格式文件表示账户和密码,另一个格式文件表示使用信息,如要传输的数据包括文件大小和使用的时间等。
在当前要传输的数据的格式为账户和密码时,可以在传输的数据中还包括用于指示格式文件为账户和密码的指示信息,这样服务器根据该指示信息可以确定对应的格式文件,进而根据格式文件以及接收的第一数据部分可以恢复出原始要传输的数据。
本实施例通过增加指示信息,可以传输不同格式文件对应的数据,提高应用范围。
图5为本发明实施例提供的一种数据存储方法的流程示意图,该方法包括:
S51:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
客户端去除格式数据部分的具体内容可以参见上述实施例,不再赘述。
S52:服务器存储所述第一数据部分。
一个实施例中,可以是直接进行存储,即,S52可以具体包括:
服务器对接收的所述第一数据部分直接进行单独存储。
例如,服务器接收到json,1234,那么就存储json,1234。相应的,在使用时,可以根据对应的格式文件,增加相应的格式数据部分,恢复出account=json,password=1234。可以理解的是,客户端和服务器可以预先设定相一致的格式文件,以便正确恢复数据。
在另一实施例中,可以是先恢复数据再存储,即S52可以具体包括:
确定与所述第一数据部分对应的格式文件;
根据所述格式文件确定格式数据部分,将所述格式数据部分和所述第一数据部分进行合并后恢复客户端要传输的数据;
存储恢复得到的数据。
在一个实施例中,可以是客户端和服务器都设置一致的格式文件,以便服务器根据设置的格式文件将格式数据部分与相应的接收数据进行组合,恢复出原始的要传输的数据。当客户端和服务器要传输多种格式的数据时,可以在客户端和服务器中设置包含多个格式文件的格式库,客户端在传输的数据中还包括指示信息,服务器可以根据该指示信息从多个格式文件中确定出对应的格式文件,进而进行恢复。
本实施例通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
图6为本发明实施例提供的另一种数据存储方法的流程示意图,该方法包括:
S61:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
具体内容可以参见S51,不再赘述。
S62:服务器在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行存储。
例如,相关技术中,存储的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将存储的整型数据表示为二进制的数值,可以进一步降低数据量,减少存储空间。
图7为本发明实施例提供的另一种数据存储方法的流程示意图,该方法包括:
S71:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
具体内容可以参见S51,不再赘述。
S72:服务器在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行存储。
在实际存储数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要存储的数据包括多个位数据时,例如,要存储的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要存储的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将存储的位数据进行合并,可以进一步降低数据量,是、减少存储空间。
图8为本发明实施例提出的一种数据传输装置的结构示意图,该装置80包括处理模块81和传输模块82。
处理模块81用于根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;
传输模块82用于向服务器传输数据,所述传输的数据包括所述第一数据部分。
一个实施例中,在客户端和服务器中可以预先设定对应的格式库,格式库中包含至少一个的格式文件。
例如,可以设定格式文件是,account=string,password=shortint
在要传输的数据为:account=json,password=1234时,就可以去除格式数据部分,也就是account和password,因此,得到的第一数据部分为:
json,1234。
相关技术中,客户端是向服务器传输全部的数据,包括格式数据部分,而本发明实施例不传输格式数据部分。
以上述例子进行说明,相关技术中,传输的数据为:
account=json,password=1234
而本发明实施例传输的数据为:
json,1234。
本实施例通过去除要传输的数据中的格式数据部分,可以降低传输的数据量。并且,由于仅传输了部分内容,破解者即使获取了这些数据也不能获知这些数据的用途,天然具有保密效果,提高了保密性。
上述通过传输第一数据部分可以降低数据量,进一步的,当对第一数据部分进行优化处理后,还可以进一步降低数据量。
该优化处理可以具体参见下述的实施例。
一个实施例中,传输模块82具体用于在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
例如,相关技术中,传输的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将传输的整型数据表示为二进制的数值,可以进一步降低数据量。
或者,
传输模块82具体用于在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
在实际传输数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要传输的数据包括多个位数据时,例如,要传输的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要传输的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将传输的位数据进行合并,可以进一步降低数据量。
在一个实施例中,要传输数据可能具有不同的格式,为了服务器可以正确恢复数据,可以在传输的数据中包含指示信息。
在所述格式库中包括至少两个的格式文件时,所述传输模块具体用于:
向服务器传输数据,所述传输的数据包括所述第一数据部分和指示信息,所述指示信息用于指示所述要传输的数据对应的格式文件,以使所述服务器端根据所述指示信息确定所述第一数据部分对应的格式文件。
客户端和服务器中设置的格式库中可以包含多个格式文件,例如,一个格式文件表示账户和密码,另一个格式文件表示使用信息,如要传输的数据包括文件大小和使用的时间等。
在当前要传输的数据的格式为账户和密码时,可以在传输的数据中还包括用于指示格式文件为账户和密码的指示信息,这样服务器根据该指示信息可以确定对应的格式文件,进而根据格式文件以及接收的第一数据部分可以恢复出原始要传输的数据。
本实施例通过增加指示信息,可以传输不同格式文件对应的数据,提高应用范围。
图9为本发明实施例提供的一种数据存储装置的结构示意图,该装置90包括接收模块91和存储模块92。
接收模块91用于接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
存储模块92用于存储所述第一数据部分。
一个实施例中,可以是直接进行存储,即,所述存储模块92具体用于:对接收的所述第一数据部分直接进行单独存储。
例如,服务器接收到json,1234,那么就存储json,1234。相应的,在使用时,可以根据对应的格式文件,增加相应的格式数据部分,恢复出account=json,password=1234。可以理解的是,客户端和服务器可以预先设定相一致的格式文件,以便正确恢复数据。
在另一实施例中,可以是先恢复数据再存储,即参见图10,所述存储模块92包括:第一单元921、第二单元922和第三单元933。
第一单元921用于确定与所述第一数据部分对应的格式文件;
第二单元922用于根据所述格式文件确定格式数据部分,将所述格式数据部分和所述第一数据部分进行合并后恢复客户端要传输的数据;
第三单元923用于存储恢复得到的数据。
在一个实施例中,可以是客户端和服务器都设置一致的格式文件,以便服务器根据设置的格式文件将格式数据部分与相应的接收数据进行组合,恢复出原始的要传输的数据。当客户端和服务器要传输多种格式的数据时,可以在客户端和服务器中设置包含多个格式文件的格式库,客户端在传输的数据中还包括指示信息,服务器可以根据该指示信息从多个格式文件中确定出对应的格式文件,进而进行恢复。
即,所述传输的数据还包括指示信息,所述第一单元921具体用于:根据所述指示信息确定所述第一数据部分对应的格式文件。
本实施例通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
一个实施例中,所述存储模块92具体用于:在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行存储。
例如,相关技术中,存储的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将存储的整型数据表示为二进制的数值,可以进一步降低数据量,减少存储空间。
一个实施例中,所述存储模块92具体用于:在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行存储。
在实际存储数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要存储的数据包括多个位数据时,例如,要存储的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要存储的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将存储的位数据进行合并,可以进一步降低数据量,是、减少存储空间。
图11为本发明实施例提供的一种数据处理系统的结构示意图,该系统110包括数据传输装置111和数据存储装置112。
其中,数据传输装置111可以具体参见图8所示的内容,数据存储装置112可以具体参见图9或图10所示的内容,在此不再赘述。
本实施例提出的数据处理系统,在传输时通过在要传输的数据中去除格式数据部分,使得在传输时不再传输格式数据部分,可以降低传输数据量,并且,由于仅传输了部分内容,破解者不知道传输的数据的全部内容,提高了数据的保密性;在存储时通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
本发明实施例还提供了一种客户端设备,该客户端设备包括壳体、处理器、存储器、电路板和电源电路,其中,电路板安置在壳体围成的空间内部,处理器和存储器设置在电路板上;电源电路,用于为客户端设备的各个电路或器件供电;存储器用于存储可执行程序代码;处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序,以用于执行以下步骤:
S11’:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
其中,在客户端和服务器中可以预先设定对应的格式库,格式库中包含至少一个的格式文件。
例如,可以设定格式文件是,account=string,password=shortint
在要传输的数据为:account=json,password=1234时,就可以去除格式数据部分,也就是account和password,因此,得到的第一数据部分为:
json,1234。
S12’:客户端向服务器传输数据,所述传输的数据包括所述第一数据部分。
相关技术中,客户端是向服务器传输全部的数据,包括格式数据部分,而本发明实施例不传输格式数据部分。
以上述例子进行说明,相关技术中,传输的数据为:
account=json,password=1234
而本发明实施例传输的数据为:
json,1234。
本实施例通过去除要传输的数据中的格式数据部分,可以降低传输的数据量。并且,由于仅传输了部分内容,破解者即使获取了这些数据也不能获知这些数据的用途,天然具有保密效果,提高了保密性。
上述通过传输第一数据部分可以降低数据量,进一步的,当对第一数据部分进行优化处理后,还可以进一步降低数据量。
该优化处理可以具体参见下述的实施例。
在一个实施例中,处理器具体执行如下步骤:
S21’:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11’,在此不再赘述。
S22’:客户端在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
例如,相关技术中,传输的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将传输的整型数据表示为二进制的数值,可以进一步降低数据量。
在一个实施例中,处理器具体执行如下步骤:
S31’:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11’,在此不再赘述。
S32’:客户端在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行传输。
在实际传输数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要传输的数据包括多个位数据时,例如,要传输的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要传输的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将传输的位数据进行合并,可以进一步降低数据量。
在一个实施例中,要传输数据可能具有不同的格式,为了服务器可以正确恢复数据,可以在传输的数据中包含指示信息。
在一个实施例中,处理器具体执行如下步骤:
S31’:客户端根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分。
具体内容可以参见上述的S11’,在此不再赘述。
S32’:客户端在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行传输。
在实际传输数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要传输的数据包括多个位数据时,例如,要传输的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要传输的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将传输的位数据进行合并,可以进一步降低数据量。
在一个实施例中,要传输数据可能具有不同的格式,为了服务器可以正确恢复数据,可以在传输的数据中包含指示信息。
本发明实施例还提供了一种服务器,该服务器包括壳体、处理器、存储器、电路板和电源电路,其中,电路板安置在壳体围成的空间内部,处理器和存储器设置在电路板上;电源电路,用于为服务器的各个电路或器件供电;存储器用于存储可执行程序代码;处理器通过读取存储器中存储的可执行程序代码来运行与可执行程序代码对应的程序,以用于执行以下步骤:
S51’:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
客户端去除格式数据部分的具体内容可以参见上述实施例,不再赘述。
S52’:服务器存储所述第一数据部分。
一个实施例中,可以是直接进行存储,即,S52可以具体包括:
服务器对接收的所述第一数据部分直接进行单独存储。
例如,服务器接收到json,1234,那么就存储json,1234。相应的,在使用时,可以根据对应的格式文件,增加相应的格式数据部分,恢复出account=json,password=1234。可以理解的是,客户端和服务器可以预先设定相一致的格式文件,以便正确恢复数据。
在另一实施例中,可以是先恢复数据再存储,即S52可以具体包括:
确定与所述第一数据部分对应的格式文件;
根据所述格式文件确定格式数据部分,将所述格式数据部分和所述第一数据部分进行合并后恢复客户端要传输的数据;
存储恢复得到的数据。
在一个实施例中,可以是客户端和服务器都设置一致的格式文件,以便服务器根据设置的格式文件将格式数据部分与相应的接收数据进行组合,恢复出原始的要传输的数据。当客户端和服务器要传输多种格式的数据时,可以在客户端和服务器中设置包含多个格式文件的格式库,客户端在传输的数据中还包括指示信息,服务器可以根据该指示信息从多个格式文件中确定出对应的格式文件,进而进行恢复。
本实施例通过存储整体数据的部分内容,不再需要每次都存储相同的格式数据部分,可以降低存储的数据量。
一个实施例中,处理器具体用于执行如下步骤:
S61’:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
具体内容可以参见S51’,不再赘述。
S62’:服务器在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行存储。
例如,相关技术中,存储的数据采用字符串方式表示,如上述的1234用字符串方式表示后将占用4字节(byte)的空间。
而本实施例中,在将上述的1234用二进制方式表示为数值时只需要占用2字节的空间,进一步降低了数据量。
本实施例通过将存储的整型数据表示为二进制的数值,可以进一步降低数据量,减少存储空间。
一个实施例中,处理器具体用于执行如下步骤:
S71’:服务器接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
具体内容可以参见S51’,不再赘述。
S72’:服务器在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行存储。
在实际存储数据时,可能包括一些位数据,例如,要表示“是”或“否”时,就可以用1位的数据进行表示,具体如1表示是,用0表示否。
当要存储的数据包括多个位数据时,例如,要存储的数据包括多个用是、否表示的项,如包括性别、婚否等内容时。相关技术中,每一个位数据将占用一个字节。而本实施例中可以将多个位数据进行合并,多个位数据共同占用一个字节。例如,当要存储的数据中包括8个位数据时,相关技术中将占用8个字节,而本实施例中对这8个位数据进行合并,只占用1个字节。
本实施例通过将存储的位数据进行合并,可以进一步降低数据量,是、减少存储空间。
需要说明的是,在本发明的描述中,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。此外,在本发明的描述中,除非另有说明,“多个”的含义是两个或两个以上。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现特定逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本发明的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本发明的实施例所属技术领域的技术人员所理解。
应当理解,本发明的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。例如,如果用硬件来实现,和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本发明各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本发明的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不一定指的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任何的一个或多个实施例或示例中以合适的方式结合。
在本发明的描述中,需要理解的是,术语“中心”、“纵向”、“横向”、“长度”、“宽度”、“厚度”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”、“顺时针”、“逆时针”、“轴向”、“径向”、“周向”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
在本发明中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”、“固定”等术语应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或成一体;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通或两个元件的相互作用关系。对于本领域的普通技术人员而言,可以根据具体情况理解上述术语在本发明中的具体含义。
在本发明中,除非另有明确的规定和限定,第一特征在第二特征“上”或“下”可以是第一和第二特征直接接触,或第一和第二特征通过中间媒介间接接触。而且,第一特征在第二特征“之上”、“上方”和“上面”可是第一特征在第二特征正上方或斜上方,或仅仅表示第一特征水平高度高于第二特征。第一特征在第二特征“之下”、“下方”和“下面”可以是第一特征在第二特征正下方或斜下方,或仅仅表示第一特征水平高度小于第二特征。
尽管上面已经示出和描述了本发明的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本发明的限制,本领域的普通技术人员在本发明的范围内可以对上述实施例进行变化、修改、替换和变型。
Claims (21)
1.一种数据传输方法,其特征在于,包括:
根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;
向服务器传输数据,所述传输的数据包括所述第一数据部分。
2.根据权利要求1所述的方法,其特征在于,所述向服务器传输数据,包括:
在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
3.根据权利要求1所述的方法,其特征在于,所述向服务器传输数据,包括:
在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行传输。
4.根据权利要求1至3任一项所述的方法,其特征在于,在所述格式库中包括至少两个的格式文件时,所述向服务器传输数据,包括:
向服务器传输数据,所述传输的数据包括所述第一数据部分和指示信息,所述指示信息用于指示所述要传输的数据对应的格式文件,以使所述服务器端根据所述指示信息确定所述第一数据部分对应的格式文件。
5.一种数据存储方法,其特征在于,包括:
接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
存储所述第一数据部分。
6.根据权利要求5所述的方法,其特征在于,所述存储所述第一数据部分,包括:
对接收的所述第一数据部分直接进行单独存储。
7.根据权利要求5所述的方法,其特征在于,所述存储所述第一数据部分,包括:
确定与所述第一数据部分对应的格式文件;
根据所述格式文件确定格式数据部分,将所述格式数据部分和所述第一数据部分进行合并后恢复客户端要传输的数据;
存储恢复得到的数据。
8.根据权利要求7所述的方法,其特征在于,所述传输的数据还包括指示信息,所述确定与所述第一数据部分对应的格式文件,包括:
根据所述指示信息确定所述第一数据部分对应的格式文件。
9.根据权利要求5至8任一项所述的方法,其特征在于,存储所述第一数据部分,包括:
在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行存储。
10.根据权利要求5-8任一项所述的方法,其特征在于,存储所述第一数据部分,包括:
在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行存储。
11.一种数据传输装置,其特征在于,包括:
处理模块,用于根据预先设定的格式库中的格式文件,在要传输的数据中,去除格式数据部分,得到第一数据部分;
传输模块,用于向服务器传输数据,所述传输的数据包括所述第一数据部分。
12.根据权利要求11所述的装置,其特征在于,所述传输模块具体用于:
在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
13.根据权利要求11所述的装置,其特征在于,所述传输模块具体用于:
在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行传输。
14.根据权利要求11至13任一项所述的装置,其特征在于,在所述格式库中包括至少两个的格式文件时,所述传输模块具体用于:
向服务器传输数据,所述传输的数据包括所述第一数据部分和指示信息,所述指示信息用于指示所述要传输的数据对应的格式文件,以使所述服务器端根据所述指示信息确定所述第一数据部分对应的格式文件。
15.一种数据存储装置,其特征在于,包括:
接收模块,用于接收客户端传输的数据,所述传输的数据包括第一数据部分,所述第一数据部分是所述客户端根据格式文件在要传输的数据中去除格式数据部分得到;
存储模块,用于存储所述第一数据部分。
16.根据权利要求15所述的装置,其特征在于,所述存储模块具体用于:
对接收的所述第一数据部分直接进行单独存储。
17.根据权利要求15所述的装置,其特征在于,所述存储模块包括:
第一单元,用于确定与所述第一数据部分对应的格式文件;
第二单元,用于根据所述格式文件确定格式数据部分,将所述格式数据部分和所述第一数据部分进行合并后恢复客户端要传输的数据;
第三单元,用于存储恢复得到的数据。
18.根据权利要求17所述的装置,其特征在于,所述传输的数据还包括指示信息,所述第一单元具体用于:
根据所述指示信息确定所述第一数据部分对应的格式文件。
19.根据权利要求16至18任一项所述的装置,其特征在于,所述存储模块具体用于:
在所述第一数据部分包括整型数据时,将所述整型数据采用二进制方式表示为数值后进行存储。
20.根据权利要求16至18任一项所述的装置,其特征在于,所述存储模块具体用于:
在所述第一数据部分包括至少两个的位数据时,将所述至少两个的位数据合并后进行存储。
21.一种数据处理系统,其特征在于,包括:
如权利要求11至15任一项所述的数据传输装置;以及,
如权利要求16至20任一项所述的数据存储装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410075214.5A CN103888448A (zh) | 2014-03-03 | 2014-03-03 | 数据传输、存储方法和装置及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410075214.5A CN103888448A (zh) | 2014-03-03 | 2014-03-03 | 数据传输、存储方法和装置及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103888448A true CN103888448A (zh) | 2014-06-25 |
Family
ID=50957168
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410075214.5A Pending CN103888448A (zh) | 2014-03-03 | 2014-03-03 | 数据传输、存储方法和装置及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103888448A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105530227A (zh) * | 2014-09-30 | 2016-04-27 | 亿阳信通股份有限公司 | 一种接口数据传输方法和装置 |
CN106572127A (zh) * | 2015-10-08 | 2017-04-19 | 阿里巴巴集团控股有限公司 | 一种数据传输方法及装置 |
CN108322497A (zh) * | 2017-01-18 | 2018-07-24 | 阿里巴巴集团控股有限公司 | 跨终端数据传输方法、装置、客户端、服务器及系统 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030212694A1 (en) * | 2002-05-10 | 2003-11-13 | Oracle International Corporation | Method and mechanism of improving performance of database query language statements |
CN1549989A (zh) * | 2001-07-09 | 2004-11-24 | �����ɷ� | 数字图像数据显示的调节设备和方法 |
CN101193096A (zh) * | 2006-11-22 | 2008-06-04 | 北京中电亿商网络技术有限责任公司 | 商用数据交换传输方法 |
CN101222476A (zh) * | 2007-01-08 | 2008-07-16 | 华为技术有限公司 | 一种可扩展标记语言文件编辑器、文件传输方法及系统 |
CN102387120A (zh) * | 2010-08-31 | 2012-03-21 | 北大方正集团有限公司 | 文件传输方法、服务器、客户端及网络传输系统 |
CN103036642A (zh) * | 2011-10-09 | 2013-04-10 | 华为技术有限公司 | 一种数据的传输方法及发送端和接收端 |
CN103218365A (zh) * | 2012-01-20 | 2013-07-24 | 阿里巴巴集团控股有限公司 | 一种SSTable文件数据处理方法及其系统 |
CN103336812A (zh) * | 2013-06-27 | 2013-10-02 | 优视科技有限公司 | 用于提高二次加载效率的网页资源缓存方法及装置 |
-
2014
- 2014-03-03 CN CN201410075214.5A patent/CN103888448A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1549989A (zh) * | 2001-07-09 | 2004-11-24 | �����ɷ� | 数字图像数据显示的调节设备和方法 |
US20030212694A1 (en) * | 2002-05-10 | 2003-11-13 | Oracle International Corporation | Method and mechanism of improving performance of database query language statements |
CN101193096A (zh) * | 2006-11-22 | 2008-06-04 | 北京中电亿商网络技术有限责任公司 | 商用数据交换传输方法 |
CN101222476A (zh) * | 2007-01-08 | 2008-07-16 | 华为技术有限公司 | 一种可扩展标记语言文件编辑器、文件传输方法及系统 |
CN102387120A (zh) * | 2010-08-31 | 2012-03-21 | 北大方正集团有限公司 | 文件传输方法、服务器、客户端及网络传输系统 |
CN103036642A (zh) * | 2011-10-09 | 2013-04-10 | 华为技术有限公司 | 一种数据的传输方法及发送端和接收端 |
CN103218365A (zh) * | 2012-01-20 | 2013-07-24 | 阿里巴巴集团控股有限公司 | 一种SSTable文件数据处理方法及其系统 |
CN103336812A (zh) * | 2013-06-27 | 2013-10-02 | 优视科技有限公司 | 用于提高二次加载效率的网页资源缓存方法及装置 |
Non-Patent Citations (2)
Title |
---|
周杨,杨江: "数据块合并技术在测试数据压缩中的应用", 《科协论坛(下半月)》 * |
顾婉玉等: "一种基于响应中无关位填充的测试数据压缩方法", 《计算机研究与发展》 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105530227A (zh) * | 2014-09-30 | 2016-04-27 | 亿阳信通股份有限公司 | 一种接口数据传输方法和装置 |
CN106572127A (zh) * | 2015-10-08 | 2017-04-19 | 阿里巴巴集团控股有限公司 | 一种数据传输方法及装置 |
CN106572127B (zh) * | 2015-10-08 | 2020-05-12 | 阿里巴巴集团控股有限公司 | 一种数据传输方法及装置 |
CN108322497A (zh) * | 2017-01-18 | 2018-07-24 | 阿里巴巴集团控股有限公司 | 跨终端数据传输方法、装置、客户端、服务器及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101273329B (zh) | 有效描述资源之间的关系 | |
CN111090645B (zh) | 基于云存储的数据传输方法、装置及计算机设备 | |
CN104123199A (zh) | 应用程序的恢复方法、装置和移动终端 | |
US10965732B2 (en) | Streaming zip | |
US9471412B2 (en) | Encoding diagnostic data in an error message for a computer program | |
CN103608783A (zh) | 用于备份应用的存储体系结构 | |
CN109993008A (zh) | 用于隐式完整性的方法和布置 | |
CN103645910A (zh) | 用于更新应用程序的方法 | |
CN103646044A (zh) | 移动终端鉴别方法及装置 | |
CN102622399A (zh) | 搜索装置、搜索方法和程序 | |
KR20150054380A (ko) | 근거리 무선 통신 칩의 펌웨어 업데이트 방법 및 이를 구현하는 전자 시스템 | |
CN103888448A (zh) | 数据传输、存储方法和装置及系统 | |
CN102737205B (zh) | 保护包括可编辑元数据的文件 | |
US11210476B2 (en) | Change detection in a string repository for translated content | |
CN105051675A (zh) | 复制目标服务 | |
CN1317613C (zh) | 防止非法使用软件的装置及方法 | |
CN109753463A (zh) | 控制器及其操作方法和存储系统及其操作方法 | |
CN105426348A (zh) | 一种可扩展标记语言xml文件的生成方法、装置和系统 | |
CN114625976A (zh) | 一种基于联邦学习的数据推荐方法、装置、设备及介质 | |
CN112632568B (zh) | 温度数据的存储和采集方法、系统、电子设备和存储介质 | |
CN103970844A (zh) | 大数据的写入方法和装置、读取方法和装置及处理系统 | |
CN103870571A (zh) | 多维联机分析处理系统中的立方体重构方法和装置 | |
RU2014152247A (ru) | Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ | |
TWI707573B (zh) | 資料上鏈裝置、資料驗證裝置及資料驗證方法 | |
TW201535984A (zh) | 最佳化資料壓縮器與方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20140625 |