CN103778258A - 一种数据库数据的发送、接收方法、客户端、服务器 - Google Patents

Abstract

本发明适用于数据库技术领域，提供了一种数据库数据的发送、接收方法、客户端、服务器。在所述发送方法中，客户端向服务器发送数据请求消息；接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。本发明将解压以及格式转换的过程转移至了客户端，服务器可将数据库数据直接进行压缩，因此减少了服务器的负荷，增加了数据库的性能和吞吐量，并减少了对网络带宽的占用，提高了数据的传输效率。

Description

一种数据库数据的发送、接收方法、客户端、服务器

技术领域

本发明属于数据库技术领域，尤其涉及一种数据库数据的发送、接收方法、客户端、服务器。

背景技术

数据库指的是以一定方式储存在一起、能为多个用户共享、具有尽可能小的冗余度、与应用程序彼此独立的数据集合。在数据库系统中，有两种元组存储格式分别是行向量格式和列向量格式。

参考图1，图1是现有的行向量格式和列向量格式的样例图；

如图1所示，所谓行向量格式，就是按行在页面上存储记录，一行就是一条记录，所谓列向量格式，就是不同记录的同一列存在一个页面上，一列就是一条记录。

行向量格式存在的缺点是，当表比较宽时，若查询的数据量小，需要读取大量的数据，使得查询需要更长的时间。例如，表中列数较多，几十上百列时，若只需要查询少数几列数据时，会造成大量的数据读取，显然，也使得查询需要较长的时间。

在此种场景下，采用列向量格式存储数据的数据库，与采用行向量格式存储数据的数据库相比，具有明显的优势。其中，列向量格式的主要有两个优点，详述如下：

1、每列的数据聚集存储，在查询时，只需要少数几个列的时候，能大大减少读取的数据量；

2、每列的数据聚集存储，容易为这种聚集存储设计更好的压缩/解压算法。

因此，在联机分析处理（英语：On-Line Analytical Processing，简称OLAP）、联机交易处理（英语：On-Line Transaction Processing，简称OLTP）等查询密集型应用中，通常采列向量格式存储数据。虽然数据库服务器的数据是列存储方式，但是当最终查询结果返回给用户（客户端）时，还是要以行向量的形式来显示，以适应用户的习惯。

参考图2，图2是现有技术中提供的服务器与客户端之间数据库数据查询的实现流程图，其操作步骤如下：

1、客户端将查询通过SQL语句的形式发给服务器，服务器执行SQL产生结果数据，该结果数据是压缩的列向量格式；

2、由于客户端只能以行存储的格式显示查询结果，因此，服务器需要先将结果数据进行解压，然后将列向量格式转换为行向量格式；

3、有些服务器会直接将步骤2的处理结果作为查询结果返回给客户端，有些服务器为了减少对网络带宽的占用，会对步骤2生成的行向量进行压缩然后再返回给客户端，但是此时是对行向量格式的数据进行压缩，其压缩效果远不及列向量格式的数据的压缩效果。

然而，现有技术中提供了数据库服务器与客户端之间交互的方案，其存在两个方面的主要缺点，详述如下：

第一方面，服务器负荷很高，吞吐量和性能不理想。由于服务器需要先将结果数据进行解压，将列向量格式转换为行向量格式，而在服务器中，服务器的访问量大，计算数据量大，使得服务器负荷很高，吞吐量和性能不理想。

第二方面，数据解压后再传递，增加了对网络带宽的占用，降低数据的传输效率。有些服务器直接将步骤2的处理结果作为查询结果返回给客户端，因此会增加了对网络带宽的占用，降低数据的传输效率。

综上所述，现有的数据库服务器与客户端之间交互的方案，其增加了服务器的负荷，降低数据库的性能和吞吐量，并增加了对网络带宽的占用，降低数据的传输效率。

发明内容

本发明实施例的目的在于提供一种数据库数据的发送、接收方法、客户端、服务器，以解决数据库服务器与客户端之间交互的方案中，服务器的负荷重，数据库的性能和吞吐量低，网络带宽的占用大，数据的传输效率低的问题。

第一方面，一种数据库数据的接收方法，包括：

客户端向服务器发送数据请求消息；

接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

结合第一方面，在第一方面的第一种可能的实现方式中，在所述接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据之前，还包括：

接收所述服务器返回的格式标识，所述格式标识包括压缩的列向量的格式标识、非压缩的列向量的格式标识。

结合第一方面的第一种可能的实现方式，在第一方面的第二种可能的实现方式中，当所述格式标识为压缩的列向量的格式标识时，在所述对所述数据库数据进行格式转换之前，包括：

采用数据库驱动中的解压线程，对所述数据库数据进行数据解压。

结合第一方面或结合第一方面的第一至第二种可能的实现方式，在第一方面的第三种可能的实现方式中，所述对所述数据库数据进行格式转换，包括：

采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

第二方面，一种数据库数据的发送方法，所述方法，包括：

服务器接收客户端发送的数据请求消息；

根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

结合第二方面，在第二方面的第一种可能的实现方式中，在所述将符合所述数据请求消息的数据库数据返回至客户端之前，还包括：

返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

合第三方面，一种客户端，包括：

发送单元，用于向服务器发送数据请求消息；

第一接收单元，用于接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

转换单元，用于对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

结合第三方面，在第三方面的第一种可能的实现方式中，还包括：

格式标识接收单元，用于接收所述服务器返回的格式标识，所述格式标识为压缩的列向量的格式标识或者为非压缩的列向量的格式标识。

结合第三方面的第一种可能的实现方式，在第三方面的第二种可能的实现方式中，所述转换单元，包括：

解压子单元，用于采用数据库驱动中的解压线程，对所述数据库数据进行数据解压。

结合第三方面或结合第三方面的第一至第二种可能的实现方式，在第三方面的第三种可能的实现方式中，所述转换单元，还包括：

转换子单元，用于采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

第四方面，一种客户端，所述客户端包括处理器、存储器、通信接口，其中处理器、通信接口、存储器通过总线完成相互间的通信；

所述通信接口，用于与其他通信设备进行通信；

所述处理器，用于执行程序；

所述存储器，用于存储程序；

其中程序用于客户端向服务器发送数据请求消息；用于接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；用于当所述数据库数据的格式为压缩的列向量格式时，用于对所述数据库数据进行数据解压以及格式转换，将所述压缩的列向量格式转换为非压缩的行向量格式。

第五方面，一种服务器，其特征在于，包括：

第二接收单元，用于接收客户端发送的数据请求消息；

查询单元，用于根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

返回单元，用于以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

结合第五方面，在第五方面的第一种可能的实现方式中，还包括：

返回格式标识单元，用于返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

结合第六方面，一种服务器，所述服务器包括处理器、存储器、通信接口，其中处理器、通信接口、存储器通过总线完成相互间的通信；

所述通信接口，用于与其他通信设备进行通信；

所述处理器，用于执行程序；

所述存储器，用于存储程序；

其中程序用于服务器接收客户端发送的数据请求消息；用于根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；用于以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

在本实施例中，对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。将解压以及格式转换的过程转移至了客户端，服务器可将数据库数据直接进行压缩，因此可减少了服务器的负荷，增加数据库的性能和吞吐量，并减少了对网络带宽的占用，提高了数据的传输效率。

附图说明

图1是现有的行向量格式和列向量格式的样例图

图2是现有技术中提供的服务器与客户端之间数据库数据查询的实现流程图；

图3是本发明实施例提供的一种数据库数据发送方法的实现流程图；

图4是本发明实施例提供的一种数据库数据发送方法的实现流程图；

图5是本发明实施例在实际应提供的客户端和服务器交互的实现流程图；

图6是本发明实施例提供的一种客户端；

图7是本发明实施例提供的一种客户端的结构示意图；

图8是本发明实施例提供的一种服务器；

图9是本发明实施例提供的一种服务器的结构示意图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

参考图3，图3是本发明实施例提供的一种数据库数据发送方法的实现流程图，详述如下：

在步骤S301中，客户端向服务器发送数据请求消息；

在本实施例中，客户端为位于本地站点内，接入网络存储系统的终端。

在本实施例中，当客户端内的应用程序需要用到数据库数据时，可通过客户端向服务器发送数据请求消息。

在本实施例中，数据库可以为任意一种以列向量格式存储数据的数据库，包括但不限于关系型数据库系统。

在本实施例中，数据请求消息是数据库的一些查询或查询语句，例如SQL语句。

服务器为可进行数据库数据查询/查询的服务器。

在步骤S302中，接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

在本实施例中，服务端接受到数据请求消息，向客户端返回的符合所述数据请求消息的数据库数据，客户端通过数据库驱动接收服务器返回的符合所述数据请求消息的数据库数据。

在步骤S304中，对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

在本实施例中，当数据库数据的格式为压缩的列向量格式时，客户端对数据库数据进行数据解压，数据解压完成后，再进行格式转换，将压缩的列向量格式转换为非压缩的行向量格式。

在本实施例中，通过客户端将压缩的列向量格式转换为非压缩的行向量格式，减少了服务器的负荷，增加数据库的性能和吞吐量，并减少了对网络带宽的占用，提高了数据的传输效率。

在本实施例中，当数据库数据的格式不为压缩的列向量格式时，客户端根据其格式，进行相应的操作。例如，当数据库数据的格式为非压缩的列向量格式时，客户端对其进行格式转换，将非压缩的列向量格式转换为非压缩的行向量格式；当数据库数据的格式为压缩的行向量格式时，客户端对其进行解压，将压缩的行向量格式转换为非压缩的行向量格式；当数据库数据的格式为非压缩的行向量格式时，客户端直接将数据库数据进行记录存储。

作为本发明的一个优选实施例，在所述接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据之前，还包括：

接收所述服务器返回的格式标识，所述格式标识包括压缩的列向量的格式标识、非压缩的列向量的格式标识。

在本实施例中，由于服务器在发送符合所述数据请求消息的数据库数据之前，会返回格式标识，因此，客户端可以根据服务器返回的格式标识，得到符合所述数据请求消息的数据库数据的格式。

例如，当接收到的格式标识为压缩的列向量的格式标识时，也就是表示数据库数据是服务器对以列向量存储的数据库数据进行压缩生成的。

在本实施例中，格式标识表示数据库数据的标识，格式标识可以采用字符串的形式进行表示，在此不做限制。

参考表1，表1是本发明实施例提供的格式标识的较佳的样例图，详述如下：

值	含义
		01	压缩的列向量
11	压缩的列向量
		10	压缩的行向量
11	非压缩的行向量

作为本发明的一个优选实施例，当所述格式标识为压缩的列向量的格式标识时，在所述对所述数据库数据进行格式转换之前，包括：

采用数据库驱动中的解压线程，对所述数据库数据进行数据解压；

采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

在本实施例中，客户端采用数据库驱动中的接受线程，接受服务端的返回结果，根据格式标识判断数据库数据是压缩的列向量格式，将数据库数据传递给解压线程进行解压，解压线程解压完毕，将数据库数据传给转换线程，采用数据库驱动中的转换线程，对所述数据库数据进行格式转换，将压缩的列向量格式转换为非压缩的行向量格式完成列向量到行向量的转换，并将结果返回给客户端内的应用程序。

参考图4，图4是本发明实施例提供的一种数据库数据发送方法的实现流程图，详述如下：

在步骤S401中，服务器接收客户端发送的数据请求消息；

在本实施例中，服务器为位于本地站点或异地站点内，接入网络存储系统的服务器。

在本实施例中，服务器接收客户端发送的数据请求消息，对数据请求消息进行解析，生成查询/查询数据的数据库语句。

在步骤S402中，根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

在本实施例中，预先存储的数据库数据中，查询符合所述数据请求消息的数据库数据。

为例于说明，以SQL数据库为例，服务端接受到SQL语句，通过SQL引擎生成对应的执行计划，交由执行引擎执行，执行引擎查询存储引擎的接口，从存储中查询符合所述数据请求消息的数据库数据。

在步骤S403中，以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

在本实施例中，由于数据库数据本身是以列向量格式进行存储的，服务器可将数据库数据直接进行压缩，从而可以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

在本实施例中，由于服务器可将数据库数据直接进行压缩，因此可减少了服务器的负荷，增加数据库的性能和吞吐量，并减少了对网络带宽的占用，提高了数据的传输效率。

作为本发明的一个优选实施例，在所述将符合所述数据请求消息的数据库数据返回至客户端之前，还包括:返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

其中，格式标识为压缩的列向量的格式标识或者为非压缩的列向量的格式标识。

在本实施例中，返回格式标识至客户端，以使客户端接收到格式标识后，识别出后续接收到的数据库数据的格式。具体地，以压缩的列向量的格式标识为例，服务器对以列向量存储的数据库数据进行直接压缩，压缩完毕后，生成原生压缩的以列向量存储的数据库数据。在发送以列向量存储的数据库数据之前，先发送压缩的列向量的格式标识，再发送列向量存储的数据库数据，以使客户端接收到格式标识后，可以识别出后续接收到的数据库数据为列向量存储的数据库数据。

参考图5，图5是本发明实施例在实际应提供的客户端和服务器交互的实现流程图，详述如下：

客户端中的应用程序，查询数据库驱动将SQL语句发给服务端；

服务端接收到SQL语句后，通过SQL引擎生成对应的执行计划交由执行引擎执行，执行引擎查询存储引擎的接口，从存储的数据库中，查询数据库数据，服务器把数据库数据以原生的压缩的列向量格式传给客户端，如图5中的标记①所示。

客户端接收到接受服务端的返回的数据库数据后，数据库驱动将数据库数据传递给数据库驱动中的解压线程进行解压，解压线程解压完毕，将数据库数据传给转换线程，采用数据库驱动中的转换线程，对所述数据库数据进行格式转换，如图5中的标记②所示。

将压缩的列向量格式转换为非压缩的行向量格式完成列向量到行向量的转换，转换结果如图5中的标记③所示。

在本实施例中，对于这个SQL语句来讲，执行引擎无需对从存储引擎中取得的数据做任何加工，即不需要对数据进行解压，不需要做列向量到行向量的转换，服务端在查询结果的基础上，增加格式标识，以表明数据是以行向量格式传递，还是列向量格式传递，直接将结果以压缩的发送给数据库驱动。

参考图6，图6是本发明实施例提供的一种客户端，为了便于说明，仅示出了与本实施例相关的部分，详述如下：

发送单元61，用于向服务器发送数据请求消息；

第一接收单元62，用于接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

转换单元63，用于对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

进一步地，在该客户端中，还包括：

格式标识接收单元，用于接收所述服务器返回的格式标识，所述格式标识为压缩的列向量的格式标识或者为非压缩的列向量的格式标识。

进一步地，在该客户端中，所述转换单元63，包括：

解压子单元，用于采用数据库驱动中的解压线程，对所述数据库数据进行数据解压；

进一步地，在该客户端中，所述转换单元63，还包括：

转换子单元，用于采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

参考图7，图7是本发明实施例提供的一种客户端的结构示意图，本发明具体实施例并不对所述用户设备的具体实现做限定，所述客户端700，包括：

处理器(英文：processor)701，通信接口(英文：Communications Interface)702，存储器(英文：memory)103，总线704。

处理器701，通信接口702，存储器703通过总线704完成相互间的通信。

通信接口702，用于与其他通信设备进行通信；

处理器701，用于执行程序。

具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。

处理器701可能是一个中央处理器（英文：central processing unit，缩写：CPU。

存储器703，用于存储程序。其中程序用于客户端向服务器发送数据请求消息；用于接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；用于当所述数据库数据的格式为压缩的列向量格式时，用于对所述数据库数据进行数据解压以及格式转换，将所述压缩的列向量格式转换为非压缩的行向量格式。

参照图8，图8示出了本发明实施例提供的一种服务器，为了便于说明，仅示出了与本实施例相关的部分，详述如下：

第二接收单元81，用于服务器接收客户端发送的数据请求消息；

查询单元82，用于根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

返回单元83，用于以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

其中，所述格式标识为压缩的列向量的格式标识或者为非压缩的列向量的格式标识。

进一步地，在该服务器中，还包括：

返回格式标识单元，用于返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

参考图9，图9是本发明实施例提供的一种服务器的结构示意图，本发明具体实施例并不对所述用户设备的具体实现做限定，所述服务器900，包括：

处理器(英文：processor)901，通信接口(英文：CommunicationsInterface)902，存储器(英文：memory)103，总线904。

处理器901，通信接口902，存储器903通过总线904完成相互间的通信。

通信接口902，用于与其他通信设备进行通信；

处理器901，用于执行程序。

具体地，程序可以包括程序代码，所述程序代码包括计算机操作指令。

处理器901可能是一个中央处理器（英文：central processing unit，缩写：CPU。

存储器903，用于存储程序。其中程序服务器接收客户端发送的数据请求消息；用于根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；用于以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (12)

1.一种数据库数据的接收方法，其特征在于，包括：

客户端向服务器发送数据请求消息；

接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

2.如权利要求1所述的方法，其特征在于，在所述接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据之前，还包括：

接收所述服务器返回的格式标识，所述格式标识包括压缩的列向量的格式标识、非压缩的列向量的格式标识。

3.如权利要求2所述的方法，其特征在于，当所述格式标识为压缩的列向量的格式标识时，在所述对所述数据库数据进行格式转换之前，所述方法还包括：

采用数据库驱动中的解压线程，对所述数据库数据进行数据解压。

4.如权利要求1至3中任一项所述的方法，其特征在于，所述对所述数据库数据进行格式转换具体为：

采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

5.一种数据库数据的发送方法，其特征在于，包括：

服务器接收客户端发送的数据请求消息；

根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

6.如权利要求5所述的方法，其特征在于，在所述将符合所述数据请求消息的数据库数据返回至客户端之前，还包括：

返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

7.一种客户端，其特征在于，包括：

发送单元，用于向服务器发送数据请求消息；

第一接收单元，用于接收所述服务器以列向量格式返回的符合所述数据请求消息的数据库数据；

转换单元，用于对所述数据库数据进行格式转换，将所述列向量格式转换为行向量格式。

8.如权利要求7所述的客户端，其特征在于，还包括：

格式标识接收单元，用于接收所述服务器返回的格式标识，所述格式标识为压缩的列向量的格式标识或者为非压缩的列向量的格式标识。

9.如权利要求7所述的客户端，其特征在于，所述转换单元，包括：

解压子单元，用于采用数据库驱动中的解压线程，对所述数据库数据进行数据解压。

10.如权利要求7至9任意一项所述的客户端，其特征在于，所述转换单元，还包括：

转换子单元，用于采用数据库驱动中的转换线程，对所述数据库数据进行格式转换。

11.一种服务器，其特征在于，包括：

第二接收单元，用于接收客户端发送的数据请求消息；

查询单元，用于根据接收到的数据请求消息，查询符合所述数据请求消息的数据库数据；

返回单元，用于以列向量格式，将符合所述数据请求消息的数据库数据返回至所述客户端。

12.如权利要求11所述的服务器，其特征在于，还包括：

返回格式标识单元，用于返回格式标识至客户端，所述格式标识包括：压缩的列向量的格式标识、非压缩的列向量的格式标识。

Images