CN114064630A - 一种数据共享方法、装置及计算机可读存储介质 - Google Patents

Abstract

为满足不同数据需求用户的数据共享需求，本发明公开一种数据共享方法、装置及计算机可读存储介质，其中，所述方法包括：获取数据请求用户的用户信息和共享数据配置信息，向数据提供方发送所述数据请求用户的用户信息和所述共享数据配置信息；接收所述数据提供方发送的审批结果；所述审批结果用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据；在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的筛选条件从所述数据提供方获得所述目标数据，向所述数据请求用户提供所述目标数据。本申请用于数据共享。

Description

一种数据共享方法、装置及计算机可读存储介质

技术领域

本发明涉及信息处理技术领域，尤其涉及一种数据共享方法、装置及计算机可读存储介质。

背景技术

随着数字化的不断发展，越来越多的企业与组织开始关心如何方便高效地满足各部门及其下属单位的数据需求，从而实现数据共享，充分发挥数据的应用价值。传统数据共享方式一般是数据需求用户线下提出数据需求，互联网技术(IT，Internet Technology)人员按提出的数据需求进行数据准备开发，然后以数据库方式、文件传输协议(FTP，FileTransfer Protocol)文件方式或者表现层状态转化(REST，Representational StateTransfer)应用程序接口(API，Application Program Interface)(也即：Restful API)方式提供数据给数据需求用户。

目前大多数的数据共享方案，只能提供固定的数据服务目录，无法提供自助式的数据共享。也就是说，目前大多数的数据共享方案无法灵活的满足不同数据需求用户的数据共享。

发明内容

有鉴于此，本发明的主要目的在于提供一种数据共享方法、装置及计算机可读存储介质，通过依据业务需求灵活配置数据共享方式，能够同时满足不同数据需求用户的数据共享。

为达到上述目的，本发明的技术方案是这样实现的：

第一方面，本发明实施例提供一种数据共享方法，应用于数据共享装置，所述方法包括：

获取数据请求用户的用户信息和共享数据配置信息，向数据提供方发送所述数据请求用户的用户信息和所述共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

接收所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和所述共享数据配置信息确定的、用于指示所述数据请求用户是否能够从所述数据提供方获得所需的目标数据；

在所述审批结果用于指示所述数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，向所述数据请求用户提供所述目标数据。

在上述方案中，在获取数据请求用户的用户信息和共享数据配置信息之前，所述方法还包括：

获取与所述数据请求用户所需的目标数据匹配的业务类型；

基于所述业务类型确定所述数据请求用户对应的数据共享场景；其中，所述数据共享场景包括实时共享场景和非实时共享场景。

在上述方案中，在所述数据共享场景为所述实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：从所述数据提供方获取原始消息；按照所述共享数据配置信息中的所述筛选条件对所述原始消息进行过滤处理，获得所述目标数据；其中，所述原始消息为所述数据提供方存储的包含有所述目标数据的消息；

对应的，所述向所述数据请求用户提供所述目标数据，包括：向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

在上述方案中，在所述数据共享场景为所述非实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求；向所述数据提供方发送所述SQL请求；接收所述数据提供方基于所述SQL请求获取的所述目标数据。

在上述方案中，在所述共享数据配置信息中包含有行过滤参数和列过滤参数，对应的，所述基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求，包括：

按照设定规范编写包含所述行过滤参数和所述列过滤参数的所述SQL请求。

在上述方案中，所述方法还包括：

确定所述目标数据的共享方式；

在所述共享方式为文件共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供文件访问链接；所述文件访问链接用于指向按照文件格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为数据库共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供数据库视图访问链接；所述数据库视图访问链接用于指向按照数据库视图格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为表现层状态转化REST应用程序接口API共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供API访问链接；所述API访问链接用于指向按照API格式存储的所述数据请求用户所需的所述目标数据。

在上述方案中，所述方法还包括：

在所述审批结果为用于指示数据请求用户不能从所述数据提供方获得所述目标数据的情况下，向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。

第二方面，本发明实施例还提供一种数据共享装置，所述装置包括：获取单元、发送单元、接收单元、获得单元和提供单元，其中；

所述获取单元，用于获取数据请求用户的用户信息和共享数据配置信息；

所述发送单元，用于向数据提供方发送所述获取单元获取的数据请求用户的用户信息和共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

所述接收单元，用于接收数据所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和共享数据配置信息确定的、用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据；

所述获得单元，用于在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据；

所述提供单元，用于向所述数据请求用户提供所述目标数据。

在上述方案中，所述获取单元，还用于：获取与所述数据请求用户所需的目标数据匹配的业务类型；基于所述业务类型确定所述数据请求用户对应的数据共享场景；其中，所述数据共享场景包括实时共享场景和非实时共享场景。

在上述方案中，所述获得单元，具体用于：在所述数据共享场景为所述实时共享场景的情况下，利用Flume技术从所述数据提供方获取原始消息；按照所述共享数据配置信息中的所述筛选条件对所述原始消息进行过滤处理，获得所述目标数据；其中，所述原始消息为所述数据提供方存储的包含有所述目标数据的消息；对应的，所述提供单元，用于向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

在上述方案中，所述获得单元，具体用于：在所述数据共享场景为所述非实时共享场景的情况下，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求；向所述数据提供方发送所述SQL请求；接收所述数据提供方基于所述SQL请求获取的所述目标数据。

在上述方案中，所述获得单元，具体用于：在所述共享数据配置信息中的筛选条件包含有行过滤参数和列过滤参数的情况下，按照设定规范编写包含所述行过滤参数和所述列过滤参数的所述SQL请求。

在上述方案中，所述装置还包括：确定单元，用于确定所述目标数据的共享方式；

对应的，所述提供单元，用于在所述共享方式为文件共享的情况下，向所述数据请求用户提供文件访问链接；所述文件访问链接用于指向按照文件格式存储的所述数据请求用户所需的所述目标数据；在所述共享方式为数据库共享的情况下，向所述数据请求用户提供数据库视图访问链接；所述数据库视图访问链接用于指向按照数据库视图格式存储的所述数据请求用户所需的所述目标数据；在所述共享方式为表现层状态转化REST应用程序接口API共享的情况下，向所述数据请求用户提供API访问链接；所述API访问链接用于指向按照API格式存储的所述数据请求用户所需的所述目标数据。

在上述方案中，所述装置还包括：提示单元，用于在所述审批结果为用于指示数据请求用户没能够从所述数据提供方获得所述目标数据的情况下，向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。

第三方面，本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现上述任一项所述方法的步骤。

第四方面，本发明实施例还提供一种数据共享装置，所述数据共享装置包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器，其中，所述处理器用于运行所述计算机程序时，执上述任一项所述方法的步骤。

本发明实施例提供一种数据共享方法、装置及计算机可读存储介质，其中，所述方法包括：获取数据请求用户的用户信息和共享数据配置信息，向数据提供方发送所述数据请求用户的用户信息和所述共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；接收所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和共享数据配置信息确定的、用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据；在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息从所述数据提供方获得所述目标数据，向所述数据请求用户提供所述目标数据。本发明实施例提供的方法和装置，用户可以根据业务需求灵活的配置包含筛选条件的共享数据配置信息，以实现不同数据需求用户的数据共享。

附图说明

图1为本发明实施例提供的一种数据共享方法的流程示意图；

图2为本发明实施例通过的数据共享方法实现结构示意图；

图3为在图2的结构示意图实现本发明实施例提供的数据共享方法的完整流程示意图；

图4为本发明实施例提供的数据共享方法中消息队列获取数据方式的流程示意图；

图5为本发明实施例提供的数据共享方法中Rest API获取数据方式的流程示意图；

图6为本发明实施例提供的数据共享方法中文件获取数据方式的流程示意图；

图7为本发明实施例提供的数据共享方法中数据库获取数据方式的流程示意图；

图8为本发明实施例提供的一种数据共享装置的结构示意图；

图9为本发明实施例提供的一种数据共享装置的硬件结构示意图。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对发明的具体技术方案做进一步详细描述。以下实施例用于说明本发明，但不用来限制本发明的范围。

本发明实施例提供一种数据共享方法和装置，由数据需求用户根据业务需求灵活配置数据共享方式、过滤参数、取数周期等不同的信息，自助构建自助数据共享场景，系统自动生成定制化共享服务，提高了共享效率，降低开发成本和人员投入。同时本发明提出适用于非实时和实时共享场景的Rest API、文件、数据库和消息四种共享方式，能够满足同时需要非实时和实时共享场景的需求。

下面结合附图及具体实施例对本发明作进一步详细的说明。

如图1所示，其示出本发明实施例提供的一种数据共享方法的流程示意图。该方法包括：

S101：获取数据请求用户的用户信息和共享数据配置信息，向数据提供方发送所述数据请求用户的用户信息和所述共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

S102:接收所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和所述共享数据配置信息确定的、用于指示所述数据请求用户是否能够从所述数据提供方获得所需的目标数据；

S103：在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，向所述数据请求用户提供所述目标数据。

需要说明的是，这里所说的数据请求用户的用户信息可以是指能够证明数据请求用户的身份信息，比如，证明数据请求用户身份的唯一标识——身份证等。该数据请求用户的用户信息用于指示数据提供方对数据请求用户是否有访问数据提供方的数据的权限进行验证；所说的共享数据配置信息可以是数据请求用户在数据共享装置中按照实际的数据需求自助的设置的，其可以是指一些筛选条件，其中，所述筛选条件可以是数据的获取方式、数据需要包含的字段、过滤条件等等，数据共享装置通过这些筛选条件获得目标数据。其中，数据共享装置可以是指本发明数据共享方法的执行主体，也即：所有的操作在数据共享装置中实现。

在实际应用过程中，在获取到数据请求用户的用户信息和共享数据配置信息后，需要将所述数据请求用户的用户信息和所述共享数据配置信息向数据提供方发送，以便数据提供方能够基于所述用户信息和共享数据配置信息确定是否能够为所述数据请求用户提供所需的请求数据，具体来讲，数据提供方基于用户信息确定所述数据请求用户是否有访问权限，若有访问权限时，在基于共享数据配置信息确定是否能够为所述数据请求用户提供其所需的数据，也即：基于所述用户信息和共享数据配置信息确定审批结果，其中，所述审批结果用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据。

这里需要说明的是，数据提供方的审批过程类似于现有技术中办公自动化(OA，Office Automation)系统的审批流程，对于现有技术在此不再赘述，总之，数据提供方会基于用户信息和共享数据配置信息得到一个审批结果，并且将该审批结果发送给数据请求用户，数据请求用户按照审批结果进行后续的操作，比如，在一些实施例中，在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，其中，目标数据即为数据请求用户所需的请求数据。再比如，在一些实施例中，所述方法还包括：在所述审批结果为用于指示数据请求用户不能从所述数据提供方获得所述目标数据的情况下，向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。其中，提示信息可以是图片、语音等任何能够起到提示作用的信息。

在实际应用过程中，数据请求用户所需的目标数据可能对应于不同的数据共享场景，在不同的数据共享场景需要对所述目标数据采用不同的共享方式，但在这之前，需要确定，数据请求用户所需的目标数据对应的数据共享场景，这样才能根据不同的数据共享场景选择不同的共享方式，因此，在一些实施例中，在获取数据请求用户的用户信息和共享数据配置信息之前，所述方法还包括：

获取与所述数据请求用户所需的目标数据匹配的业务类型；

基于所述业务类型确定所述数据请求用户对应的数据共享场景；其中，所述数据共享场景包括实时共享场景和非实时共享场景。

需要说明的是，一般来说，业务是由数据实现的，不同类型的业务可以根据需要数据提供方反馈目标数据的及时性进行分类，也即依据数据提供方反馈目标数据时效性进行分类，那么，目标数据的业务类型大致可以分为要求时效性和不要求时效性两种类型，其中，在业务要求时效性的情况下，此时，需要数据提供方及时的反馈所述数据请求用户所需的目标数据，比如，当业务为大型活动数据实时监控时，其业务类型就为要求时效性，此时，需要数据提供方很快的反馈目标数据，以保证能够及时地获取到实时的监控信息；在业务不要求时效性的情况下，此时，数据提供方可以不需要很着急的反馈所述数据请求用户所需的目标数据，比如，当业务是财务报表时，其业务类型就为不要求时效性，其在得到向数据提供方提交了基于所述用户信息和共享数据配置信息后不需要数据提供方很快的反馈目标数据，只要在数据请求用户给定的时间段范围反馈目的数据即可，比如在1小时或者1天内得到目标数据都是可以的。

在这种情况下，要求时效性的业务则需要采用实时共享场景以快速的获取到目标数据；而不要求时效性的业务则可以采用非实时共享场景来获取到目标数据，也即：所述基于所述业务类型确定所述数据请求用户对应的数据共享场景可以包括：在所述业务类为要求时效性的类型时，确定所述数据请求用户对应的数据共享场景为实时共享场景；在所述业务类为不要求时效性的类型时，确定所述数据请求用户对应的数据共享场景为非实时共享场景。

基于前述的描述，在不同的共享场景中，数据提供方为数据请求用户提供的目标数据的方式不同，在此基础上，在一些实施例中，在所述数据共享场景为所述实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：从所述数据提供方获取原始消息；按照所述共享数据配置信息中的所述筛选条件对所述原始消息进行过滤处理，获得所述目标数据；其中，所述原始消息为所述数据提供方存储的包含有所述目标数据的消息；

对应的，所述向所述数据请求用户提供所述目标数据，包括：向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

在实际应用过程，在数据共享场景为实时共享场景时，为了保证获取目标数据反馈的时效性，数据提供方向数据请求用户提供目标数据时，二者之间可能需要通过消息对列进行一对一的实时传输。

在一些实施例中，在数据共享场景为实时共享场景时，所述基于所述共享数据配置信息从所述数据提供方获得所述目标数据，可以具体包括：首先，数据共享装置利用Flume技术从所述数据提供方获取原始消息，然后，按照所述共享数据配置信息中的筛选条件对所述原始消息进行过滤处理，获得所述目标数据。其中，利用Flume技术从所述数据提供方获取原始消息可以是指：利用Flume技术读取源端kafka原始消息；而按照所述共享数据配置信息中的筛选条件对所述原始消息进行过滤处理，获得所述目标数据可以是指根据筛选条件对kafka原始消息进行轻处理过滤，以获得目标数据。在此基础上，对应的，所述向所述数据请求用户提供所述目标数据可以具体包括：数据共享装置向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

需要说明的是，消息接口采用消息中间件技术，基于Kafka消息中间件实现，为分布式应用提供实时、高效、可靠的、跨越不同操作系统、不同网络的消息传递服务。同时消息中间件减少了开发跨平台应用程序的复杂性。在要求可靠传输信息的系统中可以利用消息中间件作为一个通讯平台，向应用提供可靠的传输功能来传递消息和文件。消息接口适用于实时性要求高的信息交换方式。

在另一些实施例中，在所述数据共享场景为所述非实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求；向所述数据提供方发送所述SQL请求；接收所述数据提供方基于所述SQL请求获取的所述目标数据。

其中，在一些实施例中，在所述共享数据配置信息中的筛选条件包括行过滤参数和列过滤参数的情况下，对应的，所述基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求，包括：

按照设定规范编写包含所述行过滤参数和所述列过滤参数的所述SQL请求。

需要说明的是，这里所说的设定规范可以是指现有的SQL编写规范。按照SQL编写规范编写包含行过滤参数和列过滤参数的SQL请求，并将所述SQL请求发送给数据提供方，以使数据提供方基于SQL请求中的行过滤参数和列过滤参数分分别对数据提供方的数据库表进行行过滤处理和列过滤处理，以获得目标数据，其中，数据库表为数据提供方的数据库系统存储的形式，各数据库表组成数据库系统。

需要说明的是，由于在非实时共享场景，不需要保证反馈目标数据的时效性，数据提供方向数据请求用户提供的目标数据可以是已经存储数据库中的数据，在数据请求用户请求目标数据时，数据提供方可以基于数据请求用户发送的共享数据配置信息包含的筛选条件获取目标数据。

在实际应用过程中，在非实时共享场景下，所述目标数据的共享方式可以包括文件共享、数据库共享、REST API共享三种共享方式，因此，在一些实施例中，所述方法还包括：

确定所述目标数据的共享方式；

在所述共享方式为文件共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供文件访问链接；所述文件访问链接用于指向按照文件格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为数据库共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供数据库视图访问链接；所述数据库视图访问链接用于指向按照数据库视图格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为表现层状态转化REST应用程序接口API共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供API访问链接；所述API访问链接用于指向按照API格式存储的所述数据请求用户所需的所述目标数据。

需要说明的是，这里所述的所述目标数据的共享方式实际上可以是包含前述的共享数据配置信息中，所以确定所述目标数据的共享方式可以是从共享数据配置信息中确定。在不同的共享方式下，数据共享装置向数据请求用户提供目标数据的方式也不同。

在实际应用过程中，前述的数据共享装置可采用如图2所示的分层技术架构进行实现。该架构基于Spring Cloud框架，分为网关层、接口层、轻处理层、路由转发层和执行端五层，其中；

网关层：是数据共享装置的核心层。a)基于Spring Cloud Gateway实现，负责对来自业务层应用的数据请求进行转发；b)内置了认证鉴权能力，基于JWT(json web token)开放标准技术实现，判断请求用户是否有访问权限。c)内置流量控制能力，基于RequestRateLimiter过滤器实现，对应用访问的优先级、访问频率、访问流量做出限制。d)通过Redis缓存请求信息、用户Token以及流量控制信息，提供高性能高并发的访问请求负载能力。

接口层：定义了消息队列、Rest API、文件、数据库四种类型的数据共享接口。消息队列接口基于Kafka技术实现，Rest API接口基于传统的http协议实现，文件接口基于FTP/SFTP或者hdfs技术实现，数据库接口基于Hive或PostgreSQL使用标准Java数据连接(JDBC，Java DataBase Connectivity)实现。

轻处理层：属于共享平台内置能力，适用于Rest API和文件两种接口类型。负责共享侧的轻量级处理，主要是基于结构化查询语言(SQL，Structured Query Language)对数据表做处理，包括表关联join、字段过滤where和自定义SQL能力。

执行端：负责任务的执行和调度。SQL任务执行使用独立的客户端进程(Executor)完成，支持分布式部署；任务定时调度使用Quartz调度器实现，支持周期性数据生成。

路由转发层：提供一个路由中心(Router Center)，并定义数据系统接入的外部接口，将应用的数据请求直接路由到已接入的数据系统，从而实现数据共享。同时，路由转发层提供HDFS Over FTP能力，使Hadoop分布式文件系统(HDFS，Hadoop Distributed FileSystem)存储可以通过文件传输协议(FTP，File Transfer Protocol)接口的形式对外共享，不需要额外部署FTP服务，节约了存储空间和数据传输的成本。

基于前述的架构与前述的数据共享方法的描述，在实际操作时，本发明的数据共享方法的总体实现步骤如图3所示。

(1)配置需求，具体可以为：数据需求用户通过数据共享装置配置共享数据配置信息和数据请求用户的用户信息，其中，数据需求用户配置共享数据配置信息包括：选择数据目录、指定获取数据方式、选择结果字段、添加过滤条件等筛选条件，其中；

1)选择数据目录。数据需求用户根据需要选择数据目录，数据目录按共享场景分为实时共享场景和非实时共享场景两类，实时共享场景下一个数据目录为某个Kafkatopic，非实时共享场景下一个数据目录即为某个数据库表。

2)指定共享方式。也即：指定数据共享装置采用哪种数据共享接口向数据请求用户提供目的数据，其中，数据共享装置支持消息队列、Rest API、文件、数据库四种类型的数据共享接口，其中，消息队列采用的是消息结构，消息接口采用消息中间件技术，基于Kafka消息中间件实现，为分布式应用提供实时、高效、可靠的、跨越不同操作系统、不同网络的消息传递服务。同时消息中间件减少了开发跨平台应用程序的复杂性。在要求可靠传输信息的系统中可以利用消息中间件作为一个通讯平台，向应用提供可靠的传输功能来传递消息和文件。消息接口适用于实时性要求高的信息交换方式；Rest API是开放的技术标准，不依赖于具体的开发语言和运行的平台，扩展性好，可以方便穿越防火墙，开发工作量较低。Rest API适用于松耦合场景下的信息交换方式，这里，Rest是一种架构模式，基于轻量级web服务，以HTTP协议的原生的GET，PUT，POST，DELETE方法为基础；文件接口支持数据提供方通过数据文件将数据提供给数据接收方，文件存储采用FTP/安全文件传送协议(SFTP，SecureFileTransferProtocol)或者HDFS，文件接口适合于对实时性要求不高的场景下的大数据量信息交换。传输的文件类型支持字符分隔值(CSVComma-Separated Values)和文本格式(TXT)格式。文件接口的交互方式也属于发布-订阅方式(Pub/Sub)，经过一次订阅，共享系统将周期性地返回订阅文件。与消息接口不同，消息接口面向实时场景，而文件接口面向非实时场景；数据库接口支持通过JDBC方式从数据库表或数据库视图进行数据的抽取。支持标准SQL操作。进行抽取时，可以根据数据量的大小、网络、系统负荷等情况，采用全量抽取或增量方式。数据需求用户根据需要指定某种数据共享方式，包括取数周期、取数装置等配置。

3)选择目标数据字段。数据需求用户根据需要指定需要获取的目标数据字段，实现列级权限控制。

4)添加过滤条件。数据需求用户根据需要添加过滤条件，实现行级权限控制。其中，针对Rest API、文件或数据库三种获取数据方式，用户可通过编写SQL语句指定过滤条件；针对消息队列获取数据方式，用户可通过界面配置某个字段的过滤条件。另外，针对Rest API方式，还可以指定请求参数，设置参数名称、参数及类型、是否必填、默认值和描述。

(2)提交申请，具体可以为：数据共享装置保存在数据共享装置中配置的共享数据配置信息和输入的数据请求用户的用户信息，并向数据提供方提交配置的共享数据配置信息和输入的数据请求用户的用户信息，由数据提供方根据配置信息和输入的数据请求用户的用户信息进行审批，获得审批结果。

(3)基于审批结果进行下一步操作，在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据时，数据共享装置依据共享数据配置信息自动进行数据准备；在所述审批结果为用于指示数据请求用户不能从所述数据提供方获得所述目标数据时，结束流程；

具体的，在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据时，数据共享装置依据共享数据配置信息自动进行数据准备数据准备，数据提供方审批通过后，数据共享装置根据数据需求用户依据共享数据配置信息中包含的数据共享场景进行数据准备。

其中，在数据共享场景为实时共享场景时，其所能采用的共享方式仅为消息对列方式，因此，针对消息队列获取数据方式，数据准备过程如图4所示。整体数据准备流程为：数据共享装置利用Flume技术读取源端kafka原始消息，然后根据用户的过滤条件，对原始kafka字段进行轻处理过滤，并将结果消息分发到共享侧kafka，最后按照用户选定的消息共享方式，返回所需目标数据。其中，在实际实现中，消息接口基于Kafka消息中间件和Flume技术实现。系统利用Flume作为一个分布式、可靠和高可用的桥梁连接，支持从源端(source)接收数据，经过管道(channel)的缓存等，发送到目标(sink)端，同时支持对数据进行简单处理的能力，实现Kafka消息的分权分域。

在数据共享场景为非实时共享场景时，其所能采用的共享方式包括文件共享、数据库共享、REST API共享三种共享方式，对于不同的共享方式其数据准备方式不同。

具体来讲，针对Rest API获取数据方式，其数据准备过程如图5所示。，其中RestAPI接口以HTTP协议的原生的GET，PUT，POST，DELETE方法为基础实现，整体数据准备流程为：数据共享装置根据用户输入的过滤条件生成SQL请求，将SQL请求发送给数据库系统执行，以使数据提供方基于SQL请求对数据库系统中的数据库表进行表关联、字段过滤等轻处理后，获得目标数据，然后将目标数据以用户选定的Rest API共享方式，返回所需目标数据。

针对文件获取数据方式，数据准备过程如图6所示。文件接口基于存储文件的FTP/SFTP或者HDFS技术实现。整体数据准备流程为：数据共享装置根据用户输入的过滤条件，生成SQL请求，将SQL请求发送给数据库系统执行，以使数据提供方基于SQL请求对数据库系统中的数据库表进行表关联、字段过滤等轻处理后，获得目标数据，然后将目标数据写入文件系统，文件系统执行完成后，通知应用文件准备完成，建立下载链接，并按照用户选定的文件共享方式，返回所需目标数据。

针对数据库获取数据方式，数据准备过程如图7所示。数据库接口基于Hive等数据库的标准JDBC实现。整体数据准备流程为：数据共享装置根据用户输入的过滤条件，生成SQL请求，将SQL请求发送给数据库系统执行，以使数据提供方基于SQL请求对数据库系统中的数据库表进行表关联、字段过滤等轻处理后，获得目标数据，然后将目标数据生成数据库视图，并按照用户选定的数据库共享方式，返回所需目标数据。

在所述审批结果为用于指示数据请求用户不能从所述数据提供方获得所述目标数据的情况下，可以直接结束流程，也可以向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。其中，提示信息可以是图片、语音等任何能够起到提示作用的信息。

(4)数据获取，具体可以为：在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据且数据准备完成后，数据共享装置向数据请求用户提供目标数据。数据需求用户可以在数据共享装置中设置的个人中心查看到已申请到的目标数据，并进行目标数据的使用消费。

本发明实施例提供的数据共享方法，用户可以根据业务需求灵活的配置包含筛选条件的共享数据配置信息，以实现不同数据需求用户的数据共享；并且还可以自助构建自助数据共享场景，提高了共享效率，降低了开发成本和人员投入。与现有技术相比，本发明能够支持数据需求方自助配置数据需求，数据共享系统进行自动化数据准备，能够快速满足数据需求方各种各样的多维度数据分析个性化需求。同时本发明提出适用于非实时和实时共享场景的Rest API、文件、数据库和消息共享方式，能够满足同时需要非实时和实时共享场景的需求。

基于上述数据共享方法相同的发明构思，本发明实施例还提供一种数据共享装置，如图8所示，所述装置80包括：获取单元801、发送单元802、接收单元803、获得单元804和提供单元805，其中；

所述获取单元801，用于获取数据请求用户的用户信息和共享数据配置信息；

所述发送单元802，用于向数据提供方发送所述获取单元获取的数据请求用户的用户信息和共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

所述接收单元803，用于接收数据所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和共享数据配置信息确定的、用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据；

所述获得单元804，用于在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据；

所述提供单元805，用于向所述数据请求用户提供所述目标数据。

在一些实施例中，所述获取单元801，还用于：获取与所述数据请求用户所需的目标数据匹配的业务类型；基于所述业务类型确定所述数据请求用户对应的数据共享场景；其中，所述数据共享场景包括实时共享场景和非实时共享场景。

在一些实施例中，所述获得单元804，具体用于：在所述数据共享场景为所述实时共享场景的情况下，从所述数据提供方获取原始消息；按照所述共享数据配置信息中的所述筛选条件对所述原始消息进行过滤处理，获得所述目标数据；其中，所述原始消息为所述数据提供方存储的包含有所述目标数据的消息；对应的，所述提供单元805，用于向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

在一些实施例中，所述获得单元804，具体用于：在所述数据共享场景为所述非实时共享场景的情况下，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求；向所述数据提供方发送所述SQL请求；接收所述数据提供方基于所述SQL请求获取的所述目标数据。

在一些实施例中，所述获得单元804，具体用于：在所述共享数据配置信息中的筛选条件包括行过滤参数和列过滤参数的情况下，所述基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求，包括：按照设定规范编写包含所述行过滤参数和所述列过滤参数的所述SQL请求。

在一些实施例中中，所述装置还包括：确定单元，用于确定所述目标数据的共享方式；

对应的，所述提供单元805，用于在所述共享方式为文件共享的情况下，向所述数据请求用户提供文件访问链接；所述文件访问链接用于指向按照文件格式存储的所述数据请求用户所需的所述目标数据；在所述共享方式为数据库共享的情况下，向所述数据请求用户提供数据库视图访问链接；所述数据库视图访问链接用于指向按照数据库视图格式存储的所述数据请求用户所需的所述目标数据；在所述共享方式为表现层状态转化REST应用程序接口API共享的情况下，向所述数据请求用户提供API访问链接；所述API访问链接用于指向按照API格式存储的所述数据请求用户所需的所述目标数据。

在一些实施例中，所述装置还包括：提示单元，用于在所述审批结果为用于指示数据请求用户不能从所述数据提供方获得所述目标数据的情况下，向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。

本发明实施例提供的数据共享装置，也是用户可以根据业务需求灵活的配置包含筛选条件的共享数据配置信息，以实现不同数据需求用户的数据共享；并且还可以自助构建自助数据共享场景，提高了共享效率，降低了开发成本和人员投入。与现有技术相比，本发明能够支持数据需求方自助配置数据需求，数据共享系统进行自动化数据准备，能够快速满足数据需求方各种各样的多维度数据分析个性化需求。同时本发明提出适用于非实时和实时共享场景的Rest API、文件、数据库和消息共享方式，能够满足同时需要非实时和实时共享场景的需求。需要说明的是，此处所说的数据共享装置与前述的数据共享方法基于相同的发明构思，那么其包含的词语含义与前述已经详细阐述，在此不再赘述。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序处理器被处理器执行时实现上述方法实施例的步骤，而前述的存储介质包括：移动存储设备、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random AccessMemory)、磁碟或者光盘等各种可以存储程序代码的介质。

本发明实施例还提供一种数据共享装置，所述数据共享装置包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器，其中，所述处理器用于运行所述计算机程序时，执行存储在存储器中的上述方法实施例的步骤。

图9为本发明实施例数据共享装置的一种硬件结构示意图，该数据共享装置90包括：至少一个处理器901、存储器902和至少一个通信接口903，数据共享装置90中的各个组件通过总线系统904耦合在一起，可理解，总线系统904用于实现这些组件之间的连接通信。总线系统904除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图9中将各种总线都标为总线系统904。

可以理解，存储器902可以是易失性存储器或非易失性存储器，也可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(ROM，Read Only Memory)、可编程只读存储器(PROM，Programmable Read-Only Memory)、可擦除可编程只读存储器(EPROM，Erasable Programmable Read-Only Memory)、电可擦除可编程只读存储器(EEPROM，Electrically Erasable Programmable Read-Only Memory)、磁性随机存取存储器(FRAM，ferromagnetic random access memory)、快闪存储器(Flash Memory)、磁表面存储器、光盘、或只读光盘(CD-ROM，Compact Disc Read-Only Memory)；磁表面存储器可以是磁盘存储器或磁带存储器。易失性存储器可以是随机存取存储器(RAM，Random AccessMemory)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(SRAM，Static Random Access Memory)、同步静态随机存取存储器(SSRAM，Synchronous Static Random Access Memory)、动态随机存取存储器(DRAM，Dynamic Random Access Memory)、同步动态随机存取存储器(SDRAM，SynchronousDynamic Random Access Memory)、双倍数据速率同步动态随机存取存储器(DDRSDRAM，Double Data Rate Synchronous Dynamic Random Access Memory)、增强型同步动态随机存取存储器(ESDRAM，Enhanced Synchronous Dynamic Random Access Memory)、同步连接动态随机存取存储器(SLDRAM，SyncLink Dynamic Random Access Memory)、直接内存总线随机存取存储器(DRRAM，Direct Rambus Random Access Memory)。本发明实施例描述的存储器902旨在包括但不限于这些和任意其它适合类型的存储器。

本发明实施例中的存储器902用于存储各种类型的数据以支持数据共享装置90的操作。这些数据的示例包括：用于在数据共享装置90上操作的任何计算机程序，如基于所述共享数据配置信息中的筛选条件从所述数据提供方获得所述目标数据等，实现本发明实施例方法的程序可以包含在存储器902中。

上述本发明实施例揭示的方法可以应用于处理器901中，或者由处理器901实现。处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(DSP，Digital Signal Processor)，或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。处理器可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者任何常规的处理器等。结合本发明实施例所公开的方法的步骤，可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于存储介质中，该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成前述方法的步骤。

在示例性实施例中，数据共享装置90可以被一个或多个应用专用集成电路(ASIC，Application Specific Integrated Circuit)、DSP、可编程逻辑器件(PLD，ProgrammableLogic Device)、复杂可编程逻辑器件(CPLD，Complex Programmable Logic Device)、现场可编程门阵列(FPGA，Field-Programmable Gate Array)、通用处理器、控制器、微控制器(MCU，Micro Controller Unit)、微处理器(Microprocessor)、或其他电子元件实现，用于执行上述方法。

在本发明所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。另外，在本发明各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以两个或两个以上单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (10)

1.一种数据共享方法，其特征在于，应用于数据共享装置，所述方法包括：

获取数据请求用户的用户信息和共享数据配置信息，向数据提供方发送所述用户信息和所述共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

接收所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和所述共享数据配置信息确定的、用于指示所述数据请求用户是否能够从所述数据提供方获得所需的目标数据；

在所述审批结果用于指示所述数据请求用户能够从所述数据提供方获得所需的目标数据情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，向所述数据请求用户提供所述目标数据。

2.根据权利要求1所述的方法，其特征在于，在获取数据请求用户的用户信息和共享数据配置信息之前，所述方法还包括：

获取与所述数据请求用户所需的目标数据匹配的业务类型；

基于所述业务类型确定所述数据请求用户对应的数据共享场景；其中，所述数据共享场景包括实时共享场景和非实时共享场景。

3.根据权利要求2所述的方法，其特征在于，在所述数据共享场景为所述实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：从所述数据提供方获取原始消息；按照所述共享数据配置信息中的所述筛选条件对所述原始消息进行过滤处理，获得所述目标数据；其中，所述原始消息为所述数据提供方存储的包含有所述目标数据的消息；

对应的，所述向所述数据请求用户提供所述目标数据，包括：向所述数据请求用户提供消息接口；其中，所述消息接口用于指示所述数据请求用户接收传输的所述目标数据。

4.根据权利要求2所述的方法，其特征在于，在所述数据共享场景为所述非实时共享场景的情况下，对应的，所述基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据，包括：基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求；向所述数据提供方发送所述SQL请求；接收所述数据提供方基于所述SQL请求获取的所述目标数据。

5.根据权利要求4所述的方法，其特征在于，在所述共享数据配置信息中的筛选条件包含有行过滤参数和列过滤参数的情况下，对应的，所述基于所述共享数据配置信息中的筛选条件，生成结构化查询语言SQL请求，包括：

按照设定规范编写包含所述行过滤参数和所述列过滤参数的所述SQL请求。

6.根据权利要求4所述的方法，其特征在于，所述方法还包括：

确定所述目标数据的共享方式；

在所述共享方式为文件共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供文件访问链接；所述文件访问链接用于指向按照文件格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为数据库共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供数据库视图访问链接；所述数据库视图访问链接用于指向按照数据库视图格式存储的所述数据请求用户所需的所述目标数据；

在所述共享方式为表现层状态转化REST应用程序接口API共享的情况下，对应的，所述向所述数据请求用户提供所述目标数据，包括：

向所述数据请求用户提供API访问链接；所述API访问链接用于指向按照API格式存储的所述数据请求用户所需的所述目标数据。

7.根据权利要求1所述的方法，其特征在于，所述方法还包括：

在所述审批结果用于指示数据请求用户不能从所述数据提供方获得所述目标数据的情况下，向所述数据请求用户输出提示信息；所述提示信息用于提醒所述数据请求用户当前数据请求失败。

8.一种数据共享装置，其特征在于，所述装置包括：获取单元、发送单元、接收单元、获得单元和提供单元，其中；

所述获取单元，用于获取数据请求用户的用户信息和共享数据配置信息；

所述发送单元，用于向数据提供方发送所述获取单元获取的数据请求用户的用户信息和共享数据配置信息；所述共享数据配置信息包括所述数据请求用户按照数据需求配置的筛选条件；

所述接收单元，用于接收数据所述数据提供方发送的审批结果；所述审批结果为所述数据提供方基于所述用户信息和共享数据配置信息确定的、用于指示数据请求用户是否能够从所述数据提供方获得所需的目标数据；

所述获得单元，用于在所述审批结果用于指示数据请求用户能够从所述数据提供方获得所需的目标数据的情况下，基于所述共享数据配置信息中的所述筛选条件，获得所述目标数据；

所述提供单元，用于向所述数据请求用户提供所述目标数据。

9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任一项所述方法的步骤。

10.一种数据共享装置，其特征在于，所述数据共享装置包括：处理器和用于存储能够在处理器上运行的计算机程序的存储器，其中，所述处理器用于运行所述计算机程序时，执行权利要求1至7任一项所述方法的步骤。

Images