CN112272240B - 一种数据上云的方法和装置 - Google Patents

一种数据上云的方法和装置 Download PDF

Info

Publication number
CN112272240B
CN112272240B CN202011288430.XA CN202011288430A CN112272240B CN 112272240 B CN112272240 B CN 112272240B CN 202011288430 A CN202011288430 A CN 202011288430A CN 112272240 B CN112272240 B CN 112272240B
Authority
CN
China
Prior art keywords
data
target
cloud
information
type information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011288430.XA
Other languages
English (en)
Other versions
CN112272240A (zh
Inventor
邓练兵
李大铭
陈小满
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Dahengqin Technology Development Co Ltd
Original Assignee
Zhuhai Dahengqin Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Dahengqin Technology Development Co Ltd filed Critical Zhuhai Dahengqin Technology Development Co Ltd
Priority to CN202011288430.XA priority Critical patent/CN112272240B/zh
Publication of CN112272240A publication Critical patent/CN112272240A/zh
Application granted granted Critical
Publication of CN112272240B publication Critical patent/CN112272240B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources

Abstract

本发明实施例提供了一种数据上云的方法和装置，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，所述方法包括：接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；从所述多个服务节点中，确定针对所述目标数据的目标服务节点；通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域。通过本发明实施例，降低了实施工作量，提高了数据接入效率。

Description

一种数据上云的方法和装置
技术领域
本发明涉及数据处理领域，特别是涉及一种数据上云的方法和装置。
背景技术
目前，云处理技术的概念变得十分火热，为了节省业务系统的维护开支、提高资金运转效率的需求，越来越多的企业与时俱进，将业务系统接入至云平台中，从而实现业务数据的云处理。
但在将业务系统接入至云平台的过程中，目前采用的常规方法是，将业务系统中需要进行云处理的业务数据，通过接口前置机将业务数据导出到网闸数据库中，并采用网闸摆渡等操作，来实现将业务数据上传至云平台，但该上传过程的人工操作较为复杂，执行的效率较低。
发明内容
鉴于上述问题，提出了以便提供克服上述问题或者至少部分地解决上述问题的一种数据上云的方法和装置，包括：
第一方面，提供了一种数据上云的方法，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，所述方法包括：
接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；
根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；
从所述多个服务节点中，确定针对所述目标数据的目标服务节点；
通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持；
在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
可选地，还包括：
确定针对所述目标数据的已发送数据信息；
确定针对所述目标数据的已接收数据信息；
根据所述已发送数据信息和所述已接收数据信息，进行数据对账。
可选地，在所述根据所述数据源类型信息，确定针对所述目标数据的数据接入方式之前，还包括：
判断所述数据源类型信息是否为非指定类型信息；
在判定所述数据源类型信息为非指定类型信息时，确定预设类型信息；
按照所述预设类型信息，控制所述客户端对所述目标数据进行类型转换，并在类型转换成功后，将所述预设类型信息作为所述数据源类型信息。
可选地，在所述通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持之前，还包括：
获取针对原业务系统中部署的客户端的客户端信息，并将所述客户端信息添加在预设的网关白名单中；其中，所述网关白名单用于控制防火墙。
可选地，还包括：
在上传的过程中，若检测到不满足预设的上云条件，确定已接收数据；
根据已接收数据，确定未发送数据；
在再次检测到满足上云条件时，将所述未发送数据上传至所述专有云。
可选地，所述数据源类型信息包括以下任一项或多项：
针对数据库的类型信息、针对文件目录的类型信息、针对消息队列的类型信息、针对应用接口的类型信息。
可选地，所述目标存储区域包括以下任一项或多项：
公共数据区域、专有数据区域。
第二方面，提供了一种数据上云的装置，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，所述装置包括：
上云请求接收模块，用于接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
数据接入方式确定模块，用于根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；
目标存储区域确定模块，用于根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；
目标服务节点确定模块，用于从所述多个服务节点中，确定针对所述目标数据的目标服务节点；
目标数据上传模块，用于通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持；
反馈模块，用于在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
可选地，所述装置还包括：
已发送数据信息确定模块，用于确定针对所述目标数据的已发送数据信息；
已接收数据信息确定模块，用于确定针对所述目标数据的已接收数据信息；
数据对账模块，用于根据所述已发送数据信息和所述已接收数据信息，进行数据对账。
可选地，所述装置还包括：
数据源类型信息判断模块，用于判断所述数据源类型信息是否为非指定类型信息；
预设类型信息确定模块，用于在判定所述数据源类型信息为非指定类型信息时，确定预设类型信息；
类型转换模块，用于按照所述预设类型信息，控制所述客户端对所述目标数据进行类型转换，并在类型转换成功后，将所述预设类型信息作为所述数据源类型信息。
第三方面，提供了一种服务器，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上所述的数据上云的方法。
第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如上所述的数据上云的方法。
本发明实施例具有以下优点：
在本发明实施例中，通过接收部署第一业务系统中客户端发送的针对第一业务系统中目标数据的上云请求，上云请求包括目标数据的数据属性信息，数据属性信息包括数据源类型信息和数据源权限信息，根据数据源类型信息，确定针对目标数据的数据接入方式，根据数据源权限信息，确定针对目标数据的目标存储区域，并从多个服务节点中，确定针对目标数据的目标服务节点；通过目标服务节点，按照数据接入方式，将目标数据上传至专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持，从而在接收到第二业务系统发送的针对第一业务系统的数据请求时，在专有云中确定从第一业务系统中上传的数据，并进行反馈，实现了对业务数据的快速上云，无需用户进行复杂的操作，即可完成上云过程，降低了实施上云过程的工作量，并提高了数据接入效率，有效保障了数据上云的稳定性和可控性。
附图说明
为了更清楚地说明本发明的技术方案，下面将对本发明的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明一实施例提供的一种云平台的整体结构示意图；
图2是本发明一实施例提供的一种数据上云的方法的步骤流程图；
图3是本发明一实施例提供的另一种数据上云的方法的步骤流程图；
图4是本发明一实施例提供一种数据上云的装置的结构示意图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂，下面结合附图和具体实施方式对本发明作进一步详细的说明。显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
在智慧城市建设中，通过引入云计算，大数据，物联网，移动互联等先进技术，搭建标准统一、入口统一、采集统一、管理统一、服务统一、数据统一的跨域多维大数据公共服务云平台，从而实现跨部门、跨领域和跨地域的数据融通能力，并达到域内数据集中、域外数据共享交换、域边界依规则柔性扩展，以形成数字经济的生态循环，推动了城市管理、社会民生、资源环境、经济产业各领域的数据共享，提升了行政效率、城市治理能力、居民生活品质，促进了行业融合发展，推动了产业转型升级、创新商业模式。
通过跨域多维大数据云平台的建设，能够打破数据壁垒，实现数据集中，破解了大数据发展难题。基于云平台建设，将进一步针对云平台进行数据中台、数据共享服务体系建设。
针对数据中台(即统一数据平台)建设，通过引入数据资源平台、数据共享平台等，并配套对应的数据规范，进而可以建设一个打通各级业务协同机构、视频区域，以及各层级的业务系统、各领域的智慧应用，也可以形成一个提供开放、互联、共享的数据共享平台，且同时能够具备数据上云、数据治理、数据探索、全链路监控等统一数据管理体系。
如图1所示，云平台中部署有城市应用门户、开放服务网关、统一数据平台、城市物联传感系统以及其它结构，其中，开放服务网关包括融合业务共享中心、融合数据创新中心，以下对云平台的各个部分进行具体说明：
(一)城市应用门户
在城市应用门户中，主要分为交通、环保、旅游、工商、医疗、教育、区域经济大脑、就业、跨域鉴权等板块，用户可以通过城市应用门户进入各板块，并可以获取经处理后的数据所组成的各板块对应的资讯信息。
(二)融合业务共享中心与融合数据创新中心
融合业务共享中心可以按业务分类将各区域数据进行融合后创建不同的数据共享中心，例如：个人信息中心、信用信息中心、法人信息中心、金融服务中心、旅游服务中心、综合治理服务中心、时空服务中心、物联网服务中心等。
融合数据创新中心通过数据融合体系和AI算法体系可以实现对融合数据的创新应用。融合业务共享中心与融合数据创新中心可以将数据进行融合处理后，通过城市应用门户向用户呈现处理后的数据。
(三)统一数据平台
统一数据平台可以包括数据资源平台和数据共享平台，其中，数据资源平台可以包括多个组件，例如，数据上云、智能数仓、智能标签、数据探索、AIMaster、数据DNA、全景监控、数据资产，进而能够为上层的行业应用和业务场景提供服务，解决了数据管理领域中的数据标准化和数据质量等问题，且采用拖拽等交互方式，简化了业务逻辑和业务功能的实现，提高了数据平台的易用性。
(四)城市物联传感系统
城市物联传感系统由压力、湿度、摄像头、光源、红外传感、温度等相关传感设备及设备数据构成。
(五)其它结构
此外，还可以通过超算集群、城市云计算平台、OpenStack FI Ware集群(一个开源的云计算管理平台项目，是一系列软件开源项目的组合)，对数据进行处理。
参照图2，示出了本发明一实施例提供的一种数据上云的方法的步骤流程图，该方法可以用于专有云中数据资源平台，所述数据资源平台可以包括上云服务端，所述上云服务端可以包括采用分布式架构的多个服务节点。
其中，专有云可以是一种从物理层面隔离出的专属虚拟化资源池，与传统互联网之间可以存在隔离防火墙，而数据资源平台部署于专有云之中，可以包括数据上云服务端，进而能够为上层的行业应用和业务场景提供服务，解决了数据管理领域中的数据源和数据标准化等问题。
上云服务端可以由部署于专有云的数据资源平台中的服务器或服务器集群组成，组成上云服务端的服务器可以处于同一个地理位置，也可以处于不同的地理位置，上云服务端中可以包括多种上云组件，可以用于执行将第一业务系统中的目标数据上传至专有云中数据资源平台的操作。
而且，为保证高可用和高数据的吞吐量，上云服务端可以包括采用分布式架构的多个服务节点，服务节点可根据实际情况部署在物理机、虚拟机上，继而上云服务端可以把业务数据拆分为多种类型的数据，存储在不同的服务节点上，例如，上云服务器可以把原来的单体业务的数据，先按照业务领域进行纵向拆分，再按照数据的服务类型进行横向拆分，并存储在不同的服务节点上，来提升性能瓶颈。然后数据资源平台可以通过调用上云服务端中的服务节点，实现读取、写入该服务节点对应的物理机或虚拟机上的数据。
具体可以包括如下步骤：
S201：接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息。
在实际应用中，第一业务系统可以是需要接入至专有云数据资源平台的客户业务系统，通过在所述第一业务系统中部署用于上传目标数据的客户端，数据资源平台可以与传统的互联网进行数据交互，以便于实现目标数据的统一上云、快速上云、安全上云。
进一步地，数据资源平台可以接收所述第一业务系统中客户端发送上云请求，该上云请求可以是针对所述第一业务系统中需要进行数据上云的目标数据，且该上云请求可以携带目标数据的数据属性信息，该目标数据的数据属性信息可以包括该目标数据的具体的属性信息，例如，数据资源平台可以从数据属性信息中获取目标数据的数据源类型信息和数据源权限信息。
作为一示例，数据资源平台在接收到客户端发送上云请求后，可以通过提取上云请求携带数据属性信息，从数据属性信息中提取出数据源类型信息和数据源权限信息，继而通过数据源类型信息和数据源权限信息，完成对需要进行上传的目标数据的数据分析，从而可以确定针对目标数据的具体的上传方式和上传后的存储区域。
当然，本发明也可以进一步将目标数据的其他属性信息打包在上云请求中，诸如目标数据的大小、目标数据的功能等信息，本发明对此不作具体限定。继而，本发明可以通过该其他属性信息完成对需要上传的目标数据的更细致的数据分析，从而以此提升数据上云过程中数据分析的效率与准确性。
需要说明的是，第一业务系统中客户端在发送上云请求时，可以是由用户手动操作点击发送的，也可以是用户在发送前采用定时等方式，在到达定时时间时由第一业务系统自行发送的，本发明在此处不作具体限定。
而且，部署于第一业务系统中的客户端可以是一个，也可以多于一个，即本发明可以在第一业务系统中部署多于一个的客户端，通过对目标数据的属性的分析，为每个客户端分配不同的数据上云任务，从而通过多任务同时上传的方式实现对第一业务系统中目标数据的快速上传，提升数据上云的效率。
S202：根据所述数据源类型信息，确定针对所述目标数据的数据接入方式。
作为一示例，所述数据源类型信息包括以下任一项或多项：
针对数据库的类型信息、针对文件目录的类型信息、针对消息队列的类型信息、针对应用接口的类型信息。
在实际应用中，目标数据的数据属性信息可以包括目标数据的数据源类型信息，若该目标数据具有不同的数据源类型信息，可以进一步确定目标数据具体包括了哪几种数据源类型信息，并可以分别针对这几种数据源类型信息采用对应的数据接入方式，从而缩短不同类型的数据源的上传时间，并便于所述数据资源平台中的上云服务端对所述目标数据进行数据分类和数据分析。
以下为几种所述数据接入方式的示例：
针对数据库的类型信息的数据接入方式：本发明可以通过第一业务系统中客户端，将包括目标数据的数据库产品接入数据资源平台，使数据资源平台可以通过数据抽取的方式，请求获取指定数据库产品中的目标数据。其中，支持此方式的数据库产品有ORACLE、MYSQL、SQLSERVER等。
针对文件目录接入方式：通过FTP协议的方式，将第一业务系统中的服务器上的作为目标数据的文件目录，经由客户端按照目录顺序，传输至数据资源平台的上云服务端。
针对消息队列接入方式：本发明可以通过第一业务系统中客户端，将包括目标数据的消息队列产品接入数据资源平台，使数据资源平台可以通过数据抽取的方式，请求获取指定消息队列产品中的目标数据。其中，数据资源平台支持的消息队列产品可以包括RABBITMQ，DATAHUB等。
针对应用接口接入方式：数据资源平台支持从数据提供方提供的接口来接入数据，也可以在客户端提供接入数据资源平台的接口来接入数据。其中，接入数据的可以采用http协议。
需要说明的是，以上方式仅为几种具体可实现S202步骤方案的列举，并非穷举，基于本发明同种构思下或仅稍加改变的其他技术方案，也均应落入本发明实施例范围内。
S203：根据所述数据源权限信息，确定针对所述目标数据的目标存储区域。
在实际应用中，目标数据的数据属性信息可以包括目标数据的数据源权限信息，而目标数据的数据源权限信息可以体现该目标数据在第一业务系统中的重要程度，例如，数据源权限信息中可以包括用户在第一业务系统中请求所述目标数据时需要提供的权限。其中，该数据源权限信息可以量化成具体的需要提供的权限数值，或具体的需要提供的权限等级，本发明在此不作具体限定。
进一步地，数据资源平台可以从第一业务系统中客户端发送的上云请求中提取出所述目标数据的数据源权限信息，并根据该目标数据的数据源权限信息，确定用户在第一业务系统中请求该目标数据需要提供的权限，继而以该权限为依据，为所述目标数据确定对应的目标存储区域。例如，若根据目标数据的数据源权限信息分析出，用户在第一业务系统中请求该目标数据时无需提供额外的权限，则数据资源平台可以确定目标数据的目标存储区域是公共数据区域。相反，若根据目标数据的数据源权限信息分析出，用户在第一业务系统中请求该目标数据时需要提供多种权限，则数据资源平台可以确定目标数据的目标存储区域是专有数据区域。
作为一示例，所述目标存储区域包括以下任一项或多项：
公共数据区域、专有数据区域。
在具体实现中，在数据上云前，数据资源平台可以根据保护数据安全的要求，预先对数据资源平台的存储区域进行划分，具体可以划分为公共数据区域和专有数据区域。进一步可以通过专用云中的MaxCompute计算引擎，为公共数据区域和专有数据区域各申请一个STG层(STAGE，结构与源系统保持一致的增量数据层)的Project项目表，一个是公共数据区Project，一个专有数据区Project。
当用户访问专用云和数据资源平台时，由于公共数据区域的数据敏感和安全度相对低，用户用于专用云和访问数据资源平台的云账号，仅需具有公共数据区Project的表的创建和读写权限、可以实现数据写入的最小权限要求，即可完成公共数据区域的数据上云或目标数据访问请求。
而专有数据区域的数据敏感和安全度高，数据资源平台会严格对该专有数据区Project下的云账号和权限进行控制，该专有数据区Project下的云账号申请和分配要严格走审批流程，例如，只分配数个具有该专有数据区Project的表的创建和读写权限的云账号，用于对专有数据区Project下的云账号完成敏感数据的上传和写入操作，并且对该云账号的信息做严格保密。
S204：从所述多个服务节点中，确定针对所述目标数据的目标服务节点。
在实际应用中，一个服务节点可以对应一整个服务器集群，也可以对应多台的服务器，数据资源平台在确定目标数据的目标存储区域的情况下，可以从上云服务端的多个服务节点，选定可用于存储目标数据的目标服务节点。
在本发明一实施例中，数据资源平台可以根据目标数据的大小和目标数据的功能等信息，从上云服务端的多个服务节点中，为目标数据选择容量充足且储存数据与目标数据的功能相似的服务器集群或多台的服务器所对应的服务节点。
S205：通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持。
在实际应用中，数据资源平台确定目标数据的可以写入的目标服务节点，并按照目标数据对应的数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持。其中，区域应用门户可以包括专有云中的城市应用门户，例如，交通门户、环保门户、医疗门户等。而数据湖中具有用于储存该原始状态的目标数据的多种原始数据储存数据库，如Redis数据库等，以及用于依据原始状态的目标数据进行计算分析的分析数据库，如ADS数据库等。当区域应用门户需要调用与其服务相关的数据时，可以从数据湖中得到与其服务相关的原始数据，也可以得到经过计算分析后的数据。
在本发明一实施例中，该方法还可以包括如下步骤：
确定针对所述目标数据的已发送数据信息；确定针对所述目标数据的已接收数据信息；根据所述已发送数据信息和所述已接收数据信息，进行数据对账。
在具体实现中，在将目标数据上传至于专有云中数据资源平台的过程中，目标数据从互联网进入专有云以后，数据资源平台可以根据第一业务系统中客户端的反馈的信息中，确定针对该目标数据的已发送数据信息，并确定针对该目标数据的已接收数据信息，进而自动对比互联网处理数据量以及专有云网络处理数据量，并采用实时监控的方式进行数据对，从而及时发现数据不一致的情况，有效保障数据接入稳定性。
S206：在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
在实际应用中，在第一业务系统完成数据上云后，用户可以部署第二业务系统，并在该第二业务系统中部署服务API，通过该服务API与专有云中的数据资源平台进行信息交互，从而实现通过第二业务系统对第一业务系统中的目标数据的调用。
在本发明实施例中，通过接收部署第一业务系统中客户端发送的针对第一业务系统中目标数据的上云请求，上云请求包括目标数据的数据属性信息，数据属性信息包括数据源类型信息和数据源权限信息，根据数据源类型信息，确定针对目标数据的数据接入方式，根据数据源权限信息，确定针对目标数据的目标存储区域，并从多个服务节点中，确定针对目标数据的目标服务节点；通过目标服务节点，按照数据接入方式，将目标数据上传至专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持，从而在接收到第二业务系统发送的针对第一业务系统的数据请求时，在专有云中确定从第一业务系统中上传的数据，并进行反馈。无需用户进行复杂的操作，即可完成上云过程，降低了实施工作量，大大提高了数据接入效率，且有效保障了数据上云的稳定性和可控性。
参照图3，示出了本发明一实施例提供的另一种数据上云的方法的步骤流程图，具体可以包括如下步骤：
S301：接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
S302：判断所述数据源类型信息是否为非指定类型信息；
在实际应用中，数据资源平台可以预先指定能够进行云处理的数据类型，数据资源平台中的数据均可以使用该指定的类型进行存储和处理。
在接收部署第一业务系统中客户端发送的上云请求后，专有云中的数据资源平台可以对上云请求进行识别，提取出上云请求中的数据源类型信息，数据资源平台可以进一步判断数据源类型信息是否为非指定类型信息，若数据源类型信息并不是非指定类型信息，则可以执行步骤S305。
其中，非指定类型信息可以包括数据资源平台没有指定的文件格式，以及数据资源平台没有指定的符号或语言。
S303：在判定所述数据源类型信息为非指定类型信息时，确定预设类型信息；
其中，预设类型信息中包括的预设类型属于数据资源平台预先指定的数据类型。
在实际应用中，数据资源平台中可以预设有类型转换表，该类型转换表中可以提供多种非指定类型信息与预设类型信息的对应关系。一方面，当数据资源平台判断目标数据的数据源类型信息为非指定类型信息时，数据资源平台可以查询该类型转换表，确定该非指定类型信息对应的预设类型信息，从而可以实现将目标数据转换为预设类型信息中包括的预设类型。由于非指定类型信息的目标数据均以类型转换表中的对应关系进行转换，保证了数据资源平台对数据源的管理能力，避免了随意转换而造成的数据源混乱。
另一方面，当数据资源平台判断目标数据的数据源类型信息为非指定类型信息时，数据资源平台若无法从该类型转换表中查询到对应的预设类型信息，数据资源平台可以提供类型转换规范，以供用户根据该类型转换规范来开发出数据接入插件，从而将目标数据转换为满足数据资源平台要求的指定类型。
S304：按照所述预设类型信息，控制所述客户端对所述目标数据进行类型转换，并在类型转换成功后，将所述预设类型信息作为所述数据源类型信息。
在具体实现中，在确定预设类型信息后，数据资源平台可以根据该预设类型信息发送类型转换指令至客户端，从而控制客户端按照该预设类型信息将目标数据进行类型装换，当目标数据的类型转换成功后，可以将该预设类型信息作为目标数据的数据源类型信息，并添加数据转换标识再次发送上云请求。在客户端再次发送上云请求后，数据资源平台执行步骤S301。
S305：根据所述数据源类型信息，确定针对所述目标数据的数据接入方式。
S306：根据所述数据源权限信息，确定针对所述目标数据的目标存储区域。
S307：从所述多个服务节点中，确定针对所述目标数据的目标服务节点。
S308：通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持。
在具体实现中，在目标数据未完全接入至数据资源平台的情况下，数据资源平台可以保持接收第一业务系统中客户端发送的信息。当数据资源平台接收到客户端发送的针对目标数据的上云请求时，数据资源平台可以提取上云请求中目标数据的数据属性信息和数据转换标识。
数据资源平台在根据数据属性信息获得数据源类型信息后，可以根据目标数据具体包括的数据源类型信息，采用与目标数据对应的数据接入方式。
数据资源平台在根据数据属性信息获得数据源权限信息后，可以确定目标数据的在第一业务系统中的重要程度，从而判断是将目标数据存储在数据敏感和安全度相对低的目标存储区域，还是将目标数据存储在数据敏感和安全度高的目标存储区域。
进一步的，数据资源平台可以从上云服务端的采用分布式架构的多个服务节点中，选择满足数据读写需求的目标服务节点，若有实体机或虚拟机中储存有与目标数据的数据转换标识相同的标识，可以优先选取该实体机或虚拟机对应的服务节点作为目标服务节点。从而，数据资源平台通过确定目标服务节点，按照目标数据对应的数据接入方式，将目标数据上传至专有云中数据湖的目标存储区域对应的实体机或虚拟机中，并将数据转换标识和目标数据一并存储。而专有云的各区域应用门户可以从该数据湖中获取数据支持。数据资源平台通过存储数据转换标识，可以更方便对数据上云后的目标数据进行分析，当数据资源平台需要将数据上云后的目标数据传输至第一业务系统，可以直接根据该数据转换标识进行数据类型的反向转换。
在本发明一实施例中，该方法还可以包括如下步骤：
获取针对原业务系统中部署的客户端的客户端信息，并将所述客户端信息添加在预设的网关白名单中；其中，所述网关白名单用于控制防火墙。
在实际应用中，防火墙可以部署于互联网和专有云之间。
在执行将所述目标数据上传至所述专有云中数据湖的目标存储区域之前，数据资源平台可以预先获取在原业务系统中部署的客户端的客户端信息，通过将该客户端信息添加在控制防火墙的预设的网关白名单中，从而实现与客户端的通信，以及目标数据的上传操作。
在本发明的另一实施例中，该方法还可以包括如下步骤：
在上传的过程中，若检测到不满足预设的上云条件，确定已接收数据；根据已接收数据，确定未发送数据；在再次检测到满足上云条件时，将所述未发送数据上传至所述专有云。
在实际应用中，在将目标数据上传至专有云中数据湖的目标存储区域时，会有许多影响上传的因素，例如，网速、网络稳定程度、丢包率、误码率等，数据资源平台若检测到这些因素并不满足预设的上云条件，则可以检测已经上传成功的已接收数据，继而可以根据已接收数据，判断目标数据中还未发送或发送失败的未发送数据，可以暂停目标数据的继续上传，待检测到影响上传的因素满足预设的上云条件，将未发送数据上传至专有云数据湖的目标存储区域中。
S309：在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
在本发明实施例中，可以接收部署第一业务系统中客户端发送的针对第一业务系统中目标数据的上云请求，通过判断数据源类型信息是否为非指定类型信息；在判定数据源类型信息为非指定类型信息时，确定预设类型信息；按照预设类型信息，控制客户端对目标数据进行类型转换，并在类型转换成功后，将预设类型信息作为数据源类型信息，继而根据数据源类型信息，确定针对目标数据的数据接入方式，根据数据源权限信息，确定针对目标数据的目标存储区域，然后从多个服务节点中，确定针对目标数据的目标服务节点，通过目标服务节点，按照数据接入方式，将目标数据上传至专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持，从而数据资源平台可以屏蔽掉不同业务系统中数据类型的差异，整合了不同业务系统中业务数据，使不同业务系统中的业务数据可以在专有云中进行统一的调度分析和管理。
需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。
参照图4，示出了本发明一实施例提供的一种数据上云的装置的结构示意图，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，具体可以包括如下模块：
上云请求接收模块401，用于接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
数据接入方式确定模块402，用于根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；
目标存储区域确定模块403，用于根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；
目标服务节点确定模块404，用于从所述多个服务节点中，确定针对所述目标数据的目标服务节点；
目标数据上传模块405，用于通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持；
反馈模块406，用于在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
在本发明一实施例中，所述装置还包括：
已发送数据信息确定模块，用于确定针对所述目标数据的已发送数据信息；
已接收数据信息确定模块，用于确定针对所述目标数据的已接收数据信息；
数据对账模块，用于根据所述已发送数据信息和所述已接收数据信息，进行数据对账。
在本发明一种优选实施例中，所述装置还包括：
数据源类型信息判断模块，用于判断所述数据源类型信息是否为非指定类型信息；
预设类型信息确定模块，用于在判定所述数据源类型信息为非指定类型信息时，确定预设类型信息；
类型转换模块，用于按照所述预设类型信息，控制所述客户端对所述目标数据进行类型转换，并在类型转换成功后，将所述预设类型信息作为所述数据源类型信息。
在本发明一种优选实施例中，所述装置还包括：
网关添加模块，用于获取针对原业务系统中部署的客户端的客户端信息，并将所述客户端信息添加在预设的网关白名单中；其中，所述网关白名单用于控制防火墙。
在本发明一种优选实施例中，所述装置还包括：
已接收数据确定模块，用于在上传的过程中，若检测到不满足预设的上云条件，确定已接收数据；
未发送数据确定模块，用于根据已接收数据，确定未发送数据；
未发送数据上传模块，用于在再次检测到满足上云条件时，将所述未发送数据上传至所述专有云。
在本发明一种优选实施例中，所述数据源类型信息包括以下任一项或多项：
针对数据库的类型信息、针对文件目录的类型信息、针对消息队列的类型信息、针对应用接口的类型信息。
在本发明一种优选实施例中，所述目标存储区域包括以下任一项或多项：
公共数据区域、专有数据区域。
在本发明实施例中，通过接收部署第一业务系统中客户端发送的针对第一业务系统中目标数据的上云请求，上云请求包括目标数据的数据属性信息，数据属性信息包括数据源类型信息和数据源权限信息，根据数据源类型信息，确定针对目标数据的数据接入方式，根据数据源权限信息，确定针对目标数据的目标存储区域，并从多个服务节点中，确定针对目标数据的目标服务节点；通过目标服务节点，按照数据接入方式，将目标数据上传至专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持，从而在接收到第二业务系统发送的针对第一业务系统的数据请求时，在专有云中确定从第一业务系统中上传的数据，并进行反馈。无需用户进行复杂的操作，即可完成上云过程，降低了实施工作量，大大提高了数据接入效率，且有效保障了数据上云的稳定性和可控性。
本发明一实施例还提供了一种服务器，可以包括处理器、存储器及存储在存储器上并能够在处理器上运行的计算机程序，计算机程序被处理器执行时实现如上所述的数据上云的方法。
本发明一实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储计算机程序，计算机程序被处理器执行时实现如上所述的数据上云的方法。
对于装置实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
本说明书中的各个实施例均采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似的部分互相参见即可。
本领域内的技术人员应明白，本发明实施例可提供为方法、装置、或计算机程序产品。因此，本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、终端设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框，以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理终端设备上，使得在计算机或其他可编程终端设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程终端设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明实施例的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明实施例范围的所有变更和修改。
最后，还需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者终端设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上对所提供的一种数据上云的方法和装置，进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种数据上云的方法，其特征在于，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，所述方法包括：
接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；
根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；
从所述多个服务节点中，确定针对所述目标数据的目标服务节点；
通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持；
在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
2.根据权利要求1所述的方法，其特征在于，还包括：
确定针对所述目标数据的已发送数据信息；
确定针对所述目标数据的已接收数据信息；
根据所述已发送数据信息和所述已接收数据信息，进行数据对账。
3.根据权利要求1或2所述的方法，其特征在于，在所述根据所述数据源类型信息，确定针对所述目标数据的数据接入方式之前，还包括：
判断所述数据源类型信息是否为非指定类型信息；
在判定所述数据源类型信息为非指定类型信息时，确定预设类型信息；
按照所述预设类型信息，控制所述客户端对所述目标数据进行类型转换，并在类型转换成功后，将所述预设类型信息作为所述数据源类型信息。
4.根据权利要求3所述的方法，其特征在于，在所述通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持之前，还包括：
获取针对原业务系统中部署的客户端的客户端信息，并将所述客户端信息添加在预设的网关白名单中；其中，所述网关白名单用于控制防火墙。
5.根据权利要求4所述的方法，其特征在于，还包括：
在上传的过程中，若检测到不满足预设的上云条件，确定已接收数据；
根据已接收数据，确定未发送数据；
在再次检测到满足上云条件时，将所述未发送数据上传至所述专有云。
6.根据权利要求1所述的方法，其特征在于，所述数据源类型信息包括以下任一项或多项：
针对数据库的类型信息、针对文件目录的类型信息、针对消息队列的类型信息、针对应用接口的类型信息。
7.根据权利要求1所述的方法，其特征在于，所述目标存储区域包括以下任一项或多项：
公共数据区域、专有数据区域。
8.一种数据上云的装置，其特征在于，应用于专有云中数据资源平台，所述数据资源平台包括上云服务端，所述上云服务端包括采用分布式架构的多个服务节点，所述装置包括：
上云请求接收模块，用于接收部署第一业务系统中客户端发送的针对所述第一业务系统中目标数据的上云请求；其中，所述上云请求包括所述目标数据的数据属性信息，所述数据属性信息包括数据源类型信息和数据源权限信息；
数据接入方式确定模块，用于根据所述数据源类型信息，确定针对所述目标数据的数据接入方式；
目标存储区域确定模块，用于根据所述数据源权限信息，确定针对所述目标数据的目标存储区域；
目标服务节点确定模块，用于从所述多个服务节点中，确定针对所述目标数据的目标服务节点；
目标数据上传模块，用于通过所述目标服务节点，按照所述数据接入方式，将所述目标数据上传至所述专有云中数据湖的目标存储区域，以为区域应用门户提供数据支持；
反馈模块，用于在接收到第二业务系统发送的针对所述第一业务系统的数据请求时，在所述专有云中确定从所述第一业务系统中上传的数据，并进行反馈。
9.一种服务器，其特征在于，包括处理器、存储器及存储在所述存储器上并能够在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1至7中任一项所述的数据上云的方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的数据上云的方法。
CN202011288430.XA 2020-11-17 2020-11-17 一种数据上云的方法和装置 Active CN112272240B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011288430.XA CN112272240B (zh) 2020-11-17 2020-11-17 一种数据上云的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011288430.XA CN112272240B (zh) 2020-11-17 2020-11-17 一种数据上云的方法和装置

Publications (2)

Publication Number Publication Date
CN112272240A CN112272240A (zh) 2021-01-26
CN112272240B true CN112272240B (zh) 2022-01-04

Family

ID=74340787

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011288430.XA Active CN112272240B (zh) 2020-11-17 2020-11-17 一种数据上云的方法和装置

Country Status (1)

Country Link
CN (1) CN112272240B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113037743B (zh) * 2021-03-05 2022-08-23 湖州奕锐信安科技有限公司 一种云端服务器文件的加密方法及系统
CN113742103A (zh) * 2021-08-30 2021-12-03 北京爱奇艺科技有限公司 跨数据源的服务实现方法及装置、电子设备
CN113794646B (zh) * 2021-09-13 2024-04-02 国网数字科技控股有限公司 能源行业的监控数据传输系统及方法
CN115225487A (zh) * 2022-07-25 2022-10-21 天翼云科技有限公司 一种入云业务的开通方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102148870A (zh) * 2011-03-07 2011-08-10 浪潮(北京)电子信息产业有限公司 一种云存储系统及其实现方法
CN105069362A (zh) * 2015-06-30 2015-11-18 广东轩辕网络科技股份有限公司 一种存储方法及装置
CN107872539A (zh) * 2017-12-15 2018-04-03 安徽长泰信息安全服务有限公司 一种基于云计算平台的数据处理系统及方法
US10296501B1 (en) * 2015-03-31 2019-05-21 EMC IP Holding Company LLC Lineage-based veracity for data repositories
US10304062B1 (en) * 2018-03-23 2019-05-28 Td Professional Services, Llc Computer architecture incorporating blockchain based immutable audit ledger for compliance with data regulations
CN110445659A (zh) * 2019-08-19 2019-11-12 蘑菇物联技术（深圳）有限公司 一种实现本地和上云简易切换的方法
CN111666283A (zh) * 2020-05-12 2020-09-15 埃睿迪信息技术（北京）有限公司 一种数据湖异构数据存储环境下统一数据访问的方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102148870A (zh) * 2011-03-07 2011-08-10 浪潮(北京)电子信息产业有限公司 一种云存储系统及其实现方法
US10296501B1 (en) * 2015-03-31 2019-05-21 EMC IP Holding Company LLC Lineage-based veracity for data repositories
CN105069362A (zh) * 2015-06-30 2015-11-18 广东轩辕网络科技股份有限公司 一种存储方法及装置
CN107872539A (zh) * 2017-12-15 2018-04-03 安徽长泰信息安全服务有限公司 一种基于云计算平台的数据处理系统及方法
US10304062B1 (en) * 2018-03-23 2019-05-28 Td Professional Services, Llc Computer architecture incorporating blockchain based immutable audit ledger for compliance with data regulations
CN110445659A (zh) * 2019-08-19 2019-11-12 蘑菇物联技术（深圳）有限公司 一种实现本地和上云简易切换的方法
CN111666283A (zh) * 2020-05-12 2020-09-15 埃睿迪信息技术（北京）有限公司 一种数据湖异构数据存储环境下统一数据访问的方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
王江龙 ; 雷波 ; 解云鹏 ; 何琪 ; 李云鹤.云网一体化数据中心网络关键技术.《电信科学》.2020, *
胡国华 ; 孟承韵 ; 代志兵 ; 孙彬 ; 刘振凯.基于大数据安全保障的云安全体系研究.《信息安全研究》.2020, *

Also Published As

Publication number Publication date
CN112272240A (zh) 2021-01-26

Similar Documents

Publication Publication Date Title
CN112272240B (zh) 一种数据上云的方法和装置
Ahmad et al. Multilevel data processing using parallel algorithms for analyzing big data in high-performance computing
Manjunath et al. Moving to the cloud: Developing apps in the new world of cloud computing
US20130291121A1 (en) Cloud Abstraction
US11811839B2 (en) Managed distribution of data stream contents
CN109597640B (zh) 一种应用程序的账号管理方法、装置、设备和介质
CN104769607B (zh) 利用预定义的查询来过滤视图
CN105227672B (zh) 数据存储及访问的方法和系统
US10182104B1 (en) Automatic propagation of resource attributes in a provider network according to propagation criteria
CN111209090A (zh) 一种云平台中虚拟机的创建方法、组件及服务器
CN106021566A (zh) 一种提高单台数据库并发处理能力的方法、装置及系统
WO2022072862A9 (en) Peer-to-peer (p2p) distributed data management system
CN112330519A (zh) 一种数据处理的方法和装置
CN112597511A (zh) 一种政务服务远程协同方法及装置
CN113536326A (zh) 一种去中心化的协同办公方法、设备及介质
CN112291264B (zh) 一种安全控制的方法、装置、服务器和存储介质
Haroun et al. A big data architecture for automotive applications: PSA group deployment experience
CN112269690A (zh) 一种数据备份的方法和装置
CN110414260B (zh) 一种数据访问方法、装置、系统及存储介质
CN112579557A (zh) 请求响应方法、装置、系统、计算机系统和可读存储介质
Ahammad Fog Computing Complete Review: Concepts, Trends, Architectures, Technologies, Simulators, Security Issues, Applications, and Open Research Fields
Chi et al. A Trusted Cloud-Edge Decision Architecture Based on Blockchain and MLP for AIoT
McCarthy AWS at the Edge: A Cloud Without Boundaries
CN106161501A (zh) 虚拟桌面的数据共享方法和装置
US11153388B2 (en) Workflow engine framework for cross-domain extension

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant