CN111708751A - 一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 - Google Patents
一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 Download PDFInfo
- Publication number
- CN111708751A CN111708751A CN201911372614.1A CN201911372614A CN111708751A CN 111708751 A CN111708751 A CN 111708751A CN 201911372614 A CN201911372614 A CN 201911372614A CN 111708751 A CN111708751 A CN 111708751A
- Authority
- CN
- China
- Prior art keywords
- module
- hue
- oozie
- big data
- service
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 238000012545 processing Methods 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 11
- 230000000007 visual effect Effects 0.000 abstract description 5
- 238000007726 management method Methods 0.000 description 11
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008676 import Effects 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013501 data transformation Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000013515 script Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/211—Schema design and management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明提供一种基于Hue实现数据加载的方法,系统,设备及可读存储介质,在大数据平台上添加Hue模块以及Oozie服务模块;通过Hue模块配置管理节点;基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;配置数据库的访问端口。本发明将Sqoop、Oozie进行整合,实现访问大数据平台中的Hue界面,来实现对Oozie服务模块以及Sqoop组件的操作访问,完成传统数据库至大数据平台的调度,并能够提供了目友好的可视化界面,实现可视化操作ETL功能丰富了用户的体验。
Description
技术领域
本发明涉及大数据处理技术领域,尤其涉及一种基于Hue调用Sqoop实现数据库加载的方法,系统,设备及可读存储介质。
背景技术
Hue是一个开源的Apache Hadoop UI系统,由Cloudera Desktop演化而来,Cloudera公司将其贡献给Apache基金会的Hadoop社区,它是基于Python Web框架Django实现的。通过使用Hue可以在浏览器端的Web控制台上与Hadoop集群进行交互来分析处理数据。
目前Hue仅仅是做为查询大数据平台数据的工具来使用,传统关系型参数进入大数据平台只能通过开发Java程序及后台写Shell脚本实现,费时费力,可复用性不高并且学习成本很高;如何将三大组件进行整合发挥各自的优势,是目前迫切解决的问题。
发明内容
为了克服上述现有技术中的不足,本发明提供一种基于Hue实现数据加载的方法,方法包括:
步骤一,在大数据平台上添加Hue模块以及Oozie服务模块;
步骤二,通过Hue模块配置管理节点;
步骤三,基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;
步骤四,刷新Hue模块以及Oozie服务模块;
步骤五,配置数据库的访问端口。
优选地,基于Hue模块对大数据平台的数据进行操作。
优选地,步骤基于Hue模块对大数据平台的数据进行操作包括:
调取Oozie服务模块的编辑界面;
创建大数据处理工作流程任务及名称,并调取Sqoop组件;
配置Sqoop组件的控制指令及输入指令,并保存;
调取Oozie服务模块的工作计划编辑单元;
将创建好的大数据处理工作流程添加为所述工作计划编辑单元中的定时任务;
通过浏览器查看所述定时任务的运行情况。
优选地,步骤通过浏览器查看所述定时任务的运行情况之后还包括:
通过运行日志查询报错的大数据处理工作流程,并对报错进行定位。
优选地,基于Hue模块对大数据平台的数据进行操作还包括:对数据进行抽取、转换、加载至目的端的过程。
优选地,步骤调取Oozie服务模块的编辑界面还包括:
进入Oozie服务模块的编辑界面;
选择操作控制端口;
创建大数据处理工作流程名称;
调取Sqoop组件,并将Sqoop组件拖动至编辑界面中。
本发明还提供一种基于Hue实现数据加载的系统,包括:服务添加模块,系统配置模块,系统操作模块以及系统刷新模块;
服务添加模块用于在大数据平台上添加Hue模块以及Oozie服务模块;
系统配置模块用于配置Hue模块的管理节点;以及配置数据库的访问端口;
系统操作模块用于基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;
系统刷新模块用于刷新Hue模块以及Oozie服务模块。
优选地,系统操作模块还用于基于Hue模块对大数据平台的数据进行操作。
本发明还提供一种实现基于Hue实现数据加载的方法的设备,包括:
存储器,用于存储计算机程序及基于Hue实现数据加载的方法;
处理器,用于执行所述计算机程序及基于Hue实现数据加载的方法,以实现基于Hue实现数据加载的方法的步骤。
本发明还提供一种具有基于Hue实现数据加载的方法的可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行以实现基于Hue实现数据加载的方法的步骤。
从以上技术方案可以看出,本发明具有以下优点:
本发明将Sqoop、Oozie进行整合,实现了Hue调用Sqoop和Oozie,可以实现访问大数据平台中的Hue界面,来实现对Oozie服务模块以及Sqoop组件的操作访问,完成传统数据库至大数据平台的调度,并能够提供了目友好的可视化界面,实现可视化操作ETL功能丰富了用户的体验。降低了关系型数据库中的数据进入大数据平台的工作成本。
附图说明
为了更清楚地说明本发明的技术方案,下面将对描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为基于Hue实现数据加载的方法流程图;
图2为方法实施例流程图;
图3为基于Hue实现数据加载的系统示意图。
具体实施方式
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
附图中所示的方框图仅仅是功能实体,不一定必须与物理上独立的实体相对应。即,可以采用软件形式来实现这些功能实体,或在一个或多个硬件模块或集成电路中实现这些功能实体,或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另外,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接,也可以是电的,机械的或其它的形式连接。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明实施例的说明,其本身并没有特定的意义。因此,"模块"与"部件"可以混合地使用。
本发明提供一种基于Hue实现数据加载的方法,如图1所示,方法包括:
S1,在大数据平台上添加Hue模块以及Oozie服务模块;
Hue模块可以操作HDFS上的数据,运行MapReduce Job,执行Hive的SQL语句,浏览HBase数据库等等。Sqoop属于数据转换工具,Oozie属于任务调度框架。
Ozie是大数据协作框架,Oozie是运行在hadoop平台上的一种工作流调度引擎,它可以用来调度与管理hadoop任务,如,MapReduce、Pig等。Oozie服务模块能够提供对HadoopMapReduce和Pig Jobs的任务调度与协调。Oozie可以到Java Servlet容器中运行。
Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与数据库(mysql、或postgresql)间进行数据的传递,可以将一个关系型数据库(例如:MySQL,Oracle,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。
在本发明涉及的大数据平台中,配置添加Hue模块以及Oozie服务模块,使大数据平台具备了Hue模块以及Oozie服务模块,及其对应的数据处理功能。
S2,通过Hue模块配置管理节点;
也就是在本发明涉及的大数据平台中,通过Hue模块配置管理节点。
S3,基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;
本发明涉及的大数据平台中,预先配置EXT模块,
EXT是延伸文件系统(Extended file system,缩写为ext),也译为扩展文件系统,是一种文件处理系统。采用Unix文件系统的元数据结构。EXT利用虚拟文件系统实现出的文件系统,EXT模块包括的文件处理方式为:ext-all.css,ext-base.js,ext-all.js,其中包括所有的类库,根据需要进行删减。在本发明提供大数据平台中,提供数据处理端口。
S4,刷新Hue模块以及Oozie服务模块;
这里的刷新方式可以采用重启系统的方式,或者重置,复位等方式。
S5,配置数据库的访问端口。
数据库的访问端口可以配置成ORACLE数据库,并配置相应的访问路径,配置时间,修改时间等等。
在本发明中,在步骤五之后还涉及了基于Hue模块对大数据平台的数据进行操作,具体的如图2所示,
S6,调取Oozie服务模块的编辑界面;
S7,创建大数据处理工作流程任务及名称,并调取Sqoop组件;
通过Sqoop组件来实现对大数据处理工作流程任务的处理。
S8,配置Sqoop组件的控制指令及输入指令,并保存;
对创建完成的大数据处理工作流程,由Sqoop组件接收控制指令,并执行。
S9,调取Oozie服务模块的工作计划编辑单元;
对于系统中的工作任务及数据处理任务,编辑到工作计划编辑单元中,其中工作计划编辑单元设置在Oozie服务模块中,以便系统中的工作任务及数据处理任务由Oozie服务模块来进行调取处理。
S10,将创建好的大数据处理工作流程添加为所述工作计划编辑单元中的定时任务;
工作计划编辑单元可以为定时任务,也就是在达到预设时间点时触发执行,由Oozie服务模块进行控制处理。
S11,通过浏览器查看所述定时任务的运行情况。
用户可以通过浏览器查看工作计划编辑单元中的定时任务执行情况。
下面具体提出本发明的一种优选实施方式,
本发明涉及的大数据平台可以采用CDH平台,也就是在CDH平台上添加Hue模块以及Oozie服务模块。
Hue模块配置项中指定HDFS文件系统处理,通过Web界面访问接口,并配置管理节点。
基于管理节点调取EXT模块,基于对EXT模块进行解压、并更改EXT模块目录及目录下所有文件的用户名及组为oozie服务操作的端口。
重启Hue模块以及Oozie服务模块。
上传oracle的jdbc等jar包至平台的预设路径,此路径为hdfs路径,配置当前日期以及sqoop组件。
通过查询操作方式,或调度操作方式,进入Oozie服务模块的编辑界面;选择操作控制端口;创建大数据处理工作流程名称;调取Sqoop组件,并将Sqoop组件拖动至编辑界面中。这里的编辑界面可以为可视化编辑操作界面。
再新建工作流程任务并拖取Sqoop组件至画布中。
输入相应的Sqoop输入输出命令至Sqoop command中。
更改常规的Sqoop import(export)命令为import(export)并且要保证长参数使用双引号中的内容无空格。
配置完成上述信息后,保存退出编辑模式。
进入Oozie服务模块的编辑页面新建大数据处理工作流程任务。
之后选择创建好的大数据处理工作流程任务并添加相应的定时任务。
保存退出编辑模式后提交;
在浏览器中浏览相应的定时任务的运行情况,并针对报错的workflow查看相应的Log并定位问题。
基于上述方法本发明还提供了一种基于Hue实现数据加载的系统,如图3所示,包括:服务添加模块1,系统配置模块2,系统操作模块3以及系统刷新模块4;
服务添加模块1用于在大数据平台上添加Hue模块以及Oozie服务模块;系统配置模块2用于配置Hue模块的管理节点;以及配置数据库的访问端口;系统操作模块3用于基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;系统刷新模块4用于刷新Hue模块以及Oozie服务模块。
基于上述方法和系统本发明还提供一种实现基于Hue实现数据加载的方法的设备,包括:存储器,用于存储计算机程序及基于Hue实现数据加载的方法;处理器,用于执行所述计算机程序及基于Hue实现数据加载的方法,以实现基于Hue实现数据加载的方法的步骤。
基于上述方法和系统本发明还提供一种具有基于Hue实现数据加载的方法的可读存储介质,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行以实现基于Hue实现数据加载的方法的步骤。
实现基于Hue实现数据加载的方法的设备是结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、计算机软件或者二者的结合来实现,为了清楚地说明硬件和软件的可互换性,在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
通过以上的实施方式的描述,本领域的技术人员易于理解,这里描述的实现基于Hue实现数据加载的方法的设备可以通过软件实现,也可以通过软件结合必要的硬件的方式来实现。因此,根据实现基于Hue实现数据加载的方法的设备公开实施方式的技术方案可以以软件产品的形式体现出来,该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM,U盘,移动硬盘等)中或网络上,包括若干指令以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者网络设备等)执行根据本公开实施方式的索引方法。
在实现基于Hue实现数据加载的方法的设备存储介质中,存储有能够实现本说明书上述方法的程序产品。在一些可能的实施方式中,本公开的各个方面还可以实现为一种程序产品的形式,其包括程序代码,当所述程序产品在终端设备上运行时,所述程序代码用于使所述终端设备执行本说明书上述“示例性方法”部分中描述的根据本公开各种示例性实施方式的步骤。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种基于Hue实现数据加载的方法,其特征在于,方法包括:
步骤一,在大数据平台上添加Hue模块以及Oozie服务模块;
步骤二,通过Hue模块配置管理节点;
步骤三,基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;
步骤四,刷新Hue模块以及Oozie服务模块;
步骤五,配置数据库的访问端口。
2.根据权利要求1所述的方法,其特征在于,步骤五之后还包括:
基于Hue模块对大数据平台的数据进行操作。
3.根据权利要求2所述的方法,其特征在于,
步骤基于Hue模块对大数据平台的数据进行操作包括:
调取Oozie服务模块的编辑界面;
创建大数据处理工作流程任务及名称,并调取Sqoop组件;
配置Sqoop组件的控制指令及输入指令,并保存;
调取Oozie服务模块的工作计划编辑单元;
将创建好的大数据处理工作流程添加为所述工作计划编辑单元中的定时任务;
通过浏览器查看所述定时任务的运行情况。
4.根据权利要求3所述的方法,其特征在于,
步骤通过浏览器查看所述定时任务的运行情况之后还包括:
通过运行日志查询报错的大数据处理工作流程,并对报错进行定位。
5.根据权利要求2所述的方法,其特征在于,
基于Hue模块对大数据平台的数据进行操作还包括:对数据进行抽取、转换、加载至目的端的过程。
6.根据权利要求3所述的方法,其特征在于,
步骤调取Oozie服务模块的编辑界面还包括:
进入Oozie服务模块的编辑界面;
选择操作控制端口;
创建大数据处理工作流程名称;
调取Sqoop组件,并将Sqoop组件拖动至编辑界面中。
7.一种基于Hue实现数据加载的系统,其特征在于,包括:服务添加模块,系统配置模块,系统操作模块以及系统刷新模块;
服务添加模块用于在大数据平台上添加Hue模块以及Oozie服务模块;
系统配置模块用于配置Hue模块的管理节点;以及配置数据库的访问端口;
系统操作模块用于基于管理节点调取EXT模块,将EXT模块下的目录及所述目录下所有文件的用户名及用户组配置为支持oozie服务操作的端口;
系统刷新模块用于刷新Hue模块以及Oozie服务模块。
8.根据权利要求7所述的系统,其特征在于,
系统操作模块还用于基于Hue模块对大数据平台的数据进行操作。
9.一种实现基于Hue实现数据加载的方法的设备,其特征在于,包括:
存储器,用于存储计算机程序及基于Hue实现数据加载的方法;
处理器,用于执行所述计算机程序及基于Hue实现数据加载的方法,以实现如权利要求1至6任意一项所述基于Hue实现数据加载的方法的步骤。
10.一种具有基于Hue实现数据加载的方法的可读存储介质,其特征在于,所述可读存储介质上存储有计算机程序,所述计算机程序被处理器执行以实现如权利要求1至6任意一项所述基于Hue实现数据加载的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911372614.1A CN111708751B (zh) | 2019-12-27 | 2019-12-27 | 一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911372614.1A CN111708751B (zh) | 2019-12-27 | 2019-12-27 | 一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111708751A true CN111708751A (zh) | 2020-09-25 |
CN111708751B CN111708751B (zh) | 2024-02-02 |
Family
ID=72536468
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911372614.1A Active CN111708751B (zh) | 2019-12-27 | 2019-12-27 | 一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111708751B (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107358069A (zh) * | 2017-07-16 | 2017-11-17 | 塞纳德(北京)信息技术有限公司 | 一种基于Hue的权限管理系统 |
CN107563153A (zh) * | 2017-08-03 | 2018-01-09 | 华子昂 | 一种基于Hadoop构建的PacBio测序平台IT架构 |
CN109284324A (zh) * | 2018-10-16 | 2019-01-29 | 深圳中顺易金融服务有限公司 | 基于Apache Oozie框架处理大数据的流程任务的调度装置 |
-
2019
- 2019-12-27 CN CN201911372614.1A patent/CN111708751B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107358069A (zh) * | 2017-07-16 | 2017-11-17 | 塞纳德(北京)信息技术有限公司 | 一种基于Hue的权限管理系统 |
CN107563153A (zh) * | 2017-08-03 | 2018-01-09 | 华子昂 | 一种基于Hadoop构建的PacBio测序平台IT架构 |
CN109284324A (zh) * | 2018-10-16 | 2019-01-29 | 深圳中顺易金融服务有限公司 | 基于Apache Oozie框架处理大数据的流程任务的调度装置 |
Non-Patent Citations (3)
Title |
---|
HAIXWANG: ""CDH安装Oozie/Hue,以及其基本使用"", pages 1 - 5 * |
KXJ19980524: ""Oozie安装步骤-01"", pages 1 - 17 * |
曾宪武: "大数据技术", 西安电子科技大学出版社, pages: 499 * |
Also Published As
Publication number | Publication date |
---|---|
CN111708751B (zh) | 2024-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11023270B2 (en) | Configuration of decoupled upgrades for container-orchestration system-based services | |
Zhu et al. | SRAdb: query and use public next-generation sequencing data from within R | |
US11036754B2 (en) | Database table conversion | |
US10169433B2 (en) | Systems and methods for an SQL-driven distributed operating system | |
CN110222036B (zh) | 用于自动数据库迁移的方法和系统 | |
US10474658B2 (en) | User-defined loading of data onto a database | |
JP6113693B2 (ja) | Hadoopにおける強化されたSQLライクなクエリのためのバックグラウンドフォーマット最適化 | |
US9633052B2 (en) | System and method for decomposition of code generation into separate physical units though execution units | |
KR102457707B1 (ko) | 동적 공유 데이터 객체 마스킹 | |
US20200125540A1 (en) | Self-correcting pipeline flows for schema drift | |
US20150142844A1 (en) | Scalable objects for use in an on-demand services environment | |
US8244780B1 (en) | Parameter oriented automated database command | |
US20170161291A1 (en) | Database table conversion | |
US9703834B2 (en) | Topological query in multi-tenancy environment | |
US10042849B2 (en) | Simplifying invocation of import procedures to transfer data from data sources to data targets | |
EP2954403A1 (en) | Cloud-based streaming data receiver and persister | |
US20220318267A1 (en) | Automated performing of replication tasks in a multiple database system | |
US9971819B2 (en) | Using cloud processing to integrate ETL into an analytic reporting mechanism | |
CN102393889A (zh) | 一种权限配置管理系统 | |
US20140379691A1 (en) | Database query processing with reduce function configuration | |
CN103957255A (zh) | 一种轻量级应用开发云服务平台及其资源的访问方法 | |
US10929279B2 (en) | Systems and method for automated testing framework for service portal catalog | |
Vakharia et al. | Shared foundations: Modernizing meta’s data lakehouse | |
EP3567804A1 (en) | Advanced insights explorer | |
CN111708751A (zh) | 一种基于Hue实现数据加载的方法,系统,设备及可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CP03 | Change of name, title or address |
Address after: 185 Jingsi Road, Shizhong District, Jinan City, Shandong Province Patentee after: Shandong luruan Digital Technology Co.,Ltd. Country or region after: China Address before: 185 Jingsi Road, Shizhong District, Jinan City, Shandong Province Patentee before: SHANDONG LUNENG SOFTWARE TECHNOLOGY Co.,Ltd. Country or region before: China |