CN113721976B - 基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 - Google Patents
基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN113721976B CN113721976B CN202110877144.5A CN202110877144A CN113721976B CN 113721976 B CN113721976 B CN 113721976B CN 202110877144 A CN202110877144 A CN 202110877144A CN 113721976 B CN113721976 B CN 113721976B
- Authority
- CN
- China
- Prior art keywords
- data set
- file
- metadata
- data
- preset
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000013508 migration Methods 0.000 title claims abstract description 19
- 230000005012 migration Effects 0.000 title claims abstract description 19
- 230000000007 visual effect Effects 0.000 claims abstract description 79
- 238000012545 processing Methods 0.000 claims description 40
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N silicon dioxide Inorganic materials O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 claims description 12
- 230000000694 effects Effects 0.000 claims description 11
- 230000006835 compression Effects 0.000 claims description 10
- 238000007906 compression Methods 0.000 claims description 10
- 239000010453 quartz Substances 0.000 claims description 10
- 238000012216 screening Methods 0.000 claims description 10
- 238000012795 verification Methods 0.000 claims description 9
- 238000004590 computer program Methods 0.000 claims description 6
- 238000004458 analytical method Methods 0.000 abstract description 11
- 238000012800 visualization Methods 0.000 description 12
- 230000006870 function Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000010586 diagram Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000007726 management method Methods 0.000 description 4
- 230000001419 dependent effect Effects 0.000 description 3
- 230000008676 import Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/76—Adapting program code to run in a different environment; Porting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/10—File systems; File servers
- G06F16/17—Details of further file system functions
- G06F16/174—Redundancy elimination performed by the file system
- G06F16/1744—Redundancy elimination performed by the file system using compression, e.g. sparse files
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F8/00—Arrangements for software engineering
- G06F8/70—Software maintenance or management
- G06F8/73—Program documentation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Library & Information Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请公开了一种基于BI分析软件的数据迁移方法、装置、存储介质和电子设备,涉及办公自动化领域。本申请从旧环境的BI分析软件中选择待导出的可视化元素,根据选择的可视化元素的元数据,以及根据元素依赖关系获取的数据集生成压缩文件,将压缩文件导出,以便将压缩文件导入到新环境的BI分析文件中,实现BI分析软件中展示场景的快速还原。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种基于BI分析软件的数据迁移方法、装置、存储介质及电子设备。
背景技术
BI(Business Intelligence,商业智能)分析软件使用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析以实现商业价值。BI分析软件配置有各种可视化元素实现数据的可视化展示,可视化元素包括用户故事、分析报告、仪表板和分析图表等,为了更好的展现分析,经常会有大量的配置参数对可视化元素的展示效果的进行优化,配置的工作量较大。当BI分析软件的运行环境发生变更(例如:操作系统或运行平台变更)时,BI分析软件中已配置好的可视化场景,需要重新进行配置,重配置的工作量较大。
发明内容
本申请实施例提供了一种基于BI分析软件的数据迁移方法、装置、存储介质及电子设备,解决BI分析软件的运行环境发生变更时,重配置的工作量较大的问题。所述技术方案如下:
第一方面,本申请实施例提供了一种基于BI分析软件的数据迁移方法,所述方法包括:
基于用户的选择指令在第一BI分析软件的选择待导出的至少一个可视化元素;
根据预设的元素层次关系确定所述至少一个可视化元素的处理顺序;
满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件;其中,元数据信息包括展示效果信息;
基于所述处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集;
将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件;
将所述压缩文件导出至指定存储目录中。
第二方面,本申请实施例提供了一种基于BI分析软件的数据迁移装置,所述装置包括:
选择单元,用于基于用户的选择指令在第一BI分析软件的选择待导出的至少一个可视化元素;
确定单元,用于根据预设的元素层次关系确定所述至少一个可视化元素的处理顺序;
获取单元,用于满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件;其中,元数据信息包括展示效果信息;
所述获取单元,还用于基于所述处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集;
压缩单元,用于将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件;
导出单元,用于将所述压缩文件导出至指定存储目录中。
第三方面,本申请实施例提供一种计算机存储介质,所述计算机存储介质存储有多条指令,所述指令适于由处理器加载并执行上述的方法步骤。
第四方面,本申请实施例提供一种电子设备,可包括:处理器和存储器;其中,所述存储器存储有计算机程序,所述计算机程序适于由所述处理器加载并执行上述的方法步骤。
本申请一些实施例提供的技术方案带来的有益效果至少包括:
从旧环境的BI分析软件中选择待导出的可视化元素,根据选择的可视化元素的元数据,以及根据元素依赖关系获取的数据集生成压缩文件,将压缩文件导出,以便将压缩文件导入到新环境的BI分析文件中,实现BI分析软件中展示场景的快速还原,相对于相关技术中仅能由特定权限的人员对数据库中的数据集进行数据还原和备份,本申请可以将旧环境的展示场景复用到新环境中,实现了一键还原场景。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种基于BI分析软件的数据迁移方法的流程示意图;
图2是本申请实施例提供的用户界面示意图;
图3是本申请实施例提供的一种基于BI分析软件的数据迁移装置的结构示意图;
图4是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施例方式作进一步地详细描述。
下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本申请相一致的所有实施方式。相反,它们仅是如所附权利要求书中所详述的、本申请的一些方面相一致的装置和方法的例子。
在本申请的描述中,需要理解的是,术语“第一”、“第二”等仅用于描述目的,而不能理解为指示或暗示相对重要性。对于本领域的普通技术人员而言,可以具体情况理解上述术语在本申请中的具体含义。此外,在本申请的描述中,除非另有说明,“多个”是指两个或两个以上。“和/或”,描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。字符“/”一般表示前后关联对象是一种“或”的关系。
下面将结合附图1-附图2,对本申请实施例提供的基于BI分析软件的数据迁移方法进行详细介绍。该方法可依赖于计算机程序实现,可运行于基于冯诺依曼体系的基于BI分析软件的数据迁移装置上。该计算机程序可集成在应用中,也可作为独立的工具类应用运行。其中,本申请实施例中的基于BI分析软件的数据迁移装置可以为电子设备,包括但不限于智能手机、个人电脑、平板电脑、手持设备、车载设备、可穿戴设备、计算设备或连接到无线调制解调器的其它处理设备等。
请参见图1,为本申请实施例提供的一种基于BI分析软件的数据迁移方法的流程示意图。如图1所示,本申请实施例的所述方法可以包括以下步骤:
S101、基于用户的选择指令在第一BI分析软件中选择待导出的至少一个可视化元素。
其中,BI分析软件提供多个可视化元素,可视化元素包括统计图表,可视化元素对应一个或多个数据集,可视化元素的统计图表是基于数据集中的业务数据生成的,可视化元素的展示效果是基于用户配置或系统默认的展示效果信息生成的。这样用户可以通过可视化元素直观的查看数据的分布规律,例如:可视化元素包括:用户故事、分析报告、仪表板和分析图表。本申请的数据集可部署在关系型数据库或非关系型数据库中。
其中,BI分析软件提供的多个可视化元素之间具有一定的元素层次关系,即可视化元素之间具有一定的层次,高层的可视化元素可包含一个或多个低层的可视化元素,低层的可视化元素不能包含高层的可视化元素。例如:上述的元素层次关系为:用户故事可包含一个或多个分析报告,分析报告可包含一个或多个仪表板,仪表板可包含一个或多个分析图表。所有的可视化元素最终都要关联到数据集,一个数据集可能关联一个或多个可视化元素。
其中,选择指令是用户通过输入装置触发生成的,输入装置可以是鼠标、键盘或触摸屏。例如:参见图2所示,数据迁移装置显示BI分析软件的导出界面,导出界面上包括BI分析软件的多个可视化元素:故事、仪表板、在线表格。用户通过输入装置在导出界面上勾选一个或多个可视化元素,在勾选某个可视化元素后,根据元素依赖关系,将勾选的可视化元素依赖的一个或多个可视化元素自动进行勾选。假设用户在导出界面中勾选了故事,查询故事依赖有仪表板、报告和表格,将上述依赖的仪表板、报告和表格自动进行勾选。
S102、根据预设的元素层次关系确定至少一个可视化元素的处理顺序。
其中,数据迁移装置预存储有元素层次关系,元素层次关系表示可视化元素之间包含与被包含的关系。在用户选择多个可视化元素的情况下,多个可视化元素的处理顺序为:先处理高层的可视化元素,再处理低层的可视化元素。
例如:根据S101中的例子,预设的元素层次关系将BI分析软件中的多个可视化元素从高层到低层排列为:故事——仪表板——报告——在线表格——数据处理。用户基于选择指令选择的可视化元素为:故事和报告,那么基于元素层次关系,处理顺序为故事——报告。
S103、满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件。
其中,触发条件是触发执行导出任务的条件,触发条件可以是时间触发或条件触发。
在一个或多个可能的实施例中,导出界面上包括导出按钮,在检测到导出按钮上的导出操作时,确定满足执行导出任务的条件。进一步的,在导出任务的数量为多个时,为提高执行导出任务的效率,在执行导出任务之前,将导出任务提交到Quartz系统,由Quartz系统调度导出任务,将导出任务放置在队列中等待执行,以减轻并行处理的负荷。在Quartz系统执行该导出任务时,获取各个可视化元素的元数据信息,元数据信息包括可视化元素的展示效果信息和数据结构信息,展示效果信息包括:格式、颜色、字体和布局等。针对任意一个可视化元素来说,根据获取到的元数据信息生成元数据文件,元数据文件的格式可以为JSON,每个可视化元素对应一个元数据文件。
例如:选择的可视化元素为:故事、仪表板、报告、表格和数据处理,数据迁移装置根据故事ID集合查询元数据信息,将查询到的元数据信息组成元数据文件。然后依次根据仪表板、报告、表格和数据处理的ID查询出元数据,分别组成元数据文件。
S104、基于处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集。
其中,元素依赖关系表示可视化元素之间的引用关系,根据S102中确定的处理顺序,依次获取可视化元素关联的数据集。数据集中存储有多条业务数据,一个数据集可能被多个可视化元素引用。
例如:根据S103的例子,首先根据故事的ID获取关联的数据集,根据仪表板的ID获取关联的数据集,根据报告的ID获取关联的数据集,根据表格的ID获取关联的数据集,最后根据数据处理的ID获取关联的数据集。
S105、将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件。
其中,对于S104中获取到的数据集,对于存在重复的数据集,仅保留一个数据集。各个可视化文件的元数据文件存放在不同的目录中,去重后的数据集存放在单独的目录中,将各个目录中的元数据文件和数据集压缩成一个压缩文件,压缩文件的格式可以为RAR或ZIP等。压缩文件中可携带校验码,用于校验压缩文件的完整性。本申请通过数据集的去重,减少导出的数据量,提高导出任务的执行效率。
进一步的,对数据集中的数据进行筛选,从数据集中筛选出部分业务数据,利用筛选后的数据集和各个可视化元素的元数据文件生成压缩文件,筛选的方法可以是:从数据集中筛选出访问次数大于预设次数的业务数据;和/或从数据集中筛选出访问时长小于预设时长的业务数据,访问时长表示最近一次访问的时刻到当前时刻之间的时长。预设次数和预设时长可根据实际需求而定。其中,从数据集中筛选出业务数据的筛选规则可以根据实际需求来的,本申请步骤不作限制。在另一些实施例中,也可以根据用户的设定不导出数据集,仅导出选择的可视化元素的元数据信息。
进一步的,将压缩文件放置在文件服务器中供下载,以及将导出任务的状态更改为已完成。在通过Quartz系统调度导出任务时,数据迁移装置检测到导出任务完成时,根据导出任务的ID从文件服务器中下载压缩文件。
S106、将压缩文件导出至指定存储目录中。
其中,存储目录用于存储文件,存储目录可以设置在本地或外部设备中。
在一个或多个可能的实施例中,还包括:
从所述指定存储目录中获取所述压缩文件;
对所述压缩文件进行解压得到数据集和元数据文件;
在文件校验通过后,利用解压得到的数据集和元数据文件更新第二BI分析软件的配置。
其中,第二BI分析软件和第一BI分析软件的运行环境不同。文件校验包括格式校验和完整性校验,格式校验用于校验文件或数据集的格式是否为预设格式,完整性校验用于校验文件或数据集是否发生篡改。由于数据集是所有可视化元素的基础,首先解析数据集并且创建数据集,并且记录下新数据集ID(位于新环境中的第二BI分析软件)和旧数据集ID(位于旧环境中的第一BI分析软件)的对应关系,以便后面创建仪表板等可视化元素的时候,可以直接替换。解析数据集处理的文件,然后替换依赖的旧数据集ID,并创建新数据处理流程。通过分别解析仪表板、报告、表格的数据,并且替换其中依赖的数据集ID后,创建仪表板报告等,创建完成后,也要记录新旧仪表板,报告,表格的ID对应关系以便创建新的故事使用。解析故事的文件数据,然后替换其中依赖的仪表板ID等,然后再创建新的故事,由此完成第二BI分析软件的。
需要说明的是,在执行导入任务的时候,将会采用与导出相反的顺序执行数据文件解析创建数据的步骤,这样能保证在创建元数据的依赖的数据不会确实的问题,在解析数据时如果发现有数据缺失,则使用默认值代替,做到软件的向下兼容问题。
在本申请实施例中,从旧环境的BI分析软件中选择待导出的可视化元素,根据选择的可视化元素的元数据,以及根据元素依赖关系获取的数据集生成压缩文件,将压缩文件导出,以便将压缩文件导入到新环境的BI分析文件中,实现BI分析软件中展示场景的快速还原,相对于相关技术中仅能由特定权限的人员对数据库中的数据集进行数据还原和备份,本申请可以将旧环境的展示场景复用到新环境中,实现了一键还原场景。
下述为本申请装置实施例,可以用于执行本申请方法实施例。对于本申请装置实施例中未披露的细节,请参照本申请方法实施例。
请参见图3,其示出了本申请一个示例性实施例提供的工作任务的管理装置的结构示意图。该工作任务的管理装置可以通过软件、硬件或者两者的结合实现成为电子设备的全部或一部分。该装置3包括:选择单元301、确定单元302、获取单元303、压缩单元304和导出单元305。
选择单元301,用于基于用户的选择指令在第一BI分析软件的选择待导出的至少一个可视化元素;
确定单元302,用于根据预设的元素层次关系确定所述至少一个可视化元素的处理顺序;
获取单元303,用于满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件;其中,元数据信息包括展示效果信息;
所述获取单元303,还用于基于所述处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集;
压缩单元304,用于将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件;
导出单元305,用于将所述压缩文件导出至指定存储目录中。
在一个或多个可能的实施例中,装置3还包括:
导出单元,用于从所述指定存储目录中获取所述压缩文件;
对所述压缩文件进行解压得到数据集和元数据文件;
在文件校验通过后,利用解压得到的数据集和元数据文件更新第二BI分析软件的配置。
在一个或多个可能的实施例中,所述文件校验包括完整性校验和格式校验。
在一个或多个可能的实施例中,所述基于用户的选择指令在第一BI分析软件的选择待导出的至少一个可视化元素,包括:
通过显示单元显示导出界面;其中,所述导出界面上包括多个可视化元素的名称;
基于用户的选择指令从所述多个可视化元素的名称中选择至少一个可视化元素的名称,以及在选择的可视化元素的名称后添加勾选标记。
在一个或多个可能的实施例中,所述满足预设的触发条件包括:
响应于用户的导出指令,生成导出任务;
将导出任务提交至Quartz系统进行调度;
在检测到Quartz调度所述导出任务时,则满足预设的触发条件。
在一个或多个可能的实施例中,所述将所述压缩文件导出至指定存储目录中,包括:
轮询到Quartz系统完成所述导出任务的执行时,将所述压缩文件存储到文件服务器的指定存储目录中,以及生成该压缩文件的下载链接。
在一个或多个可能的实施例中,还包括:
筛选单元,用于从所述去重处理后的数据集中筛选出部分数据;
其中,筛选规则包括:选择数据集中访问次数大于预设次数的业务数据;和/或
选择数据集中访问时长小于预设时长的业务数据。
需要说明的是,上述实施例提供的工作任务的管理装置在执行工作任务的管理方法时,仅以上述各功能模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将设备的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。另外,上述实施例提供的恢复用户数据装置与工作任务的管理方法实施例属于同一构思,其体现实现过程详见方法实施例,这里不再赘述。
上述本申请实施例序号仅仅为了描述,不代表实施例的优劣。
本申请实施例还提供了一种计算机存储介质,所述计算机存储介质可以存储有多条指令,所述指令适于由处理器加载并执行如上述图1-图2所示实施例的方法步骤,具体执行过程可以参见图1-图2所示实施例的具体说明,在此不进行赘述。
请参见图4,为本申请实施例提供了一种电子设备的结构示意图。如图4所示,所述电子设备400可以包括:至少一个处理器401,至少一个网络接口404,用户接口403,存储器405,至少一个通信总线402。
其中,通信总线402用于实现这些组件之间的连接通信。
其中,用户接口403可以包括显示屏(Display)、摄像头(Camera),可选用户接口403还可以包括标准的有线接口、无线接口。
其中,网络接口404可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。
其中,处理器401可以包括一个或者多个处理核心。处理器401利用各种接口和线路连接整个电子设备400内的各个部分,通过运行或执行存储在存储器405内的指令、程序、代码集或指令集,以及调用存储在存储器405内的数据,执行电子设备400的各种功能和处理数据。可选的,处理器401可以采用数字信号处理(Digital Signal Processing,DSP)、现场可编程门阵列(Field-Programmable GateArray,FPGA)、可编程逻辑阵列(ProgrammableLogic Array,PLA)中的至少一种硬件形式来实现。处理器401可集成中央处理器(CentralProcessing Unit,CPU)、图像处理器(Graphics Processing Unit,GPU)和调制解调器等中的一种或几种的组合。其中,CPU主要处理操作系统、用户界面和应用程序等;GPU用于负责显示屏所需要显示的内容的渲染和绘制;调制解调器用于处理无线通信。可以理解的是,上述调制解调器也可以不集成到处理器401中,单独通过一块芯片进行实现。
其中,存储器405可以包括随机存储器(Random Access Memory,RAM),也可以包括只读存储器(Read-Only Memory)。可选的,该存储器405包括非瞬时性计算机可读介质(non-transitory computer-readable storage medium)。存储器405可用于存储指令、程序、代码、代码集或指令集。存储器405可包括存储程序区和存储数据区,其中,存储程序区可存储用于实现操作系统的指令、用于至少一个功能的指令(比如触控功能、声音播放功能、图像播放功能等)、用于实现上述各个方法实施例的指令等;存储数据区可存储上面各个方法实施例中涉及到的数据等。存储器405可选的还可以是至少一个位于远离前述处理器401的存储装置。如图4所示,作为一种计算机存储介质的存储器405中可以包括操作系统、网络通信模块、用户接口模块以及诈骗电话的识别应用程序。
在图4所示的电子设备400中,用户接口403主要用于为用户提供输入的接口,获取用户输入的数据;而处理器401可以用于调用存储器405中存储的诈骗电话的识别应用程序,并具体执行图1所示的方法。
本申请实施例和图2的方法实施例属于同一构思,其带来的技术效果也相同,具体过程可参照图2的描述,此处不再赘述。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体或随机存储记忆体等。
以上所揭露的仅为本申请较佳实施例而已,当然不能以此来限定本申请之权利范围,因此依本申请权利要求所作的等同变化,仍属本申请所涵盖的范围。
Claims (9)
1.一种基于BI分析软件的数据迁移方法,其特征在于,包括:
通过显示单元显示导出界面;其中,所述导出界面上包括多个可视化元素的名称;基于用户的选择指令从所述多个可视化元素的名称中选择至少一个可视化元素的名称,以及在选择的可视化元素的名称后添加勾选标记;
根据预设的元素层次关系确定所述至少一个可视化元素的处理顺序;
满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件;其中,元数据信息包括展示效果信息;
基于所述处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集;
将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件;
将所述压缩文件导出至指定存储目录中。
2.根据权利要求1所述的方法,其特征在于,还包括:
从所述指定存储目录中获取所述压缩文件;
对所述压缩文件进行解压得到数据集和元数据文件;
在所述数据集和所述元数据文件校验通过后,利用解压得到的数据集和元数据文件更新第二BI分析软件的配置。
3.根据权利要求2所述的方法,其特征在于,所述文件校验包括完整性校验和格式校验。
4.根据权利要求1所述的方法,其特征在于,所述满足预设的触发条件包括:
响应于用户的导出指令,生成导出任务;
将导出任务提交至Quartz系统进行调度;
在检测到Quartz调度所述导出任务时,则满足预设的触发条件。
5.根据权利要求4所述的方法,其特征在于,所述将所述压缩文件导出至指定存储目录中,包括:
轮询到Quartz系统完成所述导出任务的执行时,将所述压缩文件存储到文件服务器的指定存储目录中,以及生成该压缩文件的下载链接。
6.根据权利要求4或5所述的方法,其特征在于,还包括:
从所述去重处理后的数据集中筛选出部分数据;
其中,筛选规则包括:选择数据集中访问次数大于预设次数的业务数据;和/或
选择数据集中访问时长小于预设时长的业务数据。
7.一种基于BI分析软件的数据迁移装置,其特征在于,包括:
选择单元,用于通过显示单元显示导出界面;其中,所述导出界面上包括多个可视化元素的名称;基于用户的选择指令从所述多个可视化元素的名称中选择至少一个可视化元素的名称,以及在选择的可视化元素的名称后添加勾选标记;
确定单元,用于根据预设的元素层次关系确定所述至少一个可视化元素的处理顺序;
获取单元,用于满足预设的触发条件时,获取各个可视化元素的元数据信息,根据获取的元数据信息生成元数据文件;其中,元数据信息包括展示效果信息;
所述获取单元,还用于基于所述处理顺序,根据预设的元素依赖关系获取各个可视化元素关联的数据集;
压缩单元,用于将获取的数据集进行去重处理,根据去重后的数据集和各个可视化元素的元数据文件进行压缩处理得到压缩文件;
导出单元,用于将所述压缩文件导出至指定存储目录中。
8.一种电子设备,其特征在于,包括:处理器和存储器,其中,所述存储器用于存储计算机程序,所述计算机程序包括程序指令,所述处理器用于调用所述程序指令,执行如权利要求1-6任一项所述的方法。
9.一种计算机可读存储介质,其特征在于,所述计算机存储介质存储有计算机程序,所述计算机程序包括程序指令,所述程序指令当被处理器执行时使所述处理器执行如权利要求1-6任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110877144.5A CN113721976B (zh) | 2021-07-31 | 2021-07-31 | 基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110877144.5A CN113721976B (zh) | 2021-07-31 | 2021-07-31 | 基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113721976A CN113721976A (zh) | 2021-11-30 |
CN113721976B true CN113721976B (zh) | 2024-02-06 |
Family
ID=78674509
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110877144.5A Active CN113721976B (zh) | 2021-07-31 | 2021-07-31 | 基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113721976B (zh) |
Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104813319A (zh) * | 2012-10-22 | 2015-07-29 | 百科纳有限公司 | 用于兴趣驱动商业智能系统中使用的兴趣驱动数据可视化系统的系统和方法 |
US9501585B1 (en) * | 2013-06-13 | 2016-11-22 | DataRPM Corporation | Methods and system for providing real-time business intelligence using search-based analytics engine |
US10001898B1 (en) * | 2011-07-12 | 2018-06-19 | Domo, Inc. | Automated provisioning of relational information for a summary data visualization |
CN111159157A (zh) * | 2019-12-31 | 2020-05-15 | 远光软件股份有限公司 | 一种企业报表数据的指标化处理方法及装置 |
CN112364107A (zh) * | 2020-11-10 | 2021-02-12 | 平安普惠企业管理有限公司 | 系统分析可视化方法、装置、电子设备及计算机可读存储介质 |
CN112434098A (zh) * | 2020-10-23 | 2021-03-02 | 北京掌行通信息技术有限公司 | 一种路网运行的管理方法、装置、存储介质及终端 |
CN112445950A (zh) * | 2019-09-02 | 2021-03-05 | 阿里巴巴集团控股有限公司 | 数据可视化处理方法、装置及电子设备 |
CN112511627A (zh) * | 2018-01-25 | 2021-03-16 | 华为技术有限公司 | 迁移元数据的方法和装置 |
CN112799785A (zh) * | 2021-02-01 | 2021-05-14 | 糖纸伞科技有限公司 | 虚拟机集群迁移方法、装置、设备和介质 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7899820B2 (en) * | 2005-12-14 | 2011-03-01 | Business Objects Software Ltd. | Apparatus and method for transporting business intelligence objects between business intelligence systems |
US7880749B2 (en) * | 2007-01-31 | 2011-02-01 | Business Objects Software Ltd. | Apparatus and method for data charting with an extensible visualization library |
WO2015060893A1 (en) * | 2013-10-22 | 2015-04-30 | Platfora, Inc. | Systems and methods for interest-driven data visualization systems utilizing visualization image data and trellised visualizations |
US9460171B2 (en) * | 2013-11-08 | 2016-10-04 | International Business Machines Corporation | Processing data in data migration |
US10769161B2 (en) * | 2015-11-03 | 2020-09-08 | International Business Machines Corporation | Generating business intelligence analytics data visualizations with genomically defined genetic selection |
US11237913B2 (en) * | 2018-04-27 | 2022-02-01 | Acronis International Gmbh | System and method for data classification during file backup |
US10817570B2 (en) * | 2017-12-07 | 2020-10-27 | Sap Se | Hybrid connectivity for reporting application |
-
2021
- 2021-07-31 CN CN202110877144.5A patent/CN113721976B/zh active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10001898B1 (en) * | 2011-07-12 | 2018-06-19 | Domo, Inc. | Automated provisioning of relational information for a summary data visualization |
CN104813319A (zh) * | 2012-10-22 | 2015-07-29 | 百科纳有限公司 | 用于兴趣驱动商业智能系统中使用的兴趣驱动数据可视化系统的系统和方法 |
US9501585B1 (en) * | 2013-06-13 | 2016-11-22 | DataRPM Corporation | Methods and system for providing real-time business intelligence using search-based analytics engine |
CN112511627A (zh) * | 2018-01-25 | 2021-03-16 | 华为技术有限公司 | 迁移元数据的方法和装置 |
CN112445950A (zh) * | 2019-09-02 | 2021-03-05 | 阿里巴巴集团控股有限公司 | 数据可视化处理方法、装置及电子设备 |
CN111159157A (zh) * | 2019-12-31 | 2020-05-15 | 远光软件股份有限公司 | 一种企业报表数据的指标化处理方法及装置 |
CN112434098A (zh) * | 2020-10-23 | 2021-03-02 | 北京掌行通信息技术有限公司 | 一种路网运行的管理方法、装置、存储介质及终端 |
CN112364107A (zh) * | 2020-11-10 | 2021-02-12 | 平安普惠企业管理有限公司 | 系统分析可视化方法、装置、电子设备及计算机可读存储介质 |
CN112799785A (zh) * | 2021-02-01 | 2021-05-14 | 糖纸伞科技有限公司 | 虚拟机集群迁移方法、装置、设备和介质 |
Also Published As
Publication number | Publication date |
---|---|
CN113721976A (zh) | 2021-11-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10782961B2 (en) | Analyzing components related to a software application in a software development environment | |
CN110716966B (zh) | 数据可视化处理方法及系统、电子设备及存储介质 | |
US11238632B2 (en) | Interface to index and display geospatial data | |
CN106557308B (zh) | 一种软件持续集成方法及装置 | |
US20130167017A1 (en) | Display processing device, display processing method, and information storage medium storing program | |
CN110990053A (zh) | 机器学习方案模板的创建方法、使用方法及装置 | |
CN110716848A (zh) | 数据收集方法、装置、电子设备及存储介质 | |
CN111897548A (zh) | 前端资源发布方法、装置、电子设备及计算机存储介质 | |
CN111309734A (zh) | 自动生成表数据的方法及系统 | |
WO2020047003A1 (en) | Internet of things designer for an authoring tool in virtual and augmented reality environments | |
CN113721976B (zh) | 基于bi分析软件的数据迁移方法、装置、存储介质及电子设备 | |
CN111198902A (zh) | 元数据管理方法、装置、存储介质及电子设备 | |
CN112328612A (zh) | 字段一致性验证测试数据的生成方法、系统、设备及介质 | |
CN109460234B (zh) | 应用程序瘦身方法、装置、终端及存储介质 | |
US20220374801A1 (en) | Plan evaluation apparatus and plan evaluation method | |
CN116339715A (zh) | 前端页面构建方法和装置、电子设备及存储介质 | |
CN114911479A (zh) | 基于配置化的界面生成方法、装置、设备及存储介质 | |
KR101664761B1 (ko) | 프로젝트 데이터 작성 장치 | |
CN115480748A (zh) | 业务编排方法、设备及存储介质 | |
CN114757157A (zh) | 用于生成航空器工包的方法、装置、设备和介质 | |
CN115098747A (zh) | 游戏中场景资源的处理方法、装置、可读存储介质和电子装置 | |
CN114385155A (zh) | vue项目可视化工具生成方法、装置、设备及存储介质 | |
JP2022180289A (ja) | 品質情報出力装置、品質情報出力方法、およびプログラム | |
KR102099362B1 (ko) | 마이크로 서비스를 이용한 데이터 전처리 장치 및 방법 | |
CN110866492A (zh) | 一种基线分支的识别方法、装置及计算机系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |