CN108595552A - 数据立方体发布方法、装置、电子设备和存储介质 - Google Patents

数据立方体发布方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN108595552A
CN108595552A CN201810316070.6A CN201810316070A CN108595552A CN 108595552 A CN108595552 A CN 108595552A CN 201810316070 A CN201810316070 A CN 201810316070A CN 108595552 A CN108595552 A CN 108595552A
Authority
CN
China
Prior art keywords
data
running environment
target source
target
current
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810316070.6A
Other languages
English (en)
Other versions
CN108595552B (zh
Inventor
宋剑锋
杨勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ping An Technology Shenzhen Co Ltd
Original Assignee
Ping An Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ping An Technology Shenzhen Co Ltd filed Critical Ping An Technology Shenzhen Co Ltd
Priority to CN201810316070.6A priority Critical patent/CN108595552B/zh
Priority to PCT/CN2018/099156 priority patent/WO2019196272A1/zh
Publication of CN108595552A publication Critical patent/CN108595552A/zh
Application granted granted Critical
Publication of CN108595552B publication Critical patent/CN108595552B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/28Databases characterised by their database models, e.g. relational or object models
    • G06F16/283Multi-dimensional databases or data warehouses, e.g. MOLAP or ROLAP

Abstract

本发明提供一种数据立方体发布方法、装置、电子设备和存储介质。所述数据立方体发布方法通过在多活系统中的每个运行环境中分别配置两个子目录,然后依次轮流配置两个子目录一个作为发布的对象,一个作为访问的对象,从而将报表的数据访问过程与所述目标数据立方体的发布过程分开,使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。

Description

数据立方体发布方法、装置、电子设备和存储介质
技术领域
本发明涉及数据处理技术领域,尤其涉及一种数据立方体发布方法、装置、电子设备和存储介质。
背景技术
现有技术方案中,数据立方体通常采用手动刷新及发布的方式,或者是使用计划任务自动执行的方式,但是,针对于大批量的刷新或发布的任务需求,由于手工发布和计划任务发布都需要大量重复配置工作,且数据立方体文件的拷贝需要相当的时间,因此不是无缝衔接的,上述发布方式则很难满足需求。
发明内容
鉴于以上内容,有必要提供一种数据立方体发布方法、装置、电子设备和存储介质,能使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
一种数据立方体发布方法,所述方法包括:
从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;
当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;
根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;
获取所述多活系统中每个运行环境的当前发布任务;
从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;
将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;
在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
根据本发明优选实施例,所述从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据包括:
采用数据仓库技术从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
根据本发明优选实施例,所述目标源数据的刷新参数包括以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式。
根据本发明优选实施例,所述根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体包括:
获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间;
当所述当前时间与获取的刷新时间匹配时,从所述目标源数据的刷新参数中获取刷新方式;
根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体;
从所述目标源数据的刷新参数中获取刷新后生成的数据立方体的名称,并根据获取的刷新后生成的数据立方体的名称为所述目标数据立方体命名。
根据本发明优选实施例,在根据所述目标源数据的刷新参数对所述目标源数据进行刷新时,所述方法还包括:
当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,提示指定人员对所述目标源数据进行手动刷新。
根据本发明优选实施例,所述从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录包括:
当每个当前发布任务是首次发布时,从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录;
当每个当前发布任务不是首次发布时,将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
根据本发明优选实施例,所述将所述目标数据立方体的报表的数据源配置为所述当前发布目录包括:
调用封装的指定SDK接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
一种数据立方体发布装置,所述装置包括:
获取单元,用于从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;
所述获取单元,还用于当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;
刷新单元,用于根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;
所述获取单元,还用于获取所述多活系统中每个运行环境的当前发布任务;
所述获取单元,还用于从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;
发布单元,用于将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;
配置单元,用于在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
根据本发明优选实施例,所述获取单元从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据包括:
采用数据仓库技术从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
根据本发明优选实施例,所述目标源数据的刷新参数包括以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式。
根据本发明优选实施例,所述刷新单元根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体包括:
获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间;
当所述当前时间与获取的刷新时间匹配时,从所述目标源数据的刷新参数中获取刷新方式;
根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体。
根据本发明优选实施例,所述装置还包括:
提示单元,用于在所述刷新单元根据所述目标源数据的刷新参数对所述目标源数据进行刷新时,且当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,提示指定人员对所述目标源数据进行手动刷新。
根据本发明优选实施例,所述获取单元从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录包括:
当每个当前发布任务是首次发布时,从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录;
当每个当前发布任务不是首次发布时,将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
根据本发明优选实施例,所述配置单元将所述目标数据立方体的报表的数据源配置为所述当前发布目录包括:
调用封装的指定SDK接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
一种电子设备,所述电子设备包括:
处理器;及
存储器,存储在所述存储器中的指令被所述处理器执行以实现所述数据立方体发布方法。
一种计算机可读存储介质,所述计算机可读存储介质中存储的指令被电子设备中的处理器执行以实现所述数据立方体发布方法。
由以上技术方案可以看出,本发明从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;获取所述多活系统中每个运行环境的当前发布任务;从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。利用本发明能使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
附图说明
图1是本发明实现数据立方体发布方法的较佳实施例的应用环境图。
图2是本发明数据立方体发布方法的较佳实施例的流程图。
图3是数据仓库技术的示意图。
图4是本发明数据立方体发布装置的较佳实施例的功能模块图。
图5是本发明实现数据立方体发布方法的较佳实施例的电子设备的结构示意图。
主要元件符号说明
电子设备 1
存储器 12
处理器 13
数据立方体发布装置 11
获取单元 110
刷新单元 111
发布单元 112
配置单元 113
提示单元 114
多活系统 2
具体实施方式
为了使本发明的目的、技术方案和优点更加清楚,下面结合附图和具体实施例对本发明进行详细描述。
如图1所示,图1是本发明实现数据立方体发布方法的较佳实施例的应用环境图。所述多活系统2包括至少两个运行环境,所述电子设备1与所述多活系统2相通信。
其中,所述多活系统2中的每个运行环境的数据是同步的,使用户对所述多活系统2中每个运行环境的访问结果均保持一致。
所述电子设备1用于从所述多活系统2中的各个运行环境中获取目标源数据,以生成目标数据立方体。
如图2所示,是本发明数据立方体发布方法的较佳实施例的流程图。根据不同的需求,该流程图中步骤的顺序可以改变,某些步骤可以省略。
所述数据立方体发布方法应用于一个或者多个电子设备1中,所述电子设备1是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(Application Specific Integrated Circuit,ASIC)、可编程门阵列(Field-Programmable Gate Array,FPGA)、数字处理器(Digital SignalProcessor,DSP)、嵌入式设备等。
所述电子设备1可以是任何一种可与用户进行人机交互的电子产品,例如,个人计算机、平板电脑、智能手机、个人数字助理(Personal Digital Assistant,PDA)、游戏机、交互式网络电视(Internet Protocol Television,IPTV)、智能式穿戴式设备等。
所述电子设备1还可以包括网络设备和/或用户设备。其中,所述网络设备包括,但不限于单个网络服务器、多个网络服务器组成的服务器组或基于云计算(CloudComputing)的由大量主机或网络服务器构成的云。
所述电子设备1所处的网络包括但不限于互联网、广域网、城域网、局域网、虚拟专用网络(Virtual Private Network,VPN)等。
S10,所述电子设备1从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
在本实施例中,所述多活系统2中包括至少两个运行环境,具体地,所述多活系统2中的每个运行环境的数据是同步的,使用户对所述多活系统中每个运行环境的访问结果均保持一致,这样,当一个运行环境崩溃时,其他运行环境能够直接接替,继续正常工作。
优选地,所述电子设备1从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据包括:
所述电子设备1采用数据仓库技术(Extract-Transform-Load,ETL)从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
如图3所示,是数据仓库技术的示意图。具体地,所述数据仓库技术主要包括抽取(Extract)、转换(Transform)及装载(Load)三个步骤。所述抽取是指从每个运行环境的源数据库中获得数据的过程;所述转换是指对数据的清洗和转换,经过所述转换,可以过滤掉不符合条件或者错误的数据,同时将数据转换为需要的格式;所述装载是指将转换后的数据加载到本地数据库作为所述目标源数据的过程。
在本实施例中,所述目标源数据是指用于生成目标数据立方体(data cube)的源数据,所述目标源数据可以是二维的平面数据,也可以是至少一张表格数据等。具体地,所述目标数据立方体的概念将在后文中进行解释。
S11,当确定所述目标源数据获取完成时,所述电子设备1获取所述目标源数据的刷新参数。
优选地,所述目标源数据的刷新参数包括,但不限于以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式等。
具体地,所述目标源数据的刷新方式包括增量刷新或者全量刷新。
其中,所述全量刷新是指提取全业务量数据进行刷新,而相比于所述全量刷新,所述增量刷新是指每次刷新提取指定时间段的增量数据进行刷新,且所述指定时间段具有固定频率,如:日、周、月等。所述增量刷新的刷新数据量较少,刷新速度快,而所述全量刷新的报表访问速度更快。
需要说明的是,在实际应用中,可以根据需要选择刷新方式,本发明不做限制。
S12,所述电子设备1根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体。
优选地,所述电子设备1根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体包括:
所述电子设备1获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间,当所述当前时间与获取的刷新时间匹配时,所述电子设备1从所述目标源数据的刷新参数中获取刷新方式,所述电子设备1根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体,所述电子设备1从所述目标源数据的刷新参数中获取刷新后生成的数据立方体的名称,并根据获取的刷新后生成的数据立方体的名称为所述目标数据立方体命名。
例如:所述电子设备1获取当前时间为7时,如果从所述目标源数据的刷新参数中获取的刷新时间为每天7时,则所述电子设备1再从所述目标源数据的刷新参数中获取刷新方式,若所述刷新方式为全量刷新,则所述电子设备1以全量刷新的方式对所述目标源数据进行刷新,并以获取到的刷新后生成的数据立方体的名称A将所述目标数据立方体命名为A。
在本实施例中,所述刷新可以包括使用COGNOS(康格诺)的OLAP(OnlineAnalytical Processing,联机分析处理)数据抽取转换引擎(Transformer)对COGNOS模型的刷新进行刷新操作的任务。具体地,通过刷新所述COGNOS模型,从指定数据源获取到最新的数据,形成数据立方体,形成的所述数据立方体用于提供给报表作为本地数据源使用。当刷新完成后,所述电子设备1将自动获取并执行发布任务。
在本实施例中,所述目标数据立方体是一种多维矩阵,让用户从多个角度探索和分析数据集,从而不仅可以获取到需要的信息,也可以获取到与所述需要的信息相关联的其他信息。
在本实施例中,所述电子设备1通过对所述目标源数据进行刷新,可以将二维的平面数据刷新为多维的立体数据,更加满足用户对数据的需求。
优选地,在所述电子设备1根据所述目标源数据的刷新参数对所述目标源数据进行刷新时,所述方法还包括:
当所述电子设备1检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,所述电子设备1提示指定人员对所述目标源数据进行手动刷新。
具体地,由于刷新失败会影响后续的发布任务,数据补录会影响数据的真实性及可用性,因此,当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,所述电子设备1可以提示指定人员对所述目标源数据进行手动刷新,通过人为介入的方式,避免影响后续任务的进行,使任务的执行具有更大的灵活性。
具体地,提示的方式可以包括,但不限于以下一种或者多种的组合:
语音提示、弹窗提示、短信提示、电话提示、邮件提示等等。
当然,所述指定人员也可以对上述刷新过程进行主动监控,具体地,所述指定人员可以实时监控所述刷新过程的作业状态,也可以定时查询所述刷新过程的作业状态,本发明不作限制。
需要说明的是,在其他实施例中,所述电子设备1也可以通过连接一个刷新机器进行上述刷新操作,本发明不作限制。
S13,所述电子设备1获取所述多活系统中每个运行环境的当前发布任务。
在本实施例中,所述当前发布任务是指将所述目标数据立方体拷贝至每个运行环境的指定服务器的过程,其中,所述指定服务器是指本地的服务器。这样,所述电子设备1通过将所述目标数据立方体拷贝至每个运行环境的指定服务器,使数据访问更加方便、快捷,而不需要再连接其他数据库,避免由于性能压力及输入输出的限制影响数据访问。
S14,所述电子设备1从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录。
在本实施例中,在所述电子设备1从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录前,所述方法还包括:
所述电子设备1为每个运行环境配置两个子目录。
具体地,所述电子设备1从每个运行环境中配置的两个子目录用于存储所述目标数据立方体,以供对应的报表进行访问。
优选地,所述电子设备1从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录包括:
当每个当前发布任务是首次发布时,所述电子设备1从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录。
例如:每个运行环境中配置的两个子目录为子目录B及子目录C,当所述当前发布任务是首次发布时,也就是说,每个运行环境中配置的两个子目录均为空目录,因此,所述电子设备1可以从所述子目录B及所述子目录C中任选一个子目录作为每个当前发布任务的当前发布目录。
当每个当前发布任务不是首次发布时,所述电子设备1将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
例如:每个运行环境中配置的两个子目录为子目录B及子目录C,当所述当前发布任务不是首次发布时,所述电子设备1获取到每个运行环境中上次发布任务时未使用的子目录为所述子目录C,因此,所述电子设备1可以将每个运行环境中的子目录C作为每个当前发布任务的当前发布目录。
通过上述实施方式,所述电子设备1可以实现每个运行环境中配置的两个子目录的轮流发布,为后续报表访问提供条件,具体实现方式将在后续步骤中详述。
S15,所述电子设备1将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中。
通过上述实施方式,相当于将所述目标数据立方体存储于每个运行环境对应的本地数据库中,并作为本地数据源。这样,在后续有报表要进行数据的访问时,所述电子设备1即可在每个运行环境中直接读取所述目标数据立方体中的数据,而不需要连接其他数据库获取数据,从而提高了数据读取速度。
S16,在完成每个当前发布任务后,所述电子设备1将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
例如:在完成每个当前发布任务后,所述电子设备1将所述目标数据立方体发布至每个运行环境中的子目录C,进而将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中的所述子目录B,并将所述目标数据立方体的报表的数据源配置为每个运行环境中的子目录C。
优选地,所述电子设备1将所述目标数据立方体的报表的数据源配置为所述当前发布目录包括:
所述电子设备1调用封装的指定SDK(Software Development Kit,软件开发工具包)接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
具体地,本发明对所述封装的指定SDK接口不做限制。
通过上述实施方式,所述电子设备1将所述目标数据立方体的报表的数据源配置为所述当前发布目录,以供所述目标数据立方体的报表进行访问。
进一步地,在所述目标数据立方体进行下一次发布任务时,将发布至每个运行环境中除所述当前发布目录之外的另一个子目录中,此时,如果所述目标数据立方体的报表需要访问数据,所述电子设备1将以所述当前发布目录为数据源,这样,每个运行环境的两个子目录一个作为发布的对象,一个作为访问的对象,从而将报表的数据访问过程与所述目标数据立方体的发布过程分开,使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
通过上述实施方式,所述电子设备1还可以将所述目标数据立方体的报表的数据源配置为最新发布的子目录,从而保证每次访问的数据均为最新数据。
进一步地,本实施方式还可以实现多个运行环境中数据的同步,达到异地多活的效果,这样,当其中一个运行环境故障或者是中止服务时,其他运行环境可以直接接替照常运行,避免由于一个运行环境故障造成整体业务中断,进一步避免了用户的经济损失及资源损失,使用户在对异常无感知的情况下继续正常访问及使用系统。
综上所述,本发明能从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;获取所述多活系统中每个运行环境的当前发布任务;从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。因此,本发明能使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
如图4所示,是本发明数据立方体发布装置的较佳实施例的功能模块图。所述数据立方体发布装置11包括获取单元110、刷新单元111、发布单元112、配置单元113及提示单元114。本发明所称的模块/单元是指一种能够被处理器13所执行,并且能够完成固定功能的一系列计算机程序段,其存储在存储器12中。在本实施例中,关于各模块/单元的功能将在后续的实施例中详述。
获取单元110从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
在本实施例中,所述多活系统2中包括至少两个运行环境,具体地,所述多活系统2中的每个运行环境的数据是同步的,使用户对所述多活系统中每个运行环境的访问结果均保持一致,这样,当一个运行环境崩溃时,其他运行环境能够直接接替,继续正常工作。
优选地,所述获取单元110从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据包括:
所述获取单元110采用数据仓库技术从多活系统2中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
如图3所示,是数据仓库技术的示意图。具体地,所述数据仓库技术主要包括抽取(Extract)、转换(Transform)及装载(Load)三个步骤。所述抽取是指从每个运行环境的源数据库中获得数据的过程;所述转换是指对数据的清洗和转换,经过所述转换,可以过滤掉不符合条件或者错误的数据,同时将数据转换为需要的格式;所述装载是指将转换后的数据加载到本地数据库作为所述目标源数据的过程。
在本实施例中,所述目标源数据是指用于生成目标数据立方体(data cube)的源数据,所述目标源数据可以是二维的平面数据,也可以是至少一张表格数据等。具体地,所述目标数据立方体的概念将在后文中进行解释。
当确定所述目标源数据获取完成时,所述获取单元110获取所述目标源数据的刷新参数。
优选地,所述目标源数据的刷新参数包括,但不限于以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式等。
具体地,所述目标源数据的刷新方式包括增量刷新或者全量刷新。
其中,所述全量刷新是指提取全业务量数据进行刷新,而相比于所述全量刷新,所述增量刷新是指每次刷新提取指定时间段的增量数据进行刷新,且所述指定时间段具有固定频率,如:日、周、月等。所述增量刷新的刷新数据量较少,刷新速度快,而所述全量刷新的报表访问速度更快。
需要说明的是,在实际应用中,可以根据需要选择刷新方式,本发明不做限制。
刷新单元111根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体。
优选地,所述刷新单元111根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体包括:
所述刷新单元111获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间,当所述当前时间与获取的刷新时间匹配时,所述刷新单元111从所述目标源数据的刷新参数中获取刷新方式,所述刷新单元111根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体,所述刷新单元111从所述目标源数据的刷新参数中获取刷新后生成的数据立方体的名称,并根据获取的刷新后生成的数据立方体的名称为所述目标数据立方体命名。
例如:所述刷新单元111获取当前时间为7时,如果从所述目标源数据的刷新参数中获取的刷新时间为每天7时,则所述刷新单元111再从所述目标源数据的刷新参数中获取刷新方式,若所述刷新方式为全量刷新,则所述刷新单元111以全量刷新的方式对所述目标源数据进行刷新,并以获取到的刷新后生成的数据立方体的名称A将所述目标数据立方体命名为A。
在本实施例中,所述刷新可以包括使用COGNOS的OLAP数据抽取转换引擎对COGNOS模型的刷新进行刷新操作的任务。具体地,通过刷新所述COGNOS模型,从指定数据源获取到最新的数据,形成数据立方体,形成的所述数据立方体用于提供给报表作为本地数据源使用。当刷新完成后,所述电子设备1将自动获取并执行发布任务。
在本实施例中,所述目标数据立方体是一种多维矩阵,让用户从多个角度探索和分析数据集,从而不仅可以获取到需要的信息,也可以获取到与所述需要的信息相关联的其他信息。
在本实施例中,所述刷新单元111通过对所述目标源数据进行刷新,可以将二维的平面数据刷新为多维的立体数据,更加满足用户对数据的需求。
优选地,在所述刷新单元111根据所述目标源数据的刷新参数对所述目标源数据进行刷新时,所述方法还包括:
当所述电子设备1检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,提示单元114提示指定人员对所述目标源数据进行手动刷新。
具体地,由于刷新失败会影响后续的发布任务,数据补录会影响数据的真实性及可用性,因此,当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,所述提示单元114可以提示指定人员对所述目标源数据进行手动刷新,通过人为介入的方式,避免影响后续任务的进行,使任务的执行具有更大的灵活性。
具体地,提示的方式可以包括,但不限于以下一种或者多种的组合:
语音提示、弹窗提示、短信提示、电话提示、邮件提示等等。
当然,所述指定人员也可以对上述刷新过程进行主动监控,具体地,所述指定人员可以实时监控所述刷新过程的作业状态,也可以定时查询所述刷新过程的作业状态,本发明不作限制。
需要说明的是,在其他实施例中,所述刷新单元111也可以通过连接一个刷新机器进行上述刷新操作,本发明不作限制。
所述获取单元110获取所述多活系统中每个运行环境的当前发布任务。
在本实施例中,所述当前发布任务是指将所述目标数据立方体拷贝至每个运行环境的指定服务器的过程,其中,所述指定服务器是指本地的服务器。这样,发布单元112通过将所述目标数据立方体拷贝至每个运行环境的指定服务器,使数据访问更加方便、快捷,而不需要再连接其他数据库,避免由于性能压力及输入输出的限制影响数据访问。
所述获取单元110从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录。
在本实施例中,在所述获取单元110从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录前,所述方法还包括:
配置单元113为每个运行环境配置两个子目录。
具体地,所述配置单元113从每个运行环境中配置的两个子目录用于存储所述目标数据立方体,以供对应的报表进行访问。
优选地,所述获取单元110从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录包括:
当每个当前发布任务是首次发布时,所述获取单元110从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录。
例如:每个运行环境中配置的两个子目录为子目录B及子目录C,当所述当前发布任务是首次发布时,也就是说,每个运行环境中配置的两个子目录均为空目录,因此,所述获取单元110可以从所述子目录B及所述子目录C中任选一个子目录作为每个当前发布任务的当前发布目录。
当每个当前发布任务不是首次发布时,所述获取单元110将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
例如:每个运行环境中配置的两个子目录为子目录B及子目录C,当所述当前发布任务不是首次发布时,所述电子设备1获取到每个运行环境中上次发布任务时未使用的子目录为所述子目录C,因此,所述获取单元110可以将每个运行环境中的子目录C作为每个当前发布任务的当前发布目录。
通过上述实施方式,所述电子设备1可以实现每个运行环境中配置的两个子目录的轮流发布,为后续报表访问提供条件,具体实现方式将在后续步骤中详述。
发布单元112将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中。
通过上述实施方式,相当于将所述目标数据立方体存储于每个运行环境对应的本地数据库中,并作为本地数据源。这样,在后续有报表要进行数据的访问时,所述电子设备1即可在每个运行环境中直接读取所述目标数据立方体中的数据,而不需要连接其他数据库获取数据,从而提高了数据读取速度。
在完成每个当前发布任务后,所述配置单元113将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
例如:在完成每个当前发布任务后,所述发布单元112将所述目标数据立方体发布至每个运行环境中的子目录C,进而将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中的所述子目录B,并将所述目标数据立方体的报表的数据源配置为每个运行环境中的子目录C。
优选地,所述配置单元113将所述目标数据立方体的报表的数据源配置为所述当前发布目录包括:
所述配置单元113调用封装的指定SDK接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
具体地,本发明对所述封装的指定SDK接口不做限制。
通过上述实施方式,所述配置单元113将所述目标数据立方体的报表的数据源配置为所述当前发布目录,以供所述目标数据立方体的报表进行访问。
进一步地,在所述目标数据立方体进行下一次发布任务时,将发布至每个运行环境中除所述当前发布目录之外的另一个子目录中,此时,如果所述目标数据立方体的报表需要访问数据,所述电子设备1将以所述当前发布目录为数据源,这样,每个运行环境的两个子目录一个作为发布的对象,一个作为访问的对象,从而将报表的数据访问过程与所述目标数据立方体的发布过程分开,使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
通过上述实施方式,所述配置单元113还可以将所述目标数据立方体的报表的数据源配置为最新发布的子目录,从而保证每次访问的数据均为最新数据。
进一步地,本实施方式还可以实现多个运行环境中数据的同步,达到异地多活的效果,这样,当其中一个运行环境故障或者是中止服务时,其他运行环境可以直接接替照常运行,避免由于一个运行环境故障造成整体业务中断,进一步避免了用户的经济损失及资源损失,使用户在对异常无感知的情况下继续正常访问及使用系统。
综上所述,本发明能从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;获取所述多活系统中每个运行环境的当前发布任务;从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。因此,本发明能使报表的数据访问过程与所述目标数据立方体的发布过程相互独立,互不影响。
如图5所示,是本发明实现数据立方体发布方法的较佳实施例的电子设备的结构示意图。
所述电子设备1是一种能够按照事先设定或存储的指令,自动进行数值计算和/或信息处理的设备,其硬件包括但不限于微处理器、专用集成电路(Application SpecificIntegrated Circuit,ASIC)、可编程门阵列(Field-Programmable Gate Array,FPGA)、数字处理器(Digital Signal Processor,DSP)、嵌入式设备等。
所述电子设备1还可以是但不限于任何一种可与用户通过键盘、鼠标、遥控器、触摸板或声控设备等方式进行人机交互的电子产品,例如,个人计算机、平板电脑、智能手机、个人数字助理(Personal Digital Assistant,PDA)、游戏机、交互式网络电视(InternetProtocol Television,IPTV)、智能式穿戴式设备等。
所述电子设备1还可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。
所述电子设备1所处的网络包括但不限于互联网、广域网、城域网、局域网、虚拟专用网络(Virtual Private Network,VPN)等。
在本发明的一个实施例中,所述电子设备1包括,但不限于,存储器12、处理器13,以及存储在所述存储器12中并可在所述处理器13上运行的计算机程序,例如数据立方体发布程序。
本领域技术人员可以理解,所述示意图仅仅是电子设备1的示例,并不构成对电子设备1的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述电子设备1还可以包括输入输出设备、网络接入设备、总线等。
所称处理器13可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等,所述处理器13是所述电子设备1的运算核心和控制中心,利用各种接口和线路连接整个电子设备1的各个部分,及执行所述电子设备1的操作系统以及安装的各类应用程序、程序代码等。
所述处理器13执行所述电子设备1的操作系统以及安装的各类应用程序。所述处理器13执行所述应用程序以实现上述各个数据立方体发布方法实施例中的步骤,例如图1所示的步骤S10、S11、S12、S13、S14、S15及S16。
或者,所述处理器13执行所述计算机程序时实现上述各装置实施例中各模块/单元的功能,例如:从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;获取所述多活系统中每个运行环境的当前发布任务;从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
示例性的,所述计算机程序可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器12中,并由所述处理器13执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序在所述电子设备1中的执行过程。例如,所述计算机程序可以被分割成获取单元110、刷新单元111、发布单元112、配置单元113及提示单元114。
所述存储器12可用于存储所述计算机程序和/或模块,所述处理器13通过运行或执行存储在所述存储器12内的计算机程序和/或模块,以及调用存储在存储器12内的数据,实现所述电子设备1的各种功能。所述存储器12可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器12可以包括高速随机存取存储器,还可以包括非易失性存储器,例如硬盘、内存、插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)、至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
所述存储器12可以是电子设备1的外部存储器和/或内部存储器。进一步地,所述存储器12可以是集成电路中没有实物形式的具有存储功能的电路,如RAM(Random-AccessMemory,随机存取存储器)、FIFO(First In FirstOut,)等。或者,所述存储器12也可以是具有实物形式的存储器,如内存条、TF卡(Trans-flash Card)等等。
所述电子设备1集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。
其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random AccessMemory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括电载波信号和电信信号。
结合图2,所述电子设备1中的所述存储器12存储多个指令以实现一种数据立方体发布方法,所述处理器13可执行所述多个指令从而实现:从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;获取所述多活系统中每个运行环境的当前发布任务;从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
根据本发明优选实施例,所述处理器13还执行多个指令包括:
采用数据仓库技术从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
根据本发明优选实施例,所述目标源数据的刷新参数包括以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式。
根据本发明优选实施例,所述处理器13还执行多个指令包括:
获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间;
当所述当前时间与获取的刷新时间匹配时,从所述目标源数据的刷新参数中获取刷新方式;
根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体。
根据本发明优选实施例,所述处理器13还执行多个指令包括:
当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,提示指定人员对所述目标源数据进行手动刷新。
根据本发明优选实施例,所述处理器13还执行多个指令包括:
当每个当前发布任务是首次发布时,从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录;
当每个当前发布任务不是首次发布时,将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
根据本发明优选实施例,所述处理器13还执行多个指令包括:
调用封装的指定SDK接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
具体地,所述处理器13对上述指令的具体实现方法可参考图2对应实施例中相关步骤的描述,在此不赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
所述作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能模块的形式实现。
对于本领域技术人员而言,显然本发明不限于上述示范性实施例的细节,而且在不背离本发明的精神或基本特征的情况下,能够以其他的具体形式实现本发明。
因此,无论从哪一点来看,均应将实施例看作是示范性的,而且是非限制性的,本发明的范围由所附权利要求而不是上述说明限定,因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附关联图标记视为限制所涉及的权利要求。
此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。系统权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第二等词语用来表示名称,而并不表示任何特定的顺序。
最后应说明的是,以上实施例仅用以说明本发明的技术方案而非限制,尽管参照较佳实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,可以对本发明的技术方案进行修改或等同替换,而不脱离本发明技术方案的精神和范围。

Claims (10)

1.一种数据立方体发布方法,其特征在于,所述方法包括:
从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;
当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;
根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;
获取所述多活系统中每个运行环境的当前发布任务;
从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;
将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;
在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
2.如权利要求1所述的数据立方体发布方法,其特征在于,所述从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据包括:
采用数据仓库技术从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据。
3.如权利要求1所述的数据立方体发布方法,其特征在于,所述目标源数据的刷新参数包括以下一种或者多种的组合:
所述目标源数据的刷新时间、所述目标源数据的刷新频率、所述目标源数据的应用的刷新模型、对所述目标源数据刷新后生成的数据立方体的名称、所述目标源数据的刷新方式。
4.如权利要求1所述的数据立方体发布方法,其特征在于,所述根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体包括:
获取当前时间,及从所述目标源数据的刷新参数中获取刷新时间;
当所述当前时间与获取的刷新时间匹配时,从所述目标源数据的刷新参数中获取刷新方式;
根据获取的刷新方式对所述目标源数据进行刷新,生成目标数据立方体。
5.如权利要求1所述的数据立方体发布方法,其特征在于,在根据所述目标源数据的刷新参数对所述目标源数据进行刷新时,所述方法还包括:
当检测到所述目标源数据刷新失败及/或所述目标源数据有数据补录时,提示指定人员对所述目标源数据进行手动刷新。
6.如权利要求1所述的数据立方体发布方法,其特征在于,所述从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录包括:
当每个当前发布任务是首次发布时,从每个运行环境中配置的两个子目录中任选一个子目录作为每个当前发布任务的当前发布目录;
当每个当前发布任务不是首次发布时,将每个运行环境中配置的两个子目录中上次发布任务时未使用的子目录作为每个当前发布任务的当前发布目录。
7.如权利要求1所述的数据立方体发布方法,其特征在于,所述将所述目标数据立方体的报表的数据源配置为所述当前发布目录包括:
调用封装的指定SDK接口,将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
8.一种数据立方体发布装置,其特征在于,所述装置包括:
获取单元,用于从多活系统中任意选取一个运行环境,并从选取的运行环境中获取目标源数据;
所述获取单元,还用于当确定所述目标源数据获取完成时,获取所述目标源数据的刷新参数;
刷新单元,用于根据所述目标源数据的刷新参数对所述目标源数据进行刷新,生成目标数据立方体;
所述获取单元,还用于获取所述多活系统中每个运行环境的当前发布任务;
所述获取单元,还用于从每个运行环境中配置的两个子目录中获取每个当前发布任务的当前发布目录;
发布单元,用于将所述目标数据立方体发布至获取的每个运行环境的所述当前发布目录中;
配置单元,用于在完成每个当前发布任务后,将每个运行环境中下一个发布任务的发布目录配置为每个运行环境中除所述当前发布目录之外的另一个子目录,并将所述目标数据立方体的报表的数据源配置为所述当前发布目录。
9.一种电子设备,其特征在于,所述电子设备包括:
处理器;及
存储器,存储在所述存储器中的指令被所述处理器执行以实现如权利要求1至7中任意一项所述数据立方体发布方法。
10.一种计算机可读存储介质,其特征在于:所述计算机可读存储介质中存储的指令被电子设备中的处理器执行以实现如权利要求1至7中任意一项所述数据立方体发布方法。
CN201810316070.6A 2018-04-10 2018-04-10 数据立方体发布方法、装置、电子设备和存储介质 Active CN108595552B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810316070.6A CN108595552B (zh) 2018-04-10 2018-04-10 数据立方体发布方法、装置、电子设备和存储介质
PCT/CN2018/099156 WO2019196272A1 (zh) 2018-04-10 2018-08-07 数据立方体发布方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810316070.6A CN108595552B (zh) 2018-04-10 2018-04-10 数据立方体发布方法、装置、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN108595552A true CN108595552A (zh) 2018-09-28
CN108595552B CN108595552B (zh) 2022-09-27

Family

ID=63621591

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810316070.6A Active CN108595552B (zh) 2018-04-10 2018-04-10 数据立方体发布方法、装置、电子设备和存储介质

Country Status (2)

Country Link
CN (1) CN108595552B (zh)
WO (1) WO2019196272A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112527785B (zh) * 2020-12-16 2023-07-21 平安银行股份有限公司 数据补录方法、装置、电子设备及存储介质

Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1077420A2 (en) * 1999-07-01 2001-02-21 Lucent Technologies Inc. Systems and methods for visualizing multi-dimensional data in spreadsheets and other data structures
US20060218218A1 (en) * 2005-03-09 2006-09-28 Vvond, Llc Updating content libraries by transmitting release data
CN101105793A (zh) * 2006-07-11 2008-01-16 阿里巴巴公司 数据仓库中的数据处理方法及系统
CN101111838A (zh) * 2004-11-30 2008-01-23 科格洛斯公司 多维企业软件系统中的自动关系模式生成
CN101452485A (zh) * 2008-12-31 2009-06-10 中国建设银行股份有限公司 一种基于关系数据库生成多维立方体的方法及装置
US20090193149A1 (en) * 2008-01-30 2009-07-30 Microsoft Corporation Synchronization of multidimensional data in a multimaster synchronization environment with prediction
US20090210430A1 (en) * 2008-02-20 2009-08-20 Panorama Software Inc. Creating pivot tables from tabular data
CN101853283A (zh) * 2010-05-21 2010-10-06 南京邮电大学 面向多维数据的语义索引对等网络的构建方法
CN102752394A (zh) * 2012-07-13 2012-10-24 携程计算机技术(上海)有限公司 面向集群站点的发布控制方法和系统
US20120311598A1 (en) * 2011-06-01 2012-12-06 International Business Machines Corporation Resource allocation for a plurality of resources for a dual activity system
CN103065256A (zh) * 2004-12-23 2013-04-24 华为技术有限公司 一种广告业务信息发布系统及其发布方法
CN103902259A (zh) * 2012-12-25 2014-07-02 富泰华工业(深圳)有限公司 网站发布系统及方法
JP2015060280A (ja) * 2013-09-17 2015-03-30 株式会社日立システムズ データ提供システムおよびデータ提供方法
CN104572746A (zh) * 2013-10-24 2015-04-29 世纪禾光科技发展(北京)有限公司 一种矩阵式信息发布及访问方法和系统
US20160321841A1 (en) * 2015-04-28 2016-11-03 Jonathan Christen Producing and consuming metadata within multi-dimensional data
US20160335318A1 (en) * 2015-05-11 2016-11-17 AtScale, Inc. Dynamic aggregate generation and updating for high performance querying of large datasets
CN106506588A (zh) * 2016-09-23 2017-03-15 北京许继电气有限公司 多地多中心的数据中心双活方法和系统
US20170116683A1 (en) * 2015-10-24 2017-04-27 Oracle International Corporation Transaction functionality in a multidimensional database
CN107004195A (zh) * 2014-09-29 2017-08-01 加拿大皇家银行 数据的安全处理
CN107301206A (zh) * 2017-06-01 2017-10-27 华南理工大学 一种基于预运算的分布式olap分析方法及系统
US20180052897A1 (en) * 2016-08-22 2018-02-22 Oracle International Corporation System and method for automated mapping of data types for use with dataflow environments
CN107767242A (zh) * 2016-08-15 2018-03-06 平安科技(深圳)有限公司 账务数据处理方法及账务数据处理装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9824133B1 (en) * 2014-06-20 2017-11-21 Amazon Technologies, Inc. Cloud analytics marketplace
CN106897303B (zh) * 2015-12-18 2020-09-15 北京国双科技有限公司 数据查询方法及装置
CN106021486A (zh) * 2016-05-18 2016-10-12 广东源恒软件科技有限公司 一种基于大数据的数据多维分析处理方法

Patent Citations (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1077420A2 (en) * 1999-07-01 2001-02-21 Lucent Technologies Inc. Systems and methods for visualizing multi-dimensional data in spreadsheets and other data structures
CN101111838A (zh) * 2004-11-30 2008-01-23 科格洛斯公司 多维企业软件系统中的自动关系模式生成
CN103065256A (zh) * 2004-12-23 2013-04-24 华为技术有限公司 一种广告业务信息发布系统及其发布方法
US20060218218A1 (en) * 2005-03-09 2006-09-28 Vvond, Llc Updating content libraries by transmitting release data
CN101105793A (zh) * 2006-07-11 2008-01-16 阿里巴巴公司 数据仓库中的数据处理方法及系统
US20090193149A1 (en) * 2008-01-30 2009-07-30 Microsoft Corporation Synchronization of multidimensional data in a multimaster synchronization environment with prediction
US20090210430A1 (en) * 2008-02-20 2009-08-20 Panorama Software Inc. Creating pivot tables from tabular data
CN101452485A (zh) * 2008-12-31 2009-06-10 中国建设银行股份有限公司 一种基于关系数据库生成多维立方体的方法及装置
CN101853283A (zh) * 2010-05-21 2010-10-06 南京邮电大学 面向多维数据的语义索引对等网络的构建方法
US20120311598A1 (en) * 2011-06-01 2012-12-06 International Business Machines Corporation Resource allocation for a plurality of resources for a dual activity system
CN102752394A (zh) * 2012-07-13 2012-10-24 携程计算机技术(上海)有限公司 面向集群站点的发布控制方法和系统
CN103902259A (zh) * 2012-12-25 2014-07-02 富泰华工业(深圳)有限公司 网站发布系统及方法
JP2015060280A (ja) * 2013-09-17 2015-03-30 株式会社日立システムズ データ提供システムおよびデータ提供方法
CN104572746A (zh) * 2013-10-24 2015-04-29 世纪禾光科技发展(北京)有限公司 一种矩阵式信息发布及访问方法和系统
CN107004195A (zh) * 2014-09-29 2017-08-01 加拿大皇家银行 数据的安全处理
US20160321841A1 (en) * 2015-04-28 2016-11-03 Jonathan Christen Producing and consuming metadata within multi-dimensional data
US20160335318A1 (en) * 2015-05-11 2016-11-17 AtScale, Inc. Dynamic aggregate generation and updating for high performance querying of large datasets
US20170116683A1 (en) * 2015-10-24 2017-04-27 Oracle International Corporation Transaction functionality in a multidimensional database
CN107767242A (zh) * 2016-08-15 2018-03-06 平安科技(深圳)有限公司 账务数据处理方法及账务数据处理装置
US20180052897A1 (en) * 2016-08-22 2018-02-22 Oracle International Corporation System and method for automated mapping of data types for use with dataflow environments
CN106506588A (zh) * 2016-09-23 2017-03-15 北京许继电气有限公司 多地多中心的数据中心双活方法和系统
CN107301206A (zh) * 2017-06-01 2017-10-27 华南理工大学 一种基于预运算的分布式olap分析方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
BENJAMIN LEONHARDI: "Augmenting OLAP exploration with dynamic advanced analytics", 《PROCEEDINGS OF THE 13TH INTERNATIONAL CONFERENCE ON EXTENDING DATABASE TECHNOLOGY》 *
张锐等: "数据仓库建设中ETL的架构设计和实现", 《苏州科技学院学报(工程技术版)》 *
徐杰: "面向证券行业的分析型CRM设计与研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Also Published As

Publication number Publication date
CN108595552B (zh) 2022-09-27
WO2019196272A1 (zh) 2019-10-17

Similar Documents

Publication Publication Date Title
JP6887544B2 (ja) イベント処理のための動的に型付けされたビッグデータによるイベントの充実化
US10255108B2 (en) Parallel execution of blockchain transactions
US10291704B2 (en) Networked solutions integration using a cloud business object broker
US9063992B2 (en) Column based data transfer in extract, transform and load (ETL) systems
US8972443B2 (en) Distributed platform for network analysis
US9081837B2 (en) Scoped database connections
US10467250B2 (en) Data model design collaboration using semantically correct collaborative objects
CN107533453A (zh) 用于生成数据可视化应用的系统和方法
CN103177059A (zh) 用于数据库计算引擎的分离处理路径
CN107122431A (zh) 一种实时计算平台及基于实时计算平台的数据计算方法
CN109522332A (zh) 客户信息数据合并方法、装置、设备及可读存储介质
CN110852559A (zh) 资源的分配方法和装置、存储介质、电子装置
CN108595552A (zh) 数据立方体发布方法、装置、电子设备和存储介质
US8589475B2 (en) Modeling a cloud computing system
CN112559603B (zh) 特征提取方法、装置、设备及计算机可读存储介质
Perwej et al. An extensive investigate the mapreduce technology
CN112102099B (zh) 保单数据处理方法、装置、电子设备及存储介质
CN111984657B (zh) 数据归集方法、装置、存储介质及计算机设备
CN115114297A (zh) 数据轻量存储及查找方法、装置、电子设备及存储介质
US20170147393A1 (en) Cache-efficient system for two-phase processing
CN113326680A (zh) 生成表格的方法和装置
US20200097585A1 (en) Optimization of data processing job execution using hash trees
Singh Survey of NoSQL Database Engines for Big Data
CN111832304B (zh) 楼盘名称的查重方法、装置、电子设备及存储介质
CN114817338A (zh) 数据处理方法、装置、电子设备及计算机可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant