CN104866599A - 可视化报表的生产方法和系统 - Google Patents

可视化报表的生产方法和系统 Download PDF

Info

Publication number
CN104866599A
CN104866599A CN201510292233.8A CN201510292233A CN104866599A CN 104866599 A CN104866599 A CN 104866599A CN 201510292233 A CN201510292233 A CN 201510292233A CN 104866599 A CN104866599 A CN 104866599A
Authority
CN
China
Prior art keywords
data
data source
visual report
report forms
visual
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510292233.8A
Other languages
English (en)
Other versions
CN104866599B (zh
Inventor
张鹏
王晓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201510292233.8A priority Critical patent/CN104866599B/zh
Publication of CN104866599A publication Critical patent/CN104866599A/zh
Application granted granted Critical
Publication of CN104866599B publication Critical patent/CN104866599B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/211—Schema design and management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases
    • G06F16/211—Schema design and management
    • G06F16/212—Schema design and management with details for data modelling support
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/22—Indexing; Data structures therefor; Storage structures
    • G06F16/2282—Tablespace storage structures; Management thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请公开了一种可视化报表的生产方法，包括：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。本发明可以提高可视化报表的开发效率。

Description

可视化报表的生产方法和系统
技术领域
本申请涉及数据处理技术领域，尤其涉及一种可视化报表的生产方法和系统。
背景技术
目前，随着电子商务，移动互联网的到来，大数据扮演着至关重要的角色，无论是政府、企业、甚至社会的方方面面都会在数据的指导下发生着巨大的变化。而怎么从大量的，复杂的数据中提炼出有价值的信息并且快速的，高可视化的呈现给用户尤为重要。
现有技术中，各种各样的数据信息通过智能设备，例如计算机、服务器、甚至便携智能终端(如智能手机)，以数据报表的可视化的方式呈现给使用者，使用户的大脑可以更有效的合成和保留信息内容，增强对信息的理解。
在企业管理中，报表数据可以时时地反应企业近期的财务状况、经营成果和现金流量，有利于经营管理人员了解企业的各项任务指标的完成情况，评价管理人员的经营业绩，以便及时发现问题，调整经营方向，制定措施改善经营管理水平，提高经济效益，为运营提供依据。
但是，现有技术中开发一套呈现给最终用户的可视化报表，需要大量的人工劳动。例如，如果快速的按照业务需求开发可视化报表固化到系统中，从需求分析、数据采集、数据计算，数据提取到数据可视化呈现给用户都要经历一个漫长的加工过程，期间参与的人员有分析师、建模人员、程序开发人员，最终把相应的报表在报表系统中呈现。
例如现有技术中，一种具体的技术方案包括：
A1、分析人员在Hadoop集群中通过使用集成开发环境建模、计算并且提取相应的数据，把结果数据导入到事先规定好的存储中，并且绘制出需要展示的报表样式。其中Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。
A2、程序员拿到数据和报表展示样式，在代码里单独写连接数据源的程序，以及定制报表在展示过程中的一些特殊技术逻辑的处理。
A3、根据业务的需求把已经上线的报表分配到相应的业务目录。业务需求人员在系统中查看可视化报表。
现有技术存在以下缺点：
B1、工作量很大，人工参与过多，占用大量的开发资源，工作重复，运营成本大。同时，每个报表开发和建模都要重复相同的流程，时效性差；数据、模型或者报表的展现形式的变更会导致程序员的重复开发量增加。
B2、不同的存储的数据获取，需要做定制的开发，数据库的链接都是在访问报表的时候才建立，使用完就关闭了，造成了极大地性能浪费。
B3、前端可视化系统做展示的时候，每一张报表都要通过特定的请求来获取数据，增加一张报表就要增加一套支持此报表请求的代码，随着报表变多代码量也在剧增，维护难度大。同时，报表的分类展示和管理不能灵活的根据业务的需要时时做调整，不能控制报表的生命周期，加大运营成本。
B4、大量的提取数据的操作，加大了原始数据泄露的风险。
综上所述，现有技术的主要技术缺陷是：可视化报表的开发效率低下、人力成本高、应对新需求时需要大量的增量劳动，灵活性差。
发明内容
有鉴于此，本发明的主要目的是提供一种可视化报表的生产方法和系统，以提高可视化报表的开发效率。
本发明的技术方案是这样实现的：
一种可视化报表的生产方法，包括：
配置步骤，包括：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；
数据开发步骤，包括：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；
数据组装步骤，包括：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；
报表可视化步骤，包括：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
在一种优选实施例中，所述从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中，具体包括：
检查数据源是否在所述实例的内存中；
封装数据源对象；
从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中；
判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败。
在一种优选实施例中，该方法进一步包括：
向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中。
在一种优选实施例中，所述数据开发步骤和数据组装步骤根据预定的周期，周期运行；每次运行后生成的可视化报表数据作为离线数据存储在指定的数据仓库。
在一种优选实施例中，所述可视化报表数据具有生命周期；且该方法进一步包括：在每次周期运行所述数据开发步骤和数据组装步骤之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后过期的可视化报表数据，从中选出最近的指定时间段内访问量大于指定次数、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间。
一种可视化报表的生产系统，包括：
配置模块，用于：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；
数据开发模块，用于：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；
数据组装模块，用于：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；
报表可视化模块，用于：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
在一种优选实施例中，所述数据开发模块具体包括：
用于检查数据源是否在所述实例的内存中的子模块；
用于封装数据源对象的子模块；
用于从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中的子模块；
用于判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败的子模块。
在一种优选实施例中，所述数据开发模块进一步包括：用于向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中的子模块。
在一种优选实施例中，所述数据开发模块和数据组装模块进一步用于根据预定的周期运行，每次运行后生成的可视化报表数据作为离线数据存储在指定的数据仓库。
在一种优选实施例中，所述可视化报表数据具有生命周期；且该系统进一步包括延期模块，用于：在每次周期运行所述数据开发模块和数据组装模块之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后过期的可视化报表数据，从中选出最近的指定时间段内访问量大于指定次数、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间。
与现有技术相比，本发明在配置步骤中预先配置好报表脚本语句、数据源入口地址、可视化报表的维度信息、展示配置信息以及属性信息；并且利用数据开发步骤和数据组装步骤这两个自动化的步骤获取数据源并进行相应计算组装出符合预先配置要求的可视化报表数据，当用户发出报表请求后，本发明的报表可视化步骤就可以根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。由于本发明只有在配置步骤中需要人工输入所述信息，在其他阶段都是自动执行，因此提高了可视化报表的开发效率、降低了人力成本，当出现新需求时，只需要更改配置中的信息即可，有很高的灵活性。
附图说明
图1为本发明所述可视化报表的生产方法的一种流程图；
图2为一种可视化报表的配置界面示意图；
图3为一种加载数据源的流程示意图；
图4为本发明所生产的展示给用户的一种可视化报表的界面示意图；
图5为一种报表延期处理流程图；
图6为本发明所述一种可视化报表的生产系统的组成示意图；。
具体实施方式
下面结合附图及具体实施例对本发明再作进一步详细的说明。
图1为本发明所述可视化报表的生产方法的一种流程图，参见图1，本发明所述的方法主要包括配置步骤101、数据开发步骤102、数据组装步骤103、报表可视化步骤104。
所述配置步骤101，包括：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息.
例如可以展示一个如图2所示的报表配置界面，作为该报表配置接口。如图2所示，其中包括：用于输入报表脚本语句(图2中以SQL语句为例)的输入接口201，当然在该输入接口201的周围还可以进一步包括对该报表脚本语句的描述信息的输入接口，如所述“报表概述”、“报表查询条件”等；还包括用于输入数据源入口地址(某一个数据仓库)的输入接口202，用于输入可视化报表的维度信息、展示配置信息以及属性信息的输入接口。所述维度信息例如是图2中的“X轴列名”、“Y轴列名”、“Z轴列名”，所述展示配置信息例如可以是“报表类型”、“显示类型”、“支持终端”等，所述属性信息例如可以是“数据精度”、“X轴名称”、“Y轴名称”等。
所述数据开发步骤102，包括：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；并将新增加的数据源同步到所有实例的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块。
如图3为一种加载数据源的流程示意图。参见图3，所述从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中，具体是一种数据源动态注入的流程，主要技术方案就是将已有的数据源在应用启动时多实例同时一次性加载到内存，在运行过程中新增加的数据源使用分布式通知的机制确保所有实例全部加载到内存中。如图3所示，具体的数据源加载流程包括：
步骤301、检查数据源是否在所述实例的内存中。
步骤302、封装数据源对象。具体的：将用户从配置模块配置的数据源信息，例如数据源IP地址、用户名、密码、驱动等，初始化成可以使用的JDBC数据源对象(JAVA内存对象)。
步骤303、从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中；在具体实现时，可以通过适配程序映射到数据源代理程序，由代理程序从数据源入口地址处执行查询获得数据。
步骤304、判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败。
在进一步的优选实施例中，本发明还可以在步骤102中进一步包括：向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中。所述分布式通知，就是将所述数据源按照实例的数量n，拷贝成n份，分别同步加载到所有实例的内存中。
在计算过程中，需要解析所述报表脚本语句，如SQL。在解析时，所述SQL语句把配置信息的值替换到SQL模板中，生成可执行SQL。因为在配置报表的时候配置的都是SQL模板，模板中可以对过滤条件做不同值的替换这样可以把多张报表合成一张动态报表。
所述数据组装步骤103，具体包括：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据。
经过步骤102的计算后得到的数据，就可以根据所述可视化报表的维度信息对所述数据进行过滤，例如如果配置了X轴和Y轴维度，则只保留X轴和Y轴对应的数据，其它数据将被过滤掉。所述根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据，例如具体可以根据所述“数据精度”、“X轴名称”、“Y轴名称”等属性最所述数据进行组装，即对所述数据进行组织分配，得到与各个属性对应的数据，以适合报表展示。此处最好再举个例子说明：组装成的可视化报表数据是什么样子的。谢谢！
例如：如果要显示一个线图，需要如下的可视化报表数据：
报表类型；
报表名称；
过期时间；
数据精度；
数据序列：数组形式的X轴和Y轴的坐标，数组中的一个元素代表图上的一个点。
所述组装成可视化报表数据后，这些可视化报表数据就可以作为离线数据存储在指定的数据仓库中，当后续收到报表请求后从该数据仓库中读取相应的可视化报表数据。当然，所述每个可视化报表数据都具有相应的名称或ID，用于后续流程中的查询读取。
所述报表可视化步骤104，具体包括：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
所述报表请求例如可以是用户发出的浏览某个报表的触发指令，通常是点击了网页上的浏览报表的按钮，或者直接输入了具有报表的网页的URL地址等都会触发发出报表请求。所述报表请求中携带有需要展示的报表的名称或ID，本发明会根据所请求报表的名称或ID从所述数据仓库中读取对应的可视化报表数据，然后根据前述配置步骤101中配置的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。例如所述展示配置信息中包括有“报表类型”为堆线图、“显示类型”为千分位、“支持终端”为台式计算机(PC)，则会对应展示出如图4所示的界面图。
在一种优选实施例中，可以为所述数据开发步骤和数据组装步骤预先设置周期，即例如可以设置每天、每周、每月，将这两个步骤作为计划任务来执行，这种计划任务在本文中可以称为推数任务。按照所述推数任务，所述数据开发步骤和数据组装步骤可以根据预定的周期，周期运行；每次运行后生成的可视化报表数据作为离线数据推送存储在指定的数据仓库中，并且可以标识本次推数任务成功，同时计算下一次执行任务的时间。
在进一步的优选实施例中，所述可视化报表数据还可以具有生命周期，该声明周期可以在配置时进行配置；并且该方法还可以进一步包括：在每次周期运行所述数据开发步骤和数据组装步骤之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后(例如15天后)过期的可视化报表数据，从中选出最近的指定时间段内(如最近一个月)访问量大于指定次数(例如大于10次)、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间(例如延长一周)。具体如图5所示。
本发明中，可以根据当前的报表类型来组装X轴、Y轴、Z轴的数据序列，每次收到的报表请求做的都是相同的操作，只是不同的报表类型需要的数据结构不同而已，即与配置信息对应的数据结构，而且报表数据展示时，每个报表类型都有自己的展示方式，每种展示方式对应有展示模板，通过上述配置过程相当于配置了不同报表的不同的展示模板。通过上述展示模板就可以对应展示出相应展示方式的可视化报表了，其他的标准流程都可以使用一份代码统一处理。因此，本发明只有在配置步骤中需要人工输入所述信息，在其他阶段都是自动执行，因此提高了可视化报表的开发效率、降低了人力成本，当出现新需求时，只需要更改配置中的信息即可，有很高的灵活性。
与上述方法对应，本发明还公开了一种可视化报表的生产系统。图6为本发明所述一种可视化报表的生产系统的组成示意图；参见图6，该生产系统包括：
配置模块601，用于：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；
数据开发模块602，用于：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；
数据组装模块603，用于：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；
报表可视化模块604，用于：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
在一种优选实施例中，所述数据开发模块602具体包括：
用于检查数据源是否在所述实例的内存中的子模块；
用于封装数据源对象的子模块；
用于从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中的子模块；
用于判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败的子模块。
在一种优选实施例中，所述数据开发模块602进一步包括：用于向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中的子模块。
在一种优选实施例中，所述数据开发模块602和数据组装模块603进一步用于根据预定的周期运行，每次运行后生成的可视化报表数据作为离线数据存储在指定的数据仓库。
在一种优选实施例中，所述可视化报表数据具有生命周期；且该系统进一步包括延期模块，用于：在每次周期运行所述数据开发模块和数据组装模块之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后过期的可视化报表数据，从中选出最近的指定时间段内访问量大于指定次数、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明保护的范围之内。

Claims (10)

1.一种可视化报表的生产方法，其特征在于，包括：
配置步骤，包括：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；
数据开发步骤，包括：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；
数据组装步骤，包括：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；
报表可视化步骤，包括：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
2.根据权利要求1所述的方法，其特征在于，所述从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中，具体包括：
检查数据源是否在所述实例的内存中；
封装数据源对象；
从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中；
判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败。
3.根据权利要求1所述的方法，其特征在于，该方法进一步包括：
向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中。
4.根据权利要求1所述的方法，其特征在于，所述数据开发步骤和数据组装步骤根据预定的周期，周期运行；每次运行后生成的可视化报表数据作为离线数据存储在指定的数据仓库。
5.根据权利要求4所述的方法，其特征在于，
所述可视化报表数据具有生命周期；
且该方法进一步包括：在每次周期运行所述数据开发步骤和数据组装步骤之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后过期的可视化报表数据，从中选出最近的指定时间段内访问量大于指定次数、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间。
6.一种可视化报表的生产系统，其特征在于，包括：
配置模块，用于：提供报表配置接口，通过该报表配置接口接收输入的报表脚本语句，接收输入的数据源入口地址，接收输入的可视化报表的维度信息、展示配置信息以及属性信息；
数据开发模块，用于：从所述数据源入口地址获取数据源，将数据源加载到各实例对应的内存中；执行所述报表脚本语句对所述数据源进行计算，将计算得到的数据推送到指定的存储模块；
数据组装模块，用于：根据所述可视化报表的维度信息对所述存储模块中的数据进行过滤，根据所述可视化报表的属性信息将所述过滤后的数据组装成可视化报表数据；
报表可视化模块，用于：收到报表请求后根据可视化报表的展示配置信息加载所述可视化报表数据，展示出对应的可视化报表。
7.根据权利要求6所述的系统，其特征在于，所述数据开发模块具体包括：
用于检查数据源是否在所述实例的内存中的子模块；
用于封装数据源对象的子模块；
用于从所述数据源入口地址获取数据源，将数据源同步加载到所述各实例对应的内存中的子模块；
用于判断数据源是否加载成功，如果加载成功则记录加载成功日志并且把数据源的状态改为启用，如果加载失败则记录失败日志并把数据源的状态改为失败的子模块。
8.根据权利要求6所述的系统，其特征在于，所述数据开发模块进一步包括：用于向数据源入口地址订阅数据源，当接收到新增的数据源时，采用分布式通知的方式将新增加的数据源加载到所有实例的内存中的子模块。
9.根据权利要求6所述的系统，其特征在于，所述数据开发模块和数据组装模块进一步用于根据预定的周期运行，每次运行后生成的可视化报表数据作为离线数据存储在指定的数据仓库。
10.根据权利要求9所述的系统，其特征在于，
所述可视化报表数据具有生命周期；
且该系统进一步包括延期模块，用于：在每次周期运行所述数据开发模块和数据组装模块之后，扫描所述离线数据中的可视化报表数据，查询出指定时间后过期的可视化报表数据，从中选出最近的指定时间段内访问量大于指定次数、或者最近的指定时间段内被配置成邮件报表的可视化报表数据，将这些可视化报表数据的生命周期延期指定的时间。
CN201510292233.8A 2015-06-01 2015-06-01 可视化报表的生产方法和系统 Active CN104866599B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510292233.8A CN104866599B (zh) 2015-06-01 2015-06-01 可视化报表的生产方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510292233.8A CN104866599B (zh) 2015-06-01 2015-06-01 可视化报表的生产方法和系统

Publications (2)

Publication Number Publication Date
CN104866599A true CN104866599A (zh) 2015-08-26
CN104866599B CN104866599B (zh) 2018-06-05

Family

ID=53912425

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510292233.8A Active CN104866599B (zh) 2015-06-01 2015-06-01 可视化报表的生产方法和系统

Country Status (1)

Country Link
CN (1) CN104866599B (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105843945A (zh) * 2016-04-08 2016-08-10 联动优势科技有限公司 一种报表生成方法及系统
CN107122185A (zh) * 2017-04-21 2017-09-01 国网福建省电力有限公司 一种针对配电网参数类信息可视化展现方法
CN107193951A (zh) * 2017-05-22 2017-09-22 环球智达科技（北京）有限公司 基于关系数据库的web数据可视化方法
CN107609076A (zh) * 2017-08-29 2018-01-19 朱明增 一种基于数据库数据的报表定制方法和装置
CN107766308A (zh) * 2016-08-22 2018-03-06 平安科技（深圳）有限公司 报表的处理方法及装置
CN108228548A (zh) * 2016-12-21 2018-06-29 腾讯科技（深圳）有限公司 一种报表显示方法、装置、终端及系统
CN108415917A (zh) * 2017-03-13 2018-08-17 平安科技（深圳）有限公司 一种可视化报表的生成方法及可视化报表的生成装置
CN108460068A (zh) * 2017-11-28 2018-08-28 平安科技（深圳）有限公司 报表导入导出的方法、装置、存储介质及终端
CN108647260A (zh) * 2018-04-27 2018-10-12 厦门南讯软件科技有限公司 一种个性化大数据分析系统和方法
CN109359794A (zh) * 2018-08-14 2019-02-19 阿里巴巴集团控股有限公司 业务接入方法、装置、电子设备及计算机可读存储介质
CN109446389A (zh) * 2018-09-20 2019-03-08 卓望数码技术（深圳）有限公司 一种数据可视化处理方法和系统
CN109800255A (zh) * 2018-12-29 2019-05-24 北京奇安信科技有限公司 一种可视化报表的生成方法、系统、设备和介质
WO2019127821A1 (zh) * 2017-12-26 2019-07-04 平安科技（深圳）有限公司 可视化报表的制作方法、装置、终端设备及存储介质
CN110032590A (zh) * 2019-04-15 2019-07-19 重庆天蓬网络有限公司 一种数据可视化系统、方法、服务器及存储介质
CN110232178A (zh) * 2019-05-29 2019-09-13 北京中亦安图科技股份有限公司 报表生成方法及装置
CN110955718A (zh) * 2019-12-04 2020-04-03 深圳市网心科技有限公司 数据可视化配置方法、服务器、系统及介质
CN111104452A (zh) * 2019-12-06 2020-05-05 中科曙光(南京)计算技术有限公司 可视化数据大屏实现方法和实现系统
CN111199145A (zh) * 2019-12-30 2020-05-26 航天信息股份有限公司 生成增值税报表的方法、装置、存储介质以及电子设备
CN112069218A (zh) * 2020-11-16 2020-12-11 浙江岩华文化科技有限公司 大数据实时处理方法、装置、电子装置和存储介质
CN112463801A (zh) * 2020-12-11 2021-03-09 绿瘦健康产业集团有限公司 一种报表推送方法、装置、终端设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102841938A (zh) * 2012-08-14 2012-12-26 北京久其软件股份有限公司 一种参数化报表的生成方法及系统
WO2013023219A2 (en) * 2011-08-11 2013-02-14 Visa International Service Association Calculation application and method
CN103761217A (zh) * 2014-01-07 2014-04-30 成都市卓睿科技有限公司 一种多功能报表自动生成的方法
US20140244627A1 (en) * 2006-12-29 2014-08-28 Izenda Self-service database reporting systems and methods

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140244627A1 (en) * 2006-12-29 2014-08-28 Izenda Self-service database reporting systems and methods
WO2013023219A2 (en) * 2011-08-11 2013-02-14 Visa International Service Association Calculation application and method
CN102841938A (zh) * 2012-08-14 2012-12-26 北京久其软件股份有限公司 一种参数化报表的生成方法及系统
CN103761217A (zh) * 2014-01-07 2014-04-30 成都市卓睿科技有限公司 一种多功能报表自动生成的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
胡佐等: "基于模板技术的智能报表系统的设计与实现", 《电力信息化》 *

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105843945A (zh) * 2016-04-08 2016-08-10 联动优势科技有限公司 一种报表生成方法及系统
CN107766308A (zh) * 2016-08-22 2018-03-06 平安科技（深圳）有限公司 报表的处理方法及装置
CN107766308B (zh) * 2016-08-22 2021-11-26 平安科技（深圳）有限公司 报表的处理方法及装置
CN108228548A (zh) * 2016-12-21 2018-06-29 腾讯科技（深圳）有限公司 一种报表显示方法、装置、终端及系统
CN108228548B (zh) * 2016-12-21 2019-08-13 腾讯科技（深圳）有限公司 一种报表显示方法、装置、终端及系统
CN108415917A (zh) * 2017-03-13 2018-08-17 平安科技（深圳）有限公司 一种可视化报表的生成方法及可视化报表的生成装置
CN107122185A (zh) * 2017-04-21 2017-09-01 国网福建省电力有限公司 一种针对配电网参数类信息可视化展现方法
CN107122185B (zh) * 2017-04-21 2020-08-14 国网福建省电力有限公司 一种针对配电网参数类信息可视化展现系统
CN107193951A (zh) * 2017-05-22 2017-09-22 环球智达科技（北京）有限公司 基于关系数据库的web数据可视化方法
CN107609076A (zh) * 2017-08-29 2018-01-19 朱明增 一种基于数据库数据的报表定制方法和装置
CN108460068A (zh) * 2017-11-28 2018-08-28 平安科技（深圳）有限公司 报表导入导出的方法、装置、存储介质及终端
CN108460068B (zh) * 2017-11-28 2021-03-12 平安科技（深圳）有限公司 报表导入导出的方法、装置、存储介质及终端
WO2019127821A1 (zh) * 2017-12-26 2019-07-04 平安科技（深圳）有限公司 可视化报表的制作方法、装置、终端设备及存储介质
CN108647260A (zh) * 2018-04-27 2018-10-12 厦门南讯软件科技有限公司 一种个性化大数据分析系统和方法
CN109359794A (zh) * 2018-08-14 2019-02-19 阿里巴巴集团控股有限公司 业务接入方法、装置、电子设备及计算机可读存储介质
CN109446389A (zh) * 2018-09-20 2019-03-08 卓望数码技术（深圳）有限公司 一种数据可视化处理方法和系统
CN109800255A (zh) * 2018-12-29 2019-05-24 北京奇安信科技有限公司 一种可视化报表的生成方法、系统、设备和介质
CN110032590A (zh) * 2019-04-15 2019-07-19 重庆天蓬网络有限公司 一种数据可视化系统、方法、服务器及存储介质
CN110232178A (zh) * 2019-05-29 2019-09-13 北京中亦安图科技股份有限公司 报表生成方法及装置
CN110955718A (zh) * 2019-12-04 2020-04-03 深圳市网心科技有限公司 数据可视化配置方法、服务器、系统及介质
CN111104452A (zh) * 2019-12-06 2020-05-05 中科曙光(南京)计算技术有限公司 可视化数据大屏实现方法和实现系统
CN111104452B (zh) * 2019-12-06 2023-07-04 中科曙光(南京)计算技术有限公司 可视化数据大屏实现方法和实现系统
CN111199145A (zh) * 2019-12-30 2020-05-26 航天信息股份有限公司 生成增值税报表的方法、装置、存储介质以及电子设备
CN112069218A (zh) * 2020-11-16 2020-12-11 浙江岩华文化科技有限公司 大数据实时处理方法、装置、电子装置和存储介质
CN112463801A (zh) * 2020-12-11 2021-03-09 绿瘦健康产业集团有限公司 一种报表推送方法、装置、终端设备及存储介质

Also Published As

Publication number Publication date
CN104866599B (zh) 2018-06-05

Similar Documents

Publication Publication Date Title
CN104866599A (zh) 可视化报表的生产方法和系统
CN110489699B (zh) 一种异步数据采集方法及系统
CN109558575B (zh) 在线表格编辑方法、装置、计算机设备及存储介质
CN110321113B (zh) 以项目批次为标准的一体化流水线系统及其工作方法
CN107958010B (zh) 用于在线数据迁移的方法及系统
CN109690524A (zh) 分布式事件处理系统中的数据序列化
CN105243528A (zh) 大数据环境下金融it系统中图形化集中对账系统与方法
CN102917009B (zh) 一种基于云计算技术的股票数据采集和存储方法和系统
CN103678494A (zh) 客户端同步服务端数据的方法及装置
CN104102710A (zh) 一种海量数据查询方法
CN108647357B (zh) 数据查询的方法及装置
CN104517181B (zh) 一种核电站企业内容管理系统及方法
CN104182506A (zh) 日志管理方法
CN101739452A (zh) 一种数据交换接口及其实现方法
CN112286934A (zh) 数据库表导入方法、装置、设备及介质
CN105975489A (zh) 一种基于元数据的在线sql代码补全方法
US20130254156A1 (en) Algorithm and System for Automated Enterprise-wide Data Quality Improvement
CN105677427A (zh) 一种模块升级的方法及装置
CN107291938B (zh) 订单查询系统及方法
CN111125045B (zh) 一种轻量级etl处理平台
CN102521339A (zh) 用于动态访问数据源的系统和方法
CN111881126A (zh) 一种大数据管理系统
CN104317820B (zh) 报表的统计方法和装置
CN116360931A (zh) 一种链路追踪方法、装置、系统及存储介质
CN113779132A (zh) 一种数据导入的方法、装置、计算机设备和存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant