CN108228734A - 一种数据可视化的系统和方法 - Google Patents
一种数据可视化的系统和方法 Download PDFInfo
- Publication number
- CN108228734A CN108228734A CN201711319439.0A CN201711319439A CN108228734A CN 108228734 A CN108228734 A CN 108228734A CN 201711319439 A CN201711319439 A CN 201711319439A CN 108228734 A CN108228734 A CN 108228734A
- Authority
- CN
- China
- Prior art keywords
- data
- inquiry request
- data source
- yes
- view
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
- G06F16/9038—Presentation of query results
Abstract
本发明提供了一种数据可视化的系统和方法,包括:呈现模块和数据源模块。呈现模块的所有面板同时接收时间同步信号,判断正在显示的是否为快照,若为是,则直接加载快照数据并渲染,若为否,则对于每一个面板继续判断是否开启了增量查询,若为否,则发送查询请求,若为是,则判断缓存中是否有有用的缓存数据,若为否,则发送查询请求,若为是,则读取缓存数据,分析增量时间区间,精简查询请求并发送;数据源模块接收查询请求并收集数据源配置,将查询参数进行反序列化,加工为最终数据源识别的请求参数,发送HTTP请求从最终数据源获取数据,将获取的数据返回给呈现模块进行渲染。本发明具有适配多种数据源、支持同一图标混合数据源等优点。
Description
技术领域
本发明涉及数据处理技术领域,具体地,涉及一种数据可视化的系统和方法。
背景技术
随着社会科技的日新月异,尤其是大数据,数据分析等领域的蓬勃发展,不论是存储在存储介质中还是穿流于网络中的数据,其规模都已今非昔比,如何有效地传达海量数据中包含的有用信息成为一个亟待解决的问题。数据可视化技术借助图形化手段,能够清晰地表达抽象的数据所蕴含的有用信息,其已成为网络、企业,尤其是金融企业不可或缺的组成部分。
通常,企业会根据自身的业务需求定制出具备特定功能的可视化解决方案。其优点在于,解决方案能够充分契合实际需求,然而,除了需要高昂的开发成本,数据源与渲染接口存在紧耦合的特点,当业务需求进行调整时,必须修改系统的实现,扩展性较低。
为了解决紧耦合和低扩展性的问题,一些企业尝试开发通用程度更高的数据可视化整体解决方案,数据源和视图可以灵活配置,然而,其中存在着以下一个或多个问题:
1、视图层不支持所见即所得的配置方式,图表定位要通过指定坐标或偏移的方式实现;
2、数据源本身既包括数据服务的地址,也包括查询参数,若要调整查询参数,就需要调整整个数据源,同时会影响到所有使用此数据源的视图;
3、任一图表仅支持从单一数据源中提取数据;
4、查询的定义通常需要针对数据源的类型输入复杂的查询语句(如针对关系数据库,需要手工输入SQL);
5、仅提供报表性质的视图,不能提供实时视图,例如申请号为201410849791.5的发明专利“数据可视化实现系统及方法”。
发明内容
针对现有技术中的缺陷,本发明的目的是提供一种数据可视化的系统和方法。
根据本发明提供的一种数据可视化的系统,包括:
呈现模块:所有面板同时接收时间同步信号,判断当前正在显示的视图是否为快照,若判断结果为是,则直接加载快照数据并渲染,若判断结果为否,则对于每一个面板继续判断是否开启了增量查询,若判断结果为否,则发送查询请求,若判断结果为是,则判断缓存中是否有有用的缓存数据,若判断结果为否,则发送查询请求,若判断结果为是,则读取缓存数据,分析增量时间区间,精简查询请求并发送;
数据源模块:接收来自呈现模块的查询请求并收集数据源配置,将查询请求中的查询参数进行反序列化,加工为最终数据源识别的请求参数,发送HTTP请求,从最终数据源获取数据,将获取的数据返回给呈现模块进行渲染。
优选的,所述呈现模块包括视图子模块,所述视图子模块包括所查询的时间区间选项、动态变量选项以及若干所述面板,所述视图子模块根据所配置的时间区间、动态变量值通知每个面板进行查询和渲染。
优选的,所述呈现模块还包括轮播子模块:定义一系列的视图子模块和轮播时间间隔,视图子模块以此时间间隔进行循环播放。
优选的,所述呈现模块还包括快照子模块:将某一时刻的视图子模块的状态保存为固定链接,供分享和参阅。
优选的,所述呈现模块中的所述若干面板同时接收同步信号。
根据本发明提供的一种数据可视化的方法,包括呈现处理步骤以及数据源处理步骤;
呈现处理步骤包括:
S1、所有面板同时接收时间同步信号;
S2、判断当前正在显示的视图是否是快照,若判断结果为否,则进行步骤S3;若判断结果为是,则直接加载快照数据并进行步骤S5;
S3、对于每一个面板,判断是否开启了增量查询,若判断结果为否,则执行步骤S4,若判断结果为是,则判断缓存中是否有有用的缓存数据,若判断结果为否,则执行步骤S4,若判断结果为是,则读取缓存数据,分析增量时间区间,精简查询请求并执行步骤S4;
S4、发送查询请求;
S5、获取返回数据;
S6、渲染返回数据;
数据源处理步骤包括:
S401、接收查询请求;
S402、收集数据源配置;
S403、将步骤S401查询请求中的参数进行反序列化,加工为最终数据源识别的请求参数;
S404、发送HTTP请求,从最终数据源获取数据;
S405、根据步骤S403中得到的查询参数对S404中获取的数据进行再次加工,得到标准化结构的数据;
S406、返回数据。
优选的,所述呈现处理步骤包括通过视图子模块根据所配置的时间区间、动态变量值通知视图子模块中的若干面板进行查询和渲染。
优选的,呈现处理步骤包括定义一系列的所述视图子模块和轮播时间间隔,所述视图子模块以此时间间隔进行循环播放。
优选的,呈现处理步骤包括将某一时刻的视图子模块的状态保存为固定链接,供分享和参阅。
优选的,所述视图子模块中的所述若干面板同时接收时间同步信号。
与现有技术相比,本发明具有如下的有益效果:
1、可适配多种类型的数据源;
2、支持同一图表中混合数据源;
3、提供插件开发接口,方便扩展图表、视图及数据源;
4、简单易用的查询配置;
5、支持动态查询条件;
6、支持实时视图;
7、快照及轮播等辅助功能。
附图说明
通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
图1为本发明一种数据可视化的系统的系统模块关系图;
图2为本发明数据源模块的数据源处理流程图;
图3为本发明呈现模块的呈现处理流程图。
具体实施方式
下面结合具体实施例对本发明进行详细说明。以下实施例将有助于本领域的技术人员进一步理解本发明,但不以任何形式限制本发明。应当指出的是,对本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变化和改进。这些都属于本发明的保护范围。
如图1所示,本发明提供的数据可视化的系统包括呈现模块以及数据源模块。
数据源模块:
1、定义数据源,其中包括连接数据源的各项参数(路径,身份验证);
2、在定义面板时提供查询定义界面;
3、根据第1点中定义的数据源和第2点中定义的查询,连接数据源并读取数据;
4、可选:在定义动态变量时可提供来自数据源的变量值。
呈现模块,包括如下内容:
1、视图
视图由所查询的时间区间、动态变量选项和若干面板组成。其用于:
A、定义和组织面板;
B、定义动态变量;
C、选择查询时间区间;
D、根据所配置的时间区间、动态变量值通知每个面板进行数据查询和渲染。
2、面板
面板为一个呈现单元,比如一张图表或一个数值。其用于:
A、提供查询定义界面,包括数据源选择菜单以及所选数据源模块提供的查询定义界面;特别地,面板支持复合数据源,可选择多个数据源并分别定义查询。
B、提供面板的可视化选项;
C、调用数据源模块进行查询,读取输出的查询数据进行可视化呈现;
3、轮播功能
定义一系列的视图和轮播时间间隔,视图会以此时间间隔进行循环播放。
4、快照功能
将某一时刻的视图状态保存为固定链接,供分享和参阅。
如图3所示,呈现模块的工作流程为:
S1、所有面板同时接收时间同步信号;
S2、判断当前正在显示的视图是否是快照,若否,则进行步骤S3;若是,则直接加载快照数据并进行步骤S5(一个快照包括了所有的面板和快照数据,因此不需要重新加载数据);
S3、对于每一个面板,判断是否开启了增量查询,若判断结果为否,则执行步骤S4,若判断结果为是,则判断缓存中是否有有用的缓存数据,若判断结果为否,则执行步骤S4,若判断结果为是,则读取缓存数据,分析增量时间区间,精简查询请求并执行步骤S4;
S4、发送查询请求,请求数据;
S5、获取返回数据;
S6、渲染返回数据。
如图2所示,数据源模块的工作流程为:
S401、接收呈现模块的查询请求,包括时间区间,序列化的查询参数等;
S402、收集数据源配置;
S403、将步骤1)中的查询参数进行反序列化,加工为最终数据源识别的请求参数;
S404、发送HTTP请求,从最终数据源获取数据;
S405、根据步骤S3中得到的查询参数对S4中获取的数据进行再次加工,得到标准化结构的数据;
S406、返回数据,交给面板进行渲染。
数据源模块的工作流程介于呈现模块的工作流程的S4与S5之间。数据源模块与面板同属于插件。
本领域技术人员知道,除了以纯计算机可读程序代码方式实现本发明提供的系统及其各个装置、模块、单元以外,完全可以通过将方法步骤进行逻辑编程来使得本发明提供的系统及其各个装置、模块、单元以逻辑门、开关、专用集成电路、可编程逻辑控制器以及嵌入式微控制器等的形式来实现相同功能。所以,本发明提供的系统及其各项装置、模块、单元可以被认为是一种硬件部件,而对其内包括的用于实现各种功能的装置、模块、单元也可以视为硬件部件内的结构;也可以将用于实现各种功能的装置、模块、单元视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变化或修改,这并不影响本发明的实质内容。在不冲突的情况下,本申请的实施例和实施例中的特征可以任意相互组合。
Claims (10)
1.一种数据可视化的系统,其特征在于,包括:
呈现模块:所有面板同时接收时间同步信号,判断当前正在显示的视图是否为快照,若判断结果为是,则直接加载快照数据并渲染,若判断结果为否,则对于每一个面板继续判断是否开启了增量查询,若判断结果为否,则发送查询请求,若判断结果为是,则判断缓存中是否有有用的缓存数据,若判断结果为否,则发送查询请求,若判断结果为是,则读取缓存数据,分析增量时间区间,精简查询请求并发送;
数据源模块:接收来自呈现模块的查询请求并收集数据源配置,将查询请求中的查询参数进行反序列化,加工为最终数据源识别的请求参数,发送HTTP请求,从最终数据源获取数据,将获取的数据返回给呈现模块进行渲染。
2.根据权利要求1所述的数据可视化的系统,其特征在于,所述呈现模块包括视图子模块,所述视图子模块包括所查询的时间区间选项、动态变量选项以及若干所述面板,所述视图子模块根据所配置的时间区间、动态变量值通知每个面板进行查询和渲染。
3.根据权利要求2所述的数据可视化的系统,其特征在于,所述呈现模块还包括轮播子模块:定义一系列的视图子模块和轮播时间间隔,视图子模块以此时间间隔进行循环播放。
4.根据权利要求2所述的数据可视化的系统,其特征在于,所述呈现模块还包括快照子模块:将某一时刻的视图子模块的状态保存为固定链接,供分享和参阅。
5.根据权利要求2所述的数据可视化的系统,其特征在于,所述呈现模块中的所述若干面板同时接收同步信号。
6.一种数据可视化的方法,其特征在于,包括呈现处理步骤以及数据源处理步骤;
呈现处理步骤包括:
S1、所有面板同时接收时间同步信号;
S2、判断当前正在显示的视图是否是快照,若判断结果为否,则进行步骤S3;若判断结果为是,则直接加载快照数据并进行步骤S5;
S3、对于每一个面板,判断是否开启了增量查询,若判断结果为否,则执行步骤S4,若判断结果为是,则判断缓存中是否有有用的缓存数据,若判断结果为否,则执行步骤S4,若判断结果为是,则读取缓存数据,分析增量时间区间,精简查询请求并执行步骤S4;
S4、发送查询请求;
S5、获取返回数据;
S6、渲染返回数据;
数据源处理步骤包括:
S401、接收查询请求;
S402、收集数据源配置;
S403、将步骤S401查询请求中的参数进行反序列化,加工为最终数据源识别的请求参数;
S404、发送HTTP请求,从最终数据源获取数据;
S405、根据步骤S403中得到的查询参数对S404中获取的数据进行再次加工,得到标准化结构的数据;
S406、返回数据。
7.根据权利要求6所述的数据可视化的方法,其特征在于,所述呈现处理步骤包括通过视图子模块根据所配置的时间区间、动态变量值通知视图子模块中的若干面板进行查询和渲染。
8.根据权利要求7所述的数据可视化的方法,其特征在于,呈现处理步骤包括定义一系列的所述视图子模块和轮播时间间隔,所述视图子模块以此时间间隔进行循环播放。
9.根据权利要求7所述的数据可视化的方法,其特征在于,呈现处理步骤包括将某一时刻的视图子模块的状态保存为固定链接,供分享和参阅。
10.根据权利要求7所述的数据可视化的方法,其特征在于,所述视图子模块中的所述若干面板同时接收时间同步信号。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711319439.0A CN108228734A (zh) | 2017-12-12 | 2017-12-12 | 一种数据可视化的系统和方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711319439.0A CN108228734A (zh) | 2017-12-12 | 2017-12-12 | 一种数据可视化的系统和方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108228734A true CN108228734A (zh) | 2018-06-29 |
Family
ID=62649360
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711319439.0A Pending CN108228734A (zh) | 2017-12-12 | 2017-12-12 | 一种数据可视化的系统和方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108228734A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109992613A (zh) * | 2019-04-11 | 2019-07-09 | 苏州浪潮智能科技有限公司 | 一种海量数据可视化方法、装置、设备及存储介质 |
CN110298003A (zh) * | 2019-05-31 | 2019-10-01 | 帷幄匠心科技(杭州)有限公司 | 数据渲染方法及系统 |
CN111177163A (zh) * | 2019-12-09 | 2020-05-19 | 国电南瑞科技股份有限公司 | 一种面向时标数据的数据访问方法、装置及存储介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030144868A1 (en) * | 2001-10-11 | 2003-07-31 | Macintyre James W. | System, method, and computer program product for processing and visualization of information |
CN101867489A (zh) * | 2010-06-11 | 2010-10-20 | 北京邮电大学 | 实现实时显示的社会网络可视化方法及系统 |
CN102096945A (zh) * | 2010-01-07 | 2011-06-15 | 董福田 | 空间数据渐进传输方法及装置 |
CN103324484A (zh) * | 2013-06-28 | 2013-09-25 | 华为技术有限公司 | 一种展现视图的方法及设备 |
CN105657549A (zh) * | 2016-01-27 | 2016-06-08 | 四川长虹电器股份有限公司 | 基于大数据的数据动态可视化的方法 |
CN106021378A (zh) * | 2016-05-11 | 2016-10-12 | 吕骏 | 基于数据抽取、数据可视化的查询分析方法及系统 |
CN106062737A (zh) * | 2013-09-06 | 2016-10-26 | 道富公司 | 用于多维时态数据的交互式可视分析的系统和方法 |
-
2017
- 2017-12-12 CN CN201711319439.0A patent/CN108228734A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030144868A1 (en) * | 2001-10-11 | 2003-07-31 | Macintyre James W. | System, method, and computer program product for processing and visualization of information |
CN102096945A (zh) * | 2010-01-07 | 2011-06-15 | 董福田 | 空间数据渐进传输方法及装置 |
CN101867489A (zh) * | 2010-06-11 | 2010-10-20 | 北京邮电大学 | 实现实时显示的社会网络可视化方法及系统 |
CN103324484A (zh) * | 2013-06-28 | 2013-09-25 | 华为技术有限公司 | 一种展现视图的方法及设备 |
CN106062737A (zh) * | 2013-09-06 | 2016-10-26 | 道富公司 | 用于多维时态数据的交互式可视分析的系统和方法 |
CN105657549A (zh) * | 2016-01-27 | 2016-06-08 | 四川长虹电器股份有限公司 | 基于大数据的数据动态可视化的方法 |
CN106021378A (zh) * | 2016-05-11 | 2016-10-12 | 吕骏 | 基于数据抽取、数据可视化的查询分析方法及系统 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109992613A (zh) * | 2019-04-11 | 2019-07-09 | 苏州浪潮智能科技有限公司 | 一种海量数据可视化方法、装置、设备及存储介质 |
CN110298003A (zh) * | 2019-05-31 | 2019-10-01 | 帷幄匠心科技(杭州)有限公司 | 数据渲染方法及系统 |
CN111177163A (zh) * | 2019-12-09 | 2020-05-19 | 国电南瑞科技股份有限公司 | 一种面向时标数据的数据访问方法、装置及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109829009B (zh) | 可配置的异构数据实时同步并可视化的系统及方法 | |
US7278111B2 (en) | Systems and methods for selecting a date or range of dates | |
US9395714B2 (en) | System construction support tool and system | |
CN106933207A (zh) | 用于分布式工业性能监控的数据分析服务 | |
CN106933206A (zh) | 分布式工业系统中的独立于源的查询 | |
CN106933204A (zh) | 分布式工业性能监控和分析 | |
CN108228734A (zh) | 一种数据可视化的系统和方法 | |
CN106469076B (zh) | 一种灰度发布方法及装置 | |
US20170286449A1 (en) | System for Connecting Computer Dashboards with Geographic Information Systems | |
US10901875B2 (en) | Evaluating and presenting software testing project status indicators | |
US20080133733A1 (en) | Realtime process history server | |
CN111538774B (zh) | 数据存储及展示方法、系统、设备及存储介质 | |
CN110347375B (zh) | 用于虚拟试验的资源组合式虚拟综合自然环境架构与方法 | |
CN106570135A (zh) | 数据库数据同步方法和装置 | |
CN109299922A (zh) | 基于erp的数据分析方法、装置、计算机设备和存储介质 | |
CN111897890B (zh) | 金融业务处理方法及装置 | |
CN105976322A (zh) | 电网综合信息监控图形生成系统及方法 | |
US20100010979A1 (en) | Reduced Volume Precision Data Quality Information Cleansing Feedback Process | |
CN113962597A (zh) | 一种数据分析方法、装置、电子设备及存储介质 | |
CN105871659A (zh) | 新增服务器的监控方法及装置 | |
CN115248735A (zh) | 一种日志数据输出控制方法、装置、设备及存储介质 | |
CN108156230A (zh) | 实时数据同步方法、系统及框架 | |
US11237850B2 (en) | Method and electronic device for automatically managing activities of application | |
CN116595578B (zh) | 一种电力网络自检攻防安全数据系统 | |
CN111078968B (zh) | 一种可视化配置的跨系统数据交互方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20180629 |