CN109299168B - 一种互联网大数据可视化分析系统 - Google Patents
一种互联网大数据可视化分析系统 Download PDFInfo
- Publication number
- CN109299168B CN109299168B CN201811170944.8A CN201811170944A CN109299168B CN 109299168 B CN109299168 B CN 109299168B CN 201811170944 A CN201811170944 A CN 201811170944A CN 109299168 B CN109299168 B CN 109299168B
- Authority
- CN
- China
- Prior art keywords
- data
- module
- algorithm
- visualization
- submission
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Abstract
本发明提出了一种互联网大数据可视化分析系统，在可视化分析系统架构中提供了算法编辑和编译功能，用户可以在编辑窗口中编写可视化算法，通过调用算法编译器将此可视化算法进行编译生成可执行的算法，并保存到服务器端的可视化算法库中；通过调用内部集成的可视化算法或外部导入的算法，用户可以将本地或导入的数据进行可视化展示，从而可以简化数据可视化的配置过程；通过数据格式转换机制可以将外部常见的文本数据转换为系统架构内部通用的数据格式，并将导入的数据进行保存、展示和属性配置。
Description
技术领域
本发明涉及互联网领域，尤其涉及一种互联网大数据可视化分析系统。
背景技术
随着互联网的普及与发展,日常生活中人们接触到的数据正以惊人的速度增长。数据已经成为人们生活中必不可少的事物，为了更加清晰有效地传达与沟通生活、工作中的数据，人们借助于可视化的图形手段，这就是数据可视化。在传统的数据可视化基础平台和架构中，通常是由专业的研究人员来主导，以数据仓库和数据挖掘技术为基础，通过面向特定领域的数据可视化工具，来构建独有的数据可视化解决方案。尽管这类可视化系统架构能够很好的利用可视化视图来分析数据中隐藏的信息，但是由于其所允许输入的数据格式较为单一，所允许使用的可视化算法也被集成在系统架构内部，致使这样高度定制化的数据可视化系统架构缺少用户参与的自由性、灵活性和数据导入、算法导入的开放性。针对上述问题，本发明提供了一种支持开放性数据源、支持多种可视化形式的通用型、高可扩展性的大数据可视化分析系统。
发明内容
有鉴于此，本发明提出了一种支持开放性数据源、支持多种可视化形式的通用型、高可扩展性的大数据可视化分析系统。
本发明的技术方案是这样实现的：本发明提供了一种互联网大数据可视化分析系统，其包括客户端、业务逻辑端和服务器端，服务器端包括数据转换模块和调用编译器；
客户端提交用户数据、用户算法代码和可视化效果的展示以及提供GUI的交互操作；
业务逻辑端负责处理内部的数据和业务规则，当客户端有用户提交数据或提交算法代码时，业务逻辑端会根据客户端的操作进行数据逻辑处理，通过开启业务处理模式，将业务逻辑请求发送给服务器；
服务器端为客户端提供不同的数据识别、转换为易于可视化展示的内部数据格式、算法编译；
数据转换模块将外部的文本数据转换为可视化分析系统架构内部通用的数据格式；
调用编译器通过调用内部编译器CSC将客户端提交的算法代码进行编译处理，生成可执行的可视化算法；
客户端与业务逻辑端信号连接，业务逻辑端分别与服务器端的数据转换模块和调用编译器信号连接。
在以上技术方案的基础上，优选的，客户端包括算法提交模块、数据提交模块和可视化视图模块；
数据提交模块将外部用户采集的数据提交给业务逻辑端进行数据逻辑处理；
算法提交模块将用户在用户端编辑的可视化算法代码提交给业务逻辑端进行算法逻辑处理；
可视化视图模块将数据或算法对应的视图展现在用户端的窗口上；
算法提交模块、数据提交模块和可视化视图模块均与业务逻辑端信号连接。
进一步优选的，业务逻辑端包括数据提交业务模块、算法提交业务模块和可视化视图展示业务模块；
数据提交业务模块通过开启数据提交业务处理模式，将数据业务逻辑请求发送给服务器端的数据转换模块；
算法提交业务模块通过开启算法提交业务处理模式，将算法提交的业务逻辑发送给服务器端的调用编译器；
可视化视图展示业务模块将数据对应的可视化视图展现给用户端的可视化视图模块进行展示；
数据提交业务模块分别与数据提交模块和数据转换模块信号连接，算法提交业务模块分别与算法提交模块和调用编译器信号连接，可视化视图模块与可视化视图展示业务模块信号连接。
进一步优选的，服务器端还包括数据库、映射模块和匹配模块；
数据库存储数据转换模块生成的可视化分析系统架构内部可视化算法使用的数据格式；
匹配模块匹配格式转换后的数据与编译后的可视化算法，来选择用户自己用户编写的可视化算法或选择系统架构内部生成的可视化算法；
映射模块根据选择的可视化算法和数据，进行数据属性到视觉图形的映射，进而生成可视化视图；
数据库分别与数据转换模块和匹配模块信号连接，调用编译器与匹配模块信号连接，映射模块分别与匹配模块和可视化视图展示业务模块信号连接。
本发明的一种互联网大数据可视化分析系统相对于现有技术具有以下有益效果：
(1)在可视化分析系统架构中提供了算法编辑和编译功能，用户可以在编辑窗口中编写可视化算法，通过调用算法编译器将此可视化算法进行编译生成可执行的算法，并保存到服务器端的可视化算法库中；
(2)通过调用内部集成的可视化算法或外部导入的算法，用户可以将本地或导入的数据进行可视化展示，从而可以简化数据可视化的配置过程；
(3)通过数据格式转换机制可以将外部常见的文本数据转换为系统架构内部通用的数据格式，并将导入的数据进行保存、展示和属性配置。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明的一种互联网大数据可视化分析系统的结构图。
具体实施方式
下面将结合本发明实施方式，对本发明实施方式中的技术方案进行清楚、完整地描述，显然，所描述的实施方式仅仅是本发明一部分实施方式，而不是全部的实施方式。基于本发明中的实施方式，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施方式，都属于本发明保护的范围。
如图1所示，本发明的一种互联网大数据可视化分析系统，其包括客户端、业务逻辑端和服务器端。
本系统的架构分为：变现层、应用服务层、应用支撑层、数据资源层和基础平台层。在本实施例中，变现层实质就是面向数据可视化领域的专业研究人员、企业内部需要通过数据可视化件数据分析的决策人员以及普通的用户群体，客户端即在变现层；应用服务层的主要作用是定义开放性数据导入接口服务，通过此接口可以方便永华将系统架构外部的文本数据导入系统架构内部，定义算法编辑接口，此接口为用户提供一个算法编辑功能，通过此接口编写的算法可以与应用支撑层进行数据传递和交互，定义开放性算法导入接口，调用此接口，可以实现外部算法的导入；应用支撑层提供数据转换机制、算法编译引擎和数据与算法匹配机制，数据转换机制主要负责将上层导入的数据通过此机制转换为系统架构内部通用的数据格式，算法编译引擎负责为导入的算法提供算法编译功能，数据与算法匹配机制对数据和可视化算法进行合理的映射，以达到最优的可视化效果，在本实施例中，服务器端在应用支撑层；数据资源层存储数据库关系数据表和外部文本数据；基础平台层支撑上层平台各类应用系统和接口的运行。
客户端，提交用户数据、用户算法代码和可视化效果的展示以及提供GUI的交互操作。在本实施例中，可以允许多个客户端访问同一个服务器端的代码，大大提高了客户端的通用性。其中，客户端包括：算法提交模块、数据提交模块和可视化视图模块。数据提交模块将外部用户采集的数据提交给业务逻辑端进行数据逻辑处理；算法提交模块将用户在用户端编辑的可视化算法代码提交给业务逻辑端进行算法逻辑处理；可视化视图模块将数据或算法对应的视图展现在用户端的窗口上。
业务逻辑端，负责处理内部的数据和业务规则，当客户端有用户提交数据或提交算法代码时，业务逻辑端会根据客户端的操作进行数据逻辑处理，通过开启业务处理模式，将业务逻辑请求发送给服务器。其中，业务逻辑端包括数据提交业务模块、算法提交业务模块和可视化视图展示业务模块。数据提交业务模块通过开启数据提交业务处理模式，将数据业务逻辑请求发送给服务器端的数据转换模块；算法提交业务模块通过开启算法提交业务处理模式，将算法提交的业务逻辑发送给服务器端的调用编译器；可视化视图展示业务模块将数据对应的可视化视图展现给用户端的可视化视图模块进行展示；数据提交业务模块分别与数据提交模块和数据转换模块信号连接，算法提交业务模块分别与算法提交模块和调用编译器信号连接，可视化视图模块与可视化视图展示业务模块信号连接。
服务器端，为客户端提供不同的数据识别、转换为易于可视化展示的内部数据格式、算法编译，以及将数据保存于服务器端的数据库中的功能。服务器端包括数据转换模块、调用编译器、数据库、映射模块、匹配模块和可视化算法库。其中，数据转换模块将外部的文本数据转换为可视化分析系统架构内部通用的数据格式；调用编译器通过调用内部编译器CSC将客户端提交的算法代码进行编译处理，生成可执行的可视化算法；数据库存储数据转换模块生成的可视化分析系统架构内部可视化算法使用的数据格式；匹配模块匹配格式转换后的数据与编译后的可视化算法，来选择用户自己用户编写的可视化算法或选择系统架构内部生成的可视化算法；映射模块根据选择的可视化算法和数据，进行数据属性到视觉图形的映射，进而生成可视化视图；数据库分别与数据转换模块和匹配模块信号连接，调用编译器与匹配模块信号连接，映射模块分别与匹配模块和可视化视图展示业务模块信号连接。
以上所述仅为本发明的较佳实施方式而已，并不用以限制本发明，凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。
Claims (1)
1.一种互联网大数据可视化分析系统，其包括客户端、业务逻辑端和服务器端，其特征在于：所述服务器端包括数据转换模块和调用编译器；
所述客户端提交用户数据、用户算法代码和可视化效果的展示以及提供GUI的交互操作；
所述业务逻辑端负责处理内部的数据和业务规则，当客户端有用户提交数据或提交算法代码时，业务逻辑端会根据客户端的操作进行数据逻辑处理，通过开启业务处理模式，将业务逻辑请求发送给服务器；
所述服务器端为客户端提供不同的数据识别、转换为易于可视化展示的内部数据格式、算法编译；
所述数据转换模块将外部的文本数据转换为可视化分析系统架构内部通用的数据格式；
所述调用编译器通过调用内部编译器CSC将客户端提交的算法代码进行编译处理，生成可执行的可视化算法；
所述客户端与业务逻辑端信号连接，业务逻辑端分别与服务器端的数据转换模块和调用编译器信号连接；
所述客户端包括算法提交模块、数据提交模块和可视化视图模块；
所述数据提交模块将外部用户采集的数据提交给业务逻辑端进行数据逻辑处理；
所述算法提交模块将用户在用户端编辑的可视化算法代码提交给业务逻辑端进行算法逻辑处理；
所述可视化视图模块将数据或算法对应的视图展现在用户端的窗口上；
所述算法提交模块、数据提交模块和可视化视图模块均与业务逻辑端信号连接；
所述业务逻辑端包括数据提交业务模块、算法提交业务模块和可视化视图展示业务模块；
所述数据提交业务模块通过开启数据提交业务处理模式，将数据业务逻辑请求发送给服务器端的数据转换模块；
所述算法提交业务模块通过开启算法提交业务处理模式，将算法提交的业务逻辑发送给服务器端的调用编译器；
所述可视化视图展示业务模块将数据对应的可视化视图展现给用户端的可视化视图模块进行展示；
所述数据提交业务模块分别与数据提交模块和数据转换模块信号连接，算法提交业务模块分别与算法提交模块和调用编译器信号连接，可视化视图模块与可视化视图展示业务模块信号连接；
所述服务器端还包括数据库、映射模块和匹配模块；
所述数据库存储数据转换模块生成的可视化分析系统架构内部可视化算法使用的数据格式；
所述匹配模块匹配格式转换后的数据与编译后的可视化算法，来选择用户自己用户编写的可视化算法或选择系统架构内部生成的可视化算法；
所述映射模块根据选择的可视化算法和数据，进行数据属性到视觉图形的映射，进而生成可视化视图；
所述数据库分别与数据转换模块和匹配模块信号连接，调用编译器与匹配模块信号连接，映射模块分别与匹配模块和可视化视图展示业务模块信号连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811170944.8A CN109299168B (zh) | 2018-10-09 | 2018-10-09 | 一种互联网大数据可视化分析系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811170944.8A CN109299168B (zh) | 2018-10-09 | 2018-10-09 | 一种互联网大数据可视化分析系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN109299168A CN109299168A (zh) | 2019-02-01 |
| CN109299168B true CN109299168B (zh) | 2022-08-09 |
Family
ID=65161943
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201811170944.8A Active CN109299168B (zh) | 2018-10-09 | 2018-10-09 | 一种互联网大数据可视化分析系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109299168B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110781237A (zh) * | 2019-07-01 | 2020-02-11 | 厦门美域中央信息科技有限公司 | 一种基于人工智能的信息可视化分析系统 |
| CN110780971A (zh) * | 2019-11-06 | 2020-02-11 | 山东健康医疗大数据有限公司 | 一种可视化的医疗数据映射、转换工具的实现方法及系统 |
| CN112559828A (zh) * | 2020-07-08 | 2021-03-26 | 北京德风新征程科技有限公司 | 一种大数据可视化分析和展示的组件式系统和交互方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016049437A1 (en) * | 2014-09-26 | 2016-03-31 | Oracle International Corporation | Techniques for similarity analysis and data enrichment using knowledge sources |
| CN107291885A (zh) * | 2017-06-21 | 2017-10-24 | 南京邮电大学 | 一种基于人机交互的大数据可视化系统及其控制方法 |
-
2018
- 2018-10-09 CN CN201811170944.8A patent/CN109299168B/zh active Active
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2016049437A1 (en) * | 2014-09-26 | 2016-03-31 | Oracle International Corporation | Techniques for similarity analysis and data enrichment using knowledge sources |
| CN107291885A (zh) * | 2017-06-21 | 2017-10-24 | 南京邮电大学 | 一种基于人机交互的大数据可视化系统及其控制方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109299168A (zh) | 2019-02-01 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107291948B (zh) | 一种分布式newSQL数据库的访问方法 | |
| US11055489B2 (en) | Determining levels of detail for data visualizations using natural language constructs | |
| CN109299168B (zh) | 一种互联网大数据可视化分析系统 | |
| CN107515887B (zh) | 一种适用于多种大数据管理系统的交互式查询方法 | |
| CN104778241B (zh) | 一种报表生成方法及系统 | |
| CN107491561B (zh) | 一种基于本体的城市交通异构数据集成系统及方法 | |
| CN103942228B (zh) | 规则引擎、计算方法、业务系统及调用方法 | |
| CN101147187B (zh) | 用于管理分布式异质数据源之间的复杂关系的系统和方法 | |
| US8024701B2 (en) | Visual creation of object/relational constructs | |
| US6877000B2 (en) | Tool for converting SQL queries into portable ODBC | |
| CN103430144A (zh) | 数据源分析 | |
| CN105279286A (zh) | 一种交互式大数据分析查询处理方法 | |
| US9746932B2 (en) | Gesture inferred vocabulary bindings | |
| US6691122B1 (en) | Methods, systems, and computer program products for compiling information into information categories using an expert system | |
| CN109657072B (zh) | 一种应用于政府辅助决策的智能搜索web系统及方法 | |
| US20130173643A1 (en) | Providing information management | |
| CN109947770A (zh) | 一种数据库查询方法、终端设备及存储介质 | |
| US20160019242A1 (en) | Migrating Federated Data to Multi-Source Universe Database Environment | |
| JP2009530738A (ja) | サービスシーケンス内の変換のための宣言 | |
| US20130174048A1 (en) | Techniques for guided access to an external distributed file system from a database management system | |
| WO2021253641A1 (zh) | 着色语言翻译方法 | |
| CN111324628A (zh) | 一种基于Spark SQL的统一SQL查询方法 | |
| US20180260436A1 (en) | Enterprise integration processing for mainframe cobol programs | |
| WO2020117655A1 (en) | System and method for ingesting data | |
| US20130262417A1 (en) | Graphical Representation and Automatic Generation of Iteration Rule |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20220607 Address after: 430000 f7-7, room 02, floor 5, building 2, international enterprise center, No. 1, Guanshan Second Road, East Lake New Technology Development Zone, Wuhan City, Hubei Province (Wuhan area of the free trade zone) Applicant after: Bid winning cloud (Hubei) Network Technology Co.,Ltd. Address before: 430074 Wuhan Optics Valley central garden, northwest corner of Luxiang square, Luoyu Road, East Lake New Technology Development Zone, Wuhan City, Hubei Province Applicant before: HUBEI HANSHU TECHNOLOGY Co.,Ltd. |
|
| TA01 | Transfer of patent application right | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |