CN110619013A - 一种基于Json对象进行可视化配置的方法 - Google Patents

一种基于Json对象进行可视化配置的方法 Download PDF

Info

Publication number
CN110619013A
CN110619013A CN201910853822.7A CN201910853822A CN110619013A CN 110619013 A CN110619013 A CN 110619013A CN 201910853822 A CN201910853822 A CN 201910853822A CN 110619013 A CN110619013 A CN 110619013A
Authority
CN
China
Prior art keywords
data
json
user
visual configuration
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910853822.7A
Other languages
English (en)
Inventor
赵明健
霍荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Unicloud Technology Co Ltd
Original Assignee
Unicloud Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Unicloud Technology Co Ltd filed Critical Unicloud Technology Co Ltd
Priority to CN201910853822.7A priority Critical patent/CN110619013A/zh
Publication of CN110619013A publication Critical patent/CN110619013A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/242—Query formulation
    • G06F16/2433—Query languages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/25—Integrating or interfacing systems involving database management systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/26—Visual data mining; Browsing structured data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/30—Information retrieval; Database structures therefor; File system structures therefor of unstructured textual data
    • G06F16/31—Indexing; Data structures therefor; Storage structures
    • G06F16/313—Selection or weighting of terms for indexing

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Computational Linguistics (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明专利提供了一种基于Json对象进行可视化配置的方法，具体步骤包括：S1、数据源中设置mongodb数据库的连接方式；S2、数据集中选择对应的库表信息，读取第一条信息；S3、对第一条JSON信息进行转化处理，并处理出所有的关键索引信息，并判断每个索引对应字段的类型；S4、按照页面用户选取的索引信息，批量处理，并存入内存数据库中；S5、在可视化界面中，通过动态拖拽，生成动态SQL，从而在内存中查询出数据；S6、根据返回的数据和用户选择的图标样式，生成分析结果，帮助用户分析。本发明专利所述的一种基于Json对象进行可视化配置的方法实现了对Json数据扁平化处理，简化了数据的复杂度，支持用户自定义抽取Json复杂数据。

Description

一种基于Json对象进行可视化配置的方法
技术领域
本发明专利属于计算机应用技术领域，尤其是涉及一种基于Json对象进行可视化配置的方法。
背景技术
对Json数据的处理，需要首先知道数据的类型和KEY值，才能有针对性的去获取到业务系统需要的数据，并对该数据进行处理和分析，该方法灵活性差，同时对于多维数组支持不够；对于复杂数据不够灵活；抽取的时候对数据类型不能够准确判断，数据处理只能按照字符串的形式进行处理；该数据扁平化模板默认取的第一条Json进行解析的，如果剩下的Json字符串与第一条Json字符串KEY值差异过大，会导致后面取的数据为空的情况。
发明专利内容
有鉴于此，本发明专利旨在提出一种基于Json对象进行可视化配置的方法，以本发明专利所述的一种基于Json对象进行可视化配置的方法实现对Json嵌套的分层抽取；实现对Json中包含数组的元素，指定下标抽取数据；实现对Json的统一可视化配置抽取；实现对Json非结构化数据到结构化数据的转换储存过程。
为达到上述目的，本发明专利的技术方案是这样实现的：
一种基于Json对象进行可视化配置的方法，具体步骤包括：
S1、数据源中设置mongodb数据库的连接方式；
S2、数据集中选择对应的库表信息，读取第一条信息；
S3、对第一条JSON信息进行转化处理，并处理出所有的关键索引信息，并判断每个索引对应字段的类型；
S4、按照页面用户选取的索引信息，批量处理，并存入内存数据库中；
S5、在可视化界面中，通过动态拖拽，生成动态SQL，从而在内存中查询出数据；
S6、根据返回的数据和用户选择的图标样式，生成分析结果，帮助用户分析。
进一步的，所述步骤S1-S2的实施方法为：配置mongodb数据源，按照解析层级来读取，前端解析Json形成树形数据结构。
进一步的，所述解析层级为对Json多维数据进行深度处理，根据解析层级，来确定所需要的深度。
进一步的，所述步骤S3的实施方法为：选取需要读取的数据进行预览，同时获取数据的key和类型，作为创建表的依据。
进一步的，所述步骤S4-S6的实施方法为：BI系统根据配置将mongodb中的数据进行抽取转存到结构化数据库中，同时屏蔽差异化在报表页面进行统一操作,所述BI系统是一套通过拖拉拽进行快速生成报表分析界面的可视化系统。
相对于现有技术，本发明专利所述的一种基于Json对象进行可视化配置的方法具有以下优势：
本发明专利所述的一种基于Json对象进行可视化配置的方法实现了对Json数据扁平化处理，简化了数据的复杂度，支持用户自定义抽取Json复杂数据，可以屏蔽差异化处理，高效快速地从内存数据库中读取数据。
附图说明
构成本发明专利的一部分的附图用来提供对本发明专利的进一步理解，本发明专利的示意性实施例及其说明用于解释本发明专利，并不构成对本发明专利的不当限定。在附图中：
图1为本发明专利实施例所述的一种基于Json对象进行可视化配置的方法流程图示意图；
具体实施方式
需要说明的是，在不冲突的情况下，本发明专利中的实施例及实施例中的特征可以相互组合。
在本发明专利的描述中，需要理解的是，术语“中心”、“纵向”、“横向”、“上”、“下”、“前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明专利和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明专利的限制。此外，术语“第一”、“第二”等仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”等的特征可以明示或者隐含地包括一个或者更多个该特征。在本发明专利的描述中，除非另有说明，“多个”的含义是两个或两个以上。
在本发明专利的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以通过具体情况理解上述术语在本发明专利中的具体含义。
下面将参考附图并结合实施例来详细说明本发明专利。
当前业务人员对json数据的处理时，首先需要知道这个字符串代表的含义，然后在这个字符串中提取出业务系统需要的数据信息，并对提取的数据进行处理和分析，但是由于数据源的种类和格式众多，无法对一些json字符串进行一些可视化操作的处理，此方案就是针对JSON类型的数据源进行处理和分析。
针对相关技术中存在的不足，本发明所要解决的技术问题在于对Json字符串自定义配置提取的过程同时实现对JSON字符串的统一可视化处理。
自定义配置提取指的是从mongodb指定库中，读取一条数据，对这条数据进行解析，读取所有的KEY值，返回给用户，用户可以在这些KEY值，自定义选取需要的数据。
统一可视化处理指的是通过用户选取的key值，我们可以在内存数据库中建立对应的二维表，这样在紫光BI系统中，可以屏蔽差异化处理，统一从内存数据库中读取数据，达到高效快速。
紫光BI系统指的是紫光自主研发的一款报表工具软件，可以对数据展示和分析等功能。
参考具体实施例如下：
1、Json数据：
{"_id":{"$oid":"5c36b98d518f2219c4790291"},"username":"hanglei","age":"21","sex":"男","status":"0","grade":99,"dateTime":{"$date":1561852800000}}
进行Json解析：
将JSON数据进行扁平化处理：
通过键值_id.$oid....的方式来记录json中的位置(见上)，通过这种方式来指定获取JSON中的，键值所对应的任意值(包括数组的某一个元素等)；通过这种方式打通了JSON到结构化数据库之间的差异。
2、通过返回的目标定位信息，可以很简单的进行自定义配置，并根据配置获取到想要的值，将获取到的值组成二维数据返回给紫光BI平台，屏蔽了不同数据源之间的差异，可视化的配置为可视化的展示和智能化的分析奠定了基础。
3、该方法设计的步骤
S1通过配置不同的数据源，例如：输入用户名，密码登陆数据库，或者配置URL等连接获取信息方式；
S2指定要获取的和处理的JSON字符串；
S3对该字符串扁平化处理，返回列名和路径的指定值；
S4在紫光BI可视化平台上，用户可以对S3中返回的列名，自定义选择需要处理和获取的列名数据；
S5将获取到的数据返回给紫光BI智能软件平台，进行绘制出想要的图表等数据信息。(详细见图1流程图)
4.该方法对所用的数据源不限，只是针对JSON字符串的一种特殊处理方式。
以上所述仅为本发明专利的较佳实施例而已，并不用以限制本发明专利，凡在本发明专利的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明专利的保护范围之内。

Claims (5)

1.一种基于Json对象进行可视化配置的方法，其特征在于，具体步骤包括：
S1、数据源中设置mongodb数据库的连接方式；
S2、数据集中选择对应的库表信息，读取第一条信息；
S3、对第一条JSON信息进行转化处理，并处理出所有的关键索引信息，并判断每个索引对应字段的类型；
S4、按照页面用户选取的索引信息，批量处理，并存入内存数据库中；
S5、在可视化界面中，通过动态拖拽，生成动态SQL，从而在内存中查询出数据；
S6、根据返回的数据和用户选择的图标样式，生成分析结果，帮助用户分析。
2.根据权利要求1所述的一种基于Json对象进行可视化配置的方法，其特征在于：所述步骤S1-S2的实施方法为：配置mongodb数据源，按照解析层级来读取，前端解析Json形成树形数据结构。
3.根据权利要求2所述的一种基于Json对象进行可视化配置的方法，其特征在于：所述解析层级为对Json多维数据进行深度处理，根据解析层级，来确定所需要的深度。
4.根据权利要求1所述的一种基于Json对象进行可视化配置的方法，其特征在于：所述步骤S3的实施方法为：选取需要读取的数据进行预览，同时获取数据的key和类型，作为创建表的依据。
5.根据权利要求1所述的一种基于Json对象进行可视化配置的方法，其特征在于：所述步骤S4-S6的实施方法为：BI系统根据配置将mongodb中的数据进行抽取转存到结构化数据库中，同时屏蔽差异化在报表页面进行统一操作,所述BI系统是一套通过拖拉拽进行快速生成报表分析界面的可视化系统。
CN201910853822.7A 2019-09-10 2019-09-10 一种基于Json对象进行可视化配置的方法 Pending CN110619013A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910853822.7A CN110619013A (zh) 2019-09-10 2019-09-10 一种基于Json对象进行可视化配置的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910853822.7A CN110619013A (zh) 2019-09-10 2019-09-10 一种基于Json对象进行可视化配置的方法

Publications (1)

Publication Number Publication Date
CN110619013A true CN110619013A (zh) 2019-12-27

Family

ID=68923108

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910853822.7A Pending CN110619013A (zh) 2019-09-10 2019-09-10 一种基于Json对象进行可视化配置的方法

Country Status (1)

Country Link
CN (1) CN110619013A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112035104A (zh) * 2020-08-28 2020-12-04 重庆长安汽车股份有限公司 一种移动应用动态更改功能配置的建模方法
CN116775680A (zh) * 2023-05-31 2023-09-19 北京龙软科技股份有限公司 一种基于SQL操作MongoDB数据库的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150170382A1 (en) * 2010-10-19 2015-06-18 Izenda, Inc. Systems and methods for automatic interactive visualizations
CN106909610A (zh) * 2017-01-10 2017-06-30 中电科华云信息技术有限公司 基于浏览器的可视化拖拽查询数据的方法及系统
CN107679025A (zh) * 2017-09-20 2018-02-09 北京数猎天下科技有限公司 一种对工作表的图表展示进行操作与维护方法
CN107704608A (zh) * 2017-10-17 2018-02-16 北京览群智数据科技有限责任公司 一种olap多维分析和数据挖掘系统
CN110019555A (zh) * 2017-12-26 2019-07-16 中国科学院沈阳自动化研究所 一种关系数据语义化建模方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150170382A1 (en) * 2010-10-19 2015-06-18 Izenda, Inc. Systems and methods for automatic interactive visualizations
CN106909610A (zh) * 2017-01-10 2017-06-30 中电科华云信息技术有限公司 基于浏览器的可视化拖拽查询数据的方法及系统
CN107679025A (zh) * 2017-09-20 2018-02-09 北京数猎天下科技有限公司 一种对工作表的图表展示进行操作与维护方法
CN107704608A (zh) * 2017-10-17 2018-02-16 北京览群智数据科技有限责任公司 一种olap多维分析和数据挖掘系统
CN110019555A (zh) * 2017-12-26 2019-07-16 中国科学院沈阳自动化研究所 一种关系数据语义化建模方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112035104A (zh) * 2020-08-28 2020-12-04 重庆长安汽车股份有限公司 一种移动应用动态更改功能配置的建模方法
CN112035104B (zh) * 2020-08-28 2024-03-22 重庆长安汽车股份有限公司 一种移动应用动态更改功能配置的建模方法
CN116775680A (zh) * 2023-05-31 2023-09-19 北京龙软科技股份有限公司 一种基于SQL操作MongoDB数据库的方法

Similar Documents

Publication Publication Date Title
US11372935B2 (en) Automatically generating a website specific to an industry
CN112270027B (zh) 基于实体模型的城市设计无纸化智能交互审查方法
CN106886418B (zh) Html界面控件贴
CN101739390B (zh) 基于技术设计文档的数据转换
CN110866383B (zh) 一种交互式电子数据清单生成方法及系统
CN111462305B (zh) 应用于农村房地一体的三维不动产管理方法
CN107111617A (zh) 数据库中的图处理
CN105095067A (zh) 用户界面元素对象识别及自动化测试的方法和装置
CN108664509B (zh) 一种即席查询的方法、装置及服务器
CN110619013A (zh) 一种基于Json对象进行可视化配置的方法
US9646004B2 (en) Hierarchical database report generation with automated query generation for placeholders
CN105045886A (zh) 一种dicom图像的导入方法
CN116028653B (zh) 一种可视化配置多源异构数据构建图谱的方法及系统
CN103678451A (zh) 用于电子表格模式提取的方法和系统
CN108984597A (zh) 一种船舶产品结构树的构建方法及系统
CN111209909B (zh) 资质识别模板构建方法、装置、设备和存储介质
CN105760418A (zh) 用于对关系数据库表进行交叉列搜索的方法和系统
CN109284469B (zh) 网页开发框架
CN114168149A (zh) 一种数据转换方法及装置
WO2011074942A1 (en) System and method of converting data from a multiple table structure into an edoc format
CN111984745A (zh) 数据库字段动态扩展方法、装置、设备及存储介质
CN103810243A (zh) 创新热点预警识别系统及方法
CN115510834A (zh) 一种实验室数据数字化管理系统和方法
CN101788977A (zh) 一种医学检查报告编辑修改实现方法
CN107515913A (zh) 一种多变量数据模型集成构建方法及其可视化交互系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20191227

RJ01 Rejection of invention patent application after publication