CN111949638A - 一种数据管理系统、方法及存储介质 - Google Patents
一种数据管理系统、方法及存储介质 Download PDFInfo
- Publication number
- CN111949638A CN111949638A CN202010962091.2A CN202010962091A CN111949638A CN 111949638 A CN111949638 A CN 111949638A CN 202010962091 A CN202010962091 A CN 202010962091A CN 111949638 A CN111949638 A CN 111949638A
- Authority
- CN
- China
- Prior art keywords
- data
- data acquisition
- server
- type
- request
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013523 data management Methods 0.000 title claims abstract description 46
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000007726 management method Methods 0.000 claims abstract description 22
- 238000004891 communication Methods 0.000 claims abstract description 17
- 238000005265 energy consumption Methods 0.000 claims description 16
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 12
- 238000012545 processing Methods 0.000 claims description 9
- UFHFLCQGNIYNRP-UHFFFAOYSA-N Hydrogen Chemical compound [H][H] UFHFLCQGNIYNRP-UHFFFAOYSA-N 0.000 claims description 5
- 238000004590 computer program Methods 0.000 claims description 5
- 239000001257 hydrogen Substances 0.000 claims description 5
- 229910052739 hydrogen Inorganic materials 0.000 claims description 5
- 239000002028 Biomass Substances 0.000 claims description 4
- 239000007789 gas Substances 0.000 claims description 4
- 238000004146 energy storage Methods 0.000 claims description 3
- 238000013480 data collection Methods 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 12
- 230000008569 process Effects 0.000 description 6
- 230000008520 organization Effects 0.000 description 5
- 238000004806 packaging method and process Methods 0.000 description 4
- 230000005611 electricity Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000004308 accommodation Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000036541 health Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000004134 energy conservation Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Data Mining & Analysis (AREA)
- Human Computer Interaction (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明实施例公开了一种数据管理系统、方法及存储介质，该数据管理系统包括：数据采集设备，用于采集至少一种类型的数据，服务器，与所述数据采集设备连接，用于接收至少一种类型的数据，并按类型将数据分别存储至数据库中，请求终端，与服务器通信连接，用于向服务器发送数据获取请求，相应的，服务器还用以基于所述数据获取请求，从与所述数据获取请求对应的数据库中，获取目标数据，所述请求终端，还用于接收目标数据，并基于所述目标数据对应的预设展示形式，将所述目标数据展示于终端界面上。本发明实施例提供的数据管理系统、方法及存储介质，实现了采用统一的系统获取不同管理范围的数据，提高了数据获取的效率，并有效地管理能源资源。
Description
技术领域
本发明实施例涉及数字化、智能化技术领域，尤其涉及一种数据管理系统方法及存储介质。
背景技术
目前，国家大力发展新农村事业，推广绿色环保、节能减排政策，新农村建设需要农村管理数字化、信息化。现有技术中，通常针对不同管理范围，分别设置有各自的管理系统。现有技术至少存在以下缺点：由于存在获取不同管理范围的数据的需求，分别采用不同的管理系统会降低数据获取的效率，不便于对能源资源进行管理。
发明内容
本发明实施例提供了一种数据管理系统、方法及存储介质，能够采用统一的系统获取不同管理范围的数据，提高了数据获取的效率，并有效地管理能源资源。
第一方面，本发明实施例提供了一种数据管理系统，包括：
数据采集设备，用于采集至少一种类型的数据；
服务器，与数据采集设备连接，用于接收至少一种类型的数据，并按类型将数据分别存储至数据库中；
请求终端，与服务器通信连接，用于向服务器发送数据获取请求；
相应的，服务器还用以基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据；
请求终端，还用于接收目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上。
第二方面，本发明实施例提供了一种数据管理方法，包括：
接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中；
接收数据终端发送的数据获取请求，基于所述数据获取请求，从与所述数据获取请求对应的数据库中，获取目标数据；
将所述目标数据发送至请求终端，以使所述请求终端接收所述目标数据，并基于所述目标数据对应的预设展示形式，将所述目标数据展示于终端界面上。
第三方面，本发明实施例还提供了一种包含计算机可执行指令的存储介质，计算机可执行指令在由计算机处理器执行时用于执行如本发明实施例任一的数据管理方法。
本发明实施例提供的数据管理系统、方法及存储介质，通过接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中；接收数据终端发送的数据获取请求，基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据，将目标数据发送至请求终端，以使请求终端接收所述目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上，实现了采用统一的系统获取不同管理范围的数据，提高了数据获取的效率，并有效地管理能源资源。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一提供的一种数据管理系统的示意图；
图2是本发明实施例一涉及的一种数据管理系统的结构示意图；
图3是本发明实施例二提供的一种数据管理系统的示意图；
图4是本发明实施例二涉及的一种数据管理系统的服务器结构示意图；
图5是本发明实施例三提供的一种数据管理方法的流程示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，以下将参照本发明实施例中的附图，通过实施方式清楚、完整地描述本发明的技术方案，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。下述各实施例中，每个实施例中同时提供了可选特征和示例，实施例中记载的各个特征可进行组合，形成多个可选方案，不应将每个编号的实施例仅视为一个技术方案。
实施例一
图1是本发明实施例一提供的一种数据管理系统的示意图。本发明实施例提供的数据管理系统适用于对获取的不同地方、不同类型的数据进行管理的情况，尤其适用于乡村对获取的不同数据进行智慧管理的情况。如图1所示，本实施例提供的数据管理系统包括：
数据采集设备110，用于采集至少一种类型的数据。
服务器120，与数据采集设备连接，用于接收至少一种类型的数据，并按类型将数据分别存储至数据库中；
请求终端130，与服务器通信连接，用于向服务器发送数据获取请求；
相应的，服务器还用以基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据；
请求终端，还用于接收目标数据，并基于目标数据对应的预设展示形式，将所述目标数据展示于终端界面上。
具体的，本实施例提供的数据管理系统的管理过程如下：
数据采集设备可以是安装在居民家里、不同的公共场所、户外环境等可以采集不同类型数据的设备。示例性的，可以是安装在不同民宿、民宅等场所的电表、水表等，可以是各产业园区统计各产业销量和/或订单量的终端设备，可以是安装在公共场所的录像装置，可以是光伏、风能等发电量统计设备，也可以是各景区、旅馆等对人数、年龄、停车位等进行统计的终端设备等，也可以是对某区域出行工具如自行车、电动车等进行统计的终端设备，还可以是空气质量检测、水质检测等设备，本发明实施例对数据采集设备及数据采集设备采集的数据类型不作具体限制。
可选的，类型为能源类型时，数据采集设备，包括：
供能数据采集设备，与下述至少一种供能设备连接：电源变魔方、微电网魔方、热水源魔方、地源热魔方、生物质魔方、氢能源魔方、集中光伏设备、集中风电设备和集中储能设备，用于采集供能设备的供能数据；和/或，
耗能数据采集设备，与下述至少一个区域的计量表连接：民宿区域、民宅区域、公建区域、产业区域和设施区域，用于采集计量表记录的耗能数据。
当数据类型为能源数据时，包括供能数据，此时数据采集设备为供能数据采集设备时，主要用于采集供能设备提供的能源。如图2所示的数据管理系统结构示意图，功能区域的供能设备可以是电源变魔方，将电能产生设备产生的电转化为可用的电的设备，还可以是提供能源电的微电网魔方，还可以是提供热能的热水源魔方、地源热魔方，还可以是提供氢能源的魔方，还可以是集中光伏设备、集中风电设备和集中储能设备等，本发明实施例对供能数据采集设备不作具体限制。
当能源数据为耗能数据时，数据采集设备为耗能数据采集设备，主要用于采集耗能设备消耗的能源。耗能设备消耗的能源可以通过对应的计量表进行统计，可以是通过计量表记录民宿区域、民宅区域、公建区域、产业区域和设施区域等消耗的能源，其中，设施区域可以是能源中心，能源中心产生能源，在产生能源的同时，同样会消耗能源。示例性的，计量表可以是电表，也可以是水表，本发明实施例对计量表的类型不作具体限制，凡是可以统计区域消耗能源量的仪器均可。
将供能数据和耗能数据分布采用不同的采集设备进行采集，便于对供能数据和耗能数据分别进行管理。
类型为民生类型时，数据采集设备，包括下述至少一种：空气检测设备、水质检测设备、安防设备、垃圾分类统计设备、景点游客管理设备和产业订单管理设备。
当数据类型为民生类型时，如图2所示的数据管理系统的结构示意图，民生数据采集设备可以是空气检测设备，用于检测空气温度、湿度、风速、风向、噪音或PM值等，可以是水质检测设备，用于检测水的PH值、水温或水位等，也可以是安防设备，用于记录道路、不同区域等的实时情况，也可以是垃圾分类统计设备，用于统计不同区域垃圾分类相关的数据，示例性的，可以是湿垃圾、干垃圾、可回收垃圾和有害垃圾分别所占的比例，景点游客管理设备，用于根据实际情况实时统计景点的游客数量、游客性别比例等，产业订单管理设备，用于对相应产业的销售额、订单数等进行统计的设备，本发明实施例对于民生数据采集设备不作具体限制。
采用不同类型的民生数据采集设备采集不同的民生数据，可以实现对各方面不同的民生数据进行管理。
服务器接收数据采集设备发送的一种类型或多种类型的数据，根据不同数据的类型分别进行存储，可以将各类型数据存储在同一数据库中，也可以存储在不同数据库中。可选的，还可以根据不同类型的数据所属的组织分别存储至不同的数据库中，示例性的，如果服务器接收到的数据包括某一民宿的耗电量以及此时民宿中的客人数量，则对应得将耗电量和此时的客人数量分别存储在不同的数据库中。
可选的，服务器还用于：对接收的至少一种类型的数据分别进行处理，并按类型将处理后的数据分别存储至不同数据库表中。
服务器接收到数据时，对于不同类型的数据，根据展示需求，有的需要根据类型进行处理后才能进行存储，数据处理可以是对某个区域或组织的个体数据进行统计、分析等，示例性的，数据处理可以是对某村域的用能产生的费用进行统计计算，也可以是对每个具体场所的能源数据按年、月、日的分析，还可以是指定某个村，获取接入能源的某户或者某个产业进行耗能统计及分类，还可以是对乡村各产业进行管理，统计乡村各产业销售额及订单量，本发明实施例对服务器进行数据处理的方式不作具体限制。对于处理后的数据，可以存储在同一数据库的不同数据库表中，也可以存储在不同数据库中。
对接收到的数据进行处理，便于满足不同的展示需求。
可选的，服务器可以不做数据处理，数据采集设备将采集的数据发送至特定的数据处理中心，数据处理中心将数据处理后再发送至服务器。如图2所示的数据管理系统结构示意图，供能数据采集设备和耗能数据采集设备采集的能源可以发送至大数据处理中心，大数据处理中心对接收的能源数据进行分析和预测，还可以进行包装，将数据处理成可以发送并使接收端可以识别的数据格式。将能源采集设备采集的不同类型的能源发送至大数据处理中心，进行大数据处理，可以获取更丰富的能源数据。
可选的，类型为民生类型时，如图2所示的数据管理系统的结构示意图，示例性的，民生数据采集设备为安防设备、空气检测设备、水质检测设备、产业订单管理设备、景点游客管理设备或垃圾分类统计设备时，可以将采集的民生数据，首先发送至中转服务器，中转服务器对数据进行提取、整理，再发送至服务器，服务器根据不同数据类型类型存储在不同的数据库中。
请求终端，示例性的可以是与服务器进行通信连接的Web端、APP端或者大屏显示端，本发明实施例对请求终端不作具体限制，用户登录请求终端后，发起数据获取请求，请求终端将数据获取请求发送至服务器。
服务器接收到请求终端发送的数据获取请求时，根据数据请求从对应的数据库中获取存储的目标数据，其中，目标数据是指数据获取请求中包含的需要获取的数据，从示例性的，用户在请求终端点击停车场车位展示模块，则对应的目标数据就是不同地方停车场剩余车位的数据。获取到目标数据后，经过逻辑运算及API包装，将API包装后的目标数据返回请求终端。
请求终端接收服务器返回的目标数据，对于不同的目标数据，预先设置不同的展示形式，将目标数据以预设展示形式展示在终端的展示界面上。
可选的，预设展示形式，包括下述至少一项：数字、图像、文字、视频、统计表、图形。
示例性的，对于环境温度、湿度、风速、风向等以十进制数字进行展示，垃圾分类数据可以以百分比进行展示，对于人脸识别数据以人脸图像的形式展示，对于道路拥堵情况，可以以畅通、拥堵等文件进行展示，而且对于需要强调的数据，可以和不需强调的数据以不同颜色区别，对于畅通以绿色进行展示，拥堵以红色进行展示，对于道路监控数据可以直接将监控到的视频进行展示，对于耗能统计，可以以横坐标为日期、纵坐标为耗能量绘制统计表进行展示，对于天气预报，比如晴天以太阳图形进行展示，阴天以云朵图形进行展示，需要说明的是，本发明实施例对预设展示形式不作具体限制。
丰富预设展示形式，便于在展示界面上直观的展示不同类型的数据。
可选的，数据采集设备为安防设备时，如图2所示的数据管理系统示意图，请求终端还与安防设备通信连接，用于接收安防设备采集的视频数据，并将所述视频数据展示于终端界面上。
数据采集设备为安防设备时，示例性的，安防设备如摄像头，请求终端与摄像头直接通信连接，可以对摄像头记录的视频进行存储，并根据视频数据获取请求，将摄像头记录的视频直接展示在终端界面上，不经过中转服务器，也不对视频数据作其他处理。
本实施例提供的数据管理系统，通过数据采集设备采集至少一种类型的数据，服务器与数据采集设备连接，接收至少一种类型的数据，并按类型将数据分别存储至数据库中，请求终端与服务器通信连接，向服务器发送数据获取请求，服务器基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据，请求终端接收目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上。可以采用统一的系统获取不同管理范围的数据，提高了数据获取的效率，并有效地管理能源资源。
实施例二
图3是本发明实施例二提供的一种数据管理系统的示意图。本实施例在上述实施例的基础上，对上述实施例的服务器组成进行了细化，能够对获取到的不同类型的数据存储至不同数据库中，而且在接收到请求终端发送的数据获取请求时，可以从对应数据库中获取目标数据。本发明实施例与上述实施例提供的数据管理系统属于同一发明构思，未详尽描述的技术细节可参见上述实施例，且具备相同的技术效果。
如图3所示，本实施例提供的数据管理系统，包括：
消息队列210，用于接收至少一种类型的数据；
主数据库220，用于在程序监听到消息队列中至少一种类型的数据时，对程序监听到的数据按类型进行存储；
从数据库230，用于在主数据库对数据进行存储后，基于主数据库存储的数据进行数据存储；
非关系型数据库240，用于将预设时间内，从与数据获取请求对应的数据库中，获取的目标数据进行缓存；
反向代理服务器250，与请求终端通信连接，用于接收数据获取请求，将数据获取请求转发至路由网关；
路由网关260，与反向代理服务器通信连接，用于在接收到反向代理服务器转发过来的数据获取请求时，动态拉取注册中心和配置中心的服务列表，基于配置的转发规则，将数据获取请求转发到集群服务器中；
集群服务器270，与路由网关通信连接，用于接收路由网关转发过来的数据获取请求，从与数据获取请求对应的数据库中，获取目标数据，并将获取的目标数据返回至请求终端；
其中，集群服务器通过服务间调用组件实现服务通信。
具体的，本实施例提供的数据管理系统管理过程如下：
当数据采集设备为能源数据采集设备时，消息队列接收供能数据采集设备和/或耗能数据采集设备采集的能源数据，可选的，可以是接收能源数据处理中心处理后的供能数据和/或耗能数据；当数据采集设备为民生数据采集设备时，消息队列接收民生数据采集设备采集的民生数据，可选的，消息队列可以接收中专服务器发送的民生数据。
消息队列接收的数据的格式是由发送数据模块，按照和本发明实施例提供的数据管理系统预先协定好的数据格式，示例性的，可以是Json数据，本发明实施例对消息队列接收的数据格式不作具体限制。
当程序监听到消息队列接收的数据时，将程序监听到的数据根据数据采集设备的标识与该数据采集设备所属的组织ID进行适配，并按数据类型存储到不同的数据库中。
主数据库将程序从消息队列中监听到的数据进行存储后，从数据库存储且备份主数据库存储的数据，程序读数据是通过从数据库，写数据是通过主数据库。
首次接收到数据获取请求，在从数据库读取之后，将数据缓存在非关系型数据库中，可以设置数据缓存在非关系数据库的时间，如果再次接收到的数据获取请求对应得目标数据在预设时间内获取过，则可以从非关系型数据库中直接读取，缓解接口频繁调用。
数据库进行了主从配置，目前一个数据库是写库，两个读库，现了读写分离优化服务性能。
反向代理服务器与请求终端进行通信连接，请求终端通过调用后台APP接口，请求会先发送到反向代理服务器中，反向代理服务器接收到请求终端发送的数据获取请求时，会将该数据获取请求转发到路由网关。
路由网关可以是一台，也可以是多台，本发明实施例对路由网关的数量不作具体限制，任意一台路由网关接收到反向代理服务器转发过来的数据获取请求时，动态拉取注册中心和配置中心的服务列表，为数据获取请求进行服务注册，并配置相关文件，基于配置中心配置的转发规则，将数据获取请求转发到集群服务器的任意服务器。
集群服务器中的服务器接收到路由网关转发过来的数据获取请求时，可以根据数据获取请求对应的数据所属组织、数据类型等从非关系型数据库中获取对应的目标数据，可选的，非关系数据库缓存预设时间段曾经获取过的数据，如果非关系型数据库不包含目标数据，则从数据库中获取数据获取请求对应的目标数据。
可选的，服务器还包括服务健康监控中心，用于在服务之间相互调用时，监听访问是否正常，记录服务调用失败次数等，保证系统正常运行。
图4是数据管理系统的服务器结构示意图，参见图4，请求终端发送数据获取请求，示例性的，请求终端可以是Web端或者手机APP端或者大屏显示端，请求终端调用后台APP接口，数据获取请求会进入到反向代理服务器中Nginx中，然后Nginx会将请求通过转发到任意一台得路由网关中，路网关会动态拉取注册中心和配置中心的服务列表，然后会根据路由网关中配置得转发规则，将数据获取请求转发到特定的集群服务器中，根据算法决定调用哪一台服务器，通过调用对应服务器从数据库或关系型数据库中获取目标数据，然后将获取的目标数据返回至请求终端，集群服务器可以通过openFeign实现服务通信，服务健康监控中心用于服务间调用时，监听访问是否正常。
参见图4，数据采集设备采集的数据发送至消息队列，服务器监听到消息的数据时，通过数据绑定、组织ID适配，根据数据类型将数据存储到主数据库中，同时将存储的数据同步到从数据库。
本实施例提供的数据管理系统的服务器，通过队列接收至少一种类型的数据，利用主数据库，在程序监听到消息队列中至少一种类型的数据时，对程序监听到的数据按类型进行存储，利用从数据库，用于在主数据库对数据进行存储后，基于主数据库存储的数据进行数据存储，利用非关系型数据库，将预设时间内，从与数据获取请求对应的数据库中，获取的目标数据进行缓存。通过反向代理服务器与请求终端通信连接，接收数据获取请求，将数据获取请求转发至路由网关，路由网关在接收到反向代理服务器转发过来的数据获取请求时，动态拉取注册中心和配置中心的服务列表，基于配置的转发规则，将数据获取请求转发到集群服务器中，集群服务器，接收路由网关转发过来的数据获取请求，从与数据获取请求对应的数据库中，获取目标数据，并将获取的目标数据返回至所述请求终端，能够对获取到的不同类型的数据存储至不同数据库中，而且在接收到请求终端发送的数据获取请求时，可以从对应数据库中获取目标数据。
实施例三
图5是本发明实施例三提供的一种数据管理方法的流程示意图。本发明实施例提供的数据管理方法适用于对获取的不同地方、不同类型的数据进行管理的情况，尤其适用于乡村对获取的不同数据进行智慧管理的情况。该方法可以由本发明实施例提供的数据管理系统来执行，该数据管理系统配置有本发明上述各实施例提供的服务器。
如图5所示，本实施例提供的数据管理方法包括：
S310、接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中。
供能数据采集设备、耗能数据采集设备和/或民生数据采集设备将采集到的数据发送至服务器，服务器接收到数据采集设备采集的不同类型的数据时，根据不同数据的类型分别存储在数据库中，可以根据不同类型存储在同一数据库中，也可以存储在不同数据库中。
可选的，服务器对接收的至少一种类型的数据分别进行处理，并按类型将处理后的数据可以分别存储至不同数据库中，也可以存储在同一数据库的不同数据库表中。
服务器接收到数据时，对于不同类型的数据，根据展示需求，有的需要根据类型进行处理后才能进行存储，数据处理可以是对某个区域或组织的个体数据进行统计、分析等，本发明实施例对服务器进行数据处理的方式不作具体限制。
可选的，服务器可以不做数据处理，数据采集设备将采集的数据发送至特定的数据处理中心，数据处理中心将数据处理后再发送至服务器。
可选的，类型为能源类型时，能源采集设备将采集的能源可以发送至大数据处理中心，大数据处理中心对接收的能源数据进行分析、预测及包装，其中，数据包装是指将数据处理成可以发送并使接收端可以识别的数据格式。
可选的，类型为民生类型时，示例性的，民生数据采集设备为空气检测设备、水质检测设备、产业订单管理设备、景点游客管理设备或垃圾分类统计设备时，可以将采集的民生数据，首先发送至中转服务器，中转服务器对数据进行提取、整理，再发送至消息队列，在程序监听到消息队列的数据时，服务器根据不同数据类型将接收到的数据存储在数据库中。
S320、接收数据终端发送的数据获取请求，基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据。
请求终端向服务器发送数据获取请求，服务器接收到请求终端发送的数据获取请求时，根据数据请求从对应的数据库中获取存储的目标数据，将获取的目标数据经过逻辑运算及API包装，其中，目标数据是指数据获取请求中包含的需要获取的数据。
可选的，服务器可以是从数据库中读取目标数据，也可以在预设时间内从非关系型数据库中读取缓存的数据作为目标数据，基于数据获取请求读取数据之后，将预设时间内读取的数据缓存在非关系型数据库中，如果数据获取请求在预设时间内再次发送过来，则可以从非关系型数据库中直接读取对应的数据即可。
S330、将目标数据发送至请求终端，以使请求终端接收目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上。
服务器将获取到的经过逻辑运算及API包装后的目标数据返回请求终端，请求终端接收服务器返回的目标数据，对于不同的目标数据，预先设置不同的展示形式，将目标数据以预设展示形式展示在终端的展示界面上。示例性的，预设展示形式可以是数字、图像、文字、视频、统计表、图形等，本发明实施例对预设展示形式不作具体限制。
本实施例提供的数据管理方法，通过接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中，接收数据终端发送的数据获取请求，基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据，接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至不同数据库中，将目标数据发送至请求终端，以使请求终端接收目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上，能够获取不同管理范围的数据，提高了数据获取的效率，并有效地管理能源资源。
实施例四
本发明实施例四还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本申请任意实施例提供的数据管理方法，该方法包括：
接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中；
接收数据终端发送的数据获取请求，基于数据获取请求，从与数据获取请求对应的数据库中，获取目标数据；
将所述目标数据发送至请求终端，以使请求终端接收目标数据，并基于目标数据对应的预设展示形式，将目标数据展示于终端界面上。
当然，本发明实施例所提供的一种计算机可读存储介质，其上存储的计算机程序不限于如上的方法指令，还可以执行本发明任一实施例所提供的数据管理方法。
本发明实施例的计算机存储介质，可以选择一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的装置、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行装置、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以选择多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行装置、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明指令的计算机程序代码，程序设计语言包括面向对象的程序设计语言诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络包括局域网(LAN)或广域网(WAN)连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。
Claims (10)
1.一种数据管理系统，其特征在于，包括：
数据采集设备，用于采集至少一种类型的数据；
服务器，与所述数据采集设备连接，用于接收所述至少一种类型的数据，并按类型将数据分别存储至数据库中；
请求终端，与所述服务器通信连接，用于向所述服务器发送数据获取请求；
相应的，所述服务器还用以基于所述数据获取请求，从与所述数据获取请求对应的数据库中，获取目标数据；
所述请求终端，还用于接收所述目标数据，并基于所述目标数据对应的预设展示形式，将所述目标数据展示于终端界面上。
2.根据权利要求1所述的系统，其特征在于，所述类型为能源类型时，所述数据采集设备，包括：
供能数据采集设备，与下述至少一种供能设备连接：电源变魔方、微电网魔方、热水源魔方、地源热魔方、生物质魔方、氢能源魔方、集中光伏设备、集中风电设备和集中储能设备，用于采集所述供能设备的供能数据；和/或，
耗能数据采集设备，与下述至少一个区域的计量表连接：民宿区域、民宅区域、公建区域、产业区域和设施区域，用于采集所述计量表记录的耗能数据。
3.根据权利要求1所述的系统，其特征在于，所述类型为民生类型时，所述数据采集设备，包括下述至少一种：空气检测设备、水质检测设备、安防设备、垃圾分类统计设备、景点游客管理设备和产业订单管理设备。
4.根据权利要求3所述的系统，其特征在于，所述数据采集设备为安防设备时，所述请求终端，还与所述安防设备通信连接，用于接收所述安防设备采集的视频数据，并将所述视频数据展示于终端界面上。
5.根据权利要求1所述的系统，其特征在于，所述服务器，还用于：
对接收的至少一种类型的数据分别进行处理，并按类型将处理后的数据分别存储至不同数据库表中。
6.根据权利要求1所述的系统，其特征在于，所述服务器，包括：
消息队列，用于接收所述至少一种类型的数据；
主数据库，用于在程序监听到所述消息队列中至少一种类型的数据时，对所述程序监听到的数据按类型进行存储；
从数据库，用于在所述主数据库对所述数据进行存储后，基于所述主数据库存储的数据进行数据存储；
非关系型数据库，用于将预设时间内，从与所述数据获取请求对应的数据库中，获取的所述目标数据进行缓存。
7.根据权利要求1所述的系统，其特征在于，所述服务器，包括：
反向代理服务器，与所述请求终端通信连接，用于接收所述数据获取请求，将所述数据获取请求转发至路由网关；
路由网关，与所述反向代理服务器通信连接，用于在接收到所述反向代理服务器转发过来的所述数据获取请求时，动态拉取注册中心和配置中心的服务列表，基于配置的转发规则，将所述数据获取请求转发到集群服务器中；
集群服务器，与所述路由网关通信连接，用于接收所述路由网关转发过来的所述数据获取请求，从与所述数据获取请求对应的数据库中，获取所述目标数据，并将所述获取的目标数据返回至所述请求终端；
其中，所述集群服务器通过服务间调用组件实现服务通信。
8.根据权利要求1所述系统，其特征在于，所述预设展示形式，包括下述至少一项：数字、图像、文字、视频、统计表、图形。
9.一种数据管理方法，其特征在于，包括：
接收到数据采集设备发送的至少一种类型的数据时，按类型将数据分别存储至数据库中；
接收数据终端发送的数据获取请求，基于所述数据获取请求，从与所述数据获取请求对应的数据库中，获取目标数据；
将所述目标数据发送至请求终端，以使所述请求终端接收所述目标数据，并基于所述目标数据对应的预设展示形式，将所述目标数据展示于终端界面上。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求9中所述的数据管理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010962091.2A CN111949638A (zh) | 2020-09-14 | 2020-09-14 | 一种数据管理系统、方法及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010962091.2A CN111949638A (zh) | 2020-09-14 | 2020-09-14 | 一种数据管理系统、方法及存储介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN111949638A true CN111949638A (zh) | 2020-11-17 |
Family
ID=73357254
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010962091.2A Pending CN111949638A (zh) | 2020-09-14 | 2020-09-14 | 一种数据管理系统、方法及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111949638A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114612730A (zh) * | 2022-04-06 | 2022-06-10 | 哈尔滨工业大学 | 生活垃圾分类产生比例的检测方法及装置 |
| CN114629729A (zh) * | 2022-05-16 | 2022-06-14 | 中国雄安集团数字城市科技有限公司 | 一种多表集抄系统、方法、电子设备及存储介质 |
| CN115344620A (zh) * | 2022-10-19 | 2022-11-15 | 成都中科合迅科技有限公司 | 自定义数据池实现前后端分离后数据按需同步方法 |
| CN115481166A (zh) * | 2022-08-08 | 2022-12-16 | 北京永信至诚科技股份有限公司 | 一种数据存储方法、装置、电子设备及计算机存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103283209A (zh) * | 2011-04-18 | 2013-09-04 | 北京新媒传信科技有限公司 | 一种应用服务平台系统及其实现方法 |
| CN107086950A (zh) * | 2017-03-08 | 2017-08-22 | 徐州医科大学 | 一种基于Dijkstra算法的大型即时通信系统的实现方法 |
| CN108959569A (zh) * | 2018-07-04 | 2018-12-07 | 深圳市博安达信息技术股份有限公司 | 一种实验室监测业务多级管理系统 |
| CN109710660A (zh) * | 2018-12-18 | 2019-05-03 | 武汉烽火众智数字技术有限责任公司 | 一种景区数据管理系统及方法 |
| CN110008226A (zh) * | 2019-04-03 | 2019-07-12 | 平安信托有限责任公司 | 数据模型的构建方法、装置、计算机设备和存储介质 |
-
2020
- 2020-09-14 CN CN202010962091.2A patent/CN111949638A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103283209A (zh) * | 2011-04-18 | 2013-09-04 | 北京新媒传信科技有限公司 | 一种应用服务平台系统及其实现方法 |
| CN107086950A (zh) * | 2017-03-08 | 2017-08-22 | 徐州医科大学 | 一种基于Dijkstra算法的大型即时通信系统的实现方法 |
| CN108959569A (zh) * | 2018-07-04 | 2018-12-07 | 深圳市博安达信息技术股份有限公司 | 一种实验室监测业务多级管理系统 |
| CN109710660A (zh) * | 2018-12-18 | 2019-05-03 | 武汉烽火众智数字技术有限责任公司 | 一种景区数据管理系统及方法 |
| CN110008226A (zh) * | 2019-04-03 | 2019-07-12 | 平安信托有限责任公司 | 数据模型的构建方法、装置、计算机设备和存储介质 |
Non-Patent Citations (2)
| Title |
|---|
| UCLOUD技术: "容器云平台、灰度发布系统、微服务网关的高可用实践", pages 1 - 8, Retrieved from the Internet <URL:https://mp.weixin.qq.com/s/_8NJuQde5mT7TILIDvv-cQ> * |
| 周小西ZXX: "spring-cloud微服务(5) nginx", Retrieved from the Internet <URL:https://blog.csdn.net/zhouben12/article/details/107412915> * |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114612730A (zh) * | 2022-04-06 | 2022-06-10 | 哈尔滨工业大学 | 生活垃圾分类产生比例的检测方法及装置 |
| CN114612730B (zh) * | 2022-04-06 | 2023-08-29 | 哈尔滨工业大学 | 生活垃圾分类产生比例的检测方法及装置 |
| CN114629729A (zh) * | 2022-05-16 | 2022-06-14 | 中国雄安集团数字城市科技有限公司 | 一种多表集抄系统、方法、电子设备及存储介质 |
| CN115481166A (zh) * | 2022-08-08 | 2022-12-16 | 北京永信至诚科技股份有限公司 | 一种数据存储方法、装置、电子设备及计算机存储介质 |
| CN115481166B (zh) * | 2022-08-08 | 2024-06-18 | 永信至诚科技集团股份有限公司 | 一种数据存储方法、装置、电子设备及计算机存储介质 |
| CN115344620A (zh) * | 2022-10-19 | 2022-11-15 | 成都中科合迅科技有限公司 | 自定义数据池实现前后端分离后数据按需同步方法 |
| CN115344620B (zh) * | 2022-10-19 | 2023-01-06 | 成都中科合迅科技有限公司 | 自定义数据池实现前后端分离后数据按需同步方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111949638A (zh) | 一种数据管理系统、方法及存储介质 | |
| US10652633B2 (en) | Integrated solutions of Internet of Things and smart grid network pertaining to communication, data and asset serialization, and data modeling algorithms | |
| Ahlgren et al. | Internet of things for smart cities: Interoperability and open data | |
| CN109547538A (zh) | 基于物联网技术的配电设备状态监测系统及实现方法 | |
| CN104216989A (zh) | 一种基于HBase的输电线路综合数据存储方法 | |
| CN109361577B (zh) | 一种基于分布式传感器的数据监测方法和系统 | |
| CN102969796B (zh) | 一种农网近实时电量监测与调度管理系统 | |
| CN212302477U (zh) | 一种数据管理系统 | |
| CN105447766A (zh) | 一种基于gis的三维电网气象信息全景展示方法及其系统 | |
| CN107221129B (zh) | 一种用于地质灾害及气象预警的线上预警系统 | |
| CN107424079A (zh) | 一种基于大数据平台的大型建筑能耗管理系统及方法 | |
| CN113849553A (zh) | 基于物联网设备数据采集的变电站数据采集与处理方法和系统 | |
| Liu et al. | Cloud, edge, and mobile computing for smart cities | |
| WO2016081628A1 (en) | System and method for aggregating and analyzing data and creating a spatial and/or non-spatial graphical display based on the aggregated data | |
| CN109656905A (zh) | 一种电网气象灾害数据的处理方法、装置及共享系统 | |
| Li et al. | Research on power energy load forecasting method based on KNN | |
| CN113301131A (zh) | 一种基于mqtt通信协议的智慧空间开发方法及系统 | |
| CN112766671A (zh) | 一种智慧社区数据监测系统 | |
| CN109523115A (zh) | 一种基于用电数据的分析系统 | |
| CN210109810U (zh) | 一种气象应用支撑系统 | |
| CN2840193Y (zh) | 三维全景地理信息指示系统 | |
| Kalaitzakis et al. | Building a smart city ecosystem for third party innovation in the city of Heraklion | |
| CN102761570A (zh) | 基于代理的网格资源监控系统及监控方法 | |
| CN207148246U (zh) | 一种分布式电源接入的电能质量监测系统 | |
| Ngoc et al. | An ESB based micro-scale urban air quality monitoring system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information | ||
| CB02 | Change of applicant information |
Address after: 201600 building 6, No. 901, Xinge Road, Xinqiao Town, Songjiang District, Shanghai Applicant after: Shanghai Yuzhang Electric Co.,Ltd. Address before: 201612 building 7 and 8, no.800, Jindu West Road, Xinqiao Town, Songjiang District, Shanghai Applicant before: SHANGHAI REGEON ELECTRIC Co.,Ltd. |