CN105282189A - 一种应用于大并发量数据环境下的安全数据存储方法 - Google Patents

一种应用于大并发量数据环境下的安全数据存储方法 Download PDF

Info

Publication number
CN105282189A
CN105282189A CN201410261417.3A CN201410261417A CN105282189A CN 105282189 A CN105282189 A CN 105282189A CN 201410261417 A CN201410261417 A CN 201410261417A CN 105282189 A CN105282189 A CN 105282189A
Authority
CN
China
Prior art keywords
data
server
wed
database
database server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410261417.3A
Other languages
English (en)
Inventor
傅涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Datai Information Technology Co Ltd
Original Assignee
Jiangsu Datai Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Datai Information Technology Co Ltd filed Critical Jiangsu Datai Information Technology Co Ltd
Priority to CN201410261417.3A priority Critical patent/CN105282189A/zh
Publication of CN105282189A publication Critical patent/CN105282189A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

一种应用于大并发量数据环境下的安全数据存储方法,它涉及安全数据存储方法技术领域。它的存储方法为:(一)网页内容发布解析时,生成静态的网页,发布Wed服务器上;(二)Wed服务器通过网路连接数据库服务器及多个量测仪器;(三)该Wed服务器根据所存储的路由发送采集指令给量测仪器,该路由即为数据采集与监视控制器和量测仪器上一次通信所使用的路由;(四)该量测仪器将采集到的数据反馈给Wed服务器;(五)当连接Wed服务器和数据库服务器的第一网路正常工作时,发送所述数据至数据库服务器中进行保存。它可以及时纠正与更换数据传送路由,确保数据能够存储于数据库服务器中,可以有效的保证存储信息的安全性。

Description

一种应用于大并发量数据环境下的安全数据存储方法
技术领域:
本发明涉及安全数据存储方法技术领域,尤其涉及一种应用于大并发量数据环境下的安全数据存储方法。
背景技术:
并发量数据是在操作系统中,是指一个时间段中有几个程序都处于已启动运行到运行完毕之间,且这几个程序都是在同一个处理机上运行,但任一个时刻点上只有一个程序在处理机上运行。在关系数据库中,允许多个用户同时访问和更改共享数据的进程,SQLServer使用锁定以允许多个用户同时访问和更改共享数据而彼此之间不发生冲突。
并发环境下,由于程序的封闭性被打破,出现了新的特点:(1)程序与计算不再一一对应,一个程序副本可以有多个计算;(2)并发程序之间有相互制约关系,直接制约体现为一个程序需要另一个程序的计算结果,间接制约体现为多个程序竞争某一资源,如处理机、缓冲区等;(3)并发程序在执行中是走走停停,断续推进的。而大并发量数据环境下的安全数据的存储却是一直是个难题。
一个小型的网站,比如个人网站,可以使用最简单的html静态页面就实现了,配合一些图片达到美化效果,所有的页面均存放在一个目录下,这样的网站对系统架构、性能的要求都很简单,随着互联网业务的不断丰富,网站相关的技术经过这些年的发展,已经细分到很细的方方面面,尤其对于大型网站来说,所采用的技术更是涉及面非常广,从硬件到软件、编程语言、数据库、WebServer、防火墙等各个领域都有了很高的要求,已经不是原来简单的html静态网站所能比拟的。大型网站,比如门户网站,在面对大量用户访问、高并发请求方面,基本的解决方案集中在这样几个环节:使用高性能的服务器、高性能的数据库、高效率的编程语言、还有高性能的Web容器。但是除了这几个方面,还没法根本解决大型网站面临的高负载和高并发数据的存储问题。
发明内容:
本发明的目的是提供一种应用于大并发量数据环境下的安全数据存储方法,它可以及时纠正与更换数据传送路由,确保数据能够存储于数据库服务器中,可以有效的保证存储信息的安全性。
为了解决背景技术所存在的问题,本发明是采用以下技术方案:它的存储方法为:
(一)、首先将不同类型的网页内容进行统一的数据库存储,对于通用网页属性按数据库字段进行单独存储,对于具有模板的网页,把网页内容按网页模板的所有组件打包存放在自定义组件内容字段,各组件名与组件值对应,将组件中需要搜索的内容抽取并单独存放在索引字段,索引字段包含组件名与组件值;
(二)、网页内容发布解析时,生成静态的网页,发布Wed服务器上;
(三)、Wed服务器通过网路连接数据库服务器及多个量测仪器;
(四)、该Wed服务器根据所存储的路由发送采集指令给量测仪器,该路由即为数据采集与监视控制器和量测仪器上一次通信所使用的路由;
(五)、该量测仪器将采集到的数据反馈给Wed服务器;
(六)、当连接Wed服务器和数据库服务器的第一网路正常工作时,发送所述数据至数据库服务器中进行保存;
(七)、当第一网路工作异常时,将该数据暂存于Wed服务器的历史记录文档中;
(八)、每隔一定时间检测第一网络是否工作正常及当检测到该第一网络工作正常时,从历史记录文档中获取数据并发送至所述数据库服务器进行保存。
本发明可以及时纠正与更换数据传送路由,确保数据能够存储于数据库服务器中,可以有效的保证存储信息的安全性。
具体实施方式:
本具体实施方式采用以下技术方案:它的存储方法为:
(一)、首先将不同类型的网页内容进行统一的数据库存储,对于通用网页属性按数据库字段进行单独存储,对于具有模板的网页,把网页内容按网页模板的所有组件打包存放在自定义组件内容字段,各组件名与组件值对应,将组件中需要搜索的内容抽取并单独存放在索引字段,索引字段包含组件名与组件值;
(二)、网页内容发布解析时,生成静态的网页,发布Wed服务器上;
(三)、Wed服务器通过网路连接数据库服务器及多个量测仪器;
(四)、该Wed服务器根据所存储的路由发送采集指令给量测仪器,该路由即为数据采集与监视控制器和量测仪器上一次通信所使用的路由;
(五)、该量测仪器将采集到的数据反馈给Wed服务器;
(六)、当连接Wed服务器和数据库服务器的第一网路正常工作时,发送所述数据至数据库服务器中进行保存;
(七)、当第一网路工作异常时,将该数据暂存于Wed服务器的历史记录文档中;
(八)、每隔一定时间检测第一网络是否工作正常及当检测到该第一网络工作正常时,从历史记录文档中获取数据并发送至所述数据库服务器进行保存。
本具体实施方式可以及时纠正与更换数据传送路由,确保数据能够存储于数据库服务器中,可以有效的保证存储信息的安全性。

Claims (1)

1.一种应用于大并发量数据环境下的安全数据存储方法,其特征在于它的存储方法为:
(一)、首先将不同类型的网页内容进行统一的数据库存储,对于通用网页属性按数据库字段进行单独存储,对于具有模板的网页,把网页内容按网页模板的所有组件打包存放在自定义组件内容字段,各组件名与组件值对应,将组件中需要搜索的内容抽取并单独存放在索引字段,索引字段包含组件名与组件值;
(二)、网页内容发布解析时,生成静态的网页,发布Wed服务器上;
(三)、Wed服务器通过网路连接数据库服务器及多个量测仪器;
(四)、该Wed服务器根据所存储的路由发送采集指令给量测仪器,该路由即为数据采集与监视控制器和量测仪器上一次通信所使用的路由;
(五)、该量测仪器将采集到的数据反馈给Wed服务器;
(六)、当连接Wed服务器和数据库服务器的第一网路正常工作时,发送所述数据至数据库服务器中进行保存;
(七)、当第一网路工作异常时,将该数据暂存于Wed服务器的历史记录文档中;
(八)、每隔一定时间检测第一网络是否工作正常及当检测到该第一网络工作正常时,从历史记录文档中获取数据并发送至所述数据库服务器进行保存。
CN201410261417.3A 2014-06-10 2014-06-10 一种应用于大并发量数据环境下的安全数据存储方法 Pending CN105282189A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410261417.3A CN105282189A (zh) 2014-06-10 2014-06-10 一种应用于大并发量数据环境下的安全数据存储方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410261417.3A CN105282189A (zh) 2014-06-10 2014-06-10 一种应用于大并发量数据环境下的安全数据存储方法

Publications (1)

Publication Number Publication Date
CN105282189A true CN105282189A (zh) 2016-01-27

Family

ID=55150513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410261417.3A Pending CN105282189A (zh) 2014-06-10 2014-06-10 一种应用于大并发量数据环境下的安全数据存储方法

Country Status (1)

Country Link
CN (1) CN105282189A (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771594A (zh) * 2008-12-31 2010-07-07 鸿富锦精密工业(深圳)有限公司 数据存储系统及方法
CN101976261A (zh) * 2010-11-04 2011-02-16 上海银杏界信息科技有限公司 网页数据存储与搜索方法
US20120221826A1 (en) * 2009-10-05 2012-08-30 Seagate Technology Llc Data management in a data storage system
CN103246696A (zh) * 2013-03-21 2013-08-14 宁波公众信息产业有限公司 高并发数据库的访问方法及应用于多服务器系统的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101771594A (zh) * 2008-12-31 2010-07-07 鸿富锦精密工业(深圳)有限公司 数据存储系统及方法
US20120221826A1 (en) * 2009-10-05 2012-08-30 Seagate Technology Llc Data management in a data storage system
CN101976261A (zh) * 2010-11-04 2011-02-16 上海银杏界信息科技有限公司 网页数据存储与搜索方法
CN103246696A (zh) * 2013-03-21 2013-08-14 宁波公众信息产业有限公司 高并发数据库的访问方法及应用于多服务器系统的方法

Similar Documents

Publication Publication Date Title
US9767197B1 (en) Datacenter operations using search and analytics
JP2016189214A5 (zh)
US20120197914A1 (en) Dynamic Parsing Rules
KR101764674B1 (ko) 침해 자원에 대한 그래프 데이터베이스 생성 방법 및 그 장치
CN103338135A (zh) 一种集群存储容量的实时监控方法
CN102915344B (zh) 一种sql语句处理方法及装置
US20180107722A1 (en) Managing queries in business intelligence platforms
CN106471501A (zh) 数据查询的方法、数据对象的存储方法和数据系统
CN102279891A (zh) 一种并行搜索it日志的检索方法、装置及系统
CN105320711B (zh) 巨量数据存取方法以及使用该方法的系统
WO2015196885A1 (zh) 云计算系统的性能数据的采集与存储方法及装置
CN105930354B (zh) 存储模型转换方法和装置
CN108287876B (zh) 支持多种格式的电能质量数据服务质量检测方法和装置
Kang et al. Reducing i/o cost in olap query processing with mapreduce
US20140359742A1 (en) Apparatus and Method for Agent Based Ingestion of Data
CN105574027A (zh) 基于oltp/olap混合应用下多维度性能数据存储方法、装置及系统
CN105282189A (zh) 一种应用于大并发量数据环境下的安全数据存储方法
Qi et al. STPA for learning-enabled systems: A survey and a new method
WO2020200404A1 (en) Method and query module for querying industrial data
Shuijing Big data analytics: Key technologies and challenges
CN106775935B (zh) 解释型语言的解析方法及其装置和计算机系统
CN103841184B (zh) 电子政务内网网站监管方法
CN104394222A (zh) 一种云存储系统及方法
CN104750709A (zh) 一种语义检索方法及系统
Bai et al. Design and Implementation of Sensory Data Collection and Storage Based on Hadoop Platform

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160127