CN111723068A - 一种考试资源云端储存自动化处理系统 - Google Patents
一种考试资源云端储存自动化处理系统 Download PDFInfo
- Publication number
- CN111723068A CN111723068A CN201910205427.8A CN201910205427A CN111723068A CN 111723068 A CN111723068 A CN 111723068A CN 201910205427 A CN201910205427 A CN 201910205427A CN 111723068 A CN111723068 A CN 111723068A
- Authority
- CN
- China
- Prior art keywords
- data
- module
- file
- storage
- cloud storage
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 36
- 238000000926 separation method Methods 0.000 claims abstract description 13
- 238000013523 data management Methods 0.000 claims abstract description 10
- 238000007726 management method Methods 0.000 claims description 35
- 238000000034 method Methods 0.000 claims description 19
- 230000008569 process Effects 0.000 claims description 14
- 238000013500 data storage Methods 0.000 claims description 9
- 238000012423 maintenance Methods 0.000 claims description 5
- 238000006243 chemical reaction Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 4
- 230000007246 mechanism Effects 0.000 abstract description 3
- 239000013589 supplement Substances 0.000 abstract description 3
- 230000009471 action Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000009434 installation Methods 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operation
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1446—Point-in-time backing up or restoration of persistent data
- G06F11/1458—Management of the backup or restore process
- G06F11/1464—Management of the backup or restore process for networked environments
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明涉及教学系统技术领域,且公开了一种考试资源云端储存自动化处理系统,包括客户端,所述客户端的输出端连接有数据上传服务端,数据上传服务端的输出端连接有数据处理模块,数据处理模块的输出端连接有数据管理模块,数据管理模块的输出端连接有数据分离模块,数据分离模块的输出端连接有图片存储模块和文字存储模块。该考试资源云端储存自动化处理系统,利用备份模块进行备份,避免文件数据过大,使得系统出现停顿的情况,且备份数据可以自动补充备份故障节点的数据,同时系统内部实现数据的完整性校验机制,在节点扩容时,系统保有数据可自动迁移,保证各个节点空间的平均利用与负载均衡,达到上传文件的作用。
Description
技术领域
本发明涉及教学系统技术领域,具体为一种考试资源云端储存自动化处理系统。
背景技术
云端储存是指云端运算架构中的储存部分,从底层的IaaS、中层PaaS到顶层SaaS都可以看到其身影,其中尤以底层储存资源的网路服务化最为重要,或许可以简单地说,云端储存就是储存即服务的意思,指通过集群应用、网格技术或分布式文件系统等功能,将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作,共同对外提供数据存储和业务访问功能的系统。
考试资源及试题库,按照不同的学科门类以及其内在联系,将不同的试题分门别类地汇集起来,为特定学科知识和技能测试提供备选试题的一种系统资源,主要在各大校区运用,用于教育,考试资源对与每个校园来说都是相当重要的,为此校园内的负责人对于考试资源之类的文件都是严格存放在计算机中的,但是随着这科技的发展,计算机内的文件也不在隐秘,可能存在丢失的情况,而且考试资源文件数据每个一端时间都会进行更新,并添加新的文件,使得考试资源数据更加庞大,导致文件不便于查找,为此我们提出了一种考试资源云端储存自动化处理系统。
发明内容
针对现有技术的不足,本发明提供了一种考试资源云端储存自动化处理系统,具备文件便于上传和查看以及下载的优点,解决了计算机内的文件也不在隐秘,可能存在丢失的情况,而且考试资源文件数据每个一端时间都会进行更新,并添加新的文件,使得考试资源数据更加庞大,导致文件不便于查找的问题。
本发明提供如下技术方案:一种考试资源云端储存自动化处理系统,包括客户端,所述客户端的输出端连接有数据上传服务端,所述数据上传服务端的输出端连接有数据处理模块,所述数据处理模块的输出端连接有数据管理模块,所述数据管理模块的输出端连接有数据分离模块,所述数据分离模块的输出端连接有图片存储模块和文字存储模块,所述图片存储模块和文字存储模块的输出端均连接有资源管理系统,所述资源管理系统的输出端连接有云端存储系统,所述云端存储系统的输出端和输入端均连接有业务系统,所述业务系统的输出端和输入端均连接有数据下载服务器,所述数据下载服务器的输出端连接和输入端均与客户端的输出端和输入端连接。
优选的,所述云端存储系统的内部设有分布式文件模块、结构化数据存储模块、对象存储模块、备份模块和数据切块存储模块。
优选的,所述分布式文件模块的内部包括有账号管理单元、节点管理单元、运维管理单元、告警管理单元和日志管理单元。
优选的,所述业务系统的内部包括有文件访问单元、文件属性单元、目录访问单元、目录属性单元和ACL认证鉴权单元。
优选的,文件云端储存上传处理过程如下:
所述客户端通过数据处理模块将文件上传到数据处理模块,之后利用数据处理模块对进行格式转换,并对格式转换的文件按类别进行分类,接着数据分离模块对文件数据进行分离,将文件中的文字和图片分开存储,然后文件通过资源管理器进入云端存储系统,并通过数据切块存储模块对文件进行切割并分批备份存储,最后存储在相应的模块中,完成文件上传过程。
优选的,文件云端储存查看和下载过程如下:
所述客户端通过数据下载服务器对业务系统进行查看,利用目录访问单元和文件访问单元,对云端存储系统内的文件进行阅览,而云端存储系统内的分布式文件系统向客户提供文件系统形式的服务,客户端通过分布式文件系统使用文件与目录操作、文件访问,以及文件访问控制功能,查看文件,之后通过对象存储模块将文件锁定,接着结构化数据存储模块将选中的文件复制,并通过业务系统将云端存储系统内复制的文件导出,最后文件利用数据下载服务器传递到客户端,完成下载过程。
与现有技术对比,本发明具备以下有益效果:
1、该考试资源云端储存自动化处理系统,通过数据处理模块将文件格式改为系统内文件的格式,避免文件的不兼容,而数据管理系统将文件按类别区分,避免文件混乱,配合数据分离模块将文件中的图片和文字进行分离,从而使得文件中图片和文字得到识别,避免两者交织影响系统的判断,从而提高文件的识别度,再利用资源管理系统,将文件管理并传递到云端存储系统中,而数据切块存储模块将文件进行切块处理,并利用备份模块进行备份,避免文件数据过大,使得系统出现停顿的情况,且备份数据可以自动补充备份故障节点的数据,同时系统内部实现数据的完整性校验机制,在节点扩容时,系统保有数据可自动迁移,保证各个节点空间的平均利用与负载均衡,达到上传文件的作用。
2、该考试资源云端储存自动化处理系统,通过分布式文件系统自带系统管理平台,负责对整个分布式文件系统提供自有的系统管理功能,以及安装配置等辅助工具,包含账号管理、节点管理、运维监控、告警管理和日志管理等功能模块,并向客户提供文件系统形式的服务,客户应用可以挂载并使用文件系统,文件系统具有文件与目录操作、文件访问以及文件访问控制功能,而业务系统具有文件、目录、用户权限相关的具体功能,具体包含文件访问、文件属性、目录访问、目录属性、ACL认证鉴权等业务模块,可对用户的身份进行认证,确认访问用户的身份,完成认证后基于用户状态、配额和权限进行权限确认,再通过结构化数据存储模块,将文件数据进行复制并导出发送到客户端,达到查看和下载文件的作用。
附图说明
图1为本发明结构示意图;
图2为分布式文件模块内部图;
图3为业务系统内部图;
图4为文件上传流程图;
图5为文件查看和下载流程图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1-5,一种考试资源云端储存自动化处理系统,包括客户端,客户端的输出端连接有数据上传服务端,数据上传服务端的输出端连接有数据处理模块,通过数据处理模块将文件格式改为系统内文件的格式,避免文件的不兼容,数据处理模块的输出端连接有数据管理模块,数据管理系统将文件按类别区分,避免文件混乱,数据管理模块的输出端连接有数据分离模块,配合数据分离模块将文件中的图片和文字进行分离,从而使得文件中图片和文字得到识别,避免两者交织影响系统的判断,从而提高文件的识别度,数据分离模块的输出端连接有图片存储模块和文字存储模块,图片存储模块和文字存储模块的输出端均连接有资源管理系统,资源管理系统的输出端连接有云端存储系统,云端存储系统的输出端和输入端均连接有业务系统,业务系统的输出端和输入端均连接有数据下载服务器,数据下载服务器的输出端连接和输入端均与客户端的输出端和输入端连接,云端存储系统的内部设有分布式文件模块、结构化数据存储模块、对象存储模块、备份模块和数据切块存储模块,用资源管理系统,将文件管理并传递到云端存储系统中,而数据切块存储模块将文件进行切块处理,并利用备份模块进行备份,避免文件数据过大,使得系统出现停顿的情况,且备份数据可以自动补充备份故障节点的数据,同时系统内部实现数据的完整性校验机制,在节点扩容时,系统保有数据可自动迁移,保证各个节点空间的平均利用与负载均衡,达到上传文件的作用。分布式文件模块的内部包括有账号管理单元、节点管理单元、运维管理单元、告警管理单元和日志管理单元,业务系统的内部包括有文件访问单元、文件属性单元、目录访问单元、目录属性单元和ACL认证鉴权单元,通过分布式文件系统自带系统管理平台,负责对整个分布式文件系统提供自有的系统管理功能,以及安装配置等辅助工具,包含账号管理、节点管理、运维监控、告警管理和日志管理等功能模块,并向客户提供文件系统形式的服务,客户应用可以挂载并使用文件系统,文件系统具有文件与目录操作、文件访问以及文件访问控制功能,而业务系统具有文件、目录、用户权限相关的具体功能,具体包含文件访问、文件属性、目录访问、目录属性、ACL认证鉴权等业务模块,可对用户的身份进行认证,确认访问用户的身份,完成认证后基于用户状态、配额和权限进行权限确认,再通过结构化数据存储模块,将文件数据进行复制并导出发送到客户端,达到查看和下载文件的作用;
文件云端储存上传处理过程如下:
客户端通过数据处理模块将文件上传到数据处理模块,之后利用数据处理模块对进行格式转换,并对格式转换的文件按类别进行分类,接着数据分离模块对文件数据进行分离,将文件中的文字和图片分开存储,然后文件通过资源管理器进入云端存储系统,并通过数据切块存储模块对文件进行切割并分批备份存储,最后存储在相应的模块中,完成文件上传过程;
文件云端储存查看和下载过程如下:
客户端通过数据下载服务器对业务系统进行查看,利用目录访问单元和文件访问单元,对云端存储系统内的文件进行阅览,而云端存储系统内的分布式文件系统向客户提供文件系统形式的服务,客户端通过分布式文件系统使用文件与目录操作、文件访问,以及文件访问控制功能,查看文件,之后通过对象存储模块将文件锁定,接着结构化数据存储模块将选中的文件复制,并通过业务系统将云端存储系统内复制的文件导出,最后文件利用数据下载服务器传递到客户端,完成下载过程。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。
Claims (6)
1.一种考试资源云端储存自动化处理系统,包括客户端,其特征在于:所述客户端的输出端连接有数据上传服务端,所述数据上传服务端的输出端连接有数据处理模块,所述数据处理模块的输出端连接有数据管理模块,所述数据管理模块的输出端连接有数据分离模块,所述数据分离模块的输出端连接有图片存储模块和文字存储模块,所述图片存储模块和文字存储模块的输出端均连接有资源管理系统,所述资源管理系统的输出端连接有云端存储系统,所述云端存储系统的输出端和输入端均连接有业务系统,所述业务系统的输出端和输入端均连接有数据下载服务器,所述数据下载服务器的输出端连接和输入端均与客户端的输出端和输入端连接。
2.根据权利要求1所述的一种考试资源云端储存自动化处理系统,其特征在于:所述云端存储系统的内部设有分布式文件模块、结构化数据存储模块、对象存储模块、备份模块和数据切块存储模块。
3.根据权利要求2所述的一种考试资源云端储存自动化处理系统,其特征在于:所述分布式文件模块的内部包括有账号管理单元、节点管理单元、运维管理单元、告警管理单元和日志管理单元。
4.根据权利要求1所述的一种考试资源云端储存自动化处理系统,其特征在于:所述业务系统的内部包括有文件访问单元、文件属性单元、目录访问单元、目录属性单元和ACL认证鉴权单元。
5.根据权利要求1所述的一种考试资源云端储存自动化处理系统的操作方法,文件云端储存上传处理过程如下:
所述客户端通过数据处理模块将文件上传到数据处理模块,之后利用数据处理模块对进行格式转换,并对格式转换的文件按类别进行分类,接着数据分离模块对文件数据进行分离,将文件中的文字和图片分开存储,然后文件通过资源管理器进入云端存储系统,并通过数据切块存储模块对文件进行切割并分批备份存储,最后存储在相应的模块中,完成文件上传过程。
6.根据权利要求1所述的一种考试资源云端储存自动化处理系统的操作方法,文件云端储存查看和下载过程如下:
所述客户端通过数据下载服务器对业务系统进行查看,利用目录访问单元和文件访问单元,对云端存储系统内的文件进行阅览,而云端存储系统内的分布式文件系统向客户提供文件系统形式的服务,客户端通过分布式文件系统使用文件与目录操作、文件访问,以及文件访问控制功能,查看文件,之后通过对象存储模块将文件锁定,接着结构化数据存储模块将选中的文件复制,并通过业务系统将云端存储系统内复制的文件导出,最后文件利用数据下载服务器传递到客户端,完成下载过程。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910205427.8A CN111723068A (zh) | 2019-03-18 | 2019-03-18 | 一种考试资源云端储存自动化处理系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910205427.8A CN111723068A (zh) | 2019-03-18 | 2019-03-18 | 一种考试资源云端储存自动化处理系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111723068A true CN111723068A (zh) | 2020-09-29 |
Family
ID=72563577
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910205427.8A Pending CN111723068A (zh) | 2019-03-18 | 2019-03-18 | 一种考试资源云端储存自动化处理系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111723068A (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103345523A (zh) * | 2013-07-17 | 2013-10-09 | 温州医科大学 | 一种基于云计算的审稿系统 |
CN103379149A (zh) * | 2012-04-19 | 2013-10-30 | 北京智慧风云科技有限公司 | 提供按接收指令处理文件功能的云服务系统 |
CN103516813A (zh) * | 2013-10-22 | 2014-01-15 | 视享信息科技(上海)有限公司 | 多用户在线数据交互云系统 |
CN103780700A (zh) * | 2014-01-26 | 2014-05-07 | 长沙裕邦软件开发有限公司 | 一种实现多源异构系统之间兼容与共享的应用系统和方法 |
CN105357201A (zh) * | 2015-11-12 | 2016-02-24 | 中国科学院信息工程研究所 | 一种对象云存储访问控制方法和系统 |
CN106126526A (zh) * | 2016-06-13 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种数据管理方法及装置 |
CN108173859A (zh) * | 2017-12-29 | 2018-06-15 | 北京星河星云信息技术有限公司 | 文件共享的方法和系统 |
CN108921423A (zh) * | 2018-06-28 | 2018-11-30 | 北京金风科创风电设备有限公司 | 实验管理与数据分析系统 |
CN109145176A (zh) * | 2018-07-27 | 2019-01-04 | 四川曜诚鑫科技有限公司 | 电子文档管理系统 |
CN109284262A (zh) * | 2018-08-30 | 2019-01-29 | 四川曜诚鑫科技有限公司 | 一种企业电子文档管理服务端及系统 |
-
2019
- 2019-03-18 CN CN201910205427.8A patent/CN111723068A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103379149A (zh) * | 2012-04-19 | 2013-10-30 | 北京智慧风云科技有限公司 | 提供按接收指令处理文件功能的云服务系统 |
CN103345523A (zh) * | 2013-07-17 | 2013-10-09 | 温州医科大学 | 一种基于云计算的审稿系统 |
CN103516813A (zh) * | 2013-10-22 | 2014-01-15 | 视享信息科技(上海)有限公司 | 多用户在线数据交互云系统 |
CN103780700A (zh) * | 2014-01-26 | 2014-05-07 | 长沙裕邦软件开发有限公司 | 一种实现多源异构系统之间兼容与共享的应用系统和方法 |
CN105357201A (zh) * | 2015-11-12 | 2016-02-24 | 中国科学院信息工程研究所 | 一种对象云存储访问控制方法和系统 |
CN106126526A (zh) * | 2016-06-13 | 2016-11-16 | 浪潮电子信息产业股份有限公司 | 一种数据管理方法及装置 |
CN108173859A (zh) * | 2017-12-29 | 2018-06-15 | 北京星河星云信息技术有限公司 | 文件共享的方法和系统 |
CN108921423A (zh) * | 2018-06-28 | 2018-11-30 | 北京金风科创风电设备有限公司 | 实验管理与数据分析系统 |
CN109145176A (zh) * | 2018-07-27 | 2019-01-04 | 四川曜诚鑫科技有限公司 | 电子文档管理系统 |
CN109284262A (zh) * | 2018-08-30 | 2019-01-29 | 四川曜诚鑫科技有限公司 | 一种企业电子文档管理服务端及系统 |
Non-Patent Citations (1)
Title |
---|
张仁贤: "《教师信息技术应用手册》", 31 May 2016, 中国轻工业出版社, pages: 134 - 137 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11860895B2 (en) | Selectively replicating changes to hierarchial data structures | |
US10776174B2 (en) | Managing hosted resources across different virtualization platforms | |
CN105900062B (zh) | 用于实现管理式目录服务的系统、介质及计算机实现方法 | |
US10324803B1 (en) | Storage snapshot management | |
US10922303B1 (en) | Early detection of corrupt data partition exports | |
CN111201763B (zh) | 基于文件系统内容的安全性 | |
US10061665B2 (en) | Preserving management services with self-contained metadata through the disaster recovery life cycle | |
EP3767471A1 (en) | Provisioning and managing replicated data instances | |
CN110413595B (zh) | 一种应用于分布式数据库的数据迁移方法和相关装置 | |
US8805849B1 (en) | Enabling use of analytic functions for distributed storage system data | |
DE112012005275T5 (de) | Datenauswahl zur Sicherung von Datenspeichern | |
US10929246B2 (en) | Backup capability for object store used as primary storage | |
CN107220271B (zh) | 一种分布式数字资源存储处理与管理的方法及系统 | |
CN109144785A (zh) | 用于备份数据的方法和装置 | |
CN104410604A (zh) | 实现大规模用户同时登录的SaaS服务系统及其方法 | |
CN114969066A (zh) | 一种基于大数据调控的企业管理数据交互系统及其方法 | |
CN113486095A (zh) | 一种民航空管跨网安全数据交换管理平台 | |
CN111723068A (zh) | 一种考试资源云端储存自动化处理系统 | |
AU2021268828B2 (en) | Secure data replication in distributed data storage environments | |
CN114925044A (zh) | 基于云存储的数据同步方法、装置、设备及存储介质 | |
US11860743B1 (en) | Database operational compatibility safeguards | |
US11169960B2 (en) | Data transfer appliance method and system | |
Shevel et al. | Globally distributed software defined storage (proposal) | |
CN109885543A (zh) | 基于大数据集群的日志处理方法及装置 | |
CN116684282B (zh) | 新增云端服务器初始化方法、装置和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |