CN111966922A - 基于互联网的智慧城市数据迁移存储管理系统 - Google Patents

Abstract

本发明公开了一种基于互联网的智慧城市数据迁移存储管理系统，包括数据采集模块、数据标准化模块、用户申报模块、任务分配模块、离线存储模块、检索模块、云存储模块与支路云存储模块；本发明通过用户申报模块对城市建设问题进行记录、申报上传，用户申报模块申报上传的城市建设问题经控制中心审核过滤后，将对应问题传输至离线存储模块与任务分配模块，任务分配模块根据任务内容分配对应的人员执行；本发明所述系统还能够避免信息频繁在大存储量的云存储模块中迁移与交互，而主要在小存储量的支路云存储模块中进行数据的检索与迁移操作，降低云存储模块的数据迁移压力，避免云存储模块出现频繁的数据迁移，提升检索效率，避免检索资源浪费。

Description

基于互联网的智慧城市数据迁移存储管理系统

技术领域

本发明属于数据存储技术领域，具体的，涉及一种基于互联网的智慧城市数据迁移存储管理系统。

背景技术

随着计算机硬件与软件技术的快速发展，数据的使用量与交换量都会出现大幅的攀升，数据迁移是一种将离线存储与在线存储融合的技术，它将高速、高容量的非在线存储设备作为磁盘设备的下一级设备，然后将磁盘中常用的数据按指定的策略自动迁移到磁带库等二级大容量存储设备上，当需要使用这些数据时，分级存储系统会自动将这些数据从下一级存储设备调回到上一级磁盘上，对于用户来说，上述数据迁移操作完全是透明的，只是在访问磁盘的速度上略有怠慢，而在逻辑磁盘的容量上明显感觉大大提高了。

城市的信息化建设在目前的社会上引起了广泛的关注，然而，目前的城市建设过程中，问题的申报与解决流程长，信息传递过程不直观，且在将申报过程中，数量大且问题集中，难以对不同的问题进行及时的审核确认，同时，城市数据管理过程中，大量的数据发生频繁的迁移，会对云存储模块造成较大压力，如何提升资源利用效率，降低死数据导致的数据迁移压力，为了解决上述问题，本发明提供了以下技术方案。

发明内容

本发明的目的在于提供一种基于互联网的智慧城市数据迁移存储管理系统。

本发明需要解决的技术问题为：

目前的城市建设过程中，问题的申报与解决流程长，信息传递过程不直观，且在将申报过程中，数量大且问题集中，难以对不同的问题进行及时的审核确认，同时，城市数据管理过程中，大量的数据发生频繁的迁移，会对云存储模块造成较大压力，如何提升资源利用效率，降低死数据导致的数据迁移压力，是目前需要解决的问题之一。

本发明的目的可以通过以下技术方案实现：

基于互联网的智慧城市数据迁移存储管理系统，包括数据采集模块、数据标准化模块、用户申报模块、任务分配模块、离线存储模块、检索模块、云存储模块与支路云存储模块；

所述数据采集模块用于采集对应的文本信息、音频信息与视频信息，并将其传输至数据标准化模块；

所述数据标准化模块用于对数据采集模块采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至离线存储模块与云存储模块和/或对应的支路云存储模块；

所述用户申报模块用于对城市建设问题进行记录、申报上传，用户申报模块申报上传的城市建设问题经控制中心审核过滤后，将对应问题传输至离线存储模块与任务分配模块，任务分配模块根据任务内容分配对应的人员执行；

所述城市建设问题包括公共设施问题、违法犯罪问题、意外事故问题与医护急救问题，以及问题发生的时间、地点、图片、视频与简要描述；

所述控制中心对城市问题进行审核过滤的方法为：

S1、用户申报模块上传城市建设问题至控制中心；

S2、控制中心对各上传的城市建设问题申报的地点进行标定；

S3、以一个申报的城市建设问题的申报地点作为中心，标记半径r1内的所有城市建设问题，然后对该区域内所标记的所有城市建设问题的关键词进行提取，当两个申报的城市建设问题的关键词重合度达到预设值λ％，则认为这两个申报的城市建设问题为同一问题；

S4、对申报同一问题的城市建设问题申报信息的申报地点进行标记，并将出现次数最多申报地点作为对应的城市建设问题的发生地点，并对申报的所有的城市建设问题信息的丰富度进行评估，并选取丰富度值最大的城市建设问题申报信息发送至任务分配模块，同时将丰富度最大的至少两个城市建设问题申报信息传输至离线存储模块进行存储；

所述支路云存储模块用于对数据采集模块采集的某一领域的数据进行存储；

所述云存储模块用于对数据采集模块采集的所有信息进行存储；

所述检索模块用于用户登录，输入检索关键词对信息进行查询。

作为本发明的进一步方案，所述控制中心对用户申报模块上传的城市建设问题信息进行丰富度值评估的方法为：

将用户申报模块上传的城市建设问题信息中的图片数量标记为Ps、图片的文件大小标记为Pd、视频长度标记为Vs、视频的大小标记为Vd、简要描述的字数标记为Ws,当Ps＞1时，图片的文件大小为各图片的文件大小之和；

根据公式

计算得到丰富度值F，其中a1、a2、a3、a4与a5均为预设的比例系数，α为预设的参数值；

当Ps≥P1时，则在计算丰富度值F时，令Ps＝P1，当Pd≥P2时，则在计算丰富度值F时，令Pd＝P2，当Vs≥V1时，则在计算丰富度值F时，令Vs＝V1，当Vd≥V2时，则在计算丰富度值F时，令Vd＝V2，当Ws≥W1时，则在计算丰富度值F时，令Ws＝W1。

作为本发明的进一步方案，所述任务分配模块根据任务内容分配对应工作人员执行的方法为：

任务分配模块读取城市建设问题的发生地点，根据发生地点向对应负责的若干工作人员发送位置信息，同时获取工作人员的位置信息，得到工作人员与城市建设问题发生地点之间的距离并标记为Rj；

根据工作人员的入职时间与系统当前时间得到员工的入职时间，并将其标记为Rt；

将工作人员当日的处理城市建设问题次数标记为Rc；

根据公式

计算得到对应工作人员的执行系数，其中b1、b2与b3均为预设的比例系数，β1为预设的参数值，并选取执行系数最高的至少一个工作人员前往对应地点处理问题，问题处理结束后，对应工作人员的Rc值加1。

作为本发明的进一步方案，支路云存储模块、云存储模块与离线存储模块中的信息迁移方式为：

第一步，所述数据标准化模块对数据采集模块所采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至对应离线存储模块、云存储模块与对应的支路云存储模块；

第二步，当检索模块输入关键词对信息进行查询时，控制中心首先对对应的离线存储模块中的存储数据进行检索，若在离线存储模块中并未检索到对应信息或检索模块向控制中心反馈进一步检索信息，则进入下一步骤；

第三步，对检索模块的登陆账号进行跟踪，对其检索结果进行统计，根据检索结果的所属领域对其进行归类，并对检索结果的各领域占比进行统计，得到所占比例从大到小的n个领域的比例值A1、A2、...、An；

第四步，对检索词汇进行划分，对常用检索词汇进行记录，并根据该检索词汇对应的检索结果所处领域对该检索词汇在各个领域出现的比例，得到所占比例从大到小的n个比例B1、B2、...、Bn；

第五步，根据公式

对对应词汇的检索分配值Jx进行计算，其中Ai与Bi对应，k为单次检索所用检索词汇的数量，c1与c2为预设比例系数，从而得到单次检索在不同领域的检索值，并按照各领域的Jx值的大小进行排列；

第六步，按照Jx值的大小依次对对应领域所处支路云存储模块中的数据进行检索，直至检索到目标文件，从而完成对目标文件的检索；

第七步，对被检索文件进行统计，当文件作为目标被检索的频率大于等于tx次/天，则认为该文件为常用文件，当文件作为目标被检索的频率小于tx次/天时，则认为该文件为死文件，并将死文件传输至云存储模块。

本发明的有益效果：

本发明通过所述用户申报模块对城市建设问题进行记录、申报上传，用户申报模块申报上传的城市建设问题经控制中心审核过滤后，将对应问题传输至离线存储模块与任务分配模块，任务分配模块根据任务内容分配对应的人员执行；由于对于公共区域发生的城市建设问题，在不同时间会有不同的人进行申报，这也会导致对于同一问题的重复申报，提升了系统对信息处理的复杂性，通过控制中心对针对同一城市建设问题的申报进行筛选，以其中的一个作为传输至任务分配模块的城市建设问题申报信息，具体的，通过控制中心对用户申报模块上传的城市建设问题信息进行丰富度值评估，过滤部分信息的同时得到信息更加丰富的申报信息，使工作人员能够及时收到更加清晰明了的申报信息，并根据所申报信息，任务分配模块分配对应工作人员执行工作，本发明所述系统还通过对检索词汇在各个领域中的检索使用比例以及对应检索账号常用的检索领域进行跟踪记录，并据此计算得到在单次检索对应各个领域的检索值，并按照检索值的大小依次在各个对应的支路云存储模块中进行检索，能够避免信息在大存储量的云存储模块中进行迁移与交互，而主要在小存储量的支路云存储模块中进行数据的检索与迁移操作，能够降低云存储模块的数据迁移压力，避免云存储模块出现频繁的数据迁移，提升检索效率，避免检索资源浪费。

附图说明

下面结合附图和具体实施例对本发明作进一步详细描述。

图1为本发明所述基于互联网的智慧城市数据迁移存储管理系统的结构框图。

具体实施方式

下面将对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

基于互联网的智慧城市数据迁移存储管理系统，如图1所示，包括数据采集模块、数据标准化模块、用户申报模块、任务分配模块、离线存储模块、检索模块、云存储模块与支路云存储模块；

所述数据采集模块用于采集对应的文本信息、音频信息与视频信息，并将其传输至数据标准化模块；

所述数据标准化模块用于对数据采集模块采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至离线存储模块与云存储模块和/或对应的支路云存储模块；

所述用户申报模块用于对城市建设问题进行记录、申报上传，用户申报模块申报上传的城市建设问题经控制中心审核过滤后，将对应问题传输至离线存储模块与任务分配模块，任务分配模块根据任务内容分配对应的人员执行；

所述城市建设问题包括公共设施问题、违法犯罪问题、意外事故问题与医护急救问题，以及问题发生的时间、地点、图片、视频与简要描述；

所述控制中心对城市问题进行审核过滤的方法为：

S1、用户申报模块上传城市建设问题至控制中心；

S2、控制中心对各上传的城市建设问题申报的地点进行标定；

S3、以一个申报的城市建设问题的申报地点作为中心，标记半径r1内的所有城市建设问题，然后对该区域内所标记的所有城市建设问题的关键词进行提取，当两个申报的城市建设问题的关键词重合度达到预设值λ％，则认为这两个申报的城市建设问题为同一问题；

S4、对申报同一问题的城市建设问题申报信息的申报地点进行标记，并将出现次数最多申报地点作为对应的城市建设问题的发生地点，并对申报的所有的城市建设问题信息的丰富度进行评估，并选取丰富度值最大的城市建设问题申报信息发送至任务分配模块，同时将丰富度最大的至少两个城市建设问题申报信息传输至离线存储模块进行存储；

由于对于公共区域发生的城市建设问题，在不同时间会有不同的人进行申报，这也会导致对于同一问题的重复申报，提升了系统对信息处理的复杂性，通过控制中心对针对同一城市建设问题的申报进行筛选，以其中的一个作为传输至任务分配模块的城市建设问题申报信息。

所述控制中心对用户申报模块上传的城市建设问题信息进行丰富度值评估的方法为：

将用户申报模块上传的城市建设问题信息中的图片数量标记为Ps、图片的文件大小标记为Pd、视频长度标记为Vs、视频的大小标记为Vd、简要描述的字数标记为Ws,当Ps＞1时，图片的文件大小为各图片的文件大小之和；

根据公式

计算得到丰富度值F，其中a1、a2、a3、a4与a5均为预设的比例系数，α为预设的参数值；

当Ps≥P1时，则在计算丰富度值F时，令Ps＝P1，当Pd≥P2时，则在计算丰富度值F时，令Pd＝P2，当Vs≥V1时，则在计算丰富度值F时，令Vs＝V1，当Vd≥V2时，则在计算丰富度值F时，令Vd＝V2，当Ws≥W1时，则在计算丰富度值F时，令Ws＝W1。

所述任务分配模块根据任务内容分配对应工作人员执行的方法为：

任务分配模块读取城市建设问题的发生地点，根据发生地点向对应负责的若干工作人员发送位置信息，同时获取工作人员的位置信息，得到工作人员与城市建设问题发生地点之间的距离并标记为Rj；

根据工作人员的入职时间与系统当前时间得到员工的入职时间，并将其标记为Rt；

将工作人员当日的处理城市建设问题次数标记为Rc；

根据公式

计算得到对应工作人员的执行系数，其中b1、b2与b3均为预设的比例系数，β1为预设的参数值，并选取执行系数最高的至少一个工作人员前往对应地点处理问题，问题处理结束后，对应工作人员的Rc值加1。

所述支路云存储模块用于对数据采集模块采集的某一领域的数据进行存储；

所述云存储模块用于对数据采集模块采集的所有信息进行存储；

所述检索模块用于用户登录，输入检索关键词对信息进行查询；

支路云存储模块、云存储模块与离线存储模块中的信息迁移方式为：

第一步，所述数据标准化模块对数据采集模块所采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至对应离线存储模块、云存储模块与对应的支路云存储模块；

第二步，当检索模块输入关键词对信息进行查询时，控制中心首先对对应的离线存储模块中的存储数据进行检索，若在离线存储模块中并未检索到对应信息或检索模块向控制中心反馈进一步检索信息，则进入下一步骤；

第三步，对检索模块的登陆账号进行跟踪，对其检索结果进行统计，根据检索结果的所属领域对其进行归类，并对检索结果的各领域占比进行统计，得到所占比例从大到小的n个领域的比例值A1、A2、...、An；

第四步，对检索词汇进行划分，对常用检索词汇进行记录，并根据该检索词汇对应的检索结果所处领域对该检索词汇在各个领域出现的比例，得到所占比例从大到小的n个比例B1、B2、...、Bn；

第五步，根据公式

对对应词汇的检索分配值Jx进行计算，其中Ai与Bi对应，k为单次检索所用检索词汇的数量，c1与c2为预设比例系数，从而得到单次检索在不同领域的检索值，并按照各领域的Jx值的大小进行排列；

第六步，按照Jx值的大小依次对对应领域所处支路云存储模块中的数据进行检索，直至检索到目标文件，从而完成对目标文件的检索；

第七步，对被检索文件进行统计，当文件作为目标被检索的频率大于等于tx次/天，则认为该文件为常用文件，当文件作为目标被检索的频率小于tx次/天时，则认为该文件为死文件，并将死文件传输至云存储模块。

该方法通过对检索词汇在各个领域中的检索使用比例以及对应检索账号常用的检索领域进行跟踪记录，并据此计算得到在单次检索对应各个领域的检索值，并按照检索值的大小依次在各个对应的支路云存储模块中进行检索，能够避免信息在大存储量的云存储模块中进行迁移与交互，而主要在小存储量的支路云存储模块中进行数据的检索与迁移操作，能够降低云存储模块的数据迁移压力，避免云存储模块出现频繁的数据迁移，提升检索效率，避免检索资源浪费。

以上内容仅仅是对本发明结构所作的举例和说明，所属本技术领域的技术人员对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代，只要不偏离发明的结构或者超越本权利要求书所定义的范围，均应属于本发明的保护范围。

Claims (4)

1.基于互联网的智慧城市数据迁移存储管理系统，其特征在于，包括数据采集模块、数据标准化模块、用户申报模块、任务分配模块、离线存储模块、检索模块、云存储模块与支路云存储模块；

所述数据采集模块用于采集对应的文本信息、音频信息与视频信息，并将其传输至数据标准化模块；

所述数据标准化模块用于对数据采集模块采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至离线存储模块与云存储模块和/或对应的支路云存储模块；

所述用户申报模块用于对城市建设问题进行记录、申报上传，用户申报模块申报上传的城市建设问题经控制中心审核过滤后，将对应问题传输至离线存储模块与任务分配模块，任务分配模块根据任务内容分配对应的人员执行；

所述城市建设问题包括公共设施问题、违法犯罪问题、意外事故问题与医护急救问题，以及问题发生的时间、地点、图片、视频与简要描述；

所述控制中心对城市问题进行审核过滤的方法为：

S1、用户申报模块上传城市建设问题至控制中心；

S2、控制中心对各上传的城市建设问题申报的地点进行标定；

S3、以一个申报的城市建设问题的申报地点作为中心，标记半径r1内的所有城市建设问题，然后对该区域内所标记的所有城市建设问题的关键词进行提取，当两个申报的城市建设问题的关键词重合度达到预设值λ％，则认为这两个申报的城市建设问题为同一问题；

S4、对申报同一问题的城市建设问题申报信息的申报地点进行标记，并将出现次数最多申报地点作为对应的城市建设问题的发生地点，并对申报的所有的城市建设问题信息的丰富度进行评估，并选取丰富度值最大的城市建设问题申报信息发送至任务分配模块，同时将丰富度最大的至少两个城市建设问题申报信息传输至离线存储模块进行存储；

所述支路云存储模块用于对数据采集模块采集的某一领域的数据进行存储；

所述云存储模块用于对数据采集模块采集的所有信息进行存储；

所述检索模块用于用户登录，输入检索关键词对信息进行查询。

2.根据权利要求1所述的基于互联网的智慧城市数据迁移存储管理系统，其特征在于，所述控制中心对用户申报模块上传的城市建设问题信息进行丰富度值评估的方法为：

将用户申报模块上传的城市建设问题信息中的图片数量标记为Ps、图片的文件大小标记为Pd、视频长度标记为Vs、视频的大小标记为Vd、简要描述的字数标记为Ws，当Ps＞1时，图片的文件大小为各图片的文件大小之和；

根据公式

计算得到丰富度值F，其中a1、a2、a3、a4与a5均为预设的比例系数，α为预设的参数值；

当Ps≥P1时，则在计算丰富度值F时，令Ps＝P1，当Pd≥P2时，则在计算丰富度值F时，令Pd＝P2，当Vs≥V1时，则在计算丰富度值F时，令Vs＝V1，当Vd≥V2时，则在计算丰富度值F时，令Vd＝V2，当Ws≥W1时，则在计算丰富度值F时，令Ws＝W1。

3.根据权利要求1所述的基于互联网的智慧城市数据迁移存储管理系统，其特征在于，所述任务分配模块根据任务内容分配对应工作人员执行的方法为：

任务分配模块读取城市建设问题的发生地点，根据发生地点向对应负责的若干工作人员发送位置信息，同时获取工作人员的位置信息，得到工作人员与城市建设问题发生地点之间的距离并标记为Rj；

根据工作人员的入职时间与系统当前时间得到员工的入职时间，并将其标记为Rt；

将工作人员当日的处理城市建设问题次数标记为Rc；

根据公式

计算得到对应工作人员的执行系数，其中b1、b2与b3均为预设的比例系数，β1为预设的参数值，并选取执行系数最高的至少一个工作人员前往对应地点处理问题，问题处理结束后，对应工作人员的Rc值加1。

4.根据权利要求1所述的基于互联网的智慧城市数据迁移存储管理系统，其特征在于，支路云存储模块、云存储模块与离线存储模块中的信息迁移方式为：

第一步，所述数据标准化模块对数据采集模块所采集传输的信息中非标准协议进行解析，形成一套标准体系，然后对解析后的数据采集模块采集传输的信息进行整合后传输至对应离线存储模块、云存储模块与对应的支路云存储模块；

第二步，当检索模块输入关键词对信息进行查询时，控制中心首先对对应的离线存储模块中的存储数据进行检索，若在离线存储模块中并未检索到对应信息或检索模块向控制中心反馈进一步检索信息，则进入下一步骤；

第三步，对检索模块的登陆账号进行跟踪，对其检索结果进行统计，根据检索结果的所属领域对其进行归类，并对检索结果的各领域占比进行统计，得到所占比例从大到小的n个领域的比例值A1、A2、...、An；

第四步，对检索词汇进行划分，对常用检索词汇进行记录，并根据该检索词汇对应的检索结果所处领域对该检索词汇在各个领域出现的比例，得到所占比例从大到小的n个比例B1、B2、...、Bn；

第五步，根据公式

对对应词汇的检索分配值Jx进行计算，其中Ai与Bi对应，k为单次检索所用检索词汇的数量，c1与c2为预设比例系数，从而得到单次检索在不同领域的检索值，并按照各领域的Jx值的大小进行排列；

第六步，按照Jx值的大小依次对对应领域所处支路云存储模块中的数据进行检索，直至检索到目标文件，从而完成对目标文件的检索；

第七步，对被检索文件进行统计，当文件作为目标被检索的频率大于等于tx次/天，则认为该文件为常用文件，当文件作为目标被检索的频率小于tx次/天时，则认为该文件为死文件，并将死文件传输至云存储模块。

Images