CN109753494B - 一种目标特性数据库系统和数据同步方法 - Google Patents

一种目标特性数据库系统和数据同步方法 Download PDF

Info

Publication number
CN109753494B
CN109753494B CN201910007013.4A CN201910007013A CN109753494B CN 109753494 B CN109753494 B CN 109753494B CN 201910007013 A CN201910007013 A CN 201910007013A CN 109753494 B CN109753494 B CN 109753494B
Authority
CN
China
Prior art keywords
data
library
target
target characteristic
characteristic data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910007013.4A
Other languages
English (en)
Other versions
CN109753494A (zh
Inventor
贾雨生
钟华
谢晓丹
翟佳
王衍祺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Environmental Features
Original Assignee
Beijing Institute of Environmental Features
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Environmental Features filed Critical Beijing Institute of Environmental Features
Priority to CN201910007013.4A priority Critical patent/CN109753494B/zh
Publication of CN109753494A publication Critical patent/CN109753494A/zh
Application granted granted Critical
Publication of CN109753494B publication Critical patent/CN109753494B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明涉及一种目标特性数据库系统和数据同步方法,解决以往目标特性数据库的数据同步操作繁琐、效率低下、无法满足仿真或作战对数据实时性的要求等问题。本发明在网络环境中通过将数据分发记录存储在数据分发表中、将数据文件按照树形结构组织存储、原始库与镜像库建立相同的库表结构等策略,可实现镜像库申请原始库中的数据或原始库主动同步镜像库中的数据两种方式,同步方式灵活高效,同时又有利于目标特性数据的保护。本发明提供的数据同步方法可封装成独立调用的函数,从而实现数据的自动调用。

Description

一种目标特性数据库系统和数据同步方法
技术领域
本发明涉及目标特性数据的仿真或作战技术领域,尤其涉及一种目标特性数据库系统和数据同步方法。
背景技术
目前目标特性数据的原始数据包含经测量或仿真得到的各型目标的物理、运动、光学、电磁等特性数据、模型、算法和模板等,因此原始数据的数据量非常庞大。然而半实物仿真系统或实装系统可装载的数据量一般较小,同时要求访问速度尽可能快。这就需要根据实际应用从原始库中提取仿真或作战需要的目标特性数据装载到半实物仿真系统或实装系统本地的镜像库中。由于仿真、作战需要的数据发生改变,或者原始库中的数据进行升级,在发生上述情况时,为保证数据的一致性,需要对镜像库中的数据进行同步。
在未建立网络连接的系统中,数据同步一般采用传统的人工方式,即从原始数据库中选择合适的数据集,以光盘或其它载体的形式拷贝到应用数据的设备,覆盖该设备中之前的数据。这种方式不仅操作繁琐,而且效率低。随着仿真或作战系统对数据实时性的要求,同时网络环境也逐步具备,因此需要一种新的从原始库到设备本地镜像库的数据同步系统或方法。
发明内容
为了解决上述技术问题,本发明提供了一种目标特性数据库系统和数据同步方法。
根据本发明实施例的第一方面,提供一种目标特性数据库系统,包括:原始库和镜像库;其中,
原始库用于存储目标特性数据,镜像库用于存储从原始库中分发至仿真系统或实装系统本地的目标特性数据;
原始库与镜像库采用相同的库表结构,包括:数据文件夹和数据库表;其中,数据文件夹中存储各个目标特性数据,数据库表中存储数据文件夹中每条目标特性数据的描述信息;
原始库中还包括:数据分发表,用于存储分发至镜像库的每条目标特性数据的描述信息;
原始库与镜像库之间通过网络连接。
可选地,所述数据库表中包括以下字段中的一个或多个:序号、目标型号、子目标类型、数据类型、数据来源、频段、极化方式、数据版本、数据校验和、数据文件名称、数据文件路径。
可选地,所述数据文件夹中每条目标特性数据的存储路径从数据根目录开始,按照各个字段采用树形结构进行组织。
可选地,所述数据根目录保存在配置文件中。
可选地,数据类型包括:物理特性数据,运动特性数据,电磁特性数据,光学特性数据;其中,
物理特性数据、运动特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_版本号.txt;
电磁特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_极化方式_版本号.txt;
光学特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_版本号.txt。
根据本发明实施例的第二方面,提供一种基于本发明实施例第一方面提供的目标特性数据库系统的数据同步方法,包括:
镜像库向原始库发送数据同步请求,所述数据同步请求包括:待同步的目标特性数据的数据参数;
原始库从其数据库表中确定满足数据参数的目标特性数据作为待同步的目标特性数据,从其数据文件中检索所述待同步的目标特性数据并分发至镜像库中,并更新镜像库中的数据库表和原始库中的数据分发表。
可选地,若满足数据参数的目标特性数据不少于两个,以具有最大版本号的目标特性数据作为待同步的目标特性数据。
根据本发明实施例的第三方面,提供另一种基于本发明实施例第一方面提供的目标特性数据库系统的数据同步方法,包括:
原始库检索数据分发表中的每条目标特性数据,以确定每条分发数据的数据描述信息;所述数据描述信息包括:数据主体和数据版本;
原始库检索其数据库表,以确定原始库的数据文件夹中是否存在数据本体与所述目标特性数据的数据本体相同、且数据版本高于所述目标特性数据的目标特性数据;
若存在,则删除镜像库的数据文件夹中的所述目标特性数据,从原始库的数据文件夹中检索所述目标特性数据并插入到镜像库的数据文件夹中,更新镜像库中的数据库表和原始库中的数据分发表。
本发明的上述技术方案具有如下优点:
(1)原始库和镜像库分开,有利于目标特性数据的保护;
(2)原始库既可主动更新镜像库中的数据,又可接收镜像库的数据申请,数据更新方式灵活高效;
(3)可以满足仿真系统或作战系统的数据装载要求,提高访问速度;
(4)可实现数据的自动调用,使仿真过程得以流畅进行。
附图说明
图1是本发明实施例的目标特性数据库系统的示意图;
图2是数据文件存储组织结构示意图;
图3是镜像库申请数据同步的流程示意图;
图4是原始库主动进行数据同步的流程示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1是本发明实施例的目标特性数据库系统的示意图。如图1所示,目标特性数据库系统包括:原始库100和镜像库200;其中,
原始库100用于存储目标特性数据,镜像库200用于存储从原始库100中分发至仿真系统或实装系统本地的目标特性数据;
原始库100与镜像库200采用相同的库表结构,包括:数据文件夹(原始库100中的数据文件夹102,镜像库200中的数据文件夹202)和数据库表(原始库100中的数据库表101,镜像库200中的数据库表201);其中,数据文件夹中存储各个目标特性数据,数据库表中存储数据文件夹中每条目标特性数据的描述信息;
原始库100中还包括:数据分发表103,用于存储分发至镜像库的每条目标特性数据的描述信息;
原始库与镜像库之间通过网络连接。
本发明中,数据库表和数据分发表可以采用关系数据库进行存储。
本发明中原始库和镜像库分开,有利于目标特性数据的保护。镜像库采用和原始库相同的库表结构,能够提高数据同步的效率和准确性。与现有技术通过人工方式进行数据同步相比,本发明中之间通过网络连接可实现数据的自动调用,使仿真过程得以流畅进行,满足仿真系统或作战系统的数据装载要求,提高访问速度。实际应用过程中,原始库既可主动更新镜像库中的数据,又可接收镜像库的数据申请,数据更新方式灵活高效。
数据库表中可以包括以下字段中的一个或多个:序号、目标型号、子目标类型、数据类型、数据来源、频段、极化方式、数据版本、数据校验和、数据文件名称、数据文件路径。需要说明的是,根据实际应用场景的不同,数据库表中还可以包括其他字段,例如起始频率、终止频率等。采用多个字段存储目标特性数据的描述信息,便于原始库快速检索,提高数据同步速度。以RCS宽带数据为例,其数据库表结构设计如表1所示。
表1 RCS宽带数据库表结构
Figure BDA0001935846380000051
Figure BDA0001935846380000061
表2波段对应表
ID TYPE NAME ID TYPE NAME ID TYPE NAME
1 P p 4 C c 7 SH 短波
2 L l 5 X x 8 M 中波
3 S s 6 Ku ku 9 LE 长波
表3数据类型对应表
ID TYPE NAME ID TYPE NAME
1 RadNarrow 窄带数据 7 IRCHA 红外特性数据
2 RadWide 宽带数据 8 OPTCHA 可见光特性数据
3 RadSCM 散射中心数据 9 OptFea 可见光特征数据
4 RadNFea 窄带电磁特征数据 10 RADMODEL 电磁模型
5 RadWFea 宽带电磁特征数据 11 IRMODEL 红外模型
6 IRFea 红外特征数据 12 MODEL 三维模型
可选地,数据文件夹中每条目标特性数据的存储路径从数据根目录开始,按照各个字段采用树形结构进行组织。图2是本发明可选实施例中数据文件存储组织结构示意图,如图2所示,数据文件的存储路径从数据根目录开始,按照目标型号、子目标类型、数据类型(物理、运动、光学、电磁)、数据来源(测试、仿真、情报)等对数据进行组织,便于检索,提高数据同步速度。为了灵活性起见,数据根目录可以保存在配置文件中。
为了确保数据文件命名的唯一性,减少搜索文件的时间,在一些实施例中,数据类型包括:物理特性数据,运动特性数据,电磁特性数据,光学特性数据;其中,
物理特性数据、运动特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_版本号.txt;
电磁特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_极化方式_版本号.txt;
光学特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_版本号.txt。
本发明还提供了基于本发明实施例第一方面提供的目标特性数据库系统的数据同步方法。原始库与镜像库的目标特性数据同步有两种模式:一是镜像库仿真或作战需要的目标发生变化时,主动向原始库申请需要的目标特性数据;二是原始库中的数据由于测试或计算精度提高,数据版本升级,此时原始库主动查询分发出去的装载到镜像库中的数据,对其进行更新。
以镜像库主动向原始库申请需要的目标特性数据为例,基于本发明实施例第一方面提供的目标特性数据库系统的数据同步方法包括:
镜像库向原始库发送数据同步请求,所述数据同步请求包括:待同步的目标特性数据的数据参数;
原始库从其数据库表中确定满足数据参数的目标特性数据作为待同步的目标特性数据,从其数据文件中检索所述待同步的目标特性数据并分发至镜像库中,并更新镜像库中的数据库表和原始库中的数据分发表。
数据参数是指目标特性数据的部分描述信息。满足数据参数的目标特性数据是指,原始库的数据库表的描述信息中包含该部分描述信息的目标特性数据。假设数据库表包括四个字段:目标型号(TGTTYPE)、子目标类型(SUBTGTTYPE)、数据类型(DATATYPE)、数据来源(DATASRC)。例如,镜像库发送数据同步请求包括的数据参数有:数据类型为P、数据来源为测试数据,则满足数据参数的目标特性数据是指:原始库的数据文件夹中数据类型为P、数据来源为测试数据的所有目标特性数据。
若满足数据参数的目标特性数据仅有一个,可以直接以该目标特性数据作为待同步的目标特性数据。若满足数据参数的目标特性数据不少于两个,则可以以具有特定数据版本(例如预先设置的数据版本)或最大版本号的目标特性数据作为待同步的目标特性数据。
图3示出了本发明可选实施例中镜像库申请数据同步的流程示意图。如图3所示,包括:
(1)原始库启动等待镜像库请求的服务,镜像库建立与原始库的网络连接;
(2)在原始库端建立与镜像库的数据库连接;
(3)镜像库将需请求数据的信息按格式封装好,发送给原始库;
(4)原始库接收并解析镜像库请求信息,获取相应的数据参数;
(5)原始库根据数据参数从本地库(原始库的数据文件夹)中获取满足条件的最大版本号的目标特性数据;
(6)删除镜像库的数据库表中的数据及数据文件夹中对应的数据文件;
(7)将原始库中的数据记录(原始库的数据库表中满足条件的最大版本号的目标特性数据的描述信息)插入到镜像库中;
(8)将原始库本地文件(满足条件的最大版本号的目标特性数据)拷贝到镜像库本地的存储路径下;
(9)原始库维护数据分发表中的分发记录;
(10)通知镜像库数据同步的状态。
以原始库主动同步镜像库中的目标特性数据为例,基于本发明实施例第一方面提供的目标特性数据库系统的数据同步方法包括:
原始库检索数据分发表中的每条目标特性数据,以确定每条分发数据的数据描述信息;所述数据描述信息包括:数据主体和数据版本;
原始库检索其数据库表,以确定原始库的数据文件夹中是否存在数据本体与所述目标特性数据的数据本体相同、且数据版本高于所述目标特性数据的目标特性数据;
若存在,则删除镜像库的数据文件夹中的所述目标特性数据,从原始库的数据文件夹中检索所述目标特性数据并插入到镜像库的数据文件夹中,更新镜像库中的数据库表和原始库中的数据分发表。
图4示出了本发明可选实施例中原始库主动进行数据同步的流程示意图。如图4所示,包括:
(1)在原始库端建立与镜像库的数据库连接;
(2)原始库检索分发到镜像库数据的记录;
(3)比较原始库和镜像库中数据的版本;
(4)如果原始库中的版本高于镜像库,则转5);否则转8);
(5)删除镜像库中的数据及对应的数据文件;
(6)将原始库中的数据记录插入到镜像库中;
(7)将原始库本地文件拷贝到镜像库本地的存储路径下;
(8)结束。
综上所述,本发明公开了一种目标特性数据库系统和数据同步方法,解决以往目标特性数据库的数据同步操作繁琐、效率低下、无法满足仿真或作战对数据实时性的要求等问题。本发明在网络环境中通过将数据记录存储在关系型数据库中、将数据文件按照树形结构组织存储、原始库与镜像库建立相同的库表结构等策略,可实现镜像库申请原始库中的数据或原始库主动同步镜像库中的数据两种方式,同步方式灵活高效,同时又有利于目标特性数据的保护。本发明提供的数据同步方法可封装成独立调用的函数,从而实现数据的自动调用。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (1)

1.一种目标特性数据库系统的数据同步方法,其特征在于,所述目标特性数据库系统包括:原始库和镜像库;其中,
原始库用于存储目标特性数据,镜像库用于存储从原始库中分发至仿真系统或实装系统本地的目标特性数据;
原始库与镜像库采用相同的库表结构,包括:数据文件夹和数据库表;其中,数据文件夹中存储各个目标特性数据,数据库表中存储数据文件夹中每条目标特性数据的描述信息;
原始库中还包括:数据分发表,用于存储分发至镜像库的每条目标特性数据的描述信息;
原始库与镜像库之间通过网络连接;
所述数据库表中包括以下字段中的一个或多个:序号、目标型号、子目标类型、数据类型、数据来源、频段、极化方式、数据版本、数据校验和、数据文件名称、数据文件路径;
所述数据文件夹中每条目标特性数据的存储路径从数据根目录开始,按照各个字段采用树形结构进行组织;其中依次按照目标型号、子目标类型、数据类型和数据来源对数据进行组织,并且其中数据来源包括测试、仿真和情报数据;
所述数据根目录保存在配置文件中;
数据类型包括:物理特性数据,运动特性数据,电磁特性数据,光学特性数据;其中,
物理特性数据、运动特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_版本号.txt;
电磁特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_极化方式_版本号.txt;
光学特性数据的数据文件名称的命名格式为:
目标型号_子目标类型_数据类型_数据来源_波段_版本号.txt;
所述目标特性数据库系统的数据同步方法,包括:
原始库检索数据分发表中的每条目标特性数据,以确定每条分发数据的数据描述信息;所述数据描述信息包括:数据主体和数据版本;
原始库检索其数据库表,以确定原始库的数据文件夹中是否存在数据主体与所述目标特性数据的数据主体相同、且数据版本高于所述目标特性数据的目标特性数据;
若存在,则删除镜像库的数据文件夹中的所述目标特性数据,从原始库的数据文件夹中检索所述目标特性数据并插入到镜像库的数据文件夹中,更新镜像库中的数据库表和原始库中的数据分发表。
CN201910007013.4A 2019-01-04 2019-01-04 一种目标特性数据库系统和数据同步方法 Active CN109753494B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910007013.4A CN109753494B (zh) 2019-01-04 2019-01-04 一种目标特性数据库系统和数据同步方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910007013.4A CN109753494B (zh) 2019-01-04 2019-01-04 一种目标特性数据库系统和数据同步方法

Publications (2)

Publication Number Publication Date
CN109753494A CN109753494A (zh) 2019-05-14
CN109753494B true CN109753494B (zh) 2021-05-25

Family

ID=66405149

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910007013.4A Active CN109753494B (zh) 2019-01-04 2019-01-04 一种目标特性数据库系统和数据同步方法

Country Status (1)

Country Link
CN (1) CN109753494B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110263018A (zh) * 2019-06-17 2019-09-20 北京金山安全软件有限公司 配置数据的处理方法、装置和服务器
CN116662298B (zh) * 2023-05-23 2024-01-02 中船奥蓝托无锡软件技术有限公司 一种多学科协同仿真数据管理方法

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102291453B (zh) * 2011-08-09 2017-04-26 中兴通讯股份有限公司 一种数据同步的方法及装置
CN103457905B (zh) * 2012-05-28 2015-09-09 腾讯科技(深圳)有限公司 数据同步方法、系统及设备
US9275086B2 (en) * 2012-07-20 2016-03-01 Commvault Systems, Inc. Systems and methods for database archiving
CN104462517A (zh) * 2014-12-22 2015-03-25 北京奇虎科技有限公司 数据同步方法及装置
CN107391758B (zh) * 2017-08-24 2020-08-04 阿里巴巴集团控股有限公司 数据库切换方法、装置及设备
CN107590207B (zh) * 2017-08-24 2020-09-01 阿里巴巴集团控股有限公司 数据同步方法及装置、电子设备
CN107590277B (zh) * 2017-09-28 2021-06-25 泰康保险集团股份有限公司 数据同步方法、装置、电子设备及存储介质
CN107704607A (zh) * 2017-10-17 2018-02-16 武汉楚鼎信息技术有限公司 一种数据库数据同步的方法
CN107784097A (zh) * 2017-10-23 2018-03-09 浪潮软件股份有限公司 一种数据库表数据传输方法、系统及客户端、服务端
CN107885804A (zh) * 2017-11-02 2018-04-06 平安科技(深圳)有限公司 数据库同步方法、应用服务器及计算机可读存储介质

Also Published As

Publication number Publication date
CN109753494A (zh) 2019-05-14

Similar Documents

Publication Publication Date Title
US11288267B2 (en) Pluggable storage system for distributed file systems
US11797498B2 (en) Systems and methods of database tenant migration
CN108475271B (zh) 容器数据库的应用容器
US10572551B2 (en) Application containers in container databases
US9836471B2 (en) System and method of handling file metadata
US8219580B2 (en) Dynamic management of multiple persistent data stores
US8682874B2 (en) Information processing system
US20030182525A1 (en) Method and system for migrating data
US11151081B1 (en) Data tiering service with cold tier indexing
US11709863B2 (en) Synchronizing online and offline transfer of data to cloud storage system
WO2014182343A1 (en) Supporting enhanced content searches in an online content-management system
CN109753494B (zh) 一种目标特性数据库系统和数据同步方法
US20180336224A1 (en) Hash-based synchronization of geospatial vector features
CN110287264A (zh) 分布式数据库的数据批量更新方法、装置以及系统
CN106844676A (zh) 数据存储方法及装置
CN111950025A (zh) 一种基于区块链智能合约的文件分布式存储方法
US20030182257A1 (en) Method and system for migrating data while maintaining hard links
US6625620B1 (en) Method and apparatus for the management of file attachments in a groupware oriented system
US8131884B1 (en) Reusing system configuration information and metadata for related operations
US6952699B2 (en) Method and system for migrating data while maintaining access to data with use of the same pathname
US11157462B2 (en) Namespace data object name persistence after decoupling of transportable storage device from data server
US10248673B2 (en) Allocating free space in a database
US10148662B1 (en) De-duplication of access control lists
CN115203353B (zh) 一种不同网络环境下地图服务自动同步发布方法和系统
US10657105B2 (en) Method and computer system for sharing objects

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant