CN116089907B - 航空多源数据的融合方法、装置、电子设备及存储介质 - Google Patents
航空多源数据的融合方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116089907B CN116089907B CN202310390817.3A CN202310390817A CN116089907B CN 116089907 B CN116089907 B CN 116089907B CN 202310390817 A CN202310390817 A CN 202310390817A CN 116089907 B CN116089907 B CN 116089907B
- Authority
- CN
- China
- Prior art keywords
- source
- target data
- configuration information
- data source
- fusion
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/23—Updating
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Traffic Control Systems (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本申请提供了航空多源数据的融合方法、装置、电子设备及存储介质，融合方法包括：获取来自多个候选数据源的目标数据项；若目标数据项存在多源融合配置信息，则基于各个候选数据源中的目标数据项对应的多源融合配置信息，确定出多个候选数据源中的目标数据源以及目标数据源的目标数据项作为多源融合结果；其中，多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；基于多源融合结果，将目标数据源的目标数据项更新至数据库中。通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
Description
技术领域
本申请涉及数据处理技术领域，尤其是涉及航空多源数据的融合方法、装置、电子设备及存储介质。
背景技术
伴随航空信息化建设工作的推进，通常，大型航司均有多个生产保障系统。目前大量生产保障系统均需要从多个外部系统引入数据或人工导入维护各类航空数据。伴随航空数据源头增多，同一个航空数据项可能会有多个外部系统能够提供，比如飞机的机号信息，可以从运行控制的系统获取、可以从航空管理局的系统获取、可以从机场的系统或者是人工自己录入获取。所以，在面对一个目标数据项存在不同的数据源时，不能及时的确定出哪个数据源下的数据为目标数据项的多源融合结果，进而导致多源融合结果确定过程及时性低以及准确率低。所以，如何提高多源融合结果确定的准确性以及及时性成为了不容小觑的技术问题。
发明内容
有鉴于此，本申请的目的在于提供航空多源数据的融合方法、装置、电子设备及存储介质，通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
本申请实施例提供了一种航空多源数据的融合方法，所述航空多源数据的融合方法包括：
获取来自多个候选数据源的目标数据项；
若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；
基于所述多源融合结果，将所述目标数据源的目标数据项更新至数据库中。
在一种可能的实施方式中，所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
检测所述目标数据项是否存在所述值级优先级配置信息；
若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果。
在一种可能的实施方式中，所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
在所述值级优先级配置信息之中，确定出各个所述候选数据源中的所述目标数据项的数据值的权重优先级；
在多个所述候选数据源中的所述目标数据项的数据值的权重优先级之中筛选出数据值的最大权重优先级，将所述数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
在一种可能的实施方式中，所述若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
在所述数据源优先级配置信息之中，确定出各个所述候选数据源的权重优先级；
在多个所述候选数据源的权重优先级之中筛选出数据源的最大权重优先级，将所述数据源的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项的为所述多源融合结果。
在一种可能的实施方式中，所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
检测所述目标数据项的字段是否满足所述置空配置信息；
若是，则将置空结果作为所述多源融合结果；
若否，则将数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
在一种可能的实施方式中，在所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果之前，所述航空多源数据的融合方法还包括：
在多源静态表中对所述目标数据项的候选数据源的权重优先级、候选数据源的数据值的权重优先级以及所述目标数据项的置空配置进行设置，并存储在所述数据库之中。
在一种可能的实施方式中，在所述获取来自多个候选数据源的目标数据项之后，所述航空多源数据的融合方法还包括：
若所述目标数据项不存在多源融合配置信息，则不对所述数据库中的所述目标数据项进行更新。
本申请实施例还提供了一种航空多源数据的融合装置，所述航空多源数据的融合装置：
获取模块，用于获取来自多个候选数据源的目标数据项；
第一确定模块，用于若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；
更新模块，用于基于所述多源融合结果，将所述目标数据源以及所述目标数据源的目标数据项更新至数据库中。
本申请实施例还提供一种电子设备，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过总线通信，所述机器可读指令被所述处理器执行时执行如上述的航空多源数据的融合方法的步骤。
本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时执行如上述的航空多源数据的融合方法的步骤。
本申请实施例提供的航空多源数据的融合方法、装置、电子设备及存储介质，融合方法包括：获取来自多个候选数据源的目标数据项；若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；基于所述多源融合结果，对将所述目标数据源的目标数据项更新至数据库中。通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。
图1为本申请实施例所提供的一种航空多源数据的融合方法的流程图之一；
图2为本申请实施例所提供的一种航空多源数据的融合方法的流程图之二；
图3为本申请实施例所提供的一种航空多源数据的融合装置的结构示意图之一；
图4为本申请实施例所提供的一种航空多源数据的融合装置的结构示意图之二；
图5为本申请实施例所提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，应当理解，本申请中的附图仅起到说明和描述的目的，并不用于限定本申请的保护范围。另外，应当理解，示意性的附图并未按实物比例绘制。本申请中使用的流程图示出了根据本申请的一些实施例实现的操作。应当理解，流程图的操作可以不按顺序实现，没有逻辑的上下文关系的步骤可以反转顺序或者同时实施。此外，本领域技术人员在本申请内容的指引下，可以向流程图添加一个或多个其他操作，也可以从流程图中移除一个或多个操作。
另外，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请的实施例，本领域技术人员在没有做出创造性劳动的前提下所获得的全部其他实施例，都属于本申请保护的范围。
为了使得本领域技术人员能够使用本申请内容，结合特定应用场景“对航空数据进行融合”，给出以下实施方式，对于本领域技术人员来说，在不脱离本申请的精神和范围的情况下，可以将这里定义的一般原理应用于其他实施例和应用场景。
本申请实施例下述方法、装置、电子设备或计算机可读存储介质可以应用于任何需要对航空数据进行融合的场景，本申请实施例并不对具体的应用场景作限制，任何使用本申请实施例提供的航空多源数据的融合方法、装置、电子设备及存储介质的方案均在本申请保护范围内。
首先，对本申请可适用的应用场景进行介绍。本申请可应用于数据处理技术领域。
经研究发现，伴随航空信息化建设工作的推进，通常，大型航司均有多个生产保障系统。目前大量生产保障系统均需要从多个外部系统引入数据或人工导入维护各类航空数据。伴随航空数据源头增多，同一个航空数据项可能会有多个外部系统能够提供，比如飞机的机号信息，可以从运行控制的系统获取、可以从航空局的系统获取、可以从机场的系统或者是人工自己录入获取。所以，在面对一个目标数据项存在不同的数据源时，不能及时的确定出那个数据源下的数据为目标数据项的多源融合结果，进而导致多源融合结果确定过程及时性低以及准确率低。所以，如何提高多源融合结果确定的准确性以及及时性成为了不容小觑的技术问题。
基于此，本申请实施例提供了航空多源数据的融合方法，通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
请参阅图1，图1为本申请实施例所提供的一种航空多源数据的融合方法的流程图之一。如图1中所示，本申请实施例提供的融合方法，包括：
S101：获取来自多个候选数据源的目标数据项。
该步骤中，获取来自不同的候选数据源的目标数据项。
这里，候选数据源可来自不同的外部数据系统。
其中，目标数据项为候选数据源中的字段，如航班号、值机号等。
S102：若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数源的所述目标数据项作为多源融合结果。
该步骤中，可以对目标数据项进行检测，若该目标数据项存有预先设定的多源融合配置信息，则根据各个候选数据源中的目标数据项对应的多源融合配置信息，确定出多个候选数据源中的目标数据源，将目标数据源以及目标数据源的目标数据项作为多源融合结果。
这里，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种。其中，值级优先级配置信息大于数据源优先级配置信息，数据源优先级配置信息与值级优先级配置信息均可以与置空配置信息进行结合设置。
在一种可能的实施方式中，在所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果之前，所述航空多源数据的融合方法还包括：
在多源静态表中对所述目标数据项的候选数据源的权重优先级、候选数据源的数据值的权重优先级以及所述目标数据项的置空配置进行设置，并存储在所述数据库之中。
这里，在多源静态表之中对目标数据项的候选数据源的权重优先级、候选数据源的数据值的权重优先级以及所述目标数据项的置空配置进行设置，并存储在所述数据库之中。
其中，在多源静态表之中的数据源优先级配置信息之中存有weight字段，里面记录的是不同数据源的权重值。在程序进行多源融合时，会结合数据源优先级配置信息，通过比较不同候选数据源的权重值，选取权重值最高的目标数据源的数据作为目标数据的多源融合结果。
其中，在多源静态表之中的值级优先级配置信息之中有两个字段“common”和“special” 。“common” 中将数据源和数据值组合在一起，作为一个新的数据源，对这些新的数据源进行权重的配置。“special”中是通过字符串（‘<’和‘=’）来指定特殊场景下优先级的高低情况。程序在进行多源融合的时候，识别到存在值级优先级配置信息的时候，会先去“special”中查询当前的场景在“special”中是否有对应的配置，如果有就会以“special”为准。如果没有就会按照“common”下的配置，选取权重值高的数据作为多源融合结果。
其中，在多源静态表之中的置空配置信息的数据结构有个body字段。“body”中记录的不同数据源的置空规则，分别有“enableNoneToOther”、“enableNoneToSelf”和“enableNoneToSouce”，可以配置true（启用）和false（不启用）。其中，“enableNoneToOther”（启用空置空别的数据源）：如果启用这个配置，会将置空结果（null）作为多源融合后的结果。做这个的目的是为了解决内存数据源优先级高于数据库中数据源优先级的情况下，这个数据源的null是否能够置空数据库中数据源已有的数据。“enableNoneToSelf”（启用空置空自己）：如果启用这个配置，内存中的数据为null且数据源于数据库中对应字段的数据源是一致的情况下，会将null作为多源融合后的结果，反之则依旧采用数据库中的数据。做这个的目的是为了解决内存数据源和数据库中数据源相同的情况下，这个数据源的null是否能够置空数据库中数据源已有的数据。“enableNoneToSouce”（启用置空DynamicSchema中的数据源）：如果启用这个配置，在触发置空条件后，不但会将null作为多源融合后的结果，还会去将对应的DynamicSchema下这个字段的数据源置为null。做这个的目的是为了解决高优先级数据源置空低优先级数据源后，低优先级系统数据后续是否能够融入的问题。
这里，在多源静态表的数据结构之中有两个属性：字段（fields）和表名称（tableName）。其中fields中记录的是每个字段的多源融合规则，而tableName说明的是这些配置适用于哪张业务表。在本方案中，在处理多个外源数据系统的相同数据项的同时能够处理人工维护的数据内容，实时系统多源配置可干预能力，在条件或生产需要的时候，通过干预多源静态表之的中tablename和fields内容来实现多源融合配置信息实时可变且能直接体现在系统数据之上。
这里，利用多源融合配置信息实现数据的多源融合，解决业务在生产实际中相同数据项需要引入多个系统数据的情况，同时满足在特殊情况下人工能够干预系统数据的维护。基于字段级别的系统优先级设置，解决不同数据项在不同系统的权重问题，从而根据实际需求确认字段最终体现形式，保证最终的业务字段数据时符合业务单位期望的系统数据。实现人工干预后系统依旧可以自动导入被干预数据并给业务人员信息提示。解放人一旦干预后需要持续干预数据的问题，系统自动判定是否要覆盖人工数据还是给人以信息提示等问题。将人由系统执行者转变为信息决策者，实现系统智能化。采用配置进行优先级设置，实现多源优先级实时可调整方便配置。伴随系统智能化或数据源数据改善等情况，本方法，允许用户根据实际情况调整配置最新优先级，相较传统方式实现调整优先级不用停服停机，继而做到生产业务无感替换。并且引入空值定制处理，实现空值根据业务情况进行空值覆盖权限设置。解决生产情况中经常出现的高权重字段空值将低权重字段有值给覆盖的情况，从而保证业务在实际生产中有数可依、有数可查。
在一种可能的实施方式中，所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
A：检测所述目标数据项是否存在所述值级优先级配置信息。
这里，在多源静态表之中检测所述目标数据项是否存在值机优先级配置信息。
这里，在多源静态表之中配置目标数据项的值级优先级配置信息。
这里，程序人员在多源静态表之中对目标数据项的多源融合配置信息进行配置。
B：若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果。
这里，若在多源静态表之中存在目标数据项的值级优先级配置信息，则根据值级优先级配置信息在多个候选数据源中确定出目标数据源以及目标数据源的目标数据项作为多源融合结果。
这里，可以对值级优先级配置信息进行群组设置，第一群组下的数据源的数据值的权重优先级大于第二群组下的数据源的数据值的权重优先级。即，在得到候选数据源后，优先去第一群组下查看是否存在该候选数据源，若不存在则在第二群组中查找该候选数据源。
在一种可能的实施方式中，所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
a：在所述值级优先级配置信息之中，确定出各个所述候选数据源中的所述目标数据项的数据值的权重优先级。
这里，根据值级优先级配置信息确定出各个候选数据源中的目标数据项的数据值的权重优先级。
如，值级优先级配置信息中“CA-ODS”:10, “CA-FMS”:20, “INT-ODS”:30，表征着候选数据源为“CA-ODS”的目标数据项的数据值的权重优先级为10，候选数据源为“CA-FMS”的目标数据项的数据值的权重优先级为20，候选数据源为“INT-ODS”的目标数据项的数据值的权重优先级为30。
b：在多个所述候选数据源中的所述目标数据项的数据值的权重优先级之中筛选出数据值的最大权重优先级，将所述数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
这里，在多个候选数据源中的目标数据项的数据值的权重优先级之中筛选出数据值的最大权重优先级，将数据值的最大权重优先级对应的目标数据源以及目标数据源的目标数据项作为所述多源融合结果。
如，值级优先级配置信息中“CA-ODS”:10, “CA-FMS”:20, “INT-ODS”:30，则将候选数据源为“INT-ODS”作为目标数据源，将该目标数据源的目标数据项作为多源融合结果。
这里，为了考虑特殊业务，可以设立第一群组和第二群组，设置第一群组的优先级比第二群组的优先级高，优先根据第一群组中的候选数据源的数据值的最大权重优先级进行检测，在某些特殊情况下，同一个目标数据项会因为其使用的具体值不同而导致多源关系在不同系统内权重值不同。因此系统在处理相关字段的多源融合时，会使用值级优先级配置信息。该配置通过对第一群组（common）和第二群组（special）进行组合管理。程序在进行多源融合的时候，识别到存在值级优先级配置信息的时候，会先去“special”中查询当前的场景之中是否存在相对应的多个候选数据源。如果有就会以“special”之中的数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果为。如果没有就会按照“common”下的数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
在具体实施例中，以异常状态为例，选取的候选数据源为CASUB-FMS-DLY和CASUB-ODS-CAN，异常状态配置了值级优先级配置信息和数据源优先级配置信息，由于值级优先级配置信息高于数据源优先级配置信息，所以直接根据值级优先级配置信息相对应的融合规则进行判断，候选数据源为CASUB-ODS-CAN的数据值的权重优先级为56，候选数据源CASUB-FMS-DLY的数据值的权重优先级为18，所以，以CASUB-ODS-CAN的异常状态下的数据作为异常状态的多源融合结果，并将异常状态及异常状态相对应的融合结果更新至数据库之中。
C：若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果。
这里，若在多源静态表之中不存在目标数据项的值级优先级配置信息，则根据数据源优先级配置信息在多个候选数据源中确定出目标数据源以及目标数据源的目标数据项作为多源融合结果。
在一种可能的实施方式中，所述若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
（1）：在所述数据源优先级配置信息之中，确定出各个所述候选数据源的权重优先级。
这里，在数据源优先级配置信息之中，确定出各个候选数据源的权重优先级。
如，数据源优先级配置信息中“CA-ODS”:17, “CA-FMS”:22, “INT-ODS”:10,表征着候选数据源为“CA-ODS”的数据源的权重优先级为10，候选数据源为“CA-FMS”的数据源权重优先级为22，候选数据源为“INT-ODS”的数据源的权重优先级为10。
（2）：在多个所述候选数据源的权重优先级之中筛选出数据源的最大权重优先级，将所述数据源的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项的为所述多源融合结果。
这里，在多个候选数据源的权重优先级之中筛选出数据源的最大权重优先级，将数据源的最大权重优先级对应的目标数据源以及目标数据源的目标数据项的为所述多源融合结果。
在具体实施例之中，以航班机号为例，该字段没有配置值级优先级配置信息，所以直接根据数据源级优先级配置信息进行判断，相对应的候选数据源分别为ASUB-FMS和CASUB-ODS，ASUB-FMS的权重优先级为20，CASUB-ODS的权重优先级为10，所以ASUB-FMS的航班机号下的数据为多源融合结果。
在一种可能的实施方式中，所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
检测所述目标数据项的字段是否满足所述置空配置信息；若是，则将置空结果作为所述多源融合结果；若否，则将数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
这里，检测在多源静态表之中是否对目标数据项的字段进行置空配置，若是，则将置空结果作为多源融合结果，若否，则将数据值的最大权重优先级对应的目标数据源的目标数据项作为所述多源融合结果。
在具体实施例中，以调整原因为例，选取CASUB-FMS和CASUB-ODS作为候选数据源，CASUB-FMS设置了允许置空所有数据源，CASUB-ODS设置了允许置空自己不许置空其他数据源的优先级规则，遍历CASUB-FMS和CASUB-ODS下的调整原因数据项，当前候选数据源为CASUB-FMS的群中优先级为10小于CASUB-ODS的权重优先级20，如果字段有值则以CASUB-ODS的值为准。再进行置空配置信息判断，当前为CASUB-ODS可以置空自己不能置空别的系统，所以CASUB-FMS的数据源且有值（航司计划）的情况下，当前字段的‘空’不能置空CASUB-ODS，所以最后多源融合结果为CASUB-ODS的空值。
在一种可能的实施方式中，若存在所述值级优先级配置信息，则基于所述值级优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果之后，所述融合方法还包括：
检测所述目标数据项的字段是否满足所述置空配置信息；若是，则将置空结果作为更新后的多源融合结果；若否，则将所述数据源的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
在一种可能的实施方式中，在所述获取来自多个候选数据源的目标数据项之后，所述航空多源数据的融合方法还包括：
若所述目标数据项不存在多源融合配置信息，则不对所述数据库中的所述目标数据项进行更新。
这里，若目标数据项不存在多源融合配置信息，则不对数据库中的目标数据项进行更新，将数据库中的目标数据项对应的历史数据信息作为多源融合结果。
S103：基于所述多源融合结果，对所述目标数据源以及所述目标数据源的目标数据项更新至数据库中。
该步骤中，根据多源融合结果，对将目标数据源以及目标数据源的目标数据项更新至数据库中。
进一步的，请参阅图2，图2为本申请实施例所提供的一种航空多源数据的融合方法的流程图之二。如图2所示，S201：检测目标数据项是否存在多源配置信息；S202：若有，检测目标数据项是否存在值级优先级配置信息；S203：若存在值级优先级配置信息，则基于值级优先级配置信息在多个候选数据源中确定出目标数据源以及目标数据源的目标数据项作为多源融合结果；S204：若不存在值级优先级配置信息，则基于数据源优先级配置信息在多个候选数据源中确定出目标数据源以及目标数据源的目标数据项作为多源融合结果。S205：检测目标数据项的字段是否满足置空配置信息；S206：若是，则将置空结果作为更新后的多源融合结果；S207：若否，则继续将数据值的最大权重优先级对应的目标数据源以及目标数据源的目标数据项作为多源融合结果；S208：若没有，则将数库中目标数据项对应的历史数据信息作为多源融合结果。
本申请实施例提供的一种航空多源数据的融合方法，所述融合方法包括：获取来自多个候选数据源的目标数据项；若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；基于所述多源融合结果，对所述目标数据源以及目标数据源的目标数据项更新至数据库中。通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
请参阅图3、图4，图3为本申请实施例所提供的一种航空多源数据的融合装置的结构示意图之一；图4为本申请实施例所提供的一种航空多源数据的融合装置的结构示意图之二。如图3中所示，所述航空多源数据的融合装置300包括：
获取模块310，用于获取来自多个候选数据源的目标数据项；
第一确定模块320，用于若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；
更新模块330，用于基于所述多源融合结果，对所述目标数据源以及所述目标数据源的目标数据项更新至数据库中。
进一步的，所述第一确定模块320在用于所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果时，所述第一确定模块320具体用于：
检测所述目标数据项是否存在所述值级优先级配置信息；
若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果。
进一步的，所述第一确定模块320在用于所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果时，所述第一确定模块320具体用于：
在所述值级优先级配置信息之中，确定出各个所述候选数据源中的所述目标数据项的数据值的权重优先级；
在多个所述候选数据源中的所述目标数据项的数据值的权重优先级之中筛选出数据值的最大权重优先级，将所述数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
进一步的，所述第一确定模块320在用于所述若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果时，所述第一确定模块320具体用于：
在所述数据源优先级配置信息之中，确定出各个所述候选数据源的权重优先级；
在多个所述候选数据源的权重优先级之中筛选出数据源的最大权重优先级，将所述数据源的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项的为所述多源融合结果。
进一步的，如图4所示，航空多源数据的融合装置300还包括置空模块340，所述置空模块340用于：
检测所述目标数据项的字段是否满足所述置空配置信息；
若是，则将置空结果作为所述多源融合结果；
若否，则将数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
进一步的，如图4所示，航空多源数据的融合装置300还包括配置模块350，所述配置模块350用于：
在多源静态表中对所述目标数据项的候选数据源的权重优先级、候选数据源的数据值的权重优先级以及所述目标数据项的置空配置进行设置，并存储在所述数据库之中。
进一步的，如图4所示，航空多源数据的融合装置300还包括第二确定模块360，所述第二确定模块360用于：
若所述目标数据项不存在多源融合配置信息，则不对所述数据库中的所述目标数据项进行更新。
本申请实施例提供的一种航空多源数据的融合装置，所述融合装置：获取模块，用于获取来自多个候选数据源的目标数据项；第一确定模块，用于若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；更新模块，用于基于所述多源融合结果，对所述目标数据源以及所述目标数据源的目标数据项更新至数据库中。通过根据数据源优先级配置信息、值级优先级配置信息以及置空配置信息确定出目标数据项所对应的多源融合结果，提高了多源融合结果确定的准确性以及及时性。
请参阅图5，图5为本申请实施例所提供的一种电子设备的结构示意图。如图5中所示，所述电子设备500包括处理器510、存储器520和总线530。
所述存储器520存储有所述处理器510可执行的机器可读指令，当电子设备500运行时，所述处理器510与所述存储器520之间通过总线530通信，所述机器可读指令被所述处理器510执行时，可以执行如上述图1以及图2所示方法实施例中的航空多源数据的融合方法的步骤，具体实现方式可参见方法实施例，在此不再赘述。
本申请实施例还提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序被处理器运行时可以执行如上述图1以及图2所示方法实施例中的航空多源数据的融合方法的步骤，具体实现方式可参见方法实施例，在此不再赘述。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，又例如，多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些通信接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个处理器可执行的非易失的计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（Read-OnlyMemory，ROM）、随机存取存储器（Random Access Memory，RAM）、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上所述实施例，仅为本申请的具体实施方式，用以说明本申请的技术方案，而非对其限制，本申请的保护范围并不局限于此，尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，其依然可以对前述实施例所记载的技术方案进行修改或可轻易想到变化，或者对其中部分技术特征进行等同替换；而这些修改、变化或者替换，并不使相应技术方案的本质脱离本申请实施例技术方案的精神和范围，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以权利要求的保护范围为准。
Claims (8)
1.一种航空多源数据的融合方法，其特征在于，所述航空多源数据的融合方法包括：
获取来自多个候选数据源的目标数据项；
若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；
基于所述多源融合结果，将所述目标数据源以及所述目标数据源的目标数据项更新至数据库中；
所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
检测所述目标数据项是否存在所述值级优先级配置信息；
若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
检测所述目标数据项的字段是否满足所述置空配置信息；
若是，则将置空结果作为所述多源融合结果；
若否，则将数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
2.根据权利要求1所述的航空多源数据的融合方法，其特征在于，所述若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
在所述值级优先级配置信息之中，确定出各个所述候选数据源中的所述目标数据项的数据值的权重优先级；
在多个所述候选数据源中的所述目标数据项的数据值的权重优先级之中筛选出数据值的最大权重优先级，将所述数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
3.根据权利要求1所述的航空多源数据的融合方法，其特征在于，所述若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果，包括：
在所述数据源优先级配置信息之中，确定出各个所述候选数据源的权重优先级；
在多个所述候选数据源的权重优先级之中筛选出数据源的最大权重优先级，将所述数据源的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项的为所述多源融合结果。
4.根据权利要求1所述的航空多源数据的融合方法，其特征在于，在所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果之前，所述航空多源数据的融合方法还包括：
在多源静态表中对所述目标数据项的候选数据源的权重优先级、候选数据源的数据值的权重优先级以及所述目标数据项的置空配置进行设置，并存储在所述数据库之中。
5.根据权利要求1所述的航空多源数据的融合方法，其特征在于，在所述获取来自多个候选数据源的目标数据项之后，所述航空多源数据的融合方法还包括：
若所述目标数据项不存在多源融合配置信息，则不对所述数据库中的所述目标数据项进行更新。
6.一种航空多源数据的融合装置，其特征在于，所述航空多源数据的融合装置：
获取模块，用于获取来自多个候选数据源的目标数据项；
第一确定模块，用于若所述目标数据项存在多源融合配置信息，则基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；其中，所述多源融合配置信息包括数据源优先级配置信息、值级优先级配置信息以及置空配置信息中的至少一种；
更新模块，用于基于所述多源融合结果，将所述目标数据源以及所述目标数据源的目标数据项更新至数据库中；
所述第一确定模块在用于所述基于各个所述候选数据源中的所述目标数据项对应的多源融合配置信息，确定出多个所述候选数据源中的目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果时，所述第一确定模块具体用于：
检测所述目标数据项是否存在所述值级优先级配置信息；
若存在所述值级优先级配置信息，则基于所述值级优先级配置信息和所述置空配置信息在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
若不存在所述值级优先级配置信息，则基于所述数据源优先级配置信息，在多个所述候选数据源中确定出所述目标数据源以及所述目标数据源的所述目标数据项作为多源融合结果；
航空多源数据的融合装置还包括置空模块，所述置空模块用于：
检测所述目标数据项的字段是否满足所述置空配置信息；
若是，则将置空结果作为所述多源融合结果；
若否，则将数据值的最大权重优先级对应的所述目标数据源以及所述目标数据源的所述目标数据项作为所述多源融合结果。
7.一种电子设备，其特征在于，包括：处理器、存储器和总线，所述存储器存储有所述处理器可执行的机器可读指令，当电子设备运行时，所述处理器与所述存储器之间通过所述总线进行通信，所述机器可读指令被所述处理器运行时执行如权利要求1至5任一所述的航空多源数据的融合方法的步骤。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器运行时执行如权利要求1至5任一所述的航空多源数据的融合方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310390817.3A CN116089907B (zh) | 2023-04-13 | 2023-04-13 | 航空多源数据的融合方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310390817.3A CN116089907B (zh) | 2023-04-13 | 2023-04-13 | 航空多源数据的融合方法、装置、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116089907A CN116089907A (zh) | 2023-05-09 |
| CN116089907B true CN116089907B (zh) | 2023-06-23 |
Family
ID=86212461
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310390817.3A Active CN116089907B (zh) | 2023-04-13 | 2023-04-13 | 航空多源数据的融合方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116089907B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116701408B (zh) * | 2023-08-02 | 2023-10-20 | 中国民用航空总局第二研究所 | 一种航班业务主键处理方法、装置、电子设备及存储介质 |
| CN116894229A (zh) * | 2023-09-06 | 2023-10-17 | 北京华云安软件有限公司 | 一种同类多数据源融合方法、装置、设备及存储介质 |
| CN117370400B (zh) * | 2023-12-05 | 2024-02-13 | 民航成都信息技术有限公司 | 航空数据的加工聚合处理方法、装置、电子设备及介质 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106709805A (zh) * | 2016-06-29 | 2017-05-24 | 腾讯科技（深圳）有限公司 | 一种用户收益数据获取方法及系统 |
| CN108628866A (zh) * | 2017-03-20 | 2018-10-09 | 大有秦鼎（北京）科技有限公司 | 数据融合的方法和装置 |
| CN112597168A (zh) * | 2020-12-28 | 2021-04-02 | 恩亿科(北京)数据科技有限公司 | 多源客户数据的处理方法、装置、平台及存储介质 |
| CN114547376A (zh) * | 2022-02-18 | 2022-05-27 | 广州白云国际机场股份有限公司 | 基于大数据的机场报文数据智能处理方法、装置及介质 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180203893A1 (en) * | 2017-01-17 | 2018-07-19 | International Business Machines Corporation | Dynamically reconciling objects from multiple sources |
| CA2996960C (en) * | 2017-03-02 | 2021-11-23 | Discovered Intelligence Inc. | System for aggregation and prioritization of it asset field values from real-time event logs and method thereof |
| CN111737246A (zh) * | 2020-06-29 | 2020-10-02 | 北京明略软件系统有限公司 | 一种数据融合方法、装置、电子设备及存储介质 |
| CN113987131B (zh) * | 2021-11-11 | 2022-08-23 | 江苏天汇空间信息研究院有限公司 | 异构多源数据关联分析系统和方法 |
| CN115952150A (zh) * | 2022-12-14 | 2023-04-11 | 北京市大数据中心 | 一种多源异构的数据融合方法及装置 |
| CN115952471B (zh) * | 2023-03-13 | 2023-06-30 | 北京中兵数字科技集团有限公司 | 融合不同数据源的数据的方法、装置、计算设备和介质 |
-
2023
- 2023-04-13 CN CN202310390817.3A patent/CN116089907B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106709805A (zh) * | 2016-06-29 | 2017-05-24 | 腾讯科技（深圳）有限公司 | 一种用户收益数据获取方法及系统 |
| CN108628866A (zh) * | 2017-03-20 | 2018-10-09 | 大有秦鼎（北京）科技有限公司 | 数据融合的方法和装置 |
| CN112597168A (zh) * | 2020-12-28 | 2021-04-02 | 恩亿科(北京)数据科技有限公司 | 多源客户数据的处理方法、装置、平台及存储介质 |
| CN114547376A (zh) * | 2022-02-18 | 2022-05-27 | 广州白云国际机场股份有限公司 | 基于大数据的机场报文数据智能处理方法、装置及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116089907A (zh) | 2023-05-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN116089907B (zh) | 航空多源数据的融合方法、装置、电子设备及存储介质 | |
| US11201929B2 (en) | On-line browsing preference management | |
| US9137115B2 (en) | System and method for resource reconciliation in an enterprise management system | |
| CN107092437A (zh) | 数据写入、读取方法及装置、云存储系统 | |
| CN111782872A (zh) | 查询方法、装置、电子设备以及存储介质 | |
| US20170278041A1 (en) | System and method for workplace management | |
| KR102220712B1 (ko) | 공장의 실시간 상황 변화에 대응하기 위한 동적 상황 관리 장치 및 방법 | |
| US20150242495A1 (en) | Search machine for presenting active search results | |
| US11275795B2 (en) | System and method for in-place record content management | |
| CN109416684A (zh) | 分析平台的摄取管理器 | |
| US10332569B2 (en) | System and method for dynamic caching | |
| US9971793B2 (en) | Database management system and database management method | |
| US8903871B2 (en) | Dynamic management of log persistence | |
| US10235005B2 (en) | Method of generating display name of objects to be managed | |
| US10855540B2 (en) | System and method for policy based networked application management | |
| CN111291018A (zh) | 数据管理方法、装置、设备及存储介质 | |
| CN116166735B (zh) | 航空数据的处理方法、装置、电子设备及存储介质 | |
| US10439897B1 (en) | Method and apparatus for enabling customized control to applications and users using smart tags | |
| US10416892B2 (en) | Fileset-based data locality enablement in distributed file systems | |
| EP2951728A1 (en) | Predictive cache apparatus and method of cache prediction | |
| JPWO2013118270A1 (ja) | 計算機システム、データ管理方法及びプログラム | |
| TW201539366A (zh) | 用於航班之酬載分配管理技術 | |
| CN108574719A (zh) | 一种云主机创建方法及装置 | |
| CN113360689A (zh) | 图像检索系统、方法、相关装置及计算机程序产品 | |
| US11315055B2 (en) | System and method for visualizing an order allocation process |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |