CN113885959A - 基于接口配置的数据处理方法、装置、设备及介质 - Google Patents
基于接口配置的数据处理方法、装置、设备及介质 Download PDFInfo
- Publication number
- CN113885959A CN113885959A CN202111162294.4A CN202111162294A CN113885959A CN 113885959 A CN113885959 A CN 113885959A CN 202111162294 A CN202111162294 A CN 202111162294A CN 113885959 A CN113885959 A CN 113885959A
- Authority
- CN
- China
- Prior art keywords
- interface
- file
- data processing
- configuration
- information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 38
- 238000012545 processing Methods 0.000 claims abstract description 174
- 238000004458 analytical method Methods 0.000 claims abstract description 79
- 238000000034 method Methods 0.000 claims abstract description 28
- 238000012795 verification Methods 0.000 claims description 16
- 238000004590 computer program Methods 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 7
- 238000013467 fragmentation Methods 0.000 claims description 5
- 238000006062 fragmentation reaction Methods 0.000 claims description 5
- 238000012163 sequencing technique Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000003032 molecular docking Methods 0.000 description 3
- 238000010276 construction Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 210000001503 joint Anatomy 0.000 description 1
- 238000012886 linear function Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/445—Program loading or initiating
- G06F9/44505—Configuring for program initiating, e.g. using registry, configuration files
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了基于接口配置的数据处理方法、装置、设备及介质，方法包括：判断接口模板集合中是否包含与数据处理请求相匹配的接口配置模板，若不包含则对数据处理请求中的接口基础文件进行逻辑分级解析得到基础文件解析信息，并从接口文件数据库获取对应的接口配置文件，根据数据处理请求中的状态信息确定并行处理量并结合接口配置文件对空闲接口进行字段配置得到目标接口，获取对应的业务接口文本并通过目标接口进行并发处理。本发明属于端对端部署技术领域，可基于数据处理请求解析得到基础文件解析信息并进一步获取接口配置文件进行接口字段配置，可适用于各种接口标准以快速灵活地进行接口字段配置，并提高对业务数据进行处理的效率。
Description
技术领域
本发明涉及端对端部署技术领域，属于智慧城市中基于接口自动化配置以进行数据处理的应用场景，尤其涉及一种基于接口配置的数据处理方法、装置、设备及介质。
背景技术
随着企业与外部的合作业务不断拓展，为实现与外部合作机构快速对接，需要基于外部合作机构提供的接口标准开发接口配置文件，并基于所开发的接口配置文件进行接口对接，以实现对业务数据进行处理。传统技术方法针对一个合作机构即需要重新开发一套接口配置文件，且合作机构接口标准升级则需要重新根据升级后的接口标准再开发新的接口配置文件，导致无法基于接口标准进行快速接口对接，影响了业务数据处理的效率。因此，现有技术方法中存在无法快速进行接口对接以高效处理业务数据的问题。
发明内容
本发明实施例提供了一种基于接口配置的数据处理方法、装置、设备及介质，旨在解决现有技术中所存在的无法快速进行接口对接以高效处理业务数据的问题。
第一方面，本发明实施例提供了一种基于接口配置的数据处理方法，该方法应用于管理服务器，所述管理服务器与客户端建立网络连接以实现数据信息的传输，方法包括：
若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板；
若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息；
根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件；
根据所述数据处理请求中的状态信息确定对应的并行处理量；
根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口；
获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
第二方面，本发明实施例提供了一种基于接口配置的数据处理装置，其包括：
匹配判断单元，用于若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板；
基础文件解析信息获取单元，用于若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息；
接口配置文件获取单元，用于根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件；
并行处理量确定单元，用于根据所述数据处理请求中的状态信息确定对应的并行处理量；
接口字段配置单元，用于根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口；
业务接口文件处理单元，用于获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
第三方面，本发明实施例又提供了一种计算机设备，其包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述的基于接口配置的数据处理方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其中所述计算机可读存储介质存储有计算机程序，所述计算机程序当被处理器执行时使所述处理器执行上述第一方面所述的基于接口配置的数据处理方法。
本发明实施例提供了一种基于接口配置的数据处理方法、装置、设备及介质。判断接口模板集合中是否包含与数据处理请求相匹配的接口配置模板，若不包含则对数据处理请求中的接口基础文件进行逻辑分级解析得到基础文件解析信息，并从接口文件数据库获取对应的接口配置文件，根据数据处理请求中的状态信息确定并行处理量并结合接口配置文件对空闲接口进行字段配置得到目标接口，获取对应的业务接口文本并通过目标接口进行并发处理。通过上述方法，可基于数据处理请求解析得到基础文件解析信息并进一步获取接口配置文件进行接口字段配置，可适用于各种接口标准以快速灵活地进行接口字段配置，并基于配置的目标接口对业务接口文本进行并发处理，从而提高对业务数据进行处理的效率。
附图说明
为了更清楚地说明本发明实施例技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的基于接口配置的数据处理方法的流程示意图；
图2为本发明实施例提供的基于接口配置的数据处理方法的应用场景示意图；
图3为本发明实施例提供的基于接口配置的数据处理方法的子流程示意图；
图4为本发明实施例提供的基于接口配置的数据处理方法的另一子流程示意图；
图5为本发明实施例提供的基于接口配置的数据处理方法的另一子流程示意图；
图6为本发明实施例提供的基于接口配置的数据处理方法的另一子流程示意图；
图7为本发明实施例提供的基于接口配置的数据处理方法的另一子流程示意图；
图8为本发明实施例提供的基于接口配置的数据处理方法的另一子流程示意图；
图9为本发明实施例提供的基于接口配置的数据处理装置的示意性框图；
图10为本发明实施例提供的计算机设备的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
应当理解，当在本说明书和所附权利要求书中使用时，术语“包括”和“包含”指示所描述特征、整体、步骤、操作、元素和/或组件的存在，但并不排除一个或多个其它特征、整体、步骤、操作、元素、组件和/或其集合的存在或添加。
还应当理解，在此本发明说明书中所使用的术语仅仅是出于描述特定实施例的目的而并不意在限制本发明。如在本发明说明书和所附权利要求书中所使用的那样，除非上下文清楚地指明其它情况，否则单数形式的“一”、“一个”及“该”意在包括复数形式。
还应当进一步理解，在本发明说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合，并且包括这些组合。
请参阅图1及图2，图1为本发明实施例提供的基于接口配置的数据处理方法的流程示意图；图2为本发明实施例提供的基于接口配置的数据处理方法的应用场景示意图；该基于接口配置的数据处理方法应用于管理服务器10中，该基于接口配置的数据处理方法通过安装于管理服务器10中的应用软件进行执行，管理服务器10与客户端20进行网络连接以实现数据信息的传输；管理服务器10即是用于执行基于接口配置的数据处理方法进行接口对接配置以实现业务数据处理的服务器端，如企业或政府部门所构建的服务器，客户端20即是可接收用户输入的数据处理请求并发送至管理服务器10的终端设备，例如台式电脑、笔记本电脑、平板电脑或手机等，图2中仅仅示意出管理服务器10与一台客户端20进行信息传输，在实际应用中，该管理服务器10也可同时与多台客户端20建立通信连接以实现数据信息的传输。如图1所示，该方法包括步骤S110～S160。
S110、若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板。
若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板。客户端可发送数据处理请求至管理服务器，数据处理请求中包含接口属性信息，接口属性信息即为与待处理数据的接口相对应的属性信息，接口属性信息可用于对一个或多个接口的各种属性进行描述。接口模板集合即为由多个接口配置模板组合而成，接口配置模板即为对相应接口中的接口字段进行配置的模板，得到完成字段配置的接口。
在一实施例中，如图3所示，步骤S110包括子步骤S111和S112。
S111、从所述数据处理请求的接口属性信息中获取匹配信息。
可从数据处理请求所包含的接口属性信息中获取匹配信息，具体的，接口属性信息中包含一个或多个待配置接口的具体属性信息，可从接口属性信息中获取包含每一待配置接口的接口逻辑顺序，并进一步获取与接口逻辑顺序中每一待配置接口对应的接口类型及接口版本信息，接口逻辑顺序即为接口对数据进行处理的逻辑顺序，也即是接口逻辑顺序包含接口对数据进行处理的逻辑层级关系，上一层级接口对数据进行处理后将当前的数据处理结果传入下一层级接口继续进行处理，同一层级中可包含一个或多个接口，接口类型即为对待配置接口的具体类型进行记载的信息，接口版本即为对相应待配置接口的版本进行记载的具体信息，对于同一接口类型，可对应不同接口版本。
例如，对于两个待配置接口的具体信息“中登2.1”与“中登2.2”而言，两个接口均属于“中登”这一接口类型，接口版本则分别为“2.1”和“2.2”。
S112、判断所述匹配信息是否与所述接口模板集合中任一接口模板的模板特征信息相匹配，以判定所述接口模板集合中是否包含与所述数据处理请求相匹配的接口模板。
可依次判断接口模板集合中每一接口模板的模板特征信息是否与匹配信息相匹配，模板特征信息中包含该模板所对应接口的逻辑顺序，以及每一接口的接口类型及接口版本，若模板特征信息与匹配信息相匹配，则可直接使用与该模板特征信息相对应的接口模板对相应接口中的接口字段进行配置。若某一接口模板与匹配信息相匹配，则判定接口模板集合中包含与数据处理请求相匹配的接口模板；若任一接口模板与匹配信息均不相匹配，则判定接口模板集合中部包含与数据处理请求相匹配的接口模板。若接口模板集合中包含与数据处理请求相匹配的接口模板，则与数据处理请求相匹配的接口模板有且仅有一个。
S120、若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息。
若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息。接口基础文件中包含多个待配置接口分别对应的文件信息，接口基础文件所对应的待配置接口与接口属性信息所对应的待配置接口相同，则可对接口基础文件中每一待配置接口的文件信息进行逻辑分级解析，得到包含相应逻辑关系的基础文件解析信息，基础文件解析信息即可用于体现各待配置接口的文件信息之间的逻辑关系。
在一实施例中，如图4所示，步骤S120包括子步骤S121、S122和S123。
S121、根据所述接口属性信息对所述接口基础文件进行分段，得到对应的多个信息段。
具体的，接口基础文件可以是以json格式对信息进行记载的文件，可根据接口属性信息中所包含的待配置接口，对接口基础文件中包含的信息进行分段，以获取与每一待配置接口相匹配的信息段。接口基础文件中包含与每一待配置接口相匹配的接口标识，一个接口标识可与一个待配置接口的接口类型及接口版本相匹配，则可根据与待配置接口的接口类型及接口版本相匹配的接口标识对接口基础文件进行分段处理，得到对应的多个信息段。
S122、对每一所述信息段分别进行逻辑分级解析，得到与每一所述信息段对应的文件索引信息。
可对每一信息段分别进行逻辑分级解析，每一信息段中包括一个待配置接口的多级文件信息，可首先获取每一信息段在首层级之下的次层级的信息，再获取在次层级之下的底层级的信息，通过这种方式即可实现逻辑分析解析并得到每一信息段的文件索引信息，具体的，信息段中首层级即为接口标识，次层级即为与接口标识相关联的索引信息，底层级即为与每一索引信息对应的文件名称，对一个信息段进行解析得到的接口标识、索引信息及文件名称，即为与该信息段对应的文件索引信息。
例如，某一信息段中首层级为“开科7.0”，对该接口标识的词层级信息进行解析，得到与该接口标识相关联的索引信息为“交易申请文件索引、数据确认文件索引、产品行情文件索引、产品动态文件索引”，每一索引信息对应的底层级信息中至少包含一个文件名称。
S123、根据所述匹配信息对每一所述文件索引信息进行排序整理得到对应的基础文件解析信息。
每一信息段均与一个待配置接口相对应，则可根据匹配信息中待配置接口的接口逻辑顺序对每一信息段对应的文件索引信息进行排序整理，经过排序整理后文件索引信息的排列顺序即与匹配信息中待配置接口的接口逻辑顺序相对应，将排序整合后的文件索引信息作为文件解析信息。
在一实施例中，如图5所示，步骤S123之后还包括步骤S124。
S124、根据预置的校验对所述基础文件解析信息进行校验，以得到是否通过的校验结果。若所述校验结果为通过，执行所述根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件的步骤。
还可对所得到基础文件解析信息进行校验处理，以得到基础文件解析信息是否通过的校验结果，具体的，可判断基础文件解析信息中待配置接口之间的接口逻辑顺序是否符合预置的顺序要求，如预置的顺序要求中A接口必须在B接口之前执行，若基础文件解析信息中A接口与B接口并行执行，或A接口在B接口之后执行，则判定基础文件解析信息校验不通过。若基础文件解析信息的接口执行顺序符合预置的顺序要求，则继续判断其中包含的文件名称之间是否存在冲突，如判断是否存在相同的文件名称，是否存在互斥的文件名称(两个文件名称不能同时包含于中)，若存在相同的文件名称或存在互斥的文件名称，则判定基础文件解析信息校验不通过；否则判定校验通过。若校验结果为通过则继续执行后续步骤，若校验结果为不通过，则反馈校验不通过的提示信息至客户端。
S130、根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件。
根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件。接口文件数据库中即为管理服务器中所配置的用于存储接口数据文件的数据库，可从接口文件数据库中获取与基础文件解析信息所对应的接口数据文件并对应生成接口配置文件。
在一实施例中，如图6所示，步骤S130包括子步骤S131、S132和S133。
S131、根据所述数据处理请求生成与预设格式类型对应的初始配置文件。
首先可生成与预设格式类型对应的初始文件，可将数据处理请求名称与当前时间进行组合后作为初始文件的文件名称，并根据数据处理请求中的匹配信息对初始文件的特征信息进行配置得到初始配置文件，其中预设格式类型可以是结构化数据类型，则所生成的初始配置文件即可用于存储结构化数据，如Excel。
S132、获取所述接口文件数据库中与所述基础文件解析信息中每一文件名称相匹配的接口数据文件；S133、将与每一所述文件名称相匹配的接口数据文件的数值填充至所述初始配置文件中，以生成对应的接口配置文件。
可根据基础文件解析信息中所包含的文件名称，从接口文件数据库中获取与每一文件名称相匹配的接口数据文件，每一接口数据文件中至少包含一个数值，并根据文件名称在基础文件解析信息中的排序将文件名称所对应接口数据文件中的数值依次填充至初始配置文件中得到接口配置文件，则接口配置文件中包含基础文件解析信息的所有文件名称对应接口数据文件的数值信息。
具体的，步骤S130之后还包括：将所述接口配置文件作为新增的接口配置模板存储至所述接口模板集合中。
可将生成的接口配置文件作为新增的接口配置模板存储至接口模板集合中，则若其它数据处理请求可与该新增的接口配置模板相匹配，则可直接使用该接口配置模板而无需重复生成接口配置文件。
S140、根据所述数据处理请求中的状态信息确定对应的并行处理量。
根据所述数据处理请求中的状态信息确定对应的并行处理量。数据处理请求中还包括状态信息，状态信息即为对客户端相关的各项状态进行记载的信息，状态信息中包括传输速率、带宽、数据吞吐量、延迟等。可根据预置的并行匹配规则对状态信息进行匹配，并行匹配规则中包含多个匹配数量，以及每一匹配数量与各状态信息分别对应的匹配区间，可判断状态信息中各项状态信息是否均处于某一匹配数量的匹配区间中，若是则将该匹配数量作为对应的并行处理量。
还可将状态信息中各项数值输入预置的匹配模型中进行匹配分析，匹配模型可以是基于人工智能所构建的神经网络模型，匹配模型可由一个输入层、多个中间层及一个输出层组成，输入层与首个中间层之间、中间层与前后相邻的其他中间层之间、末尾中间层与输出层之间均通过关联公式进行关联，关联公式均可采用一次函数进行表示。输入层包含的输入节点数量与上述状态信息中状态项数量相等，输出层中可包含多个输出节点，每一输出节点对应一个匹配数量，将状态信息输入匹配模型进行匹配分析即可获取每一输出节点的输出值，输出值即为状态信息与各输出节点的匹配数量之间的匹配度，输出值取值范围均为[0，1]，可获取输出值最高的一个匹配节点对应的匹配数量作为并行处理量。
S150、根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口。
根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口。管理服务器中配置有空闲接口，空闲接口即为处于未使用状态的接口，可根据接口配置文件中包含的待配置接口以及数值信息，对与并行处理量及待配置接口数量相当的空闲接口进行接口字段配置，得到完成接口字段配置的目标接口。
在一实施例中，如图7所示，步骤S150包括子步骤S151、S152和S153。
S151、根据所述并行处理量及所述接口配置文件中待配置接口数量确定对应的配置数量；S152、根据所述并行处理量对与所述配置数量相等的空闲接口分组得到多个接口分组。
具体的，可将并行处理量与接口配置文件中待配置接口数量相乘，相乘的计算结果即可确定为对应的配置数量。例如，并行处理量为F，待配置接口的数量为J，则可确定对应的配置数量为F×J。从管理服务器中获取与配置数量相等的空闲接口，并根据并行处理量进行分组，则接口分组的数量即与并行处理量相等，每一接口分组中包含的空闲接口数量即与待配置接口数量相等。
S153、根据所述接口配置文件分别对每一所述接口分组包含的空闲接口进行接口字段配置，得到对应的目标接口。
根据接口配置文件中包含的数值信息分别对每一接口分组中的空闲接口进行接口字段配置，接口字段配置即是根据数值信息对空闲接口中的参数字段进行赋值，完成接口字段赋值后每一接口分组即可独立作为一个处理流进行数据处理，则接口分组的数量即为进行数据并行处理的并行数量。
步骤S110之后还包括：若所述接口模板集合中包含与所述数据处理请求相匹配的接口模板，根据所述数据处理请求中的状态信息确定对应的并行数量；根据与所述数据处理请求相匹配的接口模板及所述并行数量对空闲接口进行接口字段配置，得到完成配置的目标接口。若接口模板集合中包含与数据处理请求相匹配的接口模板，则直接确定与撞墙信息对应的并行数量，并根据该接口模板及并行数量对空闲接口进行接口字段配置，得到完成配置的目标接口。
S160、获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
获取与所述目标接口相匹配的业务接口文件并输出至所述目标接口进行并发处理。可通过配置后的目标接口获取业务接口文件，并通过相应目标接口对业务接口文件进行处理，目标接口对业务接口文件进行处理后可反馈相应接口处理结果，管理服务器可对接口处理结果进行存储。
在一实施例中，如图8所示，步骤S160包括子步骤S161、S162和S163。
S161、根据所述目标接口中配置的获取地址获取一个接口分组中每一所述目标接口对应的业务基础文件。
目标接口中配置有获取地址，获取地址可以是业务接口文件的存储地址，可获取第一个接口分组中每一目标接口中配置的获取地址，根据获取地址生成查询语句对文件数据库进行查询，从而获取与每一目标接口中的获取地址对应的业务基础文件，由于多个接口分组中同一位置的目标接口对应的业务基础文件相同，因此只需获取一个接口分组的目标接口对应的业务基础文件。
S162、根据所述接口分组数量对每一所述业务基础文件进行并行分片处理，得到与每一所述业务基础文件对应的多个业务接口文件。
可根据接口分组的数量对业务基础文件进行分片处理，每一个分片中包含一定数据量的数据，对一个业务接口文件进行分配处理即可得到对应的多个业务接口文件，每一业务基础文件所对应业务接口文件的数量与接口分组的数量相等。
S163、将每一所述业务基础文件对应的多个业务接口文件分别输入至每一所述接口分组中对应的目标接口中，以通过所述目标接口对所述业务基础文件进行并行处理。
将每一业务基础文件对应的业务接口文件分别输入至多个接口分组中与该业务基础文件对应的目标接口中，则对于一个业务基础文件而言，可通过多个接口分组中相对应的目标接口对该业务基础文件的一个业务接口文件进行处理，从而实现通过目标接口对每一业务基础文件进行并行处理的目的。
本申请中的技术方法可应用于智慧政务/智慧城管/智慧社区/智慧安防/智慧物流/智慧医疗/智慧教育/智慧环保/智慧交通等基于接口自动化配置以进行数据处理的应用场景中，从而推动智慧城市的建设。
在本发明实施例所提供的基于接口配置的数据处理方法中，判断接口模板集合中是否包含与数据处理请求相匹配的接口配置模板，若不包含则对数据处理请求中的接口基础文件进行逻辑分级解析得到基础文件解析信息，并从接口文件数据库获取对应的接口配置文件，根据数据处理请求中的状态信息确定并行处理量并结合接口配置文件对空闲接口进行字段配置得到目标接口，获取对应的业务接口文本并通过目标接口进行并发处理。通过上述方法，可基于数据处理请求解析得到基础文件解析信息并进一步获取接口配置文件进行接口字段配置，可适用于各种接口标准以快速灵活地进行接口字段配置，并基于配置的目标接口对业务接口文本进行并发处理，从而提高对业务数据进行处理的效率。
本发明实施例还提供一种基于接口配置的数据处理装置，该基于接口配置的数据处理装置可配置于管理服务器中，该基于接口配置的数据处理装置用于执行前述的基于接口配置的数据处理方法的任一实施例。具体地，请参阅图9，图9为本发明实施例提供的基于接口配置的数据处理装置的示意性框图。
如图9所示，基于接口配置的数据处理装置100包括匹配判断单元110、基础文件解析信息获取单元120、接口配置文件获取单元130、并行处理量确定单元140、接口字段配置单元150和业务接口文件处理单元160。
匹配判断单元110，用于若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板。
在一具体实施例中，所述匹配判断单元110包括子单元：匹配信息获取单元，用于从所述数据处理请求的接口属性信息中获取匹配信息；判定单元，用于判断所述匹配信息是否与所述接口模板集合中任一接口模板的模板特征信息相匹配，以判定所述接口模板集合中是否包含与所述数据处理请求相匹配的接口模板。
基础文件解析信息获取单元120，用于若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息。
在一具体实施例中，所述基础文件解析信息获取单元120包括子单元：接口基础文件分段单元，用于根据所述接口属性信息对所述接口基础文件进行分段，得到对应的多个信息段；文件索引信息获取单元，用于对每一所述信息段分别进行逻辑分级解析，得到与每一所述信息段对应的文件索引信息；排序整理单元，用于根据所述匹配信息对每一所述文件索引信息进行排序整理得到对应的基础文件解析信息。
在一具体实施例中，所述基础文件解析信息获取单元120还包括子单元：解析信息校验单元，用于根据预置的校验对所述基础文件解析信息进行校验，以得到是否通过的校验结果；若所述校验结果为通过，执行所述根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件的步骤。
接口配置文件获取单元130，用于根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件。
在一具体实施例中，所述接口配置文件获取单元130包括子单元：初始配置文件生成单元，用于根据所述数据处理请求生成与预设格式类型对应的初始配置文件；接口数据文件获取单元，用于获取所述接口文件数据库中与所述基础文件解析信息中每一文件名称相匹配的接口数据文件；数值填充单元，用于将与每一所述文件名称相匹配的接口数据文件的数值填充至所述初始配置文件中，以生成对应的接口配置文件。
并行处理量确定单元140，用于根据所述数据处理请求中的状态信息确定对应的并行处理量。
接口字段配置单元150，用于根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口。
在一具体实施例中，所述接口字段配置单元150包括子单元：配置数量确定单元，用于根据所述并行处理量及所述接口配置文件中待配置接口数量确定对应的配置数量；空闲接口分组单元，用于根据所述并行处理量对与所述配置数量相等的空闲接口分组得到多个接口分组；配置单元，用于根据所述接口配置文件分别对每一所述接口分组包含的空闲接口进行接口字段配置，得到对应的目标接口。
业务接口文件处理单元160，用于获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
在一具体实施例中，所述业务接口文件处理单元160包括子单元：业务基础文件获取单元，用于根据所述目标接口中配置的获取地址获取一个接口分组中每一所述目标接口对应的业务基础文件；文件分片处理单元，用于根据所述接口分组数量对每一所述业务基础文件进行并行分片处理，得到与每一所述业务基础文件对应的多个业务接口文件；文件处理单元，用于将每一所述业务基础文件对应的多个业务接口文件分别输入至每一所述接口分组中对应的目标接口中，以通过所述目标接口对所述业务基础文件进行并行处理。
在本发明实施例所提供的基于接口配置的数据处理装置应用上述基于接口配置的数据处理方法，判断接口模板集合中是否包含与数据处理请求相匹配的接口配置模板，若不包含则对数据处理请求中的接口基础文件进行逻辑分级解析得到基础文件解析信息，并从接口文件数据库获取对应的接口配置文件，根据数据处理请求中的状态信息确定并行处理量并结合接口配置文件对空闲接口进行字段配置得到目标接口，获取对应的业务接口文本并通过目标接口进行并发处理。通过上述方法，可基于数据处理请求解析得到基础文件解析信息并进一步获取接口配置文件进行接口字段配置，可适用于各种接口标准以快速灵活地进行接口字段配置，并基于配置的目标接口对业务接口文本进行并发处理，从而提高对业务数据进行处理的效率。
上述基于接口配置的数据处理装置可以实现为计算机程序的形式，该计算机程序可以在如图10所示的计算机设备上运行。
请参阅图10，图10是本发明实施例提供的计算机设备的示意性框图。该计算机设备可以是用于执行基于接口配置的数据处理方法以基于接口自动化配置以进行数据处理的管理服务器。
参阅图10，该计算机设备500包括通过系统总线501连接的处理器502、存储器和网络接口505，其中，存储器可以包括存储介质503和内存储器504。
该存储介质503可存储操作系统5031和计算机程序5032。该计算机程序5032被执行时，可使得处理器502执行基于接口配置的数据处理方法，其中，存储介质503可以为易失性的存储介质或非易失性的存储介质。
该处理器502用于提供计算和控制能力，支撑整个计算机设备500的运行。
该内存储器504为存储介质503中的计算机程序5032的运行提供环境，该计算机程序5032被处理器502执行时，可使得处理器502执行基于接口配置的数据处理方法。
该网络接口505用于进行网络通信，如提供数据信息的传输等。本领域技术人员可以理解，图10中示出的结构，仅仅是与本发明方案相关的部分结构的框图，并不构成对本发明方案所应用于其上的计算机设备500的限定，具体的计算机设备500可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
其中，所述处理器502用于运行存储在存储器中的计算机程序5032，以实现上述的基于接口配置的数据处理方法中对应的功能。
本领域技术人员可以理解，图10中示出的计算机设备的实施例并不构成对计算机设备具体构成的限定，在其他实施例中，计算机设备可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。例如，在一些实施例中，计算机设备可以仅包括存储器及处理器，在这样的实施例中，存储器及处理器的结构及功能与图10所示实施例一致，在此不再赘述。
应当理解，在本发明实施例中，处理器502可以是中央处理单元(CentralProcessing Unit，CPU)，该处理器502还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。其中，通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
在本发明的另一实施例中提供计算机可读存储介质。该计算机可读存储介质可以为易失性或非易失性的计算机可读存储介质。该计算机可读存储介质存储有计算机程序，其中计算机程序被处理器执行时实现上述的基于接口配置的数据处理方法中所包含的步骤。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，上述描述的设备、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的几个实施例中，应该理解到，所揭露的设备、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为逻辑功能划分，实际实现时可以有另外的划分方式，也可以将具有相同功能的单元集合成一个单元，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口、装置或单元的间接耦合或通信连接，也可以是电的，机械的或其它的形式连接。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以是两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分，或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个计算机可读存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的计算机可读存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到各种等效的修改或替换，这些修改或替换都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种基于接口配置的数据处理方法，其特征在于，所述方法应用于管理服务器，所述管理服务器与客户端建立网络连接以实现数据信息的传输，所述方法包括：
若接收到来自所述客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板；
若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息；
根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件；
根据所述数据处理请求中的状态信息确定对应的并行处理量；
根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口；
获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
2.根据权利要求1所述的基于接口配置的数据处理方法，其特征在于，所述判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板，包括：
从所述数据处理请求的接口属性信息中获取匹配信息；
判断所述匹配信息是否与所述接口模板集合中任一接口模板的模板特征信息相匹配，以判定所述接口模板集合中是否包含与所述数据处理请求相匹配的接口模板。
3.根据权利要求1所述的基于接口配置的数据处理方法，其特征在于，所述对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息，包括：
根据所述接口属性信息对所述接口基础文件进行分段，得到对应的多个信息段；
对每一所述信息段分别进行逻辑分级解析，得到与每一所述信息段对应的文件索引信息；
根据所述匹配信息对每一所述文件索引信息进行排序整理得到对应的基础文件解析信息。
4.根据权利要求3所述的基于接口配置的数据处理方法，其特征在于，所述根据所述匹配信息对每一所述文件索引信息进行排序整理得到对应的基础文件解析信息之后，还包括：
根据预置的校验对所述基础文件解析信息进行校验，以得到是否通过的校验结果；
若所述校验结果为通过，执行所述根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件的步骤。
5.根据权利要求1所述的基于接口配置的数据处理方法，其特征在于，所述根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件，包括：
根据所述数据处理请求生成与预设格式类型对应的初始配置文件；
获取所述接口文件数据库中与所述基础文件解析信息中每一文件名称相匹配的接口数据文件；
将与每一所述文件名称相匹配的接口数据文件的数值填充至所述初始配置文件中，以生成对应的接口配置文件。
6.根据权利要求1所述的基于接口配置的数据处理方法，其特征在于，所述根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口，包括：
根据所述并行处理量及所述接口配置文件中待配置接口数量确定对应的配置数量；
根据所述并行处理量对与所述配置数量相等的空闲接口分组得到多个接口分组；
根据所述接口配置文件分别对每一所述接口分组包含的空闲接口进行接口字段配置，得到对应的目标接口。
7.根据权利要求1所述的基于接口配置的数据处理方法，其特征在于，所述获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理，包括：
根据所述目标接口中配置的获取地址获取一个接口分组中每一所述目标接口对应的业务基础文件；
根据所述接口分组数量对每一所述业务基础文件进行并行分片处理，得到与每一所述业务基础文件对应的多个业务接口文件；
将每一所述业务基础文件对应的多个业务接口文件分别输入至每一所述接口分组中对应的目标接口中，以通过所述目标接口对所述业务基础文件进行并行处理。
8.一种基于接口配置的数据处理装置，其特征在于，所述装置包括：
匹配判断单元，用于若接收到来自客户端的数据处理请求，判断预存的接口模板集合中是否包含与所述数据处理请求相匹配的接口配置模板；
基础文件解析信息获取单元，用于若所述接口模板集合中不包含与所述数据处理请求相匹配的接口模板，对所述数据处理请求中的接口基础文件进行逻辑分级解析得到对应的基础文件解析信息；
接口配置文件获取单元，用于根据预存的接口文件数据库获取与所述基础文件解析信息对应的接口配置文件；
并行处理量确定单元，用于根据所述数据处理请求中的状态信息确定对应的并行处理量；
接口字段配置单元，用于根据所述接口配置文件及所述并行处理量对空闲接口进行接口字段配置，得到完成配置的目标接口；
业务接口文件处理单元，用于获取与所述目标接口相匹配的业务接口文件并通过所述目标接口进行并发处理。
9.一种计算机设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7中任一项所述的基于接口配置的数据处理方法。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，当所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的基于接口配置的数据处理方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111162294.4A CN113885959B (zh) | 2021-09-30 | 2021-09-30 | 基于接口配置的数据处理方法、装置、设备及介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111162294.4A CN113885959B (zh) | 2021-09-30 | 2021-09-30 | 基于接口配置的数据处理方法、装置、设备及介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113885959A true CN113885959A (zh) | 2022-01-04 |
| CN113885959B CN113885959B (zh) | 2024-05-14 |
Family
ID=79005014
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111162294.4A Active CN113885959B (zh) | 2021-09-30 | 2021-09-30 | 基于接口配置的数据处理方法、装置、设备及介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113885959B (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115242872A (zh) * | 2022-06-24 | 2022-10-25 | 平安银行股份有限公司 | 数据处理方法、装置、计算机设备及可读存储介质 |
| CN117648141A (zh) * | 2024-01-30 | 2024-03-05 | 北京比格大数据有限公司 | 数据服务接口动态配置方法及装置、设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070061427A1 (en) * | 2004-11-15 | 2007-03-15 | Nimrod Vishnia-Shabtai | System and method for dynamically modifying synchronized business information server interfaces |
| EP3537654A1 (de) * | 2018-03-09 | 2019-09-11 | EWE TEL GmbH | Verfahren und system zum ermitteln einer konfiguration einer schnittstelle |
| CN110895544A (zh) * | 2018-08-24 | 2020-03-20 | 北京国双科技有限公司 | 一种接口数据处理方法、装置、系统及存储介质 |
| CN111026797A (zh) * | 2019-12-02 | 2020-04-17 | 卫盈联信息技术（深圳）有限公司 | 业务数据处理方法、服务器及存储介质 |
| CN111818175A (zh) * | 2020-07-24 | 2020-10-23 | 南方电网数字电网研究院有限公司 | 企业服务总线配置文件生成方法、装置、设备和存储介质 |
-
2021
- 2021-09-30 CN CN202111162294.4A patent/CN113885959B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20070061427A1 (en) * | 2004-11-15 | 2007-03-15 | Nimrod Vishnia-Shabtai | System and method for dynamically modifying synchronized business information server interfaces |
| EP3537654A1 (de) * | 2018-03-09 | 2019-09-11 | EWE TEL GmbH | Verfahren und system zum ermitteln einer konfiguration einer schnittstelle |
| CN110895544A (zh) * | 2018-08-24 | 2020-03-20 | 北京国双科技有限公司 | 一种接口数据处理方法、装置、系统及存储介质 |
| CN111026797A (zh) * | 2019-12-02 | 2020-04-17 | 卫盈联信息技术（深圳）有限公司 | 业务数据处理方法、服务器及存储介质 |
| CN111818175A (zh) * | 2020-07-24 | 2020-10-23 | 南方电网数字电网研究院有限公司 | 企业服务总线配置文件生成方法、装置、设备和存储介质 |
Non-Patent Citations (1)
| Title |
|---|
| 高湘飞 等: "基于XML的可配置接口测试工具设计与实现", 《指挥信息系统与技术》, vol. 6, no. 6, 31 December 2015 (2015-12-31), pages 28 - 32 * |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115242872A (zh) * | 2022-06-24 | 2022-10-25 | 平安银行股份有限公司 | 数据处理方法、装置、计算机设备及可读存储介质 |
| CN115242872B (zh) * | 2022-06-24 | 2024-02-02 | 平安银行股份有限公司 | 数据处理方法、装置、计算机设备及可读存储介质 |
| CN117648141A (zh) * | 2024-01-30 | 2024-03-05 | 北京比格大数据有限公司 | 数据服务接口动态配置方法及装置、设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113885959B (zh) | 2024-05-14 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110554958B (zh) | 图数据库测试方法、系统、设备和存储介质 | |
| US8117609B2 (en) | System and method for optimizing changes of data sets | |
| EP3622450A1 (en) | Management of interoperating machine leaning algorithms | |
| EP3622447A1 (en) | Interoperation of machine learning algorithms | |
| EP3622448A1 (en) | Adaptation of machine learning algorithms | |
| EP3622446A1 (en) | Load balancing of machine learning algorithms | |
| WO2018206407A1 (en) | Autonomous logic modules | |
| CN113885959A (zh) | 基于接口配置的数据处理方法、装置、设备及介质 | |
| CN110852882B (zh) | 用于区块链网络的分组共识方法、装置、设备和介质 | |
| CN112650766A (zh) | 数据库数据操作的方法、系统及服务器 | |
| CN114462582A (zh) | 基于卷积神经网络模型的数据处理方法及装置、设备 | |
| CN113326523A (zh) | 一种隐私计算方法、装置及电子设备 | |
| CN111988429A (zh) | 算法调度方法以及系统 | |
| CN112068812A (zh) | 一种微服务生成方法、装置、计算机设备和存储介质 | |
| CN113342500B (zh) | 任务执行方法、装置、设备及存储介质 | |
| CN113468182B (zh) | 一种数据存储方法及系统 | |
| CN112822284B (zh) | 基于动态代理的数据处理方法、装置及计算机设备 | |
| CN113703735A (zh) | 基于独立代码块编排的应用生成方法、装置、设备及介质 | |
| CN113741868A (zh) | 业务计算任务处理方法、装置、计算机设备和存储介质 | |
| CN114880015A (zh) | 任务配置方法、装置、设备及存储介质 | |
| CN115604000B (zh) | 一种越权检测方法、装置、设备及存储介质 | |
| CN113377831B (zh) | 资源数据查询方法、装置、电子设备以及存储介质 | |
| CN112612514B (zh) | 程序开发方法和装置、存储介质及电子装置 | |
| US20230049322A1 (en) | Information processing method, device, system, and computer-readable storage medium | |
| CN117493693A (zh) | 一种推荐方法、装置和设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |