CN116302616A - 一种数据处理的方法、装置、存储介质及电子设备 - Google Patents
一种数据处理的方法、装置、存储介质及电子设备 Download PDFInfo
- Publication number
- CN116302616A CN116302616A CN202310345050.2A CN202310345050A CN116302616A CN 116302616 A CN116302616 A CN 116302616A CN 202310345050 A CN202310345050 A CN 202310345050A CN 116302616 A CN116302616 A CN 116302616A
- Authority
- CN
- China
- Prior art keywords
- data
- batch
- intermediate data
- simulation
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000003672 processing method Methods 0.000 title abstract description 11
- 238000004088 simulation Methods 0.000 claims abstract description 176
- 230000006870 function Effects 0.000 claims abstract description 122
- 238000000034 method Methods 0.000 claims abstract description 106
- 238000012545 processing Methods 0.000 claims abstract description 72
- 230000008569 process Effects 0.000 claims abstract description 52
- 238000004590 computer program Methods 0.000 claims description 16
- 230000004044 response Effects 0.000 claims description 12
- 230000002159 abnormal effect Effects 0.000 claims description 6
- 230000003993 interaction Effects 0.000 abstract description 5
- 230000015556 catabolic process Effects 0.000 abstract description 4
- 238000010586 diagram Methods 0.000 description 24
- 230000006872 improvement Effects 0.000 description 8
- 238000005516 engineering process Methods 0.000 description 6
- 230000006399 behavior Effects 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000005856 abnormality Effects 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005055 memory storage Effects 0.000 description 1
- 229920001296 polysiloxane Polymers 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 239000010979 ruby Substances 0.000 description 1
- 229910001750 ruby Inorganic materials 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/547—Remote procedure calls [RPC]; Web services
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2111/00—Details relating to CAD techniques
- G06F2111/02—CAD in a network environment, e.g. collaborative CAD or distributed simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/549—Remote execution
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Evolutionary Computation (AREA)
- Geometry (AREA)
- Debugging And Monitoring (AREA)
Abstract
本说明书公开了一种数据处理的方法、装置、存储介质及电子设备，动态库响应于仿真客户端发送的函数调用请求，根据函数调用请求确定待调用函数，并使用待调用函数对仿真数据进行处理，得到中间数据。进而动态库对中间数据进行分批处理，并针对各批次的中间数据，发送该批次的中间数据的回调请求至仿真客户端，以使仿真客户端对该批次的中间数据进行处理，得到处理后数据。动态库通过对中间数据的分批处理，并分批次发送给仿真客户端，使得仿真客户端可分批次的处理各中间数据，不会出现由于仿真客户端接收的数据量过大，引起的占用内存过大、运行缓慢、甚至崩溃的现象，实现了动态库和仿真客户端的实时交互。
Description
技术领域
本申请涉及计算机技术领域，尤其涉及一种数据处理的方法、装置、存储介质及电子设备。
背景技术
随着科技的发展，仿真软件的使用越来越广泛。用户可通过可视化的操作界面，通过仿真软件中的虚拟元件(如：电阻、电源、滑轮)搭建不同的模块以对实际物理行为进行模拟，并可设置虚拟元件的参数、仿真时间等，以观察任意时刻的模块状态。
仿真软件在根据接收到的不同的虚拟元件的参数以及仿真时间，计算任意时刻的模块状态时，需要调用动态库中的函数，动态库中的函数经过计算会产生大量的数据，而这些数据需要经由仿真软件再次处理才可返回前端展示。但是仿真软件无法短时间内处理大量的数据，因此，如何对动态库产生的大量的数据进行处理，以实现动态库与仿真软件的实时交互是一个亟待解决的问题。
基于此，本申请说明书提供了一种数据处理的方法。
发明内容
本说明书提供一种数据处理的方法、装置、介质及电子设备，以至少部分的解决现有技术存在的上述问题。
本说明书采用下述技术方案：
本说明书提供了一种数据处理的方法，所述方法应用于动态库，所述方法包括：
响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据；
对所述中间数据进行分批，得到各批次的中间数据；
针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，对所述中间数据进行分批，具体包括：
针对各中间数据，确定得到该中间数据的时间戳；
将所述时间戳在指定范围内的且总数据量在预设的数据量阈值内的各中间数据，作为一个批次的数据。
可选地，针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，具体包括：
根据所述时间戳，确定各批次的中间数据的顺序；
按照所述顺序，依次针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理。
可选地，所述方法还包括：
接收所述仿真客户端返回的对该批次的中间数据进行处理的状态；其中，所述状态为异常或者正常；
若所述状态为正常，则发送该批次的下一批次的中间数据的回调请求，以使所述仿真客户端根据所述回调请求对所述下一批次的中间数据进行处理。
本说明书还提供了一种数据处理的方法，所述方法应用于仿真客户端，所述方法包括：
获取待处理仿真数据；
向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据；
针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，具体包括：
根据所述回调请求中携带的回调函数标识，使用所述回调函数标识对应的函数对该批次的中间数据进行处理。
可选地，所述方法还包括：
根据所述各批次的中间数据的时间戳，依次针对各批次的中间数据，确定该批次的中间数据对应的处理后数据的状态；
若所述状态为正常，则将该批次的处理后数据进行分布式存储。
可选地，所述方法还包括：
建立各批次的处理后数据的数据文件列表。
可选地，所述方法还包括：
响应于仿真数据展示请求，根据所述数据文件列表，在所述数据文件列表中，确定所述仿真数据展示请求对应待展示仿真数据，并展示。
本说明书提供了一种数据处理的装置，所述装置应用于动态库，包括：
响应模块，用于响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
处理模块，用于使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据；
分批模块，用于对所述中间数据进行分批，得到各批次的中间数据；
回调模块，用于针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，所述分批模块具体用于，针对各中间数据，确定得到该中间数据的时间戳；将所述时间戳在指定范围内的且总数据量在预设的数据量阈值内的各中间数据，作为一个批次的数据。
可选地，所述回调模块具体用于，根据所述时间戳，确定各批次的中间数据的顺序；按照所述顺序，依次针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理。
可选地，所述回调模块还用于，接收所述仿真客户端返回的对该批次的中间数据进行处理的状态；其中，所述状态为异常或者正常；若所述状态为正常，则发送该批次的下一批次的中间数据的回调请求，以使所述仿真客户端根据所述回调请求对所述下一批次的中间数据进行处理。
本说明书还提供了一种数据处理的装置，所述装置应用于仿真客户端，包括：
获取模块，用于获取待处理仿真数据；
发送模块，用于向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
接收模块，用于响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据；
处理模块，用于针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，所述处理模块具体用于，根据所述回调请求中携带的回调函数标识，使用所述回调函数标识对应的函数对该批次的中间数据进行处理。
可选地，所述处理模块还用于，根据所述各批次的中间数据的时间戳，依次针对各批次的中间数据，确定该批次的中间数据对应的处理后数据的状态；若所述状态为正常，则将该批次的处理后数据进行分布式存储。
可选地，所述处理模块还用于，建立各批次的处理后数据的数据文件列表。
可选地，所述处理模块还用于，响应于仿真数据展示请求，根据所述数据文件列表，在所述数据文件列表中，确定所述仿真数据展示请求对应待展示仿真数据，并展示。
本说明书提供了一种计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述数据处理的方法。
本说明书提供了一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述数据处理的方法。
本说明书采用的上述至少一个技术方案能够达到以下有益效果：
在本说明书提供的数据处理的方法中，动态库响应于仿真客户端发送的函数调用请求，根据函数调用请求使用函数对仿真数据进行处理，得到中间数据。进而动态库对中间数据进行分批处理，并发送回调请求以使仿真客户端对各批次的中间数据进行处理，得到处理后数据。
从上述方法中可以看出，动态库通过对中间数据的分批处理，并分批次发送给仿真客户端，使得仿真客户端可分批次的处理各中间数据，不会出现由于仿真客户端接收的数据量过大，引起的占用内存过大、运行缓慢、甚至崩溃的现象，实现了动态库和仿真客户端的实时交互。
附图说明
此处所说明的附图用来提供对本说明书的进一步理解，构成本说明书的一部分，本说明书的示意性实施例及其说明用于解释本说明书，并不构成对本说明书的不当限定。在附
图中：
图1为本说明书中一种数据处理的方法的流程示意图；
图2为本说明书中一种数据处理的方法的流程示意图；
图3为本说明书提供的一种数据处理的装置示意图；
图4为本说明书提供的一种数据处理的装置示意图；
图5为本说明书提供的对应于图1和2的电子设备示意图。
具体实施方式
为使本说明书的目的、技术方案和优点更加清楚，下面将结合本说明书具体实施例及相应的附图对本说明书技术方案进行清楚、完整地描述。显然，所描述的实施例仅是本说明书一部分实施例，而不是全部的实施例。基于本说明书中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于说明书保护的范围。
以下结合附图，详细说明本说明书各实施例提供的技术方案。
图1为本说明书提供的一种数据处理的方法的流程示意图，具体可包括以下步骤：
S100：响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识。
一般的，仿真客户端在根据接收到的不同的虚拟元件的参数以及仿真时间，计算任意时刻的模块状态时，需要调用动态库中的函数，且动态库需要把通过函数计算得到的数据返回给仿真客户端，以使仿真客户端对数据进行二次处理，并输出展示给仿真客户端使用者。也就是说，动态库和仿真客户端要进行实时交互，但是动态库产生的数据量是非常庞大的，若是直接返回给仿真客户端，会导致仿真客户端因接收的数据量过大，无法在短时间内完成对数据的处理，出现占用内存过大、运行缓慢的现象，甚至会导致仿真客户端的崩溃。
其中，仿真客户端即仿真软件，使得用户可通过可视化的操作界面，使用仿真软件中的虚拟元件(如：电阻、电源、滑轮)搭建不同的模块以对实际物理行为进行模拟，并可设置虚拟元件的参数、仿真时间等，以观察任意时刻的模块状态。动态库是一个程序函数库，其中有编译好的可以供给其他程序使用的函数代码。动态库和仿真软件可安装在同一个计算设备(如：计算机、服务器等)上，当计算设备中的应用程序运行时，需要用到哪个或哪些函数时，可通过设置的接口，在动态库中进行该函数的调用，而不用将所有函数都放入自身程序中，能够减少应用程序占用的内存。
基于此，本申请说明书提供了一种数据处理的方法，可以实现动态库和仿真客户端的实时交互，且当动态库将产生的大量数据发送给仿真客户端进行二次处理时，不会出现仿真客户端因无法短时间内处理大量数据引起的占用内存过大、运行缓慢、甚至崩溃的现象。现以动态库为执行主体进行本申请说明书实施例的说明。
具体的，动态库可响应于仿真客户端发送的函数调用请求，确定待调用函数。其中，该函数调用请求中携带待处理仿真数据以及待调用函数对应的标识。以便后续步骤中对待处理仿真数据进行处理。
需要说明的是，由于各应用程序使用的计算机语言不相同，且动态库中各函数的计算机语言与各应用程序使用的计算机语言也不相同，因此，在本说明书得到一个或多个实施例中，需要使得应用程序可调用动态库中的函数，也使得动态库可通过该调用方法回调应用程序中的函数。
其中，可提供调用接口，实现该调用接口的内部逻辑包括：仿真客户端中的函数的参数到动态库中的函数的参数之间的格式的转换，将动态库中返回的数据转换成仿真客户端需要的数据格式，以及仿真客户端中的计算语言与动态库中的计算机语言之间转换等等。因此，在本说明书的一个或多个实施例中，仿真客户端发送的函数调用请求以及动态库发送的函数回调请求都可通过该调用接口实现。
S102：使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据。
S104：对所述中间数据进行分批，得到各批次的中间数据。
动态库根据接收到的函数调用请求中携带的待处理仿真数据以及待调用函数对应的标识，可确定出待调用函数，并使用该待调用函数对待处理仿真数据进行处理，得到中间数据。
进而，为了不将计算得到的大量中间数据全部返回给仿真客户端，以使仿真客户端可正常的处理各中间数据，动态库可对中间数据进行分批处理，得到各批次的中间数据，进而在后续步骤中按照批次将数据推送给仿真客户端。具体的，动态库在根据待调用函数对待处理仿真数据进行处理时，可确定得到的每个中间数据的时间戳，于是动态库可根据该时间戳将各中间数据进行分批次处理，即将时间戳在指定范围内的且总数据量在预设的数据量阈值内的各中间数据，作为一个批次的数据。例如：动态库在17时23分58秒得到中间数据1～5500，在17时23分59秒得到中间数据5501～10000，假设设定的时间戳的指定范围为2S，且预设的数据量阈值为5000，则可将上述中间数据1～10000划分为1～5000与5001～10000两个批次的中间数据，可分别标记为批次1与批次2。
S106：针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
在本说明书的一个或多个实施例中，动态库可针对各批次的中间数据，发送该批次的中间数据的回调请求至仿真客户端，以使仿真客户端根据回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。具体的，动态库可根据得到各批次的中间数据以及时间戳，确定各批次的中间数据的顺序。沿用上述步骤S104中的例子，显然批次1中的各中间数据应位于批次2中的各中间数据的前面。也就是说，要先将批次1的中间数据推送给仿真客户端，再推送批次2的中间数据。然后发送回调请求至仿真客户端，以仿真客户端接收到该批次的中间数据，并使用回调请求中对应的函数对该批次的中间数据进行处理，得到处理后数据。
另外，沿用上述步骤S104中的例子，动态库先发送回调请求至仿真客户端，以将批次1中的中间数据发送给仿真客户端。于是仿真客户端可根据回调请求对批次1中的中间数据进行处理，得到处理后数据的同时，可得到一个处理后数据的状态，该状态表示仿真客户端各处理后数据的状态，也就是说该状态表明了仿真客户端到底是正常地处理完了批次1的中间数据，得到了正确的各处理后数据，还是由于出现逻辑错误或者物理错误导致无法对批次1的中间数据进行处理，或者导致处理后数据存在异常。那么仿真客户端会通过回调请求将该状态返回给动态库，动态库在接受到该状态后，若确定该状态为正常，可继续发送批次2的中间数据对应的回调请求，以使得仿真客户端对批次2的中间数据进行处理。若确定该状态为异常，则表明仿真客户端无法进行工作，则动态库可停止发送回调请求，即停止推送中间数据至仿真客户端。
其中，待处理仿真数据为仿真客户端发送给动态库的图形数据(如仿真原理图)，中间数据为动态库使用待调用函数，并根据原理图中的各虚拟元件(如电阻、电源等)参数，对当下的原理图中模块状态(如电流、电压等)进行求解，得到的模块状态数据。在仿真客户端对中间数据进行二次处理后，得到的处理后数据是仿真图形数据，也就是模块状态改变后的图形数据。
例如：一个包含了电阻A的电路图，用户在该电路图上增加一个电阻B，那么增加了电阻B之后该电路图中的电压、电流等产生变化，仿真客户端要调用动态库中的函数，以使得该函数根据原电路图数据以及增加的电阻B的相关数据(即待处理仿真数据)，对电路图中的电流电压进行计算，得到增加电阻B后的电路图的电压、电流等(即中间数据)，进而可将增加电阻B后的电路图的电压、电流等发送给仿真客户端，仿真客户端增加电阻B后的电路图的电压、电流等，得到新的电路图数据(即处理后数据)。
需要说明的是，在动态库对中间数据进行分批次处理时，还可以以各虚拟元件为分批依据，将同一个虚拟元件各时段的状态的中间数据记为一个批次的中间数据。具体如何分批本说明书不做限制。
基于图1所示本说明书提供的上述数据处理的方法中，动态库在使用待调用函数对待处理仿真数据进行计算的得到中间数据之后，在将数据发送给仿真客户端时，为了避免因仿真客户端无法短时间内处理大量数据，出现占用内存过大、运行缓慢、甚至崩溃的现象，动态库可对中间数据进行分批处理，进而将中间数据分批次发送至仿真客户端，使得仿真客户端可分批次的接收以及处理各中间数据，不会出现由于仿真客户端接收的数据量过大，引起的占用内存过大、运行缓慢、甚至崩溃的现象，实现了仿真客户端与动态库的实时交互。
此外，本说明书中还提供了一种应用于仿真客户端的数据处理的方法流程示意图，即图2，具体可包括以下步骤：
S200：获取待处理仿真数据。
一般的，用户可通过可视化的操作界面，通过仿真软件中的虚拟元件(如：电阻、电源、滑轮)搭建不同的模块以对实际物理行为进行模拟，并可设置虚拟元件的参数、仿真时间等，以观察任意时刻的模块状态。因此，仿真客户端可获取到待处理仿真数据。
S202：向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识。
在本说明书的一个或多个实施例中，在仿真客户端对待处理仿真数据进行处理时，需要用到的动态库中的函数，因此可向动态库发送函数调用请求，该函数调用请求中携带待处理仿真数据以及待调用函数对应的标识，以使得动态库可以根据该标识确定待调用函数，并使用待调用函数对待处理仿真数据进行处理，得到中间数据。
S204：响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据。
S206：针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
如上述步骤S104所述，在动态库得到中间数据后，可对中间数据进行分批处理，并发送回调请求至仿真客户端，以将各批次的中间数据发送给仿真客户端，使得仿真客户端可对各批次的中间数据进行处理。
因此，仿真客户端可响应于动态库发送的各批次的中间数据的回调请求，接收到各批次的中间数据。并针对各批次的中间数据，根据该批次的中间数据的回调请求中携带的回调函数标识，使用回调函数标识对应的函数对该批次的中间数据进行处理，得到该批次的处理后数据。并且，仿真客户端可通过该回调函数将该批次的处理后数据的状态返回给动态库，以使动态库根据该批次的处理后数据的状态，确定是否继续发送下一批次的中间数据对应的回调请求。
此外，在本说明书的一个或多个实施例中，为了减轻仿真客户端的存储压力，可将处理后数据进行分布式存储。具体的，可根据各批次的中间数据的时间戳，依次针对各批次的中间数据，确定该批次的中间数据对应的处理后数据的状态，若状态为正常，则将该批次的处理后数据进行分布式存储，若状态为异常，则不进行存储。
进一步的，在本说明书的一个或多个实施例中，为了提高仿真客户端的数据读取效率，仿真客户端在将处理后数据输出展示给用户时，可建立各批次的处理后数据的数据文件列表，以使得客户端在接收到仿真数据展示请求时，可根据该数据文件列表，在数据文件列表中确定仿真数据展示请求对应的待展示仿真数据，然后将该待展示仿真数据进行展示。
其中，建立各批次的处理后数据的文件列表可直接根据处理后数据的批次进行建立，也可重新指定一个时间段，对处理后数据进行划分，还可以根据虚拟元件的种类建立数据文件列表等等。具体方法本说明书不做限制。
基于上述内容所述的数据处理的方法，本说明书实施例还对应的提供一种用于数据处理的装置示意图，如图3所示。
图3为本说明书实施例提供的一种用于数据处理的装置的示意图，所述装置应用于动态库，所述装置包括：
响应模块300，用于响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
处理模块302，用于使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据；
分批模块304，用于对所述中间数据进行分批，得到各批次的中间数据；
回调模块306，用于针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，所述分批模块304具体用于，针对各中间数据，确定得到该中间数据的时间戳；将所述时间戳在指定范围内的且总数据量在预设的数据量阈值内的各中间数据，作为一个批次的数据。
可选地，所述回调模块306具体用于，根据所述时间戳，确定各批次的中间数据的顺序；按照所述顺序，依次针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理。
可选地，所述回调模块306还用于，接收所述仿真客户端返回的对该批次的中间数据进行处理的状态；其中，所述状态为异常或者正常；若所述状态为正常，则发送该批次的下一批次的中间数据的回调请求，以使所述仿真客户端根据所述回调请求对所述下一批次的中间数据进行处理。
本说明书实施例还对应的提供一种用于数据处理的装置示意图，如图4所示。
图4为本说明书实施例提供的一种用于数据处理的装置的示意图，所述装置应用于仿真客户端，所述装置包括：
获取模块400，用于获取待处理仿真数据；
发送模块402，用于向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
接收模块404，用于响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据；
处理模块406，用于针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
可选地，所述处理模块406具体用于，根据所述回调请求中携带的回调函数标识，使用所述回调函数标识对应的函数对该批次的中间数据进行处理。
可选地，所述处理模块406还用于，根据所述各批次的中间数据的时间戳，依次针对各批次的中间数据，确定该批次的中间数据对应的处理后数据的状态；若所述状态为正常，则将该批次的处理后数据进行分布式存储。
可选地，所述处理模块406还用于，建立各批次的处理后数据的数据文件列表。
可选地，所述处理模块406还用于，响应于仿真数据展示请求，根据所述数据文件列表，在所述数据文件列表中，确定所述仿真数据展示请求对应待展示仿真数据，并展示。
本说明书实施例还提供了一种计算机可读存储介质，该存储介质存储有计算机程序，计算机程序可用于执行上述内容所述的数据处理的方法。
基于上述内容所述的数据处理的方法，本说明书实施例还提出了图5所示的电子设备的示意结构图。如图5，在硬件层面，该电子设备包括处理器、内部总线、网络接口、内存以及非易失性存储器，当然还可能包括其他业务所需要的硬件。处理器从非易失性存储器中读取对应的计算机程序到内存中然后运行，以实现上述内容所述的数据处理的方法。
当然，除了软件实现方式之外，本说明书并不排除其他实现方式，比如逻辑器件抑或软硬件结合的方式等等，也就是说以下处理流程的执行主体并不限定于各个逻辑单元，也可以是硬件或逻辑器件。
在20世纪90年代，对于一个技术的改进可以很明显地区分是硬件上的改进(例如，对二极管、晶体管、开关等电路结构的改进)还是软件上的改进(对于方法流程的改进)。然而，随着技术的发展，当今的很多方法流程的改进已经可以视为硬件电路结构的直接改进。设计人员几乎都通过将改进的方法流程编程到硬件电路中来得到相应的硬件电路结构。因此，不能说一个方法流程的改进就不能用硬件实体模块来实现。例如，可编程逻辑器件(Programmable Logic Device，PLD)(例如现场可编程门阵列(Field Programmable GateArray，FPGA))就是这样一种集成电路，其逻辑功能由用户对器件编程来确定。由设计人员自行编程来把一个数字系统“集成”在一片PLD上，而不需要请芯片制造厂商来设计和制作专用的集成电路芯片。而且，如今，取代手工地制作集成电路芯片，这种编程也多半改用“逻辑编译器(logic compiler)”软件来实现，它与程序开发撰写时所用的软件编译器相类似，而要编译之前的原始代码也得用特定的编程语言来撰写，此称之为硬件描述语言(Hardware Description Language，HDL)，而HDL也并非仅有一种，而是有许多种，如ABEL(Advanced Boolean Expression Language)、AHDL(Altera Hardware DescriptionLanguage)、Confluence、CUPL(Cornell University Programming Language)、HDCal、JHDL(Java Hardware Description Language)、Lava、Lola、MyHDL、PALASM、RHDL(RubyHardware Description Language)等，目前最普遍使用的是VHDL(Very-High-SpeedIntegrated Circuit Hardware Description Language)与Verilog。本领域技术人员也应该清楚，只需要将方法流程用上述几种硬件描述语言稍作逻辑编程并编程到集成电路中，就可以很容易得到实现该逻辑方法流程的硬件电路。
控制器可以按任何适当的方式实现，例如，控制器可以采取例如微处理器或处理器以及存储可由该(微)处理器执行的计算机可读程序代码(例如软件或固件)的计算机可读介质、逻辑门、开关、专用集成电路(Application Specific Integrated Circuit，ASIC)、可编程逻辑控制器和嵌入微控制器的形式，控制器的例子包括但不限于以下微控制器：ARC 625D、Atmel AT91SAM、Microchip PIC18F26K20以及Silicone Labs C8051F320，存储器控制器还可以被实现为存储器的控制逻辑的一部分。本领域技术人员也知道，除了以纯计算机可读程序代码方式实现控制器以外，完全可以通过将方法步骤进行逻辑编程来使得控制器以逻辑门、开关、专用集成电路、可编程逻辑控制器和嵌入微控制器等的形式来实现相同功能。因此这种控制器可以被认为是一种硬件部件，而对其内包括的用于实现各种功能的装置也可以视为硬件部件内的结构。或者甚至，可以将用于实现各种功能的装置视为既可以是实现方法的软件模块又可以是硬件部件内的结构。
上述实施例阐明的系统、装置、模块或单元，具体可以由计算机芯片或实体实现，或者由具有某种功能的产品来实现。一种典型的实现设备为计算机。具体的，计算机例如可以为个人计算机、膝上型计算机、蜂窝电话、相机电话、智能电话、个人数字助理、媒体播放器、导航设备、电子邮件设备、游戏控制台、平板计算机、可穿戴设备或者这些设备中的任何设备的组合。
为了描述的方便，描述以上装置时以功能分为各种单元分别描述。当然，在实施本说明书时可以把各单元的功能在同一个或多个软件和/或硬件中实现。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
在一个典型的配置中，计算设备包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
还需要说明的是，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
本领域技术人员应明白，本说明书的实施例可提供为方法、系统或计算机程序产品。因此，本说明书可采用完全硬件实施例、完全软件实施例或结合软件和硬件方面的实施例的形式。而且，本说明书可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本说明书可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本说明书，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。
本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的都是与其他实施例的不同之处。尤其，对于系统实施例而言，由于其基本相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。
以上所述仅为本说明书的实施例而已，并不用于限制本说明书。对于本领域技术人员来说，本说明书可以有各种更改和变化。凡在本说明书的精神和原理之内所作的任何修改、等同替换、改进等，均应包含在本申请的权利要求范围之内。
Claims (13)
1.一种数据处理的方法，所述方法应用于动态库，其特征在于，所述方法包括：
响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据；
对所述中间数据进行分批，得到各批次的中间数据；
针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
2.如权利要求1所述的方法，其特征在于，对所述中间数据进行分批，具体包括：
针对各中间数据，确定得到该中间数据的时间戳；
将所述时间戳在指定范围内的且总数据量在预设的数据量阈值内的各中间数据，作为一个批次的数据。
3.如权利要求2所述的方法，其特征在于，针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，具体包括：
根据所述时间戳，确定各批次的中间数据的顺序；
按照所述顺序，依次针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理。
4.如权利要求1所述的方法，其特征在于，所述方法还包括：
接收所述仿真客户端返回的对该批次的中间数据进行处理的状态；其中，所述状态为异常或者正常；
若所述状态为正常，则发送该批次的下一批次的中间数据的回调请求，以使所述仿真客户端根据所述回调请求对所述下一批次的中间数据进行处理。
5.一种数据处理的方法，所述方法应用于仿真客户端，其特征在于，所述方法包括：
获取待处理仿真数据；
向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据；
针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
6.如权利要求5所述的方法，其特征在于，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，具体包括：
根据所述回调请求中携带的回调函数标识，使用所述回调函数标识对应的函数对该批次的中间数据进行处理。
7.如权利要求5所述的方法，其特征在于，所述方法还包括：
根据所述各批次的中间数据的时间戳，依次针对各批次的中间数据，确定该批次的中间数据对应的处理后数据的状态；
若所述状态为正常，则将该批次的处理后数据进行分布式存储。
8.如权利要求5所述的方法，其特征在于，所述方法还包括：
建立各批次的处理后数据的数据文件列表。
9.如权利要求8所述的方法，其特征在于，所述方法还包括：
响应于仿真数据展示请求，根据所述数据文件列表，在所述数据文件列表中，确定所述仿真数据展示请求对应待展示仿真数据，并展示。
10.一种数据处理的装置，所述装置应用于动态库，其特征在于，所述装置具体包括：
响应模块，用于响应于仿真客户端发送的函数调用请求，确定待调用函数；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
处理模块，用于使用所述待调用函数对所述待处理仿真数据进行处理，得到中间数据；
分批模块，用于对所述中间数据进行分批，得到各批次的中间数据；
回调模块，用于针对各批次的中间数据，发送该批次的中间数据的回调请求至所述仿真客户端，所述回调请求中携带将该批次的中间数据，以使所述仿真客户端根据所述回调请求对该批次的中间数据进行处理，得到该批次的处理后数据。
11.一种数据处理的装置，所述装置应用于仿真客户端，其特征在于，所述装置具体包括：
获取模块，用于获取待处理仿真数据；
发送模块，用于向动态库发送函数调用请求，以使所述动态库根据所述函数调用请求对所述待处理仿真数据进行处理，得到中间数据；其中，所述函数调用请求中携带待处理仿真数据以及待调用函数对应的标识；
接收模块，用于响应于所述动态库发送的各批次的中间数据的回调请求，接收各批次的中间数据；
处理模块，用于针对各批次的中间数据，根据该批次的中间数据的回调请求，对该批次的中间数据进行处理，得到该批次的处理后数据。
12.一种计算机可读存储介质，其特征在于，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述权利要求1-9任一所述的方法。
13.一种电子设备，其特征在于，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现上述权利要求1-9任一所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310345050.2A CN116302616A (zh) | 2023-03-28 | 2023-03-28 | 一种数据处理的方法、装置、存储介质及电子设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310345050.2A CN116302616A (zh) | 2023-03-28 | 2023-03-28 | 一种数据处理的方法、装置、存储介质及电子设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116302616A true CN116302616A (zh) | 2023-06-23 |
Family
ID=86777958
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310345050.2A Pending CN116302616A (zh) | 2023-03-28 | 2023-03-28 | 一种数据处理的方法、装置、存储介质及电子设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116302616A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116755844A (zh) * | 2023-08-17 | 2023-09-15 | 北京世冠金洋科技发展有限公司 | 一种仿真引擎的数据处理方法、装置、设备及存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107277168A (zh) * | 2017-07-26 | 2017-10-20 | 河南思维轨道交通技术研究院有限公司 | 一种支持云端多用户远程无线仿真调试系统和方法 |
| CN109344172A (zh) * | 2018-08-31 | 2019-02-15 | 深圳市元征科技股份有限公司 | 一种高并发数据处理方法、装置及客户端服务器 |
| WO2019157929A1 (zh) * | 2018-02-13 | 2019-08-22 | 阿里巴巴集团控股有限公司 | 一种文件处理方法、装置及设备 |
| CN110908788A (zh) * | 2019-12-02 | 2020-03-24 | 北京锐安科技有限公司 | 基于Spark Streaming的数据处理方法、装置、计算机设备及存储介质 |
| CN113163009A (zh) * | 2021-04-20 | 2021-07-23 | 平安消费金融有限公司 | 数据传送方法、装置、电子设备及存储介质 |
| CN114546639A (zh) * | 2022-02-14 | 2022-05-27 | 支付宝(杭州)信息技术有限公司 | 服务调用处理方法及装置 |
-
2023
- 2023-03-28 CN CN202310345050.2A patent/CN116302616A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107277168A (zh) * | 2017-07-26 | 2017-10-20 | 河南思维轨道交通技术研究院有限公司 | 一种支持云端多用户远程无线仿真调试系统和方法 |
| WO2019157929A1 (zh) * | 2018-02-13 | 2019-08-22 | 阿里巴巴集团控股有限公司 | 一种文件处理方法、装置及设备 |
| CN109344172A (zh) * | 2018-08-31 | 2019-02-15 | 深圳市元征科技股份有限公司 | 一种高并发数据处理方法、装置及客户端服务器 |
| CN110908788A (zh) * | 2019-12-02 | 2020-03-24 | 北京锐安科技有限公司 | 基于Spark Streaming的数据处理方法、装置、计算机设备及存储介质 |
| CN113163009A (zh) * | 2021-04-20 | 2021-07-23 | 平安消费金融有限公司 | 数据传送方法、装置、电子设备及存储介质 |
| CN114546639A (zh) * | 2022-02-14 | 2022-05-27 | 支付宝(杭州)信息技术有限公司 | 服务调用处理方法及装置 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116755844A (zh) * | 2023-08-17 | 2023-09-15 | 北京世冠金洋科技发展有限公司 | 一种仿真引擎的数据处理方法、装置、设备及存储介质 |
| CN116755844B (zh) * | 2023-08-17 | 2023-11-24 | 北京世冠金洋科技发展有限公司 | 一种仿真引擎的数据处理方法、装置、设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110263050B (zh) | 数据处理方法、装置、设备及存储介质 | |
| CN116302616A (zh) | 一种数据处理的方法、装置、存储介质及电子设备 | |
| CN116225669B (zh) | 一种任务执行方法、装置、存储介质及电子设备 | |
| CN117319235A (zh) | 一种服务调用方法及装置 | |
| CN114115016A (zh) | 一种数据处理方法、装置、设备及介质 | |
| CN116028697B (zh) | 一种页面渲染方法、装置、存储介质及电子设备 | |
| CN116048977B (zh) | 一种基于数据还原的测试方法及装置 | |
| CN110244964B (zh) | 一种基于运维应用的运维方法、运维方法、装置及设备 | |
| CN116861696A (zh) | 一种基于web的车辆仿真测试验证方法、装置、设备及介质 | |
| CN116384505A (zh) | 一种数据处理的方法、装置、存储介质及电子设备 | |
| CN113255156B (zh) | 用于民机地面动态试验信号的回路实时仿真系统及方法 | |
| CN109615234B (zh) | 一种资源变化情况确定方法及装置 | |
| CN117236263B (zh) | 一种多芯粒互联仿真方法、装置、存储介质及电子设备 | |
| CN112434486B (zh) | 一种pcb设计中器件自动分页方法、装置、设备及介质 | |
| CN117743472B (zh) | 一种存储任务断点同步方法、装置、介质及设备 | |
| CN117873789B (zh) | 一种基于分段量化的检查点写入方法及装置 | |
| CN116310033A (zh) | 一种渲染方法、装置、可读存储介质及电子设备 | |
| CN110009237B (zh) | 一种资源分配方法、装置、设备及介质 | |
| CN113219924A (zh) | 一种基于边缘计算的对工业数据进行处理的方法及系统 | |
| CN117499492A (zh) | 数据处理方法、装置及设备 | |
| CN111880922A (zh) | 并发任务的处理方法、装置及设备 | |
| CN117316257A (zh) | 一种交换机存储容量的测试方法、设备及介质 | |
| CN116366470A (zh) | 一种园区网承载网络设备的可视化配置方法、设备及介质 | |
| CN116893892A (zh) | 一种基于业务模型动态生成消息队列的方法、设备及介质 | |
| CN115859236A (zh) | 一种流量统付业务的角色管理方法、系统及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |