CN109815292A - 一种基于异步消息机制的涉税数据采集系统 - Google Patents
一种基于异步消息机制的涉税数据采集系统 Download PDFInfo
- Publication number
- CN109815292A CN109815292A CN201910010469.6A CN201910010469A CN109815292A CN 109815292 A CN109815292 A CN 109815292A CN 201910010469 A CN201910010469 A CN 201910010469A CN 109815292 A CN109815292 A CN 109815292A
- Authority
- CN
- China
- Prior art keywords
- message
- data
- asynchronous
- concerning taxes
- asynchronous data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于异步消息机制的涉税数据采集系统，包括异步数据消息存储服务端和涉税数据采集客户端；异步数据消息存储服务端用于接收数据源发送的异步数据消息，并根据预设编码规则对所述异步数据消息进行编码、分区存储；涉税数据采集客户端用于从异步数据消息存储服务端的分区获取异步数据消息并进行处理以获得所述涉税数据；采用本发明的技术方案能有效适应数据源的涉税数据结构的变化需求，使对数据源的涉税数据的采集更加安全快捷、实时性高、吞吐量大。
Description
技术领域
本发明涉及数据采集领域，尤其涉及一种基于异步消息机制的涉税数据采集系统。
背景技术
当前税务部门采集工商局、房管局、公安局、国土局等第三方单位涉税数据的方法，一般是通过文件共享或数据库共享方式采集。
文件共享方式采集的主要方法是：税务部门和其它第三方部门设置一个数据共享的FTP服务器，税务部门和其它第三方部门约定数据文件内容格式、文件名称、上传频率等，由其它第三方部门将税务部门需要的数据定期上传到FTP服务器，税务部门再定时去文件服务器读取文件、解释文件数据，并将数据存储到税务部门数据库；因此，税务部门与第三方部门必须有共同的FTP文件服务器，但文件可能存在被篡改、删除，或者泄密等风险；税务部门还必须与第三方部门约定数据文件的格式，当文件格式发生改变时，各个关联系统都需要做同步修改；由于文件传输本身的限制，数据采集的实时性不高。
数据库共享方式采集的主要方法是：通过在税务部门和第三方部门间建立中间数据库服务器，第三方部门将税务部门需要的数据通过数据库连接(ODBC/JDBC)写入到中间数据库服务器，税务部门通过数据库连接抽取数据到本地数据库；因此，税务部门与第三方部门之间实现数据库方式共享必须基于同一内网环境，网络安全和数据库安全存在较大风险；由于中间数据库的连接池有限，当挂载的部门及系统越来越多时，可能会导致可用数据库连接数不足。
发明内容
针对上述技术的缺点，本发明实施例的目的是提供一种基于异步消息机制的涉税数据采集系统，能有效适应数据源的涉税数据结构的变化需求，使对数据源的涉税数据的采集更加安全快捷、实时性高、吞吐量大。
为实现上述目的，本发明实施例提供了一种基于异步消息机制的涉税数据采集系统，所述系统包括异步数据消息存储服务端和涉税数据采集客户端；
所述异步数据消息存储服务端用于接收数据源发送的异步数据消息；其中，所述异步数据消息由所述数据源对涉税数据进行封装获得；
所述异步数据消息存储服务端还用于根据预设编码规则对所述异步数据消息进行编码；
所述异步数据消息存储服务端还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储；
所述涉税数据采集客户端用于从所述异步数据消息存储服务端的分区获取所述异步数据消息并进行处理以获得所述涉税数据。
优选地，所述异步数据消息包括涉税数据和所述涉税数据对应所述数据源的递增偏移量。
优选地，所述异步数据消息存储服务端包括至少一个业务处理单元；
所述业务处理单元用于根据所述预设编码规则对所述异步数据消息进行编码；
所述业务处理单元还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储。
优选地，所述业务处理单元具体用于：
根据部门简称+业务主题名称+日期+序列号的编码规则对所述异步数据消息进行编码。
优选地，所述业务处理单元具体用于：
以空闲分区的大小为关键字构建哈希表；
根据所述异步数据消息的大小以及所述哈希表对所述异步数据消息进行分区存储。
优选地，每一所述业务处理单元包括至少一个业务主题，每一所述业务主题包括至少一个分区，每一所述分区包括至少一个消息段；其中，每一所述消息段包括一个数据文件和一个相对于所述消息段起点的偏移量索引文件。
优选地，所述涉税数据采集客户端具体用于：
根据所述涉税数据采集客户端的涉税数据应用采集程序及所述哈希表查找所述异步数据消息的分区；
根据所述分区及所述偏移量索引文件获取所述异步数据消息所在的消息段；
根据所述消息段及所述偏移量索引文件在所述数据文件中获取所述涉税数据。
优选地，所述涉税数据采集客户端还用于：
根据所述涉税数据应用采集程序及本地配置文件中已消费的异步数据消息的信息编码清单，判断所述异步数据消息是否已消费；
若所述异步数据消息已消费，则读取涉税数据完成；
若所述异步数据消息没有消费，则对所述异步数据消息进行解析读取，并将读取的涉税数据存储到数据库中；同时将读取的所述异步数据消息的信息编码维护到所述本地配置文件中。
优选地，所述异步数据消息存储服务端还用于在预设的配置时间段内保留所有所述异步数据消息。
优选地，所述异步数据消息存储服务端还用于在超出所述配置时间段后，将所有未被读取的所述异步数据消息保存到数据文件中。
与现有技术相比，实施本发明实施例具有如下有益效果：数据源将涉税数据封装成异步消息后发送给异步数据消息存储服务端，异步数据消息存储服务端对接收到的异步消息进行编码并分区储存，涉税数据采集客户端从异步数据消息存储服务端的分区获取异步消息并处理获得涉税数据；涉税数据被封装成异步数据消息并发送给异步数据消息存储服务端存储以被涉税数据采集客户端采集，不会因为数据源的涉税数据结构的变化而使存储服务端接收的异步数据消息受到影响，同时涉税税局以异步数据消息的形式保存在存储服务端也不会被随意改动，数据源发送给存储服务端的异步数据消息会实时被采集客户端读取，存储服务端也不会限制采集客户端的数量，因此，该系统能有效适应数据源的涉税数据结构的变化需求，使对数据源的涉税数据的采集更加安全快捷、实时性高、吞吐量大。
附图说明
图1是本发明实施例1提供的一种基于异步消息机制的涉税数据采集系统的结构示意图；
图2是本发明实施例2提供的一种业务处理单元的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明实施例提供了一种基于异步消息机制的涉税数据采集系统，所述系统包括异步数据消息存储服务端和涉税数据采集客户端；
所述异步数据消息存储服务端用于接收数据源发送的异步数据消息；其中，所述异步数据消息由所述数据源对涉税数据进行封装获得；
所述异步数据消息存储服务端还用于根据预设编码规则对所述异步数据消息进行编码；
所述异步数据消息存储服务端还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储；
所述涉税数据采集客户端用于从所述异步数据消息存储服务端的分区获取所述异步数据消息并进行处理以获得所述涉税数据。
结合图1所述，数据源包括如工商局、房管局、公安局及国土局等第三方涉税部门，第三方涉税部门在业务系统根据时间戳判断，当指定业务表产生增量数据或者更改原有数据时，将更改后的数据封装为异步数据消息，序列化后通过Socket连接发送到税务部门的异步数据消息存储服务端进行处理，其中，异步数据消息存储服务端是分布式消息服务器集群。对于第三方涉税部门来说，首次数据加载的情况，则不需判断业务数据生成时间戳，将业务表全量数据都封装为异步消息发送到分布式消息服务器集群。
异步数据消息存储服务端即分布式消息服务器集群接收数据源发送的异步数据消息后，对异步数据消息进行编码，然后根据编码、异步数据消息的大小及分区的空间对异步数据消息进行分区存储，并维护异步数据消息的生命周期。
涉税数据采集客户端根据应用消费者程序中从分布式消息服务器集群的分区中获取异步数据消息，并进行处理以获得所述涉税数据。
数据源、异步数据消息存储服务端及涉税数据采集客户端都可以采用分布式部署，实现负载均衡。涉税数据被封装成异步数据消息并发送给异步数据消息存储服务端存储以被涉税数据采集客户端采集，而不是涉税数据本身，因此，不会因为数据源的涉税数据结构的变化而使存储服务端接收的异步数据消息受到影响，同时涉税数据以异步数据消息的形式保存在存储服务端也不会被随意改动，数据源发送给存储服务端的异步数据消息会实时被采集客户端读取，存储服务端也不会限制采集客户端的数量，因此，该系统能有效适应数据源的涉税数据结构的变化需求，使税务部门采集数据源的涉税数据安全快捷、实时性高、吞吐量大。
在一种可选的实施例中，所述异步数据消息包括涉税数据和所述涉税数据对应所述数据源的递增偏移量。
异步数据消息的递增偏移量可以方便数据源的发送以及异步数据消息存储服务端对接收到的异步数据消息进行统计与查询。
在一种可选的实施例中，所述异步数据消息存储服务端包括至少一个业务处理单元；
所述业务处理单元用于根据所述预设编码规则对所述异步数据消息进行编码；
所述业务处理单元还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储。
异步数据消息存储服务端包括至少一个业务处理单元，异步数据消息存储服务端将接受到的异步数据消息路由给相应的业务处理单元，业务处理单元对异步数据消息进行编码、分区存储，并维护异步数据消息的生命周期。
每个业务处理单元负责一个业务数据采集实例的分配和执行，使异步数据消息存储服务端的处理效率更高。
在一种可选的实施例中，所述业务处理单元具体用于：
根据部门简称+业务主题名称+日期+序列号的编码规则对所述异步数据消息进行编码。
异步数据消息的编码是异步数据消息在分区存储中的唯一标识，也是涉税数据采集客户端的涉税数据应用采集程序在读取异步数据消息时的唯一编码使得对异步数据消息的存储和采集的可区别性更好。
涉税数据应用采集程序也可以根据部门简称+业务主题名称+日期+任意顺序号的方式读取异步数据消息，只需要设置每一个异步数据消息的消息顺序号即可。
每个涉税数据应用采集程序读取到的异步数据消息时的唯一编码都会同步给异步数据消息存储服务端，在异步数据消息存储服务端中同时会维护各个涉税数据应用采集程序消费的唯一编码，异步数据消息存放时在分区中的编码是固定的，各个涉税数据应用采集程序指定读取的异步数据消息是可以按照部门简称+业务主题名称+日期+任意顺序号来动态改变序列号的，通过在涉税数据应用采集程序和异步数据消息存储服务端中同时维护已读消息唯一编码列表，确保所有异步数据消息得到读取，同时可用于统计数据流向，确保涉税数据安全。
在一种可选的实施例中，所述业务处理单元具体用于：
以空闲分区的大小为关键字构建哈希表；
根据所述异步数据消息的大小以及所述哈希表对所述异步数据消息进行分区存储。
以全部消息服务器集群内可利用空闲消息分区的分布规则遍历哈希函数，构造一张跨消息服务器集群、跨业务主题、以空闲消息分区大小为关键字的哈希表，记录空闲消息分区的链表表头指针；然后根据异步数据消息的编码、数据大小及结构头文件大小，通过哈希函数计算，得到满足异步数据消息分区存储需求的链表表头指针，获得相应的空闲消息分区表，从而实现异步消息的最佳分区存储。
以消息服务器集群空闲分区的大小为关键字构建哈希表来存储异步数据消息，充分利用存储服务端的空闲分区提高存储空间的利用率，同时可以提高了后续的查找速度。
在一种可选的实施例中，结合图2，每一所述业务处理单元(Unit)包括至少一个业务主题，每一所述业务主题包括至少一个分区，每一所述分区包括至少一个消息段；其中，每一所述消息段包括一个数据文件和一个相对于所述消息段起点的偏移量索引文件。
分区是消息服务器集群中最小的处理，一个分区就是一个先进先出队列，最终的异步数据消息会从队列的顶部进行追加。
在一种可选的实施例中，所述涉税数据采集客户端具体用于：
根据所述涉税数据采集客户端的涉税数据应用采集程序及所述哈希表查找所述异步数据消息的分区；
根据所述分区及所述偏移量索引文件获取所述异步数据消息所在的消息段；
根据所述消息段及所述偏移量索引文件在所述数据文件中获取所述涉税数据。
涉税数据应用采集程序根据异步数据消息的编码查找哈希表获取分区，然后根据偏移量索引文件获取异步数据消息在分区中的消息段及数据文件，接着根据对应的消息段的偏移量索引文件，进一步查找该异步数据消息在对应的数据文件中的偏移量，再根据编码规则从数据文件的偏移量开始读取并解析异步数据消息，得到涉税数据。根据分区、分段及偏移量索引文件读取涉税数据可以更加快速准确。在一种可选的实施例中，所述涉税数据采集客户端还用于：
根据所述涉税数据应用采集程序及本地配置文件中已消费的异步数据消息的信息编码清单，判断所述异步数据消息是否已消费；
若所述异步数据消息已消费，则读取涉税数据完成；
若所述异步数据消息没有消费，则对所述异步数据消息进行解析读取，并将读取的涉税数据存储到数据库中；同时将读取的所述异步数据消息的信息编码维护到所述信息编码清单中。
根据已消费的异步数据消息的信息编码清单避免重复读取涉税数据，节约资源；将已读取的信息编码维护到所述信息编码清单中，确保所有异步数据消息得到读取，同时可用于统计数据流向，确保政务数据安全。
在一种可选的实施例中，所述异步数据消息存储服务端还用于在预设的配置时间段内保留所有所述异步数据消息。
在一种可选的实施例中，所述异步数据消息存储服务端还用于在超出所述配置时间段后，将所有未被读取的所述异步数据消息保存到数据文件中。
预设的配置时间段可根据实际需求设置，例如24小时。在预设的配置时间段内保留所有所述异步数据消息，以使采集客户端有充足的缓冲时间读取数据，数据读取后为存储服务端释放分区空间；超出所述配置时间段后，将所有未被读取的所述异步数据消息保存到数据文件中，以使未被读取的异步数据消息不会丢失，方便后续数据查询及追踪。
实施本发明实施例具有如下有益效果：数据源、异步数据消息存储服务端及涉税数据采集客户端都可以采用分布式部署，且可以实现负载均衡。涉税数据被封装成异步数据消息并发送给异步数据消息存储服务端存储以被涉税数据采集客户端采集，不会因为数据源的涉税数据结构的变化而使存储服务端接收的异步数据消息受到影响，同时以异步数据消息的形式保存在存储服务端也不会被随意改动，数据源发送给存储服务端的异步数据消息会实时被采集客户端读取，存储服务端也不会限制采集客户端的数量，因此，该系统能有效适应数据源的涉税数据结构的变化需求，使税务部门采集数据源的涉税数据安全快捷、实时性高、吞吐量大。
另外，与现有的文件共享方式采集及数据库共享方式采集的单节点或者一对一连接方式相比，本发明实施例的异步数据存储服务端及涉税数据采集客户端的服务器均采用分布式服务器，可提供更强的节点容错性及数据处理吞吐速度，通过在异步数据消息存储服务端的各个节点之间定义网络连接服务，实现各个节点之间的消息同步，涉税数据采集客户端在可以在任一节点获取异步数据消息，并对异步数据消息所对应的涉税数据进行读取、持久化，从而形成了一条可靠安全、业务主题无关的涉税数据采集链路。
虽然本发明以较佳实施例揭露如上，但并非用以限定本发明实施的范围。任何本领域的普通技术人员，在不脱离本发明的发明范围内，当可作些许的改进，即凡是依照本发明所做的同等改进，应为本发明的范围所涵盖。
Claims (10)
1.一种基于异步消息机制的涉税数据采集系统，其特征在于，所述系统包括异步数据消息存储服务端和涉税数据采集客户端；
所述异步数据消息存储服务端用于接收数据源发送的异步数据消息；其中，所述异步数据消息由所述数据源对涉税数据进行封装获得；
所述异步数据消息存储服务端还用于根据预设编码规则对所述异步数据消息进行编码；
所述异步数据消息存储服务端还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储；
所述涉税数据采集客户端用于从所述异步数据消息存储服务端的分区获取所述异步数据消息并进行处理以获得所述涉税数据。
2.如权利要求1所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述异步数据消息包括涉税数据和所述涉税数据对应所述数据源的递增偏移量。
3.如权利要求1所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述异步数据消息存储服务端包括至少一个业务处理单元；
所述业务处理单元用于根据所述预设编码规则对所述异步数据消息进行编码；
所述业务处理单元还用于根据所述异步数据消息及其对应的信息编码，对所述异步数据消息进行分区存储。
4.如权利要求3所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述业务处理单元具体用于：
根据部门简称+业务主题名称+日期+序列号的编码规则对所述异步数据消息进行编码。
5.如权利要求4所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述业务处理单元具体用于：
以空闲分区的大小为关键字构建哈希表；
根据所述异步数据消息的大小以及所述哈希表对所述异步数据消息进行分区存储。
6.如权利要求5所述的基于异步消息机制的涉税数据采集系统，其特征在于，每一所述业务处理单元包括至少一个业务主题，每一所述业务主题包括至少一个分区，每一所述分区包括至少一个消息段；其中，每一所述消息段包括一个数据文件和一个相对于所述消息段起点的偏移量索引文件。
7.如权利要求6所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述涉税数据采集客户端具体用于：
根据所述涉税数据采集客户端的涉税数据应用采集程序及所述哈希表查找所述异步数据消息的分区；
根据所述分区及所述偏移量索引文件获取所述异步数据消息所在的消息段；
根据所述消息段及所述偏移量索引文件在所述数据文件中获取所述涉税数据。
8.如权利要求7所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述涉税数据采集客户端还用于：
根据所述涉税数据应用采集程序及本地配置文件中已消费的异步数据消息的信息编码清单，判断所述异步数据消息是否已消费；
若所述异步数据消息已消费，则读取涉税数据完成；
若所述异步数据消息没有消费，则对所述异步数据消息进行解析读取，并将读取的涉税数据存储到数据库中；同时将读取的所述异步数据消息的信息编码维护到所述信息编码清单中。
9.如权利要求1所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述异步数据消息存储服务端还用于在预设的配置时间段内保留所有所述异步数据消息。
10.如权利要求9所述的基于异步消息机制的涉税数据采集系统，其特征在于，所述异步数据消息存储服务端还用于在超出所述配置时间段后，将所有未被读取的所述异步数据消息保存到数据文件中。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910010469.6A CN109815292A (zh) | 2019-01-03 | 2019-01-03 | 一种基于异步消息机制的涉税数据采集系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910010469.6A CN109815292A (zh) | 2019-01-03 | 2019-01-03 | 一种基于异步消息机制的涉税数据采集系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109815292A true CN109815292A (zh) | 2019-05-28 |
Family
ID=66603931
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910010469.6A Pending CN109815292A (zh) | 2019-01-03 | 2019-01-03 | 一种基于异步消息机制的涉税数据采集系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109815292A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110719332A (zh) * | 2019-10-17 | 2020-01-21 | 北京旷视科技有限公司 | 数据传输方法、装置、系统、计算机设备和存储介质 |
| CN111897714A (zh) * | 2020-06-24 | 2020-11-06 | 方欣科技有限公司 | 一种基于辅助测试工具的测试数据沉淀方法、装置及系统 |
Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103309728A (zh) * | 2012-03-12 | 2013-09-18 | 腾讯科技（深圳）有限公司 | 异步请求处理方法和设备 |
| CN106250444A (zh) * | 2016-07-27 | 2016-12-21 | 北京集奥聚合科技有限公司 | 一种异构数据源的实时入库系统及方法 |
| CN106572146A (zh) * | 2015-10-13 | 2017-04-19 | 腾讯科技（深圳）有限公司 | 消息发送方法及消息发送装置 |
| CN106649496A (zh) * | 2016-10-10 | 2017-05-10 | 国信优易数据有限公司 | 一种政务数据采集共享系统与方法 |
| CN107153588A (zh) * | 2017-05-12 | 2017-09-12 | 成都优孚达信息技术有限公司 | 数据编码存储方法 |
| US20170272100A1 (en) * | 2016-03-15 | 2017-09-21 | Cloud Crowding Corp. | Distributed Storage System Data Management And Security |
| CN107729366A (zh) * | 2017-09-08 | 2018-02-23 | 广东省建设信息中心 | 一种普适多源异构大规模数据同步系统 |
| CN107766463A (zh) * | 2017-09-28 | 2018-03-06 | 北京北信源软件股份有限公司 | 一种多业务驱动的中间件系统的存储处理方法及装置 |
-
2019
- 2019-01-03 CN CN201910010469.6A patent/CN109815292A/zh active Pending
Patent Citations (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103309728A (zh) * | 2012-03-12 | 2013-09-18 | 腾讯科技（深圳）有限公司 | 异步请求处理方法和设备 |
| CN106572146A (zh) * | 2015-10-13 | 2017-04-19 | 腾讯科技（深圳）有限公司 | 消息发送方法及消息发送装置 |
| US20170272100A1 (en) * | 2016-03-15 | 2017-09-21 | Cloud Crowding Corp. | Distributed Storage System Data Management And Security |
| CN106250444A (zh) * | 2016-07-27 | 2016-12-21 | 北京集奥聚合科技有限公司 | 一种异构数据源的实时入库系统及方法 |
| CN106649496A (zh) * | 2016-10-10 | 2017-05-10 | 国信优易数据有限公司 | 一种政务数据采集共享系统与方法 |
| CN107153588A (zh) * | 2017-05-12 | 2017-09-12 | 成都优孚达信息技术有限公司 | 数据编码存储方法 |
| CN107729366A (zh) * | 2017-09-08 | 2018-02-23 | 广东省建设信息中心 | 一种普适多源异构大规模数据同步系统 |
| CN107766463A (zh) * | 2017-09-28 | 2018-03-06 | 北京北信源软件股份有限公司 | 一种多业务驱动的中间件系统的存储处理方法及装置 |
Non-Patent Citations (2)
| Title |
|---|
| 朱东妹: "《数据仓库与数据挖掘概念、方法及图书馆应用》", 31 August 2017 * |
| 汤小丹等: "《计算机操作系统 第4版》", 31 May 2014 * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN110719332A (zh) * | 2019-10-17 | 2020-01-21 | 北京旷视科技有限公司 | 数据传输方法、装置、系统、计算机设备和存储介质 |
| CN110719332B (zh) * | 2019-10-17 | 2022-07-26 | 北京旷视科技有限公司 | 数据传输方法、装置、系统、计算机设备和存储介质 |
| CN111897714A (zh) * | 2020-06-24 | 2020-11-06 | 方欣科技有限公司 | 一种基于辅助测试工具的测试数据沉淀方法、装置及系统 |
| CN111897714B (zh) * | 2020-06-24 | 2024-03-26 | 方欣科技有限公司 | 一种基于辅助测试工具的测试数据沉淀方法、装置及系统 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107943951B (zh) | 一种区块链业务信息的检索方法及系统 | |
| CN110377666B (zh) | 基于cmsp消息中间件进行异源数据库间数据同步的方法 | |
| CN107729366B (zh) | 一种普适多源异构大规模数据同步系统 | |
| CN104424229B (zh) | 一种多维度拆分的计算方法及系统 | |
| CN109714358A (zh) | 一种微服务化的注塑mes云平台 | |
| CN109325072A (zh) | 一种基于CMSP实现跨网闸Oracle数据库同步的方法及装置 | |
| CN102419766A (zh) | 基于hdfs分布式文件系统的数据冗余及文件操作方法 | |
| CN108536743A (zh) | 一种指控系统数据库数据同步系统 | |
| CN109815292A (zh) | 一种基于异步消息机制的涉税数据采集系统 | |
| CN102882951B (zh) | 一种人员定位远程无线多级联网系统 | |
| CN109086410A (zh) | 流式海量数据的处理方法及系统 | |
| CN104539681A (zh) | 分布式gis加速系统和gis服务的处理方法 | |
| CN104092758B (zh) | 一种分布式高速云存储服务器集群系统的读取方法 | |
| EP3803616A1 (en) | Change notifications for object storage | |
| CN106487880B (zh) | 一种基于北斗短报文通信的灾害发生区域传输系统 | |
| CN108228432A (zh) | 一种分布式链路跟踪、分析方法及服务器、全局调度器 | |
| CN109525633A (zh) | 区块链网络、基于区块链网络的消息发送、消息接收方法 | |
| CN114785805B (zh) | 一种数据传输方法、装置、电子设备以及存储介质 | |
| Bieniasz et al. | SocialStegDisc: Application of steganography in social networks to create a file system | |
| CN112910974B (zh) | 一种基于区块链系统架构的系统及方法 | |
| CN113114757B (zh) | 一种文件传输方法、装置和设备 | |
| CN109189813A (zh) | 一种数据共享方法及装置 | |
| CN204009903U (zh) | 一种电网海量实时数据服务平台 | |
| CN106096824A (zh) | 一种主配网一体化图形资源共享方法 | |
| US11036765B1 (en) | System and method for dynamic data ingestion |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190528 |
|
| RJ01 | Rejection of invention patent application after publication |