CN106973050A - 一种跨网闸信息共享的方法及装置 - Google Patents
一种跨网闸信息共享的方法及装置 Download PDFInfo
- Publication number
- CN106973050A CN106973050A CN201710180443.7A CN201710180443A CN106973050A CN 106973050 A CN106973050 A CN 106973050A CN 201710180443 A CN201710180443 A CN 201710180443A CN 106973050 A CN106973050 A CN 106973050A
- Authority
- CN
- China
- Prior art keywords
- file
- data file
- data
- lists
- documents
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/02—Network architectures or network communication protocols for network security for separating internal from external traffic, e.g. firewalls
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Hardware Design (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- Computer And Data Communications (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明公开了一种跨网闸信息共享的方法及装置,该方法包括:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,文件信息包括对应数据文件的文件大小;利用网闸将多个数据文件及文件清单由网闸左侧的摆渡文件向网闸右侧的摆渡文件传输;由网闸右侧的摆渡文件获取文件清单,按照文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行判断该数据文件与对应文件信息是否一致的步骤。从而保证了数据文件传输前后的一致性,解决了现有技术中存在的问题。
Description
技术领域
本发明涉及数据信息共享技术领域,更具体地说,涉及一种跨网闸信息共享的方法及装置。
背景技术
当前很多地方党政机关网络是多层隔离,以某市政法机关为例:包括政务网、政法网、外网,隔离手段是物理隔离,通过把网络物理隔绝,保证了网络安全。但是这样的安全措施,造成了网络和网络之间无法传递信息,即使是用户想共享给网络另一侧用户的信息也无法正常传递。为了解决这个既要物理隔离网络,又要实现信息安全共享的问题,IT界推出了安全隔离网闸(简称网闸)。网闸可以在不开放端口的情况下,就能把各种信息以文件的形式从网络一侧摆渡到另一侧,而将数据在经过网闸前及经过网闸后的处理经常利用中间件来实现。
目前提供的技术在处理数据量较小、数据传输频度较低、实时性要求低的情况时,一切正常。但是当遇到数据高并发、数据量大、实时性要求高的情况时,往往会出现数据漏传丢失的情况,例如网闸一侧的数据源有50000条消息需要传递,经过中间件产品及网闸的摆渡后,网闸另一侧数据目的地(数据库或者JMS消息接收方)可能只收到了40000条,丢失了10000条消息。
综上所述,现有技术中进行跨网闸信息共享的技术方案存在数据量大、并发度高且实时性要求高时经常出现数据丢失的问题。
发明内容
本发明的目的是提供一种跨网闸信息共享的方法及装置,以解决现有技术中进行跨网闸信息共享的技术方案存在的数据量大、并发度高且实时性要求高时经常出现数据丢失的问题。
为了实现上述目的,本发明提供如下技术方案:
一种跨网闸信息共享的方法,包括:
获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,所述文件信息包括对应数据文件的文件大小;
利用网闸将多个所述数据文件及所述文件清单由所述网闸左侧的摆渡文件向所述网闸右侧的摆渡文件传输;
由所述网闸右侧的摆渡文件获取所述文件清单,按照所述文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
优选的,按照所述文件清单中包含的文件信息依次获取对应的数据文件,包括:
按照所述文件清单中包含的文件序号依次获取对应的数据文件,所述文件序号包含于所述文件信息中。
优选的,获取待传输的多个数据文件,包括:
对数据源进行监控,并当所述数据源发生变化时将该变化产生的增量数据转化成多个数据文件;
或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
优选的,确定一个数据文件接收完毕之后,还包括:
在所述文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
优选的,确定全部数据文件传输完毕之后,还包括:
清除与所述数据文件对应的文件清单。
一种跨网闸信息共享的装置,包括:
注册模块,用于:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,所述文件信息包括对应数据文件的文件大小;
传输模块,用于:利用网闸将多个所述数据文件及所述文件清单由所述网闸左侧的摆渡文件向所述网闸右侧的摆渡文件传输;
接收模块,用于:由所述网闸右侧的摆渡文件获取所述文件清单,按照所述文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
优选的,所述接收模块包括:
接收单元,用于:按照所述文件清单中包含的文件序号依次获取对应的数据文件,所述文件序号包含于所述文件信息中。
优选的,所述注册模块包括:
获取单元,用于:对数据源进行监控,并当所述数据源发生变化时将该变化产生的增量数据转化成多个数据文件;或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
优选的,还包括:
标识模块,用于:确定一个数据文件接收完毕之后,在所述文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
优选的,还包括:
清除模块,用于:确定全部数据文件传输完毕之后,清除与所述数据文件对应的文件清单。
本发明提供了一种跨网闸信息共享的方法及装置,其中该方法包括:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,所述文件信息包括对应数据文件的文件大小;利用网闸将多个所述数据文件及所述文件清单由所述网闸左侧的摆渡文件向所述网闸右侧的摆渡文件传输;由所述网闸右侧的摆渡文件获取所述文件清单,按照所述文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。本发明提供的技术方案中,在对数据文件利用网闸进行传输前,先在文件清单中注册包含有数据文件的文件大小的文件信息,由此利用网闸实现对数据文件及文件清单的传输后,可以由文件清单中获取到文件信息,并按照获取到的文件信息依次获取到对应的数据文件,接收每个数据文件时,均需要判断获取到的数据文件与对应文件信息是否一致,如果一致,说明数据文件的文件大小与传输前的文件大小一致,进一步说明该数据文件已经完成传输,如果不一致,则说明数据文件的文件大小与传输前的文件大小不一致,进一步说明该数据文件还未传输完毕,此时等待预设时间段后重新获取该数据文件并执行上述判断数据文件及对应文件信息是否一致的步骤,从而保证了获取到的数据文件为传输完毕的数据文件,也即保证了数据文件传输前后的一致性,解决了现有技术中进行跨网闸信息共享的技术方案存在的数据量大、并发度高且实时性要求高时经常出现数据丢失的问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
图1为本发明实施例提供的一种跨网闸信息共享的方法的流程图;
图2为本发明实施例提供的一种跨网闸信息共享的装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,其示出了本发明实施例提供的一种跨网闸信息共享的方法的流程图,可以包括:
S11:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,文件信息包括对应数据文件的文件大小。
其中待传输的数据文件即为需要通过网闸进行传输的数据文件,将每个数据文件的文件信息注册到文件清单中可以是每个数据文件对应一条文件信息,而文件信息可以包括数据文件的相关属性,如文件大小、文件名称等,当然还可以根据实际需要进行其他具体设定,均在本发明的保护范围之内。另外该文件清单可以是获取到待传输的多个数据文件后自动生成的,也可以是预先生成的,具体可根据实际需要进行设定。
S12:利用网闸将多个数据文件及文件清单由网闸左侧的摆渡文件向网闸右侧的摆渡文件传输。
利用网闸实现数据文件及文件清单的传输具体可以包括:将数据文件及文件清单传输到网闸对应数据文件发送端一侧(即左侧)的摆渡文件下,由网闸将数据文件及文件清单将其一侧摆渡文件下的数据文件及文件清单传输到其另一侧(对应数据文件的接收端一侧,即右侧)摆渡文件下供获取,从而完成对数据文件及文件清单的传输。另外左侧和右侧是相对而言的,也即与数据文件发送端对应一侧均可以称之为左侧,与数据文件接收端对应一侧均可以称之为右侧,而网闸的同一侧可能对应发送端,也可能对应接收端。
S13:由网闸右侧的摆渡文件获取文件清单,按照文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
为什么现有技术中网闸两侧出现数据文件不一致的问题,尤其是在各个模块均正常运行的情况下?发明人发现,根本原因是由于网闸在将数据文件由其一侧摆渡到另一侧时,如果信息较大对应生产的数据文件数量很多,那么摆渡的时间会比较长,但是如果这时(即在该文件摆渡尚未完成之前)去解析这个文件,那么获得的信息就是不完整的,把这个信息推送到目的端(数据库或数据接收程序)就出现了数据漏传的情况。因此本申请中由网闸右侧的摆渡文件中获取文件清单,按照该清单中包含的文件信息依次获取对应的数据文件,并且每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果一致,则说明获取到的数据文件的文件大小与文件信息中的文件大小一致,此时确定该数据文件传输完毕,如果还有未获取的数据文件,则获取下一数据文件,如果没有未获取的数据文件,则确定全部数据文件均传输完毕;如果不一致,则说明获取到的数据文件的文件大小与文件信息中的文件大小不一致,此时确定该数据文件未传输完毕,待经过预先根据实际需要设定的预设时间段后再重新获取该数据文件并判断其与文件信息的一致性,从而保证了最终获取到的数据文件为传输完毕的数据文件,也即保证了数据文件的完整性。
本发明提供的技术方案中,在对数据文件利用网闸进行传输前,先在文件清单中注册包含有数据文件的文件大小的文件信息,由此利用网闸实现对数据文件及文件清单的传输后,可以由文件清单中获取到文件信息,并按照获取到的文件信息依次获取到对应的数据文件,接收每个数据文件时,均需要判断获取到的数据文件与对应文件信息是否一致,如果一致,说明数据文件的文件大小与传输前的文件大小一致,进一步说明该数据文件已经完成传输,如果不一致,则说明数据文件的文件大小与传输前的文件大小不一致,进一步说明该数据文件还未传输完毕,此时等待预设时间段后重新获取该数据文件并执行上述判断数据文件及对应文件信息是否一致的步骤,从而保证了获取到的数据文件为传输完毕的数据文件,也即保证了数据文件传输前后的一致性,解决了现有技术中进行跨网闸信息共享的技术方案存在的数据量大、并发度高且实时性要求高时经常出现数据丢失的问题。
另外本申请中利用文件清单实现数据一致性,文件清单的体积很小,从而保证了自身传输的高效性,
本发明实施例提供的一种跨网闸信息共享的方法,按照文件清单中包含的文件信息依次获取对应的数据文件,可以包括:
按照文件清单中包含的文件序号依次获取对应的数据文件,文件序号包含于文件信息中。
需要说明的是,在向文件清单中注册对应文件信息时,可以将为数据文件进行排序得到的文件序号包含于文件信息中,其中文件序号即对应数据文件的顺序,从而按照文件序号依次获取对应的数据文件能够保证接收到的数据文件的顺序为数据文件中包含的信息应具备的顺序,从而保证了网闸两侧信息的顺序一致性,进一步保证了数据文件的顺利传授。
本发明实施例提供的一种跨网闸信息共享的方法,应用范围包括但不限于跨网闸的数据库同步场景,跨网闸的JMS消息同步场景,具体来说,获取待传输的多个数据文件,可以包括:
对数据源进行监控,并当数据源发生变化时将该变化产生的增量数据转化成多个数据文件;
或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
其中跨网闸的数据库同步场景对应对数据源进行监控并将监控得到的增量数据转化成对应多个数据文件,具体来说,在该应用场景下,本发明实施例提供的技术方案可以包括以下步骤:
通过定时扫描数据源的变动得到对应的增量数据,把增量数据转化为数据文件;如果定时扫描的间隔周期很短,且数据源新增数据量很大,这时往往会生成多个数据文件;
在文件清单里里注册数据文件的文件信息,可以包括文件序号、文件名称、文件大小,每条注册信息对应一个数据文件的文件信息;
把文件清单和数据文件传送到网闸左侧的摆渡文件夹下;
网闸定时把文件清单和数据文件传送到网闸右侧的摆渡文件夹下;
订阅文件清单,从中获取数据文件的文件信息;
按照文件序号及文件名称去摆渡过来的数据文件中查找对应的数据文件。
比较文件清单注册的文件信息(如文件大小)和读取数据文件获得的文件大小是否一致,如果一致,则说明该数据文件已经传输完成,准许对该数据文件继续下一步处理(包括解析入库等操作),然后继续按照文件清单中注册的文件序号去查找并比较其余的数据文件;如果不一致,则说明该数据文件尚未传输完成,目前还不能处理该数据文件,进行线程等待,目的是等待该文件的继续传输,然后使用定时循环判断机制,即:每隔预设时间段(如60S)再读取一次该数据文件的文件信息,和清单中注册的该数据文件的文件信息进行比对,以判定该数据文件是否已传输完成,一旦一致,则表明数据文件传输完成,就可以继续按照文件清单中注册的文件序号去查找并比较其余的数据文件。
其中跨网闸的JMS消息同步场景对应接收应用程序发送的多个JMS消息并将其转化成对应多个数据文件,具体来说,在该应用场景下,本发明实施例提供的技术方案可以包括以下步骤:
定时接收网闸左侧的应用程序发送的JMS消息,然后把每条消息转换为一个数据文件;如果应用程序批量发送JMS消息,那么会生成多个数据文件;
在文件清单里注册数据文件的文件信息,可以包括文件序号、名称、大小,每条注册信息对应一个数据文件的文件信息;
把文件清单和数据文件传送到网闸左侧的摆渡文件夹下;
网闸定时把文件清单和数据文件传送到网闸右侧的摆渡文件夹下;
订阅文件清单,从中获取数据文件的文件信息;
按照文件序号及文件名称去摆渡过来的数据文件中查找对应的数据文件。
比较文件清单注册的文件信息(主要包括文件大小)和读取数据文件获得的文件大小是否一致,如果一致,则说明该数据文件已经传输完成,准许对该数据文件继续下一步处理(包括把消息读入到JMS Server等操作),然后继续按照文件清单中注册的文件序号去查找并比较其余的数据文件;如果不一致,则说明该数据文件尚未传输完成,目前还不能处理该数据文件,进行线程等待,目的是等待该文件的继续传输,然后使用定时循环判断机制,即:每隔预设时间段(如60S)再读取一次该数据文件的文件信息,和清单中注册的该数据文件的文件信息进行比对,以判定该数据文件是否已传输完成,一旦一致,则表明数据文件传输完成,就可以继续按照文件清单中注册的文件序号去查找并比较其余的数据文件。
可见对于不同的应用场景均可以使用本申请公开的上述技术方案实现对应的操作,从而保证了不同应用场景下数据传输的一致性。
另外需要说明的是,本发明实施例提供的上述技术方案中涉及到对数据进行的处理均可以通过对应中间件来实现,如从数据源(数据库、发送JMS消息的应用程序等)获取数据或消息,将其转化成数据文件以及将数据文件放到网闸左侧的摆渡文件下;从网闸右侧的摆渡文件下获取数据文件,将数据文件转化为对应数据或消息并将其送入目的地(数据库、JMS消息接收方等),从而高效准确的实现对应操作,进一步满足业务对信息时效性和准确性的需求。
本发明实施例提供的一种跨网闸信息共享的方法,确定一个数据文件接收完毕之后,还可以包括:
在文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
其中已被处理完毕的标识可以根据实际需要进行设定,如“已处理”字样等,从而通过文件清单的标识即可获知对应数据文件是否已经处理完毕,从而在获取数据文件时发生遗漏,同时避免了重复获取数据文件的情况出现。
本发明实施例提供的一种跨网闸信息共享的方法,确定全部数据文件传输完毕之后,还可以包括:
清除与数据文件对应的文件清单。
清除与多个数据文件对应的文件清单,不仅避免了对文件清单的重复处理,而且能够节省存储资源,从而使得本发明实施例提供的上述技术方案能够高效顺利的进行。
另外如果有多个文件清单存在(例如前一个文件清单尚没有处理完毕,下一个文件清单已经通过网闸摆渡过来),则按照文件清单摆渡生成时间来排序,越早通过网闸摆渡过来的文件清单越优先处理,从而保证了对多个文件清单的有序处理。
本发明实施例还提供了一种跨网闸信息共享的装置,如图2所示,可以包括:
注册模块11,用于:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,文件信息包括对应数据文件的文件大小;
传输模块12,用于:利用网闸将多个数据文件及文件清单由网闸左侧的摆渡文件向网闸右侧的摆渡文件传输;
接收模块13,用于:由网闸右侧的摆渡文件获取文件清单,按照文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
本发明实施例提供的一种跨网闸信息共享的装置,接收模块可以包括:
接收单元,用于:按照文件清单中包含的文件序号依次获取对应的数据文件,文件序号包含于文件信息中。
本发明实施例提供的一种跨网闸信息共享的装置,注册模块可以包括:
获取单元,用于:对数据源进行监控,并当数据源发生变化时将该变化产生的增量数据转化成多个数据文件;或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
本发明实施例提供的一种跨网闸信息共享的装置,注册模块可以包括:
获取单元,用于:对数据源进行监控,并当数据源发生变化时将该变化产生的增量数据转化成多个数据文件;或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
本发明实施例提供的一种跨网闸信息共享的装置,还可以包括:
标识模块,用于:确定一个数据文件接收完毕之后,在文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
本发明实施例提供的一种跨网闸信息共享的装置,还可以包括:
清除模块,用于:确定全部数据文件传输完毕之后,清除与数据文件对应的文件清单。
本发明实施例提供的一种跨网闸信息共享的装置中相关部分的说明请参见本发明实施例提供的一种跨网闸信息共享的方法中对应部分的详细说明,在此不再赘述。
对所公开的实施例的上述说明,使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其它实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.一种跨网闸信息共享的方法,其特征在于,包括:
获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,所述文件信息包括对应数据文件的文件大小;
利用网闸将多个所述数据文件及所述文件清单由所述网闸左侧的摆渡文件向所述网闸右侧的摆渡文件传输;
由所述网闸右侧的摆渡文件获取所述文件清单,按照所述文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
2.根据权利要求1所述的方法,其特征在于,按照所述文件清单中包含的文件信息依次获取对应的数据文件,包括:
按照所述文件清单中包含的文件序号依次获取对应的数据文件,所述文件序号包含于所述文件信息中。
3.根据权利要求2所述的方法,其特征在于,获取待传输的多个数据文件,包括:
对数据源进行监控,并当所述数据源发生变化时将该变化产生的增量数据转化成多个数据文件;
或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
4.根据权利要求1所述的方法,其特征在于,确定一个数据文件接收完毕之后,还包括:
在所述文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
5.根据权利要求1所述的方法,其特征在于,确定全部数据文件传输完毕之后,还包括:
清除与所述数据文件对应的文件清单。
6.一种跨网闸信息共享的装置,其特征在于,包括:
注册模块,用于:获取待传输的多个数据文件,并将每个数据文件的文件信息注册到文件清单中,所述文件信息包括对应数据文件的文件大小;
传输模块,用于:利用网闸将多个所述数据文件及所述文件清单由所述网闸左侧的摆渡文件向所述网闸右侧的摆渡文件传输;
接收模块,用于:由所述网闸右侧的摆渡文件获取所述文件清单,按照所述文件清单中包含的文件信息依次获取对应的数据文件,并在每获取到一个数据文件后判断该数据文件与对应文件信息是否一致,如果是,则确定该数据文件传输完毕,如果否,则经过预设时间段后重新获取该数据文件并执行所述判断该数据文件与对应文件信息是否一致的步骤。
7.根据权利要求6所述的装置,其特征在于,所述接收模块包括:
接收单元,用于:按照所述文件清单中包含的文件序号依次获取对应的数据文件,所述文件序号包含于所述文件信息中。
8.根据权利要求7所述的装置,其特征在于,所述注册模块包括:
获取单元,用于:对数据源进行监控,并当所述数据源发生变化时将该变化产生的增量数据转化成多个数据文件;或者接收应用程序发送的多个JMS消息,并将每个JMS消息均转化成对应的数据文件,得到多个与JMS消息一一对应的数据文件。
9.根据权利要求6所述的装置,其特征在于,还包括:
标识模块,用于:确定一个数据文件接收完毕之后,在所述文件清单中与当前接收完毕的数据文件对应位置处注册该数据文件已被处理完毕的标识。
10.根据权利要求6所述的装置,其特征在于,还包括:
清除模块,用于:确定全部数据文件传输完毕之后,清除与所述数据文件对应的文件清单。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710180443.7A CN106973050A (zh) | 2017-03-23 | 2017-03-23 | 一种跨网闸信息共享的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710180443.7A CN106973050A (zh) | 2017-03-23 | 2017-03-23 | 一种跨网闸信息共享的方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106973050A true CN106973050A (zh) | 2017-07-21 |
Family
ID=59329558
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710180443.7A Pending CN106973050A (zh) | 2017-03-23 | 2017-03-23 | 一种跨网闸信息共享的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106973050A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109005218A (zh) * | 2018-07-12 | 2018-12-14 | 浪潮软件集团有限公司 | 一种云消息服务平台跨网闸有序传输数据的方法及装置 |
CN109325072A (zh) * | 2018-07-12 | 2019-02-12 | 浪潮软件集团有限公司 | 一种基于CMSP实现跨网闸Oracle数据库同步的方法及装置 |
CN109660547A (zh) * | 2018-12-28 | 2019-04-19 | 北京旷视科技有限公司 | 数据传输方法、数据发送装置、数据接收装置和系统 |
CN110888790A (zh) * | 2019-11-29 | 2020-03-17 | 杭州迪普科技股份有限公司 | 日志管理方法及装置、电子设备、存储介质 |
CN113497790A (zh) * | 2020-04-01 | 2021-10-12 | 海能达通信股份有限公司 | 一种基于网闸的数据传输方法、系统及计算机存储介质 |
CN113965387A (zh) * | 2021-10-25 | 2022-01-21 | 杭州安恒信息技术股份有限公司 | 数据同步方法、系统、可读存储介质及计算机设备 |
CN114124929A (zh) * | 2021-09-29 | 2022-03-01 | 奇安信科技集团股份有限公司 | 跨网络的数据处理方法和装置 |
CN114257580A (zh) * | 2021-12-22 | 2022-03-29 | 北京博思致新互联网科技有限责任公司 | 边界网闸无感交互方法 |
CN114390047A (zh) * | 2022-03-23 | 2022-04-22 | 北京国联政信科技有限公司 | 基于数字包裹的跨网段文件交换方法和装置 |
CN114422504A (zh) * | 2022-01-24 | 2022-04-29 | 中国工商银行股份有限公司 | 数据传输方法及相关装置 |
CN114697118A (zh) * | 2022-04-07 | 2022-07-01 | 西安热工研究院有限公司 | 一种用于反向穿网闸的测试方法及系统 |
CN115118478A (zh) * | 2022-06-22 | 2022-09-27 | 平安科技(深圳)有限公司 | 基于网闸的数据传输方法、系统、设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08235203A (ja) * | 1995-02-28 | 1996-09-13 | Nec Software Ltd | ファイル一覧の抽出方法とその装置 |
JP3386964B2 (ja) * | 1995-11-20 | 2003-03-17 | シャープ株式会社 | ゲートウェイ装置 |
CN101754221A (zh) * | 2008-12-19 | 2010-06-23 | 中国移动通信集团山东有限公司 | 异构系统间的数据传输方法及数据传输系统 |
CN103997495A (zh) * | 2014-05-23 | 2014-08-20 | 中国人民解放军理工大学 | 一种安全隔离文件传输控制方法 |
CN104363221A (zh) * | 2014-11-10 | 2015-02-18 | 青岛微智慧信息有限公司 | 一种网络安全隔离文件传输控制方法 |
CN105320554A (zh) * | 2015-12-11 | 2016-02-10 | 网易(杭州)网络有限公司 | 程序更新的方法、用于程序更新的客户端及系统 |
CN105656902A (zh) * | 2016-01-15 | 2016-06-08 | 深圳市利谱信息技术有限公司 | 一种基于光传输的单向可靠传输及控制系统 |
GB2540381A (en) * | 2015-07-14 | 2017-01-18 | Cyberoptics Ltd | System and method for unidirectional and secure file transfer |
-
2017
- 2017-03-23 CN CN201710180443.7A patent/CN106973050A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08235203A (ja) * | 1995-02-28 | 1996-09-13 | Nec Software Ltd | ファイル一覧の抽出方法とその装置 |
JP3386964B2 (ja) * | 1995-11-20 | 2003-03-17 | シャープ株式会社 | ゲートウェイ装置 |
CN101754221A (zh) * | 2008-12-19 | 2010-06-23 | 中国移动通信集团山东有限公司 | 异构系统间的数据传输方法及数据传输系统 |
CN103997495A (zh) * | 2014-05-23 | 2014-08-20 | 中国人民解放军理工大学 | 一种安全隔离文件传输控制方法 |
CN104363221A (zh) * | 2014-11-10 | 2015-02-18 | 青岛微智慧信息有限公司 | 一种网络安全隔离文件传输控制方法 |
GB2540381A (en) * | 2015-07-14 | 2017-01-18 | Cyberoptics Ltd | System and method for unidirectional and secure file transfer |
CN105320554A (zh) * | 2015-12-11 | 2016-02-10 | 网易(杭州)网络有限公司 | 程序更新的方法、用于程序更新的客户端及系统 |
CN105656902A (zh) * | 2016-01-15 | 2016-06-08 | 深圳市利谱信息技术有限公司 | 一种基于光传输的单向可靠传输及控制系统 |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109005218A (zh) * | 2018-07-12 | 2018-12-14 | 浪潮软件集团有限公司 | 一种云消息服务平台跨网闸有序传输数据的方法及装置 |
CN109325072A (zh) * | 2018-07-12 | 2019-02-12 | 浪潮软件集团有限公司 | 一种基于CMSP实现跨网闸Oracle数据库同步的方法及装置 |
CN109660547A (zh) * | 2018-12-28 | 2019-04-19 | 北京旷视科技有限公司 | 数据传输方法、数据发送装置、数据接收装置和系统 |
CN110888790A (zh) * | 2019-11-29 | 2020-03-17 | 杭州迪普科技股份有限公司 | 日志管理方法及装置、电子设备、存储介质 |
CN110888790B (zh) * | 2019-11-29 | 2024-02-27 | 杭州迪普科技股份有限公司 | 日志管理方法及装置、电子设备、存储介质 |
CN113497790B (zh) * | 2020-04-01 | 2023-01-17 | 海能达通信股份有限公司 | 一种基于网闸的数据传输方法、系统及计算机存储介质 |
CN113497790A (zh) * | 2020-04-01 | 2021-10-12 | 海能达通信股份有限公司 | 一种基于网闸的数据传输方法、系统及计算机存储介质 |
CN114124929A (zh) * | 2021-09-29 | 2022-03-01 | 奇安信科技集团股份有限公司 | 跨网络的数据处理方法和装置 |
CN114124929B (zh) * | 2021-09-29 | 2024-03-29 | 奇安信科技集团股份有限公司 | 跨网络的数据处理方法和装置 |
CN113965387A (zh) * | 2021-10-25 | 2022-01-21 | 杭州安恒信息技术股份有限公司 | 数据同步方法、系统、可读存储介质及计算机设备 |
CN114257580A (zh) * | 2021-12-22 | 2022-03-29 | 北京博思致新互联网科技有限责任公司 | 边界网闸无感交互方法 |
CN114422504A (zh) * | 2022-01-24 | 2022-04-29 | 中国工商银行股份有限公司 | 数据传输方法及相关装置 |
CN114390047A (zh) * | 2022-03-23 | 2022-04-22 | 北京国联政信科技有限公司 | 基于数字包裹的跨网段文件交换方法和装置 |
CN114697118A (zh) * | 2022-04-07 | 2022-07-01 | 西安热工研究院有限公司 | 一种用于反向穿网闸的测试方法及系统 |
CN115118478A (zh) * | 2022-06-22 | 2022-09-27 | 平安科技(深圳)有限公司 | 基于网闸的数据传输方法、系统、设备及存储介质 |
CN115118478B (zh) * | 2022-06-22 | 2023-10-13 | 平安科技(深圳)有限公司 | 基于网闸的数据传输方法、系统、设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106973050A (zh) | 一种跨网闸信息共享的方法及装置 | |
CN103916482B (zh) | 一种基于sqlite的数据同步传输方法 | |
DE112015004267T5 (de) | Speicherung und Übertragung von Anwendungsdaten zwischen Vorrichtungen | |
JP2019506696A (ja) | 資源取得方法および関係した装置 | |
CN103078881A (zh) | 网络资源下载信息的分享控制系统和方法 | |
DE112005001833B4 (de) | System und Verfahren zum Herbeiführen des sicheren Einsatzes von Netzwerken | |
CN111885133A (zh) | 基于区块链的数据处理方法、装置及计算机存储介质 | |
CN101420681B (zh) | 一种业务管理平台下处理多渠道请求订购的方法和装置 | |
CN101039310A (zh) | 链路共享服务装置以及通信方法 | |
DE112006001618T5 (de) | Verfahren und Vorrichtung zum Verringern der Latenz während Änderungen einer drahtlosen Konnektivität | |
CN107870982A (zh) | 数据处理方法、系统和计算机可读存储介质 | |
CN108322479A (zh) | 数据传输方法、装置、终端以及存储介质 | |
CN104980333A (zh) | Pushlet即时通信方法及平台 | |
CN117857223B (zh) | 基于fttr主从管理的黑白名单实现方法、装置、设备及介质 | |
CN103701653B (zh) | 一种接口热插拔配置数据的处理方法及网络配置服务器 | |
CN110222280A (zh) | 用于分享的数据处理方法及装置 | |
CN107046551A (zh) | 一种数据请求、更新方法及相应装置 | |
CN102291432A (zh) | 网络信息共享方法、装置及客户端 | |
CN103034632A (zh) | 一种信息传送方法和系统 | |
CN101087263B (zh) | 一种通过搜索引擎获取用户状态信息的方法及系统 | |
CN102387062B (zh) | 动态桥接点改善p2p节点在跨网络时的传输速度的方法 | |
CN104079368B (zh) | 一种应用软件的测试数据传输方法及服务器 | |
CN101951598B (zh) | 基于业务运营支撑系统的客户绑定方法和系统 | |
CN2929830Y (zh) | 一种搜索引擎服务器和搜索系统 | |
CN106503135A (zh) | 一种web页面加载的方法及设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170721 |
|
RJ01 | Rejection of invention patent application after publication |