CN110232091A - 用于同步数据的方法、系统和装置 - Google Patents

用于同步数据的方法、系统和装置 Download PDF

Info

Publication number
CN110232091A
CN110232091A CN201710845544.1A CN201710845544A CN110232091A CN 110232091 A CN110232091 A CN 110232091A CN 201710845544 A CN201710845544 A CN 201710845544A CN 110232091 A CN110232091 A CN 110232091A
Authority
CN
China
Prior art keywords
change
data
message
server
data set
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710845544.1A
Other languages
English (en)
Other versions
CN110232091B (zh
Inventor
宋茜
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Original Assignee
Beijing Jingdong Century Trading Co Ltd
Beijing Jingdong Shangke Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Jingdong Century Trading Co Ltd, Beijing Jingdong Shangke Information Technology Co Ltd filed Critical Beijing Jingdong Century Trading Co Ltd
Priority to CN201710845544.1A priority Critical patent/CN110232091B/zh
Publication of CN110232091A publication Critical patent/CN110232091A/zh
Application granted granted Critical
Publication of CN110232091B publication Critical patent/CN110232091B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Information Transfer Between Computers (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Computer And Data Communications (AREA)

Abstract

本申请实施例公开了一种用于同步数据的方法、系统和装置。该方法的一具体实施方式包括:同步处理服务器获取业务数据的变更消息;响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器;文件搜索服务器基于目标数据,更新当前展示数据。该实施方式实现了业务数据与当前展示数据的拆分解耦,减少当前展示数据与业务数据的相互影响。

Description

用于同步数据的方法、系统和装置
技术领域
本申请涉及计算机技术领域,具体涉及互联网技术领域,尤其涉及用于同步数据的方法、系统和装置。
背景技术
随着互联网技术的高速发展和普及,网页的内容越来越丰富。数据存储的数据越来越多,一般业务线采用主从数据库存储,对主数据库进行写操作,选择合适的同步策略,将主数据库中的数据同步到从数据库中,保证主从数据库数据的一致,每次访问可选择读取主数据库,或采取读写分离模式,读取从数据库用以减轻数据库压力,也能减轻io(Input/Output,输入/输出)压力。
然而,现有技术方案的业务数据与当前展示数据一同存储,无法区分存储的数据属性,且相互影响。
发明内容
本申请实施例的目的在于提出一种用于同步数据的方法、系统和装置,来解决以上背景技术部分提到的技术问题。
第一方面,本申请提供了一种用于同步数据的方法,该方法包括:同步处理服务器获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器;文件搜索服务器基于目标数据,更新当前展示数据。
在一些实施例中,方法还包括:同步处理服务器响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中不存在预设数据,将变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
在一些实施例中,同步处理服务器获取业务数据的变更消息,包括:解析服务端基于业务数据服务器的日志,生成变更消息,将生成的变更消息发送给消息中间件服务端;消息中间件服务端接收来自解析服务端的变更消息,将变更消息发送给同步处理服务器;同步处理服务器接收消息中间件服务端的变更消息。
在一些实施例中,方法还包括:同步处理服务器响应于将目标数据同步至文件搜索服务器的操作成功,发送变更处理完成信息至消息中间件服务端。
在一些实施例中,方法还包括:同步处理服务器响应于检测到变更消息与文件搜索服务器的当前展示数据不关联,发送变更处理完成信息至消息中间件服务端。
在一些实施例中,方法还包括:消息中间件服务端响应于向同步处理服务器发送变更消息且在预设时间内未收到同步处理服务器返回的变更处理完成信息,重新发送变更消息至同步处理服务器,直至从同步处理服务器返回变更处理完成信息。
在一些实施例中,方法还包括:同步处理服务器直接获取终端的变更消息,其中,变更消息包括变更类型和变更数据集,响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据,确定针对目标数据的目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
在一些实施例中,方法还包括:同步处理服务器确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
第二方面,本申请提供了一种用于同步数据的方法,该方法包括:获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器,以供文件搜索服务器基于目标数据,更新当前展示数据。
在一些实施例中,获取业务数据的变更消息,包括:接收消息中间件服务端的变更消息,其中,变更消息为解析服务端基于业务数据服务器的日志生成并经消息中间件服务端传递的变更消息。
第三方面,本申请提供了一种用于同步数据的系统,系统包括:同步处理服务器和文件搜索服务器;同步处理服务器,配置用于获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器;文件搜索服务器,配置用于基于目标数据,更新当前展示数据。
在一些实施例中,同步处理服务器,还配置用于响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中不存在预设数据,将变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
在一些实施例中,系统还包括解析服务端和消息中间件服务端;解析服务端,配置用于基于业务数据服务器的日志,生成变更消息,将生成的变更信息发送给消息中间件服务端;消息中间件服务端,配置用于接收来自解析服务端的变更消息,将变更消息发送给同步处理服务器;同步处理服务器,配置用于接收消息中间件服务端的变更消息。
在一些实施例中,同步处理服务器,还配置用于响应于将目标数据同步至文件搜索服务器的操作成功,发送变更处理完成信息至消息中间件服务端。
在一些实施例中,同步处理服务器,还配置用于响应于检测到变更消息与文件搜索服务器的当前展示数据不关联,发送变更处理完成信息至消息中间件服务端。
在一些实施例中,消息中间件服务端,还配置用于响应于向同步处理服务器发送变更消息且在预设时间内未收到同步处理服务器返回的变更处理完成信息,重新发送变更消息至同步处理服务器,直至从同步处理服务器返回变更处理完成信息。
在一些实施例中,同步处理服务器,还配置用于直接获取终端的变更消息,其中,变更消息包括变更类型和变更数据集,响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据,确定针对目标数据的目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
在一些实施例中,同步处理服务器,还配置用于确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块,配置用于响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器。
第四方面,本申请提供了一种用于同步数据的装置,装置包括:获取模块,配置用于获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;确定模块,配置用于确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块,配置用于响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器,以供文件搜索服务器基于目标数据,更新当前展示数据。
在一些实施例中,获取模块,还配置用于接收消息中间件服务端的变更消息,其中,变更消息为解析服务端基于业务数据服务器的日志生成并经消息中间件服务端传递的变更消息。
本申请提供的用于同步数据的方法,同步处理服务器先获取业务数据的变更消息,并响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;再将更新后的变更数据集封装为预定格式的目标数据;最后通过与表名称对应的目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器;文件搜索服务器,基于目标数据,更新当前展示数据,这样可以保证存储在不同位置的当前展示数据与业务数据一致,实现了业务数据与当前展示数据的拆分解耦,减少当前展示数据与业务数据的相互影响。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请可以应用于其中的示例性系统架构图;
图2是根据本申请的用于同步数据的方法的一个实施例的时序图;
图3是根据本申请的用于同步数据的方法的又一个实施例的时序图;
图4是根据本申请的用于同步数据的方法的再一个实施例的流程图;
图5是根据本申请的用于同步数据的系统的一个实施例的结构示意图;
图6是根据本申请的用于同步数据的装置的一个实施例的结构示意图;
图7是适于用来实现本申请实施例的终端设备或服务器的计算机系统的结构示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请的用于同步数据的方法或用于同步数据的系统的实施例的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105、106、107。网络104用以在终端设备101、102、103和服务器105、106、107之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105、106、107交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如网页浏览器应用、购物类应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。
终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture ExpertsGroup Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving PictureExperts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。
服务器105、106、107可以是提供各种服务的服务器,例如对终端设备101、102、103上显示的网页提供支持的后台业务数据服务器。后台业务数据服务器可以对接收到的业务请求等数据进行分析等处理,将处理结果反馈给终端设备。
需要说明的是,本申请实施例所提供的用于同步数据的方法一般由服务器105、106、107执行,相应地,用于同步数据的系统一般设置于服务器105、106、107中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图2示出了根据本申请的用于同步数据的方法的一个实施例的时序图。该实施例的用于同步数据的方法应用于用于同步数据的系统200中。如图2所示,该用于同步数据的系统200包括:同步处理服务器210和文件搜索服务器220。
如图2所示,在步骤211中,同步处理服务器210获取业务数据的变更消息。
在本实施例中,业务数据为从业务系统获取的与业务相关联的数据。同步处理服务器210可以从业务数据服务器获取业务数据的变更消息,也可以从其它存储业务数据的变更消息的服务端接收或者获取业务数据的变更消息。示例性的,业务数据服务器可以为关系型数据库服务器,例如,MySQL数据库服务器,Oracle数据库服务器。这里的日志可以为二进制(binLog)日志,二进制日志的记录格式可以为记录执行语句的格式(statement);也可以为记录一条记录的格式(row);还可以为既包括记录执行语句的格式也包括记录一条记录的格式(mixed)。
这里的变更消息包括:表名称、表变更类型和变更数据集。表名称,为对表的标识性的描述,例如,产品明细、故障明细、业务计划等标识性的描述。表变更类型,用于表征对表进行的操作,例如,表变更类型可以包括增加,更改,删除等,用于表征对表进行的操作。变更数据集,用于表示表中变更的数据,例如,增加的字段,字段更改前的值和字段更改后的值,删除的字段等。
在步骤212中,同步处理服务器210响应于检测到变更消息与文件搜索服务器220的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集,将更新后的变更数据集封装为预定格式的目标数据。
在本实施例中,当前展示数据为当前用于向终端展示的数据,例如,服务数据,售后数据,销售数据等。
这里的变更消息与文件搜索服务器220的当前展示数据相关联,是指变更消息会引起当前展示数据变化。在这里,具体检测变更消息与当前展示数据相关联的技术,可以为现有技术或未来发展的技术中检测消息与数据的关联关系的技术,本申请对此不做限定。例如,在一种可选的实现方式中,可以通过检测表变更类型是否为预设的目标变更类型来确定变更消息与当前展示数据相关联。这里的目标变更类型是指可以引起当前展示数据变化的表变更类型,例如,增加,更改。又例如,在另一种可选的实现方式中,可以通过检测变更数据集中是否存在预设的目标数据来确定变更消息与当前展示数据相关联。这里的目标数据是指可以引起文件搜索服务器220的当前展示数据变化的数据。
这里的显示关联数据为与最终向终端展示的数据相关联的非业务变更数据。例如,选课老师介绍,商家信息等仅用于最终向终端展示,但与具体的业务数据的变更无关的数据。这里的显示关联数据存储在业务数据库以外的数据库中,例如,可以存储在同步处理服务器210中,也可以存储在文件搜索服务器220中,还可以存储在其它可以提供存储数据支持的服务器中。
这里的预设数据可以是识别显示关联数据的标识数据,例如,老师工号、商家ID(Identification,身份标识号)、服务名称等;也可以是与显示关联数据有映射关系的数据。使用预设数据可以调用显示关联数据。
这里的预定格式是指文件搜索服务器220存储数据的格式,例如,CSV(Comma-Separated Values,字符分隔值)格式,XML(Extensible Markup Language,可扩展标记语言)格式,JSON(JavaScript Object Notation,JS对象标记)格式等存储数据的格式。
同步处理服务器210将变更消息按文件搜索服务器220存储数据的格式进行封装,并将封装后的数据作为目标数据。
在本实施例的一些可选的实现方式中,还可以包括步骤213。在步骤213中,同步处理服务器210,还配置用于检测到变更消息与文件搜索服务器220的当前展示数据相关联且变更数据集中不存在预设数据,将变更数据集封装为预定格式的目标数据。
这里的当前展示数据、预设数据、预定格式和目标数据与步骤212中的当前展示数据、预设数据、预定格式和目标数据相对应,步骤212中关于当前展示数据、预设数据、预定格式和目标数据的描述同样适用于这里的当前展示数据、预设数据、预定格式和目标数据,在此不再赘述。
这里的变更消息与文件搜索服务器220的当前展示数据相关联的含义和检测变更消息与文件搜索服务器220的当前展示数据相关联的实现方式与步骤212中的变更消息与文件搜索服务器220的当前展示数据相关联的含义和检测变更消息与文件搜索服务器220的当前展示数据相关联的实现方式相对应,步骤212中关于变更消息与文件搜索服务器220的当前展示数据相关联的含义和检测变更消息与文件搜索服务器220的当前展示数据相关联的实现方式的描述同样适用于这里的变更消息与文件搜索服务器220的当前展示数据相关联的含义和检测变更消息与文件搜索服务器220的当前展示数据相关联的实现方式,在此不再赘述。
在步骤214中,同步处理服务器210根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器220。
在本实施例中,接口是指文件搜索服务器220中存储展示数据的位置链接信息。目标接口是指存储目标数据的位置链接信息。在这里,具体根据表名称确定目标接口的技术,可以为现有技术或未来发展的技术中根据表名称确定接口的技术,本申请对此不做限定。例如,在一种可选的实现方式中,可以通过确定具有相同表名称的位置链接信息,作为目标接口。这里的业务数据存储的表名称与相应的当前展示数据存储的表名称相同。又例如,在另一种可选的实现方式中,可以通过确定与表名称具有映射关系的表的位置链接信息,作为目标接口。
与步骤211中出现的表变更类型中所包括的变更类型包括增加,删除或更新等相对应,这里的变更类型指示的操作也包括增加,删除或更新等。
在步骤221中,文件搜索服务器220基于目标数据,更新当前展示数据。
在本实施例中,文件搜索服务器220基于目标数据,更新当前展示数据,以便当前展示数据与业务数据保持一致。
应当理解,上述的步骤212至步骤214,可以采用同步处理服务器210直接进行数据分析和处理,也可以在同步处理服务器210中设置数据分析模块和处理模块等,并分别采用数据分析模块和处理模块来进行数据分析和处理。
示例性地,同步处理服务器210可以包括转换服务模块,同步处理服务器210可以确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块响应于检测到变更消息与文件搜索服务器220的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器220。
这里的转换服务模块与表名称对应,可以通过表名称确定对应的转换服务模块来执行步骤212、步骤213、步骤214。通过采用转换服务模块分别处理具有预定表名称的变更消息,这样可以使同步处理多条变更消息,提高同步效率。
本申请的上述实施例提供的用于同步数据的方法,同步处理服务器210先获取业务数据的变更消息,并响应于检测到变更消息与文件搜索服务器220的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;再将更新后的变更数据集封装为预定格式的目标数据;最后通过与表名称对应的目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器220;文件搜索服务器220,基于目标数据,更新当前展示数据,这样可以保证存储在不同位置的当前展示数据与业务数据一致,实现了业务数据与当前展示数据的拆分解耦,减少当前展示数据与业务数据的相互影响。
图3示出了根据本申请的用于同步数据的方法的又一个实施例的时序图。该实施例的用于同步数据的方法应用于用于同步数据的系统300中。如图3所示,用于同步数据的系统300包括:同步处理服务器310、文件搜索服务器320、解析服务端330和消息中间件服务端340。
在步骤331中,解析服务端330基于业务数据服务器的日志,生成变更消息。
在本实施例中,解析服务端330基于业务数据库的日志,生成变更消息包括提取日志中记载的表名称、表变更类型和变更数据集作为变更消息。这里的表名称、表变更类型和变更数据集与步骤212中的表名称、表变更类型和变更数据集相对应,在步骤212中关于表名称、表变更类型和变更数据集的描述同样适用于这里的表名称、表变更类型和变更数据集,在此不再赘述。
这里的解析服务端330是指可以解析日志内容的服务端,可以为现有技术或未来发展的技术中可以解析日志内容的服务端,本申请对此不做限定。例如,在一种可选的实现方式中,解析服务端330可以为基于数据库日志的增量订阅服务端(例如,Canal服务端)。又例如,在另一种可选的实现方式中,解析服务端330也可以为具有采集日志的功能的服务端(例如,BinLake服务端)。
在一些可选的实现方式中,解析服务端330响应于确定预先配置的关注表名单中存在表名称,将变更消息发送给消息中间件服务端340。这里的关注表名单为能够引起文件搜索服务器320的展示数据发生变化的表名称的汇总。通过预先配置的关注表名单可以过滤掉与文件搜索服务器320的展示数据无关的变更消息。在一些可选的实现方式中,解析服务端330也可以直接发关变更信息给消息中间件服务端340。
在步骤332中,解析服务端330发送变更信息给消息中间件服务端340。
在步骤341中,中间件服务端接收来自解析服务端330的变更消息。
在本实施例中,中间件服务端能够在解析服务端和同步处理服务器之间提供同步和异步的连接,并且在任何时刻都可以将变更消息进行传送或者存储转发。
这里的中间件服务端可以是现有技术或未来发展的用于转发消息的中间件,本申请对此不做限定。例如,中间件服务端可以为消息队列(MQ)平台,也可以为分布式发布-订阅消息系统(Apache Kafka)。
在步骤342中,中间件服务端发送变更消息给同步处理服务器310。
在步骤311中,同步处理服务器310接收来自消息中间件服务端340的变更消息。
在步骤312中,同步处理服务器310响应于检测到变更消息与文件搜索服务器320的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集,将更新后的变更数据集封装为预定格式的目标数据。
这里的步骤312与图2中的步骤212相对应,因此,图2实施例中对于步骤212的描述同样适用这里的步骤312,在此不再赘述。
在步骤313中,同步处理服务器310,还配置用于检测到变更消息与文件搜索服务器320的当前展示数据相关联且变更数据集中不存在预设数据,将变更数据集封装为预定格式的目标数据。
这里的步骤313与图2中的步骤213相对应,因此,图2实施例中对于步骤213的描述同样适用这里的步骤313,在此不再赘述。
在步骤314中,根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器320。
这里的步骤314与图2中的步骤214相对应,因此,图2实施例中对于步骤214的描述同样适用这里的步骤314,在此不再赘述。
在步骤321中,文件搜索服务器320基于目标数据,更新当前展示数据。
在本实施例中,文件搜索服务器320基于目标数据,更新当前展示数据,以便当前展示数据与业务数据保持一致。
需要注意的是,在本实施例的一些可选的实现方式中,可以包括步骤313。在本实施例的一些可选的实现方式中,也可以不包括步骤313。
在本实施例的一些可选的实现方式中,用于同步数据的系统300可以不设置有监控同步处理服务器310处理变更消息的机制,中间件服务端只需要将变更消息发送给同步处理服务器310即为完成任务。
在本实施例的一些可选的实现方式中,用于同步数据的系统300也可以设置有监控同步处理服务器310处理变更消息的机制,以保证变更消息处理完成。示例性地,可以通过步骤315和343,或者通过步骤316和343来设置监控同步处理服务器310处理变更消息的机制。
在步骤315中,同步处理服务器310响应于检测到变更消息与文件搜索服务器320的当前展示数据不关联,发送变更处理完成信息至消息中间件服务端340。
在步骤316中,同步处理服务器310响应于将目标数据同步至文件搜索服务器320的操作成功,发送变更处理完成信息至消息中间件服务端340。
在这里需要说明的是,上述确定同步操作成功的各种方法是现有技术,在此不再赘述。
在步骤343中,中间件服务端响应于向同步处理服务器310发送变更消息且在预设时间内未收到同步处理服务器310返回的变更处理完成信息,重新发送变更消息至同步处理服务器310,直至从同步处理服务器310返回变更处理完成信息。
这里的预设时间是指同步处理服务器310正常处理一个变更消息的时间。本领域技术人员可以根据变更消息同步所需要的时间来设置预设时间。
在本实施例的一些可选的实现方式中,同步处理服务器310直接获取终端的变更消息,其中,变更消息包括变更类型和变更数据集,响应于检测到变更消息与文件搜索服务器320的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到已变更数据;将已变更数据封装为预定格式的目标数据,确定针对目标数据的目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器320。
这里的变更类型、变更数据集、当前展示数据、预设数据、预定格式和目标数据与步骤212中的变更类型、变更数据集、当前展示数据、预设数据、预定格式和目标数据相对应,步骤212中关于变更类型、变更数据集、当前展示数据、预设数据、预定格式和目标数据的描述同样适用于这里的变更类型、变更数据集、当前展示数据、预设数据、预定格式和目标数据,在此不再赘述。
这里的变更消息与文件搜索服务器320的当前展示数据相关联的含义和检测变更消息与文件搜索服务器320的当前展示数据相关联的实现方式与步骤212中的变更消息与文件搜索服务器320的当前展示数据相关联的含义和检测变更消息与文件搜索服务器320的当前展示数据相关联的实现方式相对应,步骤212中关于变更消息与文件搜索服务器320的当前展示数据相关联的含义和检测变更消息与文件搜索服务器320的当前展示数据相关联的实现方式的描述同样适用于这里的变更消息与文件搜索服务器320的当前展示数据相关联的含义和检测变更消息与文件搜索服务器320的当前展示数据相关联的实现方式,在此不再赘述。
这里同步处理服务器310确定针对目标数据的目标接口的技术,可以为现有技术或未来发展的技术中确定针对数据的接口的技术,本申请对此不做限定。例如,在一种可选的实现方式中,可以通过确定与目标数据有映射关系的表的位置链接信息,作为目标接口。这里的目标数据与存储目标数据的表具有映射关系。又例如,在另一种可选的实现方式中,可以通过确定存储目标数据的表的位置链接信息,作为目标接口。
这里同步处理服务器310通过直接获取终端的变更消息来同步当前展示数据,可以在解析服务端330或者中间件服务端出现问题时,保证业务数据与文件搜索服务器320中存储的当前展示数据一致。
本申请的上述实施例提供的用于同步数据的方法,解析服务端330,先基于业务数据服务器的日志,生成变更消息,并将生成的变更信息发送给消息中间件服务端340;消息中间件服务端340,接收来自解析服务端330的变更消息,将变更消息发送给同步处理服务器310;同步处理服务器310,接收消息中间件服务端340的变更消息,并响应于检测到变更消息与文件搜索服务器320的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;再将更新后的变更数据集封装为预定格式的目标数据;最后通过与表名称对应的目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器320;文件搜索服务器320,基于目标数据,更新当前展示数据,这样可以保证存储在不同位置的当前展示数据与业务数据一致,实现了业务数据与当前展示数据的拆分解耦,减少当前展示数据与业务数据的相互影响。
图4示出了根据本申请的用于同步数据的方法的再一个实施例的流程400。该方法的实施例与上面图2和图3所示的用于同步数据的方法的实施例相对应,因此,上面图2和图3所示的用于同步数据的方法实施例中描述的操作和特征也适用于该方法的实施例,在此省略其详细描述。如图4所示该用于同步数据的方法,包括以下步骤:
步骤401,获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集。
步骤402,响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据。
步骤403,根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器,以供文件搜索服务器基于目标数据,更新当前展示数据。
在一些可选的实现方式中,步骤401,获取业务数据的变更消息可以包括:接收消息中间件服务端的变更消息,其中,变更消息为解析服务端基于业务数据服务器的日志生成并经消息中间件服务端传递的变更消息。
图5示出了根据本申请的用于同步数据的系统的一个实施例的结构示意图。该用于同步数据的系统的实施例与上面图2和图3所示的用于同步数据的方法的实施例相对应,因此,上面图2和图3所示的用于同步数据的方法实施例中描述的操作和特征也适用于该用于同步数据的系统的实施例,在此省略其详细描述。
如图5所示,用于同步数据的系统500包括:同步处理服务器510和文件搜索服务器520;同步处理服务器510,配置用于获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;响应于检测到变更消息与文件搜索服务器520的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器520;文件搜索服务器520,配置用于基于目标数据,更新当前展示数据。
在本实施例的一些可选的实现方式中,同步处理服务器510,还配置用于检测到变更消息与文件搜索服务器520的当前展示数据相关联且变更数据集中不存在预设数据,将变更数据集封装为预定格式的目标数据。
在本实施例的一些可选的实现方式中,同步处理服务器510可以包括转换服务模块,同步处理服务器510可以确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块,配置用于响应于检测到变更消息与文件搜索服务器520的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器520。
在本实施例的一些可选的实现方式中,用于同步数据的系统500还可以包括:解析服务端530和消息中间件服务端540;解析服务端530,配置用于基于业务数据服务器的日志,生成变更消息,将生成的变更消息发送给消息中间件服务端540;消息中间件服务端540,配置用于接收来自解析服务端530的变更消息,将变更消息发送给同步处理服务器510;同步处理服务器510,配置用于接收消息中间件服务端540的变更消息。
在本实施例的一些可选的实现方式中,同步处理服务器510还配置用于响应于检测到变更消息与文件搜索服务器520的当前展示数据不关联,发送变更处理完成信息至消息中间件服务端540。
在本实施例的一些可选的实现方式中,同步处理服务器510还配置用于响应于将目标数据同步至文件搜索服务器520的操作成功,发送变更处理完成信息至消息中间件服务端540。
在本实施例的一些可选的实现方式中,中间件服务端还配置用于响应于向同步处理服务器510发送变更消息且在预设时间内未收到同步处理服务器510返回的变更处理完成信息,重新发送变更消息至同步处理服务器510,直至从同步处理服务器510返回变更处理完成信息。
在本实施例的一些可选的实现方式中,同步处理服务器510还配置用于直接获取终端的变更消息,其中,变更消息包括变更类型和变更数据集,响应于检测到变更消息与文件搜索服务器520的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据,确定针对目标数据的目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器520。
图6示出出了根据本申请的用于同步数据的装置的一个实施例的结构示意图,该装置的实施例与上面图2和图3所示的用于同步数据的方法的实施例中的同步处理服务器相对应,因此,上面图2和图3所示的用于同步数据的方法实施例中描述的操作和特征也适用于该用于同步数据的装置的实施例,在此省略其详细描述。该装置具体可以应用于各种电子设备中。
如图6所示,用于同步数据的装置600包括:获取模块601,配置用于获取业务数据的变更消息,其中,变更消息包括:表名称、表变更类型和变更数据集;确定模块602,配置用于确定对应表名称的转换服务模块,并将变更消息发送至转换服务模块;转换服务模块603,配置用于响应于检测到变更消息与文件搜索服务器的当前展示数据相关联且变更数据集中存在预设数据,调用对应预设数据的显示关联数据,将显示关联数据添加至变更数据集中,得到更新后的变更数据集;将更新后的变更数据集封装为预定格式的目标数据;根据表名称确定目标接口,通过目标接口采用表变更类型指示的操作将目标数据同步至文件搜索服务器,以供文件搜索服务器基于目标数据,更新当前展示数据。
在本实施例的一些可选的实现方式中,获取模块601,还配置用于接收消息中间件服务端的变更消息,其中,变更消息为解析服务端基于业务数据服务器的日志生成并经消息中间件服务端传递的变更消息。
下面参考图7,其示出了适于用来实现本申请实施例的终端设备/服务器的计算机系统700的结构示意图。图7示出的终端设备/服务器仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图7所示,计算机系统700包括中央处理单元(CPU)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储部分708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有系统700操作所需的各种程序和数据。CPU 701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线704。
以下部件连接至I/O接口705:包括键盘、鼠标等的输入部分706;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分707;包括硬盘等的存储部分708;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分709。通信部分709经由诸如因特网的网络执行通信处理。驱动器710也根据需要连接至I/O接口705。可拆卸介质711,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器710上,以便于从其上读出的计算机程序根据需要被安装入存储部分708。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分709从网络上被下载和安装,和/或从可拆卸介质711被安装。在该计算机程序被中央处理单元(CPU)701执行时,执行本申请的方法中限定的上述功能。需要说明的是,本申请的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。

Claims (22)

1.一种用于同步数据的方法,其特征在于,所述方法包括:
同步处理服务器获取业务数据的变更消息,其中,所述变更消息包括:表名称、表变更类型和变更数据集;响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器;
文件搜索服务器基于所述目标数据,更新所述当前展示数据。
2.根据权利要求1所述的方法,其特征在于,所述方法还包括:
所述同步处理服务器响应于检测到所述变更消息与所述文件搜索服务器的当前展示数据相关联且所述变更数据集中不存在预设数据,将所述变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
3.根据权利要求1所述的方法,其特征在于,所述同步处理服务器获取业务数据的变更消息,包括:
解析服务端基于业务数据服务器的日志,生成变更消息,将生成的所述变更消息发送给所述消息中间件服务端;
所述消息中间件服务端接收来自所述解析服务端的所述变更消息,将所述变更消息发送给所述同步处理服务器;
所述同步处理服务器接收所述消息中间件服务端的变更消息。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:所述同步处理服务器响应于将所述目标数据同步至所述文件搜索服务器的操作成功,发送变更处理完成信息至所述消息中间件服务端。
5.根据权利要求3所述的方法,其特征在于,所述方法还包括:
所述同步处理服务器响应于检测到所述变更消息与文件搜索服务器的当前展示数据不关联,发送变更处理完成信息至所述消息中间件服务端。
6.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:
所述消息中间件服务端响应于向所述同步处理服务器发送所述变更消息且在预设时间内未收到所述同步处理服务器返回的变更处理完成信息,重新发送所述变更消息至所述同步处理服务器,直至从所述同步处理服务器返回变更处理完成信息。
7.根据权利要求1至5任一所述的方法,其特征在于,所述方法还包括:
所述同步处理服务器直接获取终端的变更消息,其中,所述变更消息包括变更类型和变更数据集,响应于检测到所述变更消息与所述文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据,确定针对目标数据的目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
8.根据权利要求1至5任一所述的方法,其特征在于,所述方法还包括:
所述同步处理服务器确定对应所述表名称的转换服务模块,并将所述变更消息发送至所述转换服务模块;
所述转换服务模块响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
9.一种用于同步数据的方法,其特征在于,所述方法包括:
获取业务数据的变更消息,其中,所述变更消息包括:表名称、表变更类型和变更数据集;
响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;
根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器,以供所述文件搜索服务器基于所述目标数据,更新所述当前展示数据。
10.根据权利要求9所述的方法,其特征在于,所述获取业务数据的变更消息,包括:
接收所述消息中间件服务端的变更消息,其中,所述变更消息为解析服务端基于业务数据服务器的日志生成并经所述消息中间件服务端传递的变更消息。
11.一种用于同步数据的系统,其特征在于,所述系统包括:同步处理服务器和文件搜索服务器;
所述同步处理服务器,配置用于获取业务数据的变更消息,其中,所述变更消息包括:表名称、表变更类型和变更数据集;响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器;
所述文件搜索服务器,配置用于基于所述目标数据,更新所述当前展示数据。
12.根据权利要求11所述的系统,其特征在于,
所述同步处理服务器,还配置用于响应于检测到所述变更消息与所述文件搜索服务器的当前展示数据相关联且所述变更数据集中不存在预设数据,将所述变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
13.根据权利要求11所述的系统,其特征在于,所述系统还包括解析服务端和消息中间件服务端;
所述解析服务端,配置用于基于业务数据服务器的日志,生成变更消息,将生成的所述变更信息发送给所述消息中间件服务端;
所述消息中间件服务端,配置用于接收来自所述解析服务端的所述变更消息,将所述变更消息发送给所述同步处理服务器;
所述同步处理服务器,配置用于接收所述消息中间件服务端的变更消息。
14.根据权利要求13所述的系统,其特征在于,所述同步处理服务器,还配置用于响应于将所述目标数据同步至所述文件搜索服务器的操作成功,发送变更处理完成信息至所述消息中间件服务端。
15.根据权利要求13所述的系统,其特征在于,
所述同步处理服务器,还配置用于响应于检测到所述变更消息与文件搜索服务器的当前展示数据不关联,发送变更处理完成信息至所述消息中间件服务端。
16.根据权利要求14或15所述的系统,其特征在于,
所述消息中间件服务端,还配置用于响应于向所述同步处理服务器发送所述变更消息且在预设时间内未收到所述同步处理服务器返回的变更处理完成信息,重新发送所述变更消息至所述同步处理服务器,直至从所述同步处理服务器返回变更处理完成信息。
17.根据权利要求11至15任一所述的系统,其特征在于,
所述同步处理服务器,还配置用于直接获取终端的变更消息,其中,所述变更消息包括变更类型和变更数据集,响应于检测到所述变更消息与所述文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据,确定针对目标数据的目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
18.根据权利要求11至15任一所述的系统,其特征在于,
所述同步处理服务器,还配置用于确定对应所述表名称的转换服务模块,并将所述变更消息发送至所述转换服务模块;
所述转换服务模块,配置用于响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器。
19.一种用于同步数据的装置,其特征在于,所述装置包括:
获取模块,配置用于获取业务数据的变更消息,其中,所述变更消息包括:表名称、表变更类型和变更数据集;
确定模块,配置用于确定对应所述表名称的转换服务模块,并将所述变更消息发送至所述转换服务模块;
所述转换服务模块,配置用于响应于检测到所述变更消息与文件搜索服务器的当前展示数据相关联且所述变更数据集中存在预设数据,调用对应所述预设数据的显示关联数据,将所述显示关联数据添加至所述变更数据集中,得到更新后的变更数据集;将所述更新后的变更数据集封装为预定格式的目标数据;根据所述表名称确定目标接口,通过所述目标接口采用所述表变更类型指示的操作将所述目标数据同步至所述文件搜索服务器,以供所述文件搜索服务器基于所述目标数据,更新所述当前展示数据。
20.根据权利要19所述的装置,其特征在于,
所述获取模块,还配置用于接收所述消息中间件服务端的变更消息,其中,所述变更消息为解析服务端基于业务数据服务器的日志生成并经所述消息中间件服务端传递的变更消息。
21.一种设备/终端/服务器,其特征在于,所述设备/终端/服务器包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-10中任一所述的方法。
22.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1-10中任一所述的方法。
CN201710845544.1A 2017-09-19 2017-09-19 用于同步数据的方法、系统和装置 Active CN110232091B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710845544.1A CN110232091B (zh) 2017-09-19 2017-09-19 用于同步数据的方法、系统和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710845544.1A CN110232091B (zh) 2017-09-19 2017-09-19 用于同步数据的方法、系统和装置

Publications (2)

Publication Number Publication Date
CN110232091A true CN110232091A (zh) 2019-09-13
CN110232091B CN110232091B (zh) 2021-10-15

Family

ID=67861936

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710845544.1A Active CN110232091B (zh) 2017-09-19 2017-09-19 用于同步数据的方法、系统和装置

Country Status (1)

Country Link
CN (1) CN110232091B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111144819A (zh) * 2019-12-28 2020-05-12 云汉芯城(上海)互联网科技股份有限公司 一种物料配单的方法、系统、设备及可读存储介质
CN112486764A (zh) * 2020-11-24 2021-03-12 云南电网有限责任公司信息中心 一种发布监控和变更内容分析的系统及方法
CN112667653A (zh) * 2020-12-30 2021-04-16 平安普惠企业管理有限公司 数据更新方法、装置、设备及存储介质
CN112817988A (zh) * 2021-01-06 2021-05-18 贵阳迅游网络科技有限公司 一种企业业务的同步加速方法
CN113176854A (zh) * 2021-04-28 2021-07-27 中国工商银行股份有限公司 服务治理数据的处理方法、装置及系统
CN114116031A (zh) * 2021-11-22 2022-03-01 曙光信息产业股份有限公司 选项参数同步方法、装置、计算机设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8359406B2 (en) * 2003-09-17 2013-01-22 Sony Corporation Middleware filter agent between server and PDA
CN103514223A (zh) * 2012-06-28 2014-01-15 阿里巴巴集团控股有限公司 一种数据仓库数据同步方法和系统
CN103823797A (zh) * 2012-11-16 2014-05-28 镇江诺尼基智能技术有限公司 基于ftp协议的行业数据库数据实时同步系统
CN105450718A (zh) * 2014-09-30 2016-03-30 阿里巴巴集团控股有限公司 界面更新方法及客户端
CN105701129A (zh) * 2014-11-28 2016-06-22 中兴通讯股份有限公司 网管配置数据合法性的检查方法及装置
CN106506213A (zh) * 2016-11-09 2017-03-15 深圳云联讯数据科技有限公司 一种物联网设备可视化界面显示方法及系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8359406B2 (en) * 2003-09-17 2013-01-22 Sony Corporation Middleware filter agent between server and PDA
CN103514223A (zh) * 2012-06-28 2014-01-15 阿里巴巴集团控股有限公司 一种数据仓库数据同步方法和系统
CN103823797A (zh) * 2012-11-16 2014-05-28 镇江诺尼基智能技术有限公司 基于ftp协议的行业数据库数据实时同步系统
CN105450718A (zh) * 2014-09-30 2016-03-30 阿里巴巴集团控股有限公司 界面更新方法及客户端
CN105701129A (zh) * 2014-11-28 2016-06-22 中兴通讯股份有限公司 网管配置数据合法性的检查方法及装置
CN106506213A (zh) * 2016-11-09 2017-03-15 深圳云联讯数据科技有限公司 一种物联网设备可视化界面显示方法及系统

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111144819A (zh) * 2019-12-28 2020-05-12 云汉芯城(上海)互联网科技股份有限公司 一种物料配单的方法、系统、设备及可读存储介质
CN112486764A (zh) * 2020-11-24 2021-03-12 云南电网有限责任公司信息中心 一种发布监控和变更内容分析的系统及方法
CN112667653A (zh) * 2020-12-30 2021-04-16 平安普惠企业管理有限公司 数据更新方法、装置、设备及存储介质
CN112817988A (zh) * 2021-01-06 2021-05-18 贵阳迅游网络科技有限公司 一种企业业务的同步加速方法
CN112817988B (zh) * 2021-01-06 2022-11-15 贵阳迅游网络科技有限公司 一种企业业务的同步加速方法
CN113176854A (zh) * 2021-04-28 2021-07-27 中国工商银行股份有限公司 服务治理数据的处理方法、装置及系统
CN114116031A (zh) * 2021-11-22 2022-03-01 曙光信息产业股份有限公司 选项参数同步方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
CN110232091B (zh) 2021-10-15

Similar Documents

Publication Publication Date Title
CN107622135B (zh) 用于显示信息的方法和装置
CN110232091A (zh) 用于同步数据的方法、系统和装置
CN107357914B (zh) 信息处理方法和装置
CN108459953A (zh) 测试方法和装置
CN107302597B (zh) 消息文案推送方法和装置
CN107491382B (zh) 日志输出方法和装置
CN110119294A (zh) 菜单页面的生成方法、装置及系统
CN109992732A (zh) 信息分享方法、装置、电子设备及存储介质
CN114500481B (zh) 业务请求处理方法、系统和装置
CN113076153B (zh) 一种接口调用方法和装置
CN108549586B (zh) 信息处理方法和装置
WO2022022619A1 (zh) 一种文档编辑方法、装置和电子设备
CN110019263A (zh) 信息存储方法和装置
CN111813685A (zh) 自动化测试方法和装置
CN109918146A (zh) 页面生成方法和装置
CN109299124A (zh) 用于更新模型的方法和装置
CN111787041B (zh) 用于处理数据的方法和装置
CN111222067B (zh) 信息生成方法和装置
CN114840379A (zh) 日志生成方法、装置、服务器及存储介质
CN108984678A (zh) 可穿戴设备、信息处理方法、装置和系统
CN109885564A (zh) 用于发送信息的方法和装置
CN109840072A (zh) 信息处理方法和装置
CN111400581B (zh) 用于标注样本的系统、方法和装置
CN110489326B (zh) 基于ids的httpapi调试方法装置、介质和设备
CN109981546A (zh) 获取应用模块间的远程调用关系的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant