CN102625156B - 一种信息同步的方法和系统 - Google Patents

一种信息同步的方法和系统 Download PDF

Info

Publication number
CN102625156B
CN102625156B CN201110028963.9A CN201110028963A CN102625156B CN 102625156 B CN102625156 B CN 102625156B CN 201110028963 A CN201110028963 A CN 201110028963A CN 102625156 B CN102625156 B CN 102625156B
Authority
CN
China
Prior art keywords
data
client
module
server
new data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201110028963.9A
Other languages
English (en)
Other versions
CN102625156A (zh
Inventor
余合兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
TVMining Beijing Media Technology Co Ltd
Original Assignee
TVMining Beijing Media Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by TVMining Beijing Media Technology Co Ltd filed Critical TVMining Beijing Media Technology Co Ltd
Priority to CN201110028963.9A priority Critical patent/CN102625156B/zh
Publication of CN102625156A publication Critical patent/CN102625156A/zh
Application granted granted Critical
Publication of CN102625156B publication Critical patent/CN102625156B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种信息同步的方法和系统,在服务器维护一个客户端列表,并且保存客户提交的定制条件信息,根据不同客户端提交的定制条件信息分别查询出最新更新的数据,为每个客户端保存更新数据,客户端定时发送更新数据请求,从服务器获取更新数据。采用了本发明的技术方案,能够帮助客户精确获取所需的电视数据,并降低数据库和网络的压力。

Description

一种信息同步的方法和系统
技术领域
本发明涉及电视数据共享技术领域,尤其涉及一种信息同步的方法和系统。
背景技术
电视资源浏览及共享整套服务流程包括服务器、客户端及两者之间客户定制信息同步模块等。这几个服务之间的初始关系仅局限于客户端按条件浏览服务器的资源,相互之间信息同步相对滞后或者需要同步的资源不完整,有部分丢失。信息滞后的解决,只能通过客户浏览时有针对性的、不停的刷新才能获取到最新生产出的所需资源,同步资源丢失就无法重新再次获得,只能永久性丢失。造成客户及时获取完整及最新资源的需求难以满足。
客户定制信息同步功能的开发,在TV资源浏览及共享服务流程中使客户端和服务器之间及时有效的保持联系。只要客户定制所需条件后提交,客户所需要的完整及最新资源能够在服务器生产完成后及时就能获取到。利用了这个功能,一、提高资源的使用率,客户只要定制了需要的资源,服务器生产完成后及时就会同步到客户端。二、提高客户的工作效率,避免客户在大量资源中挑选仅需要的一小部分可用资源,避免客户工作的单一性,不为等待某一可用资源而不停刷新查询页面,从而提高客户的使用方便性及满意度。三、减少网络传输丢失数据,当用户定制信息在短时间内有大量符合的资源产生时,服务器先存储到这些信息,再自动分割成相对可靠的大小数据包来和客户端同步。四、防止传输中丢失数据的重新获取,客户端和服务器数据同步时,彼此之间通过信息反馈来确定数据是否同步完成。五、防止同步完成的资源重复同步及通知,服务器确定客户端资源同步完成后,修改资源状态。
针对网络中用户需要获取有利信息的网站,一般用户有个性的化需求,面向网站中的大量资源,客户定制信息同步功能有效的把这两者之间的关系更精确的联系起来。消费者需要的资源只有在定制后就能方便快捷的精确获取,不需要再在混有一堆垃圾的数据中去挑选可以资源。
对于客户端共享或同步服务器资源流程中,服务器的任务是:一是存储信息并完成与客户端之间的通讯转发,在服务器采用线程创建而不是为每个客户端连接创建一个进程。二是服务准备完毕后等待客户端发送请求,接受到客户端的请求后按照条件在全部数据中去查询最新的数据,增大数据库的访问压力。
服务器有了更新数据后,很长一段时间不做删除,因为不知道那些客户端还没有更新,尽量降低没有更新到最新数据的客户端的个数。如果在很短时间内更新多次,多次的数据同时做到一个更新包中,以备客户端的不同的版本都能更新到最新的数据。
客户端发送到服务器的请求等待响应时,当网络发生故障或服务器重启,服务器没有成功地反馈出更新信息,恢复后将再次重发消息,直到客户端接收到消息的反馈。为了防止服务器长时间的停止或崩溃,在这需要设定一个时间期限,这个期限设置成一个合理的较长的时间段,如果在这个期限内没有接收到服务的响应消息,即认为超时,不在等待服务器的响应来更新数据。由于消息的持久化,服务器在任何一个合理的时刻将更新数据保存起来,等待下次的请求。
客户端尽量避免请求服务器之前发生了两次变化,这样获取的数据就不容易引起数据的混乱和污染。 客户端负责提供现有条件请求服务器查询数据,获取大量数据在网络间传输后显示。客户端采用定时机制,定时向服务器请求全部的数据,不论数据是否变化。 客户在获取到最新的数据中挑选出可以用的资源,把这些资源下载到本地或者记录下来,以备下次再利用。
上述现有信息同步功能在客户端和服务器数据同步的方法,存在以下缺点:服务器不管当前请求的客户端需不需要最新更新的数据,只要有请求就给返回;   如果客户端很长时间都没有启动过,服务器的数据又在这段时间内产生了很多的更新,客户端再次启动后请求最新的数据时,服务器会在查询所有的更新过的数据,全部返回。此时增加了数据库的大量的访问压力,网络需要传输大量数据,造成等待返回的时间加长,而且大部分对客户来说都是过期数据;因为更新数据是不区分客户端的,所有服务器要用大量的存储来保存这些过期数据,以保证所有的客户端都获取到最新的更新数据;如果服务器当前一次更新的数据量过大,由于有网络的问题,同步到客户端是有可能在传输过程中丢失部分数据,这时客户端和服务器都认为是完全同步;服务器更新数据时,不能及时通知到客户端,客户需要最新数据时,就必须在电脑前不停刷新界面。
发明内容
本发明的目的在于提出一种信息同步的方法和系统,能够帮助客户精确获取所需的电视数据,并降低数据库和网络的压力。
为达此目的,本发明采用以下技术方案:
一种信息同步的方法,适用于电视数据共享领域,包括以下步骤:
A、客户端向服务器提交信息同步请求,所述信息同步请求包括定制信息条件和客户端的唯一标识;
B、服务器接收并存储所述信息同步请求;
C、服务器收集并存储新数据;
D、服务器根据客户端提交的信息同步请求中的定制信息条件,匹配所述新数据,获得更新数据和通知消息;
E、客户端向服务器发送更新数据请求,所述更新数据请求包括客户端的唯一标识;
F、服务器根据客户端的唯一标识将对应的更新数据和通知消息发送给客户端;
G、客户端接收到更新数据和通知消息后,向服务器返回反馈信息,服务器删除客户端对应的更新数据和通知消息;
H、客户端获取更新数据和通知消息,进行展示,并将更新数据下载到本地。
步骤D还包括以下步骤:
服务器生成提醒信息,并发送给客户端。
步骤E中,客户端设置定时器,定时触发客户端向服务器发送更新数据请求。
步骤F中,服务器根据可配置并且保证网络传输不丢失的数据量分批发送更新数据和通知消息给客户端。
步骤F中,如果发送数据失败,启动重发,如果本次连接时限没有发送成功,就保存更新数据和通知消息,等待下次请求再发送,直到发送成功。
一种信息同步的系统,适用于电视数据共享领域,包括客户端和服务器,客户端进一步包括定制信息模块、更新数据模块、消息处理模块和定时器,服务器进一步包括业务数据访问接口模块、业务消息处理模块、业务生产数据处理模块和数据库,更新数据模块分别与定制信息模块、消息处理模块和定时器连接,业务数据访问接口模块、业务消息处理模块和业务生产数据处理模块分别与数据库连接,业务消息处理模块与业务生产数据处理模块连接,更新数据模块和定制信息模块还分别与业务数据访问接口模块连接,其中,
定制信息模块用于向业务数据访问接口模块提交信息同步请求,所述信息同步请求包括定制信息条件和客户端的唯一标识;
更新数据模块用于向业务数据访问接口模块发送更新数据请求,所述更新数据请求包括客户端的唯一标识,并接收业务数据访问接口模块发送的更新数据和通知消息;
消息处理模块用于分析获取更新数据和通知消息;
定时器用于定时触发更新数据模块向业务数据访问接口模块发送更新数据请求;
业务数据访问接口模块用于接收定制信息模块提交的信息同步请求和更新数据模块发送的更新数据请求并发送给数据库,以及将更新数据和通知消息发送给更新数据模块;
业务消息处理模块用于根据定制信息条件匹配新数据,获得更新数据和通知消息,并存储到数据库;
业务生产数据处理模块用于收集新数据,并存储到数据库;
数据库用于存储新数据、更新数据和通知消息。
采用了本发明的技术方案,为客户在全部的数据中准确而快速的获取资源,提供了单独通知、自动更新或下载的功能。实现了在只能浏览的平台里,可以定制符合自己需要的条件,在7*24小时里交给平台自动调用消息同步机制,服务器针对客户端的条件,调用消息分析机制进行匹配,保存不同种类的消息,等待客户端来获取自己的需要的消息。客户端获取准确而且干净的数据自动通知客户,并且客户可按条件进行更明确的操作。
客户只需要定制一次条件,就可以源源不断的获取到可用资源。如果不需要此类型的资源了,可以删除定制。如果需要更多的资源,可以没有任何限制的定制更多的条件。
消息同步机制解决了客户在大量的数据里,花费了大量的时间,执行了大量的操作才挑选出少量的可用资源且单一性的工作苦恼。
消息同步机制明显减少了服务器的数据库访问压力,提高了数据库的读写速度,降低了数据库损坏风险,并且减少了增加服务的硬件成本。
另外不影响客户端上原有的数据浏览、按照提供的不同条件进行查询、提取有用数据等功能的执行。
附图说明
图1是本发明具体实施方式中信息同步系统的结构示意图。
图2是本发明具体实施方式中信息同步的流程图。
具体实施方式
下面结合附图并通过具体实施方式来进一步说明本发明的技术方案。
本发明技术方案的主要思想是提出一个更完善的信息同步功能,在服务器维护一个客户端列表,并且保存客户提交的千差万别自定制信息。根据不同客户端提交的定制信息分别查询出最新更新的数据,为每个客户端保存更新数据。
消息同步机制包含消息量的处理,如果需要同步的更新数据量过大时,服务器会按照多次试验得出的定值先把这批数据分割成多批来返回。如果某一批次返回失败会自动重试多次(重试次数可配置),重试后再失败,就继续保存。等待下次处理。直到接收到客户端反馈信息为接收成功后清除本批次的数据。
客户定制信息不做任何数据量的限制,提交到服务器后,客户就可以不再职守客户端。服务器为每个客户端保存完更新数据后,立即提醒在线的客户端,按照客户提交的条件已经匹配到最新的数据,等待客户端同步完成后,删除提醒消息。如果客户端不在线,数据不会做清除,等待下次启动后提醒或同步,直到同步完成。
消息同步按照客户端定制信息,分为只提醒,等待客户自己查看或同步。再就是提醒的同时也自动为客户同步最新的数据,客户只要查看结果就可以。
这种同步机制对应服务器来说,减少数据库的访问压力,加快了响应时间。对于客户端来说,节约了客户的工作时间,提高了工作效率。避免了客户端工作单一性,繁琐的工作变为简单化。对于资源方面说,提高了资源的使用率,用户需要的资源在生产处理后立即得到使用。
图1是本发明具体实施方式中信息同步系统的结构示意图。如图1所示,该信息同步系统适用于电视数据共享领域,包括客户端1和服务器2,客户端进一步包括定制信息模块101、更新数据模块102、消息处理模块103和定时器104,服务器进一步包括业务数据访问接口模块201、业务消息处理模块202、业务生产数据处理模块203和数据库204。
更新数据模块分别与定制信息模块、消息处理模块和定时器连接,业务数据访问接口模块、业务消息处理模块和业务生产数据处理模块分别与数据库连接,业务消息处理模块与业务生产数据处理模块连接,更新数据模块和定制信息模块还分别与业务数据访问接口模块连接。
定制信息模块向业务数据访问接口模块提交信息同步请求,所述信息同步请求包括定制信息条件和客户端的唯一标识。更新数据模块向业务数据访问接口模块发送更新数据请求,所述更新数据请求包括客户端的唯一标识,并接收业务数据访问接口模块发送的更新数据和通知消息。消息处理模块分析获取更新数据和通知消息。定时器定时触发更新数据模块向业务数据访问接口模块发送更新数据请求。
业务数据访问接口模块接收定制信息模块提交的信息同步请求和更新数据模块发送的更新数据请求并发送给数据库,以及将更新数据和通知消息发送给更新数据模块。业务消息处理模块根据定制信息条件匹配新数据,获得更新数据和通知消息,并存储到数据库。业务生产数据处理模块收集新数据,并存储到数据库。数据库存储新数据、更新数据和通知消息。
图2是本发明具体实施方式中信息同步的流程图。如图2所示,该信息同步流程包括以下步骤:
步骤301、客户端向服务器提交信息同步请求,信息同步请求包括定制信息条件和客户端的唯一标识。
步骤302、服务器接收并存储信息同步请求。
步骤303、服务器收集并存储新数据。
步骤304、服务器根据客户端提交的信息同步请求中的定制信息条件,匹配所述新数据,获得更新数据和通知消息。更新数据是指客户需要的电视资源数据,而通知消息是指客户跟踪的信息在一定时间段内总共产生了多少条数据。服务器生成提醒信息,并发送给客户端。
步骤305、客户端设置定时器,定时触发客户端向服务器发送更新数据请求,更新数据请求包括客户端的唯一标识。
步骤306、服务器根据客户端的唯一标识将对应的更新数据和通知消息发送给客户端。服务器根据可配置并且保证网络传输不丢失的数据量分批发送更新数据和通知消息给客户端。
如果发送数据失败,启动重发,如果本次连接时限没有发送成功,就保存更新数据和通知消息,等待下次请求再发送,直到发送成功。
步骤307、客户端接收到更新数据和通知消息后,向服务器返回反馈信息,服务器删除客户端对应的更新数据和通知消息。
步骤308、客户端获取更新数据和通知消息,进行展示,并将更新数据下载到本地。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉该技术的人在本发明所揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。

Claims (4)

1.一种信息同步的方法,适用于电视数据共享领域,其特征在于,包括以下步骤:
A、客户端向服务器提交信息同步请求,所述信息同步请求包括定制信息条件和客户端的唯一标识;
B、服务器接收并存储所述信息同步请求;
C、服务器收集并存储新数据;
D、服务器根据客户端提交的信息同步请求中的定制信息条件,匹配所述新数据,获得更新数据和通知消息;
E、客户端向服务器发送更新数据请求,所述更新数据请求包括客户端的唯一标识;
F、服务器根据客户端的唯一标识将对应的更新数据和通知消息发送给客户端,服务器根据可配置并且保证网络传输不丢失的数据量分批发送更新数据和通知消息给客户端,如果发送数据失败,启动重发,如果本次连接时限没有发送成功,就保存更新数据和通知消息,等待下次请求再发送,直到发送成功;
G、客户端接收到更新数据和通知消息后,向服务器返回反馈信息,服务器删除客户端对应的更新数据和通知消息;
H、客户端获取更新数据和通知消息,进行展示,并将更新数据下载到本地。
2.根据权利要求1所述的一种信息同步的方法,其特征在于,步骤D还包括以下步骤:
服务器生成提醒信息,并发送给客户端。
3.根据权利要求1所述的一种信息同步的方法,其特征在于,步骤E中,客户端设置定时器,定时触发客户端向服务器发送更新数据请求。
4.一种信息同步的系统,适用于电视数据共享领域,其特征在于,包括客户端和服务器,客户端进一步包括定制信息模块、更新数据模块、消息处理模块和定时器,服务器进一步包括业务数据访问接口模块、业务消息处理模块、业务生产数据处理模块和数据库,更新数据模块分别与定制信息模块、消息处理模块和定时器连接,业务数据访问接口模块、业务消息处理模块和业务生产数据处理模块分别与数据库连接,业务消息处理模块与业务生产数据处理模块连接,更新数据模块和定制信息模块还分别与业务数据访问接口模块连接,其中,
定制信息模块用于向业务数据访问接口模块提交信息同步请求,所述信息同步请求包括定制信息条件和客户端的唯一标识;
更新数据模块用于向业务数据访问接口模块发送更新数据请求,所述更新数据请求包括客户端的唯一标识,并接收业务数据访问接口模块发送的更新数据和通知消息;
消息处理模块用于分析获取更新数据和通知消息;
定时器用于定时触发更新数据模块向业务数据访问接口模块发送更新数据请求;
业务数据访问接口模块用于接收定制信息模块提交的信息同步请求和更新数据模块发送的更新数据请求并发送给数据库,以及将更新数据和通知消息发送给更新数据模块,根据可配置并且保证网络传输不丢失的数据量分批发送更新数据和通知消息给客户端;
业务消息处理模块用于根据定制信息条件匹配新数据,获得更新数据和通知消息,并存储到数据库;
业务生产数据处理模块用于收集新数据,并存储到数据库;数据库用于存储新数据、更新数据和通知消息。
CN201110028963.9A 2011-01-27 2011-01-27 一种信息同步的方法和系统 Expired - Fee Related CN102625156B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110028963.9A CN102625156B (zh) 2011-01-27 2011-01-27 一种信息同步的方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110028963.9A CN102625156B (zh) 2011-01-27 2011-01-27 一种信息同步的方法和系统

Publications (2)

Publication Number Publication Date
CN102625156A CN102625156A (zh) 2012-08-01
CN102625156B true CN102625156B (zh) 2014-08-13

Family

ID=46564810

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110028963.9A Expired - Fee Related CN102625156B (zh) 2011-01-27 2011-01-27 一种信息同步的方法和系统

Country Status (1)

Country Link
CN (1) CN102625156B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102904962A (zh) * 2012-10-23 2013-01-30 深圳市汇智集信息科技有限公司 消息推送系统及其消息推送的方法
CN105677849A (zh) * 2016-01-06 2016-06-15 北京京东尚科信息技术有限公司 数据更新方法和装置
CN108696374B (zh) * 2017-04-10 2021-10-01 北京京东尚科信息技术有限公司 更新客户端配置的方法和装置
CN107194196A (zh) * 2017-06-29 2017-09-22 上海联影医疗科技有限公司 影像数据处理方法和影像数据处理装置
CN109639811B (zh) * 2018-12-21 2022-01-25 北京金山云网络技术有限公司 数据传输方法、数据存储方法、装置、服务器及存储介质
CN113176806B (zh) * 2021-04-19 2024-10-01 北京思特奇信息技术股份有限公司 真无人值守的数据定时同步方法
CN116226153B (zh) * 2023-05-05 2023-08-11 中国工商银行股份有限公司 数据的更新方法、装置、处理器和电子设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825797A (zh) * 2005-02-23 2006-08-30 腾讯科技(深圳)有限公司 一种通信系统中用户数据更新的方法及系统
CN101075233A (zh) * 2006-05-17 2007-11-21 华为技术有限公司 多媒体内容收集部件、系统及其方法
CN101090452A (zh) * 2007-07-18 2007-12-19 中国网络通信集团公司 机顶盒软件升级方法及升级系统
CN101257375A (zh) * 2006-12-31 2008-09-03 华为技术有限公司 实现多终端的消息同步的方法及装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1503953A (zh) * 2000-12-08 2004-06-09 ���µ�����ҵ��ʽ���� 分配装置、终端装置以及其中所用的程序和方法
CN100581174C (zh) * 2007-11-28 2010-01-13 浪潮集团山东通用软件有限公司 构建多类型数据库安全数据交换平台的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1825797A (zh) * 2005-02-23 2006-08-30 腾讯科技(深圳)有限公司 一种通信系统中用户数据更新的方法及系统
CN101075233A (zh) * 2006-05-17 2007-11-21 华为技术有限公司 多媒体内容收集部件、系统及其方法
CN101257375A (zh) * 2006-12-31 2008-09-03 华为技术有限公司 实现多终端的消息同步的方法及装置
CN101090452A (zh) * 2007-07-18 2007-12-19 中国网络通信集团公司 机顶盒软件升级方法及升级系统

Also Published As

Publication number Publication date
CN102625156A (zh) 2012-08-01

Similar Documents

Publication Publication Date Title
CN102625156B (zh) 一种信息同步的方法和系统
KR101167833B1 (ko) 데이터 동기화 프로토콜
US20110231478A1 (en) System, Server, and Mobile Device for Content Provider Website Interaction and Method Therefore
CN101711386B (zh) 在外部和/或本地电子邮件服务器和/或无线设备之间同步电子邮件消息
CN103023857B (zh) 一种信息资源远程部署的方法及系统
CN104899274B (zh) 一种内存数据库高效远程访问方法
US8255360B1 (en) Synchronization of database changes among multiple devices
CN102449628A (zh) 用于持久性Web应用设计的架构模式
CN107277083B (zh) 一种数据交互的处理方法、装置及系统
CN111221469B (zh) 同步缓存数据的方法、装置和系统
CN110572464A (zh) 底层资源状态同步方法、装置、云平台系统及存储介质
WO2023193631A1 (zh) 一种请求调度方法、装置、计算机设备和存储介质
CN107609086B (zh) 一种app推送方法及其引擎系统
CN102594874B (zh) 一种同步处理方法和装置
WO2011090599A2 (en) Message based synchronization for mobile business objects
CN101976255B (zh) 网页信息批量导出生成word文档的方法和装置
US20180063242A1 (en) Method and apparatus for operating infrastructure layer in cloud computing architecture
CN113190624A (zh) 基于分布式跨容器的异步转同步调用方法及装置
AU2015201041A1 (en) Data synchronization protocol
CN115086414B (zh) 消息处理方法和装置、存储介质及电子设备
CN114285744B (zh) 配置信息的更新方法、装置、服务器及存储介质
US20240152504A1 (en) Data interaction method, apparatus, and electronic device
CN104519142B (zh) 一种数据同步方法和系统、客户端、协议服务器
CN117827480A (zh) 一种扩展Kafka消费模式的方法及装置
AU2012201747B2 (en) Data synchronization protocol

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
PE01 Entry into force of the registration of the contract for pledge of patent right

Denomination of invention: information synchronization method and system

Effective date of registration: 20170401

Granted publication date: 20140813

Pledgee: Silicon Valley Bank Co., Ltd.

Pledgor: TVMining (Beijing) Media Technology Co., Ltd.

Registration number: 2017310000019

PE01 Entry into force of the registration of the contract for pledge of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20140813

Termination date: 20210127

CF01 Termination of patent right due to non-payment of annual fee