CN101127915A

CN101127915A - 一种基于增量式的电子节目导航数据同步方法及系统

Info

Publication number: CN101127915A
Application number: CNA2007101220598A
Authority: CN
Inventors: 吉锋; 李功
Original assignee: ZTE Corp
Current assignee: ZTE Corp
Priority date: 2007-09-20
Filing date: 2007-09-20
Publication date: 2008-02-20
Anticipated expiration: 2027-09-20
Also published as: CN101127915B

Abstract

本发明涉及IPTV技术领域，特别涉及一种基于增量式的电子节目导航(EPG)数据同步方法及系统。本发明通过添加一个或多个FTP服务器，将增量数据文件通过一个或多个FTP服务器下发给各EPG服务器，业务管理平台通过发送增量通知消息给EPG服务器，EPG服务器根据增量通知消息被动进行增量数据同步，通过本发明可以减轻业务管理平台的数据传输压力，还可以提高数据安全性和传输效率。

Description

一种基于增量式的电子节目导航数据同步方法及系统

技术领域

本发明涉及IPTV技术领域，特别涉及一种基于增量式的电子节目导航(EPG)数据同步方法及系统。

背景技术

随着社会的进步和用户对高品质生活追求的不断提高，数字家庭的发展越来越受到人们的关注。基于宽带网络的交互式网络电视(IPTV)为用户提供了丰富多彩的音视频服务和各种各样的增值应用业务，推动了数字家庭的发展。电子节目导航(Electronic Program Guiding，EPG)系统作为IPTV用户享受服务的导航门户系统，提供了大量的节目、频道等展示信息。如何将这些海量的数据从业务管理平台同步到各个EPG系统上，这是一个艰巨的任务。

在整个IPTV系统实际运行的网络环境下，全网中将分布多个EPG服务器，例如一个省级的IPTV系统，通常在省中心节点和各个地区节点设置了多个EPG服务器。这些EPG服务器关联到一个统一的业务管理平台，每一个EPG服务器都需要同步业务管理平台上的节目、频道等数据。如何将这些海量的数据准确、高效地同步到各个EPG上是一个艰巨的任务。

目前对于子系统间海量数据的同步方法，多数采用直连对方数据库或者采用超文本传输协议(HTTP)直接传递数据的方法。对于数据库直连方式，直接将对方数据库暴露出来，存在较大的安全隐患。对于HTTP直接传递方式，因为HTTP本身存在超时机制，而每次传输的数据量大小又不确定，因此常会出现准备数据的时间超过HTTP的超时时间，从而无法同步数据的情况。

发明内容

有鉴于此，本发明的目的之一是提供一种基于增量式的EPG数据同步方法，能够解决直连数据库方式和HTTP直传方式所带来的技术问题，为实现上述目的，本发明的实现方案如下：

一种基于增量式的电子节目导航数据同步方法，包括如下步骤，

A、业务管理平台生成全量数据文件，将其上传到文件传输FTP服务器，电子节目导航EPG服务器进行全量数据同步；

B、业务管理平台生成增量数据文件并上传到FTP服务器；

C、业务管理平台向EPG服务器发送增量通知消息；

D、EPG服务器接收增量通知消息，从所述FTP服务器下载所述增量数据文件，并执行数据合并操作。

基于上述技术方案，所述EPG服务器处于被动增量数据同步工作方式，当接收到所述业务管理平台发送的增量通知消息后，所述EPG服务器才去执行增量数据同步操作。

基于上述技术方案，步骤A中，所述业务管理平台完成所述全量数据同步后，在本地保存数据文件时间戳。

基于上述技术方案，步骤B中，所述业务管理平台定时生成所述增量数据文件。

基于上述技术方案，步骤B中，通过比对节目修改时间及上一次扫描时间来生成所述增量数据文件，当所述更改时间大于所述上次扫描时间时表示需要生成所述增量数据文件，否则不需要生成所述增量数据文件。

基于上述技术方案，步骤C中，所述增量通知消息包括FTP服务器配置信息及新生成的增量数据文件的时间戳信息。

基于上述技术方案，所述FTP服务器的配置信息包括：FTP服务器的网络地址、端口、增量数据文件存放目录。

基于上述技术方案，步骤C中，若没有所述增量数据文件生成，EPG服务器仍然发送所述增量通知消息。

基于上述技术方案，步骤D中，所述EPG服务器在接收到所述增量通知消息后根据增量更新判断条件判断是否需要进行所述下载及合并操作。

基于上述技术方案，步骤D中，所述增量更新判断条件为：本地存储的数据文件的时间戳是否老于所述增量通知消息中包含的所述新生成增量数据文件的时间戳时。

基于上述技术方案，步骤C中，所述业务管理平台使用超文本传输协议向所述EPG服务器发送增量通知消息。

本发明的另一目的是提供一种基于增量式的电子节目导航数据同步系统，为实现此目的，本发明的实现方案如下：

一种基于增量式的电子节目导航数据同步系统，包括：

业务管理平台，用于业务数据的管理；

EPG服务器，用于同步所述业务管理平台的业务数据，实现节目、频道等信息的导航；

其特征在于，还包括：

FTP服务器，用于存储所述业务管理平台生成的业务数据。

所述业务管理平台将业务数据上传到所述FTP服务器，并定时向所述EPG服务器发送增量通知消息，所述EPG服务器根据所述增量通知消息从所述FTP服务器下载所述业务数据。

基于上述技术方案，所述业务数据包括全量数据文件及增量数据文件，所述业务管理平台使用超文本传输协议发送所述增量通知消息。

由于采用了以上的技术方案，本发明结合超文本传输协议(HTTP)和文件传输协议(FTP)进行数据增量同步，采用HTTP进行增量消息通知、FTP进行增量文件下载处理，具有较好的稳定性，另外还提供了系统初始化时所需要的全量数据同步。

附图说明

图1为完成本发明方法的系统结构示意图。

具体实施方式

下面根据附图和实施例对本发明作进一步详细说明：

本发明的核心思想是，添加一个或多个文件传输(FTP)服务器，将增量数据文件通过一个或多个FTP服务器下发给各电子节目导航(EPG)服务器，业务管理平台通过发送增量通知消息给EPG服务器，EPG服务器根据增量通知消息被动进行增量数据同步，通过本发明可以减轻业务管理平台的数据传输压力，还可以提高数据安全性和传输效率。

如图1所示，基于增量式的EPG数据同步系统主要包括：业务管理平台、数据文件FTP服务器、EPG服务器。业务管理平台用于用于业务数据的管理，负责生成全量数据文件和增量数据文件，并将生成的增量数据文件上传到FTP服务器，以及向EPG服务器发送增量通知消息。数据文件FTP服务器用于存放定期生成的增量数据文件以及全量数据文件。EPG服务器用于同步所述业务管理平台的数据，实现节目、频道等信息的导航，EPG服务器接收业务管理平台发送的增量通知消息，从FTP服务器获取增量数据文件。图中①表示业务管理平台向FTP服务器传送全量数据文件或增量数据文件，②表示业务管理平台向EPG服务器发送增量通知消息，③表示EPG服务器从FTP服务器下载全量数据文件或增量数据文件。

本发明通过以下步骤来实现增量数据的同步：

步骤1、业务管理平台生成全量数据文件，上传到FTP服务器，EPG服务器进行全量数据同步。

EPG服务器初始安装后，没有任何数据，需要进行初始化。对于EPG海量数据的初始化，我们采用EPG主动同步全量数据文件的方式。即通过手工发布命令要求业务管理平台将相关表中所有数据生成单独的文件，然后上传到FTP服务器上，EPG服务器从FTP服务器上下载这些数据文件后导入到本地内存数据库中，完成数据的初始化。在某一最佳实施例中，所有数据文件的命名都采用如下规则yyyyMMddHHmmss，即用文件生成的时间(年月日时分秒)表示。EPG服务器完成首次全量同步后，将首次全量同步后的数据文件时间戳存放在本地，作为以后决定是否需要进行增量更新的判断依剧。

步骤2、业务管理平台定时生成增量数据文件并上传到FTP服务器。

业务管理平台保存一个时间戳表，记录上一次扫描的时间，节目相关表中凡是存在更改时间大于上次扫描时间的记录表示需要形成增量文件，业务管理平台会定时将变化的数据导出生成一个增量数据文件(其维护一个数据增加/删除/修改的表结构)，在一最佳实施例中扫描周期设定为5分钟，导出的增量数据文件的名称即是当前的时间戳，导出成功后将其上传到FTP服务器上。

步骤3、业务管理平台向EPG服务器发送增量通知消息。

业务管理平台定时或在每次生成增量数据文件并上传到增量FTP服务器后，采用HTTP消息的方式通知EPG服务器，消息内容主要包括：FTP服务器的相关配置信息(如：IP、端口、增量数据文件存放目录等)、生成增量数据文件的最新时间戳等。即使没有最新增量文件生成也会向FPG服务器发送通知消息，防止某个EPG服务器在某段时间异常没有收到消息。EPG服务器收到消息后，根据增量更新判断条件进行判断，决定是否需要进行数据更新。

步骤4、EPG服务器接收增量通知消息，根据增量更新判断条件判断是否需要进行增量同步，若是、则执行步骤5，若否，则不做操作。

EPG服务器将增量通知消息中的增量数据文件的时间戳和本地存储的最后一次增量更新或全量同步成功后的数据文件时间戳进行比较，若对方的时间戳比EPG服务器本地数据文件的时间戳更新，则EPG服务器就会根据增量通知消息中包含的FTP服务器的信息到FTP服务器上下载相应的增量数据文件。如果对方的时间戳比EPG服务器本地数据文件的时间戳老或相等，则说明EPG服务器本地的数据文件已经是最新的，不需要更新。

步骤5、执行数据合并操作，并在本地存储增量数据文件的时间戳。

EPG服务器登陆FTP服务器下载相应的增量数据文件到本地后，进行处理，将增量更新内容存入本地的内存数据库中，同时将本地增量数据文件的时间戳置为最新。

一般，因为业务管理平台导出增量数据文件的间隔时间较短，所以每次生成的增量文件中记录数相对比较少。即使某个EPG服务器一段时间出现异常没有及时更新数据，在EPG服务器恢复正常后，增量下载这一时间段内的多个增量数据文件，进行逐步处理即可。

本发明还可有其它多种实施例，在不背离本发明精神及其实质的情况下，本领域技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。

Claims

1.一种基于增量式的电子节目导航数据同步方法，其特征在于，包括如下步骤，

B、业务管理平台生成增量数据文件并上传到FTP服务器；

C、业务管理平台向EPG服务器发送增量通知消息；

2.根据权利要求1所述的方法，其特征在于，所述EPG服务器处于被动增量数据同步工作方式，当接收到所述业务管理平台发送的增量通知消息后，所述EPG服务器才去执行增量数据同步操作。

3.根据权利要求1所述的方法，其特征在于，步骤A中，所述业务管理平台完成所述全量数据同步后，在本地保存数据文件时间戳。

4.根据权利要求1所述的方法，其特征在于，步骤B中，所述业务管理平台定时生成所述增量数据文件。

5.根据权利要求4所述的方法，其特征在于，步骤B中，通过比对节目修改时间及上一次扫描时间来生成所述增量数据文件，当所述更改时间大于所述上次扫描时间时表示需要生成所述增量数据文件，否则不需要生成所述增量数据文件。

6.根据权利要求1所述的方法，其特征在于，步骤C中，所述增量通知消息包括FTP服务器配置信息及新生成的增量数据文件的时间戳信息。

7.根据权利要求6所述的方法，其特征在于，所述FTP服务器的配置信息包括：FTP服务器的网络地址、端口、增量数据文件存放目录。

8.根据权利要求1所述的方法，其特征在于，步骤C中，若没有所述增量数据文件生成，EPG服务器仍然发送所述增量通知消息。

9.根据权利要求1所述的方法，其特征在于，步骤D中，所述EPG服务器在接收到所述增量通知消息后根据增量更新判断条件判断是否需要进行所述下载及合并操作。

10.根据权利要求9所述的方法，其特征在于，步骤D中，所述增量更新判断条件为：本地存储的数据文件的时间戳是否老于所述增量通知消息中包含的所述新生成增量数据文件的时间戳时。

11.根据权利要求1所述的方法，其特征在于，步骤C中，所述业务管理平台使用超文本传输协议向所述EPG服务器发送增量通知消息。

12.一种基于增量式的电子节目导航数据同步系统，包括：

业务管理平台，用于业务数据的管理；

其特征在于，还包括：

FTP服务器，用于存储所述业务管理平台生成的业务数据。

13.根据权利要求12所述的系统，其特征在于，所述业务数据包括全量数据文件及增量数据文件，所述业务管理平台使用超文本传输协议发送所述增量通知消息。