CN102694824A - 一种用户数据存储系统及其数据访问方法 - Google Patents

一种用户数据存储系统及其数据访问方法 Download PDF

Info

Publication number
CN102694824A
CN102694824A CN2011100689133A CN201110068913A CN102694824A CN 102694824 A CN102694824 A CN 102694824A CN 2011100689133 A CN2011100689133 A CN 2011100689133A CN 201110068913 A CN201110068913 A CN 201110068913A CN 102694824 A CN102694824 A CN 102694824A
Authority
CN
China
Prior art keywords
data
node
user data
subscriber
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011100689133A
Other languages
English (en)
Other versions
CN102694824B (zh
Inventor
薛海强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
Original Assignee
China Mobile Communications Group Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd filed Critical China Mobile Communications Group Co Ltd
Priority to CN201110068913.3A priority Critical patent/CN102694824B/zh
Publication of CN102694824A publication Critical patent/CN102694824A/zh
Application granted granted Critical
Publication of CN102694824B publication Critical patent/CN102694824B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种用户数据存储系统及其数据访问方法,该系统中,数据存储节点用于存储用户数据;数据汇聚节点用于接收数据存储节点中具有相关性的用户数据,生成并维护用户数据在相应数据存储节点的映射关系视图,并将用户数据提供给数据联邦节点;数据联邦节点用于对数据汇聚节点提供的用户数据或/和与数据联邦节点连接的数据存储节点存储的用户数据进行整合处理,生成并维护整合处理后的用户数据在相应数据存储节点的映射关系视图,并将整合处理后的用户数据提供给用户数据中心;用户数据中心用于存储整合处理后的用户数据,并为前端设备提供数据访问服务。采用本发明可提高数据存储系统可靠性以及提高数据访问效率。

Description

一种用户数据存储系统及其数据访问方法
技术领域
本发明涉及通信领域的数据存储与处理技术,尤其涉及一种用户数据存储系统及其数据访问方法。
背景技术
现有的通信核心网络中的数据存储系统一般采用集中式存储结构的HLR(Home Location Register,归属位置寄存器)或HSS(Home Subscriber Server,归属用户服务器)。如图1所示,是现阶段业界主流用户数据存储架构,其数据集中存储于HLR/HSS,各前端设备(FE)通过访问HLR/HSS进行数据查询、维护等处理,该数据存储架构效率高,便于集中维护。但是由于所有数据存储到数据中心(如HLR/HSS)中,使得对数据中心的性能和可靠性要求较高,而数据中心的造价也比较高,其部署成本较高。而且对于集中式存储方式,通常只能靠提高硬件水平来提高存储性能。然而硬件水平的提高是比较困难的,也不方便网络拓扑,很难满足迅速增长的用户的需要。另外升级时需要对现网数据源进行改造,对网络冲击较大,不利用服务提供。
随着核心网的发展,电路域、IMS(IP Multimedia Subsystem,IP多媒体子系统)域、SAE(System Architecture Evolution,系统结构演进)域等不同类型的网络架构需要逐渐相互融合,而这些不同架构的数据存储系统也各不相同。数据存储架构、数据格式、寻址方式均存在较大差异。这种情况不利于新设备的部署和新业务的开展,也造成了现有的存储设备难以平滑演进以适应新的需求。采用淘汰现有设备进行更新的方式不仅造成资源的极大浪费,设备更新成本也十分高昂。并且随着电信网络和互联网、物联网的融合,不同网络的数据存储架构、标识体系、寻址方式更将带来新的挑战,这就需要有能够融合上述数据架构的数据存储系统来适应和满足这种变化。可见,为满足用户更多的业务需求,如何将现有不同体系下的用户数据资源进行有效融合,是目前通信网络亟待解决的问题。
为解决这一问题,业界提出了采用逻辑融合架构的数据存储方案,其典型代表为3GPP定义的GUP(同一用户档案),能够对业务提供融合数据。如图2所示,是3GPP定义的GUP的数据存储系统架构示意图。它的基本出发点是以用户为中心,解决多种不同网络、业务的用户数据统一访问的问题。用户数据存放在不同的网络实体中,应用可以通过统一的访问入口以标准接口访问所有授权的数据,这个入口功能由GUP设备担任。GUP设备为外部网元提供用户数据的“全视图”,负责隐藏管理域中数据的分布细节,并执行相应的安全、运营策略,确保数据的安全性及运营所必须的计费功能。
发明人在实现本发明的过程中,发现现有技术提供的GUP数据存储架构及其数据访问方案,至少存在以下问题:
(1)数据访问流程复杂,效率较低。在GUP方案中,对于所有的数据访问流程,都需要经过GUP所提供的数据视图进行访问,之后再转化成对数据源的实际访问。这一方式造成了流程的冗余,影响了数据访问效率。对于HLR、HSS等核心数据的影响尤为明显,会直接影响到呼叫建立的用时,进而影响用户体验。此外,GUP设备作为数据访问必经的网元,其性能也会成为网络的瓶颈。
(2)GUP的维护困难。任意一个数据源的变动(包括数据变化和设备变化)都会造成GUP的改动,GUP的实时维护难以保证。
(3)网络容灾能力差。由于存在GUP这样的“关键点”,网络的整体容灾能力受限于GUP设备的可靠性。
由此可见,目前亟需新的数据存储架构以及相应的数据访问机制,以适应通信网络的发展需求。
发明内容
本发明实施例提供了一种用户数据存储系统及其数据访问方法,用以提高数据存储系统可靠性以及提高数据访问效率。
本发明实施例提供的用户数据存储系统,包括:用户数据中心、数据联邦节点、数据汇聚节点和数据存储节点;其中,
数据存储节点,用于存储用户数据;
数据汇聚节点,用于接收数据存储节点中具有相关性的用户数据,生成并维护用户数据在相应数据存储节点的映射关系视图,并将用户数据提供给数据联邦节点;
数据联邦节点,用于对所述数据汇聚节点提供的用户数据或/和与所述数据联邦节点连接的数据存储节点存储的用户数据进行整合处理,生成并维护整合处理后的用户数据在相应数据存储节点的映射关系视图,并将整合处理后的用户数据提供给用户数据中心;
用户数据中心,用于存储整合处理后的用户数据,并在接收到前端设备的用户数据访问请求后,根据存储的用户数据进行相应数据处理。
本发明实施例基于上述用户数据存储系统实现的用户数据访问方法,包括:
用户数据中心接收前端设备的数据访问请求;
所述用户数据中心根据所述数据访问请求,以及所述用户数据中心中存储的用户数据进行相应数据处理。
本发明的上述实施例中,将数据汇聚节点和数据联邦节点汇聚后的数据存储与用户数据中心,使用户中心可以为前端设备提供数据处理功能,与现有技术相比,无需通过数据视图查询到数据存储节点后向前端设备返回数据存储节点的信息,由前端设备再向数据存储节点发送数据访问请求,从而提高了数据访问效率。另外,由于用户数据中心和数据存储节点都存储有用户数据,因此与现有技术只有数据存储节点存储用户数据相比,提高了系统容灾能力和可靠性。
附图说明
图1为现有技术中的集中式用户数据存储系统架构示意图;
图2为现有技术中的逻辑融合的用户数据存储系统架构示意图;
图3为本发明实施例提供的用户数据存储系统架构示意图;
图4为本发明实施例提供的用户数据联邦流程示意图;
图5为本发明实施例提供的用户数据订阅流程;
图6为本发明实施例提供的用户数据查询流程示意图;
图7为本发明实施例提供的用户数据增加流程示意图。
具体实施方式
下面结合附图对本发明实施例进行详细描述。
参见图3,为本发明实施例提供的用户数据存储系统架构示意图。如图所示,该架构中包括用户数据中心(UDR)、数据联邦节点,数据汇聚节点以及数据存储节点,其中数据存储节点可用DS(数据源)表示,DS并不是特定名称,而是对数据源的泛指,对于一个用户,其数据可能(往往)存在于多个DS中。在实际网络架构中,DS通常为多个,如图3中所示的DS1、DS2、DS3。其中,用户数据中心(UDR)与数据联邦节点连接,数据联邦节点与数据汇聚节点连接,数据汇聚节点与数据存储节点连接,数据联邦节点也可以直接与数据存储节点连接(如图3中所示的DS3)。在图3中,数据联邦节点内嵌在用户数据中心(UDR)内部,数据联邦节点可关联多个独立DS。在另一种实施方式中,数据联邦节点也可以作为单独设备,分别连接用户数据中心(UDR)和数据汇聚节点。
数据存储节点DS1、DS2、DS3主要用于存储不同数据类型的用户数据,其中部分DS中存储的数据可能具有相关性,如图1中的DS1、DS2的数据具有相关性。
数据汇聚节点的主要功能包括数据整合功能和数据访问功能,其中:
(1)数据整合功能,能够将各种具有相关性的用户数据整合在一起,形成一份用户数据,并维护这一整合数据的视图结构(即并不实际存储数据具体内容,而是存储和维护这一整合数据与存储有这些具有相关性的用户数据的数据存储节点的映射关系),并作为一个数据源,将整合数据提供给数据联邦节点进行进一步的数据整合处理。具体的,数据整合功能可将具有相关性的数据存储节点所存储的数据进行去冗余处理,以形成聚合数据。如果多个数据存储节点(数据源)具有相关性,则通过“数据汇聚节点”的数据整合功能将各个数据存储节点中获取的数据进行组合。组合依据可以是按用户进行组合,即,同一用户的各类数据组合为一套数据。例如,将用户A的好友信息、位置信息、状态信息整合为一套数据。通过数据汇聚可消除冗余信息。由于在一个区域内所发生的时间具有高度的相关性,因此区域内的节点所获得的信息具有很大的冗余性,通过汇聚可以较大程度地减少数据的尺寸。
数据汇集节点可采用现有技术提供的无损汇聚或/和有损汇聚方式进行汇聚。在无损汇聚中,保留全部的详细信息,总的大小的减少上界取决于信息所包含的墒的大小,墒是消息中所包含信息多少的度量。一种无损汇聚的方法是时间戳汇聚法,时间戳汇聚法主要用于远程监控应用中,时间由许多包含时间戳的属性构成。不同的时间实际上可能在某段时间之内是相互关联的,重复性的冗余信息可以去掉。还有一种无损汇聚法是打包汇聚,多个独立的信息包无压缩地汇聚成一个信息包,这样可节省各个包独立发送时附加的发送开销,比如可节省包头的发送开销。有损汇聚法包括求均值、方差、最大值、最小值、区间分布等等,根据不同的应用需要可选用一种或者几种方法。
(2)数据访问功能。可包括对数据的查询、增加、删除、修改以及订阅、通知等功能。
数据联邦节点主要用于进行数据联邦处理。数据联邦是指将不同的数据存储节点(数据源)组合产生出虚拟数据源或者数据服务(Data Service)的过程,组合后的数据可以被看作一个单一数据源来访问和管理。数据联邦通常能同时提供结构化和非结构化数据的集成。关系型数据库、文件甚至数据仓库都可以作为数据联邦的数据源,这些数据源可以分布在不同地理位置。具体的,数据联邦节点主要包括以下功能:
(1)数据整合功能。能够针对数据汇聚节点汇聚的数据,将各种具有相关性的用户数据整合在一起,形成一份用户数据,并提供给用户数据中心(UDR)。如果各个数据存储节点的数据格式不同,关联过程就需要进行数据转换,否则一个数据存储节点的变化无法通知到其他的数据存储节点。这种情况下,数据联邦功能负责将多种“不同数据模型”转换到“统一数据模型”。统一的数据模型是指用户数据中心(UDR)中的数据按照“统一的数据模型(即数据结构)”进行存储。数据联邦可采用采用直接配置等数据寻址方式。
由于数据联邦节点还可以直接与数据存储节点连接,因此数据联邦节点也可以对其所连接的数据存储节点中的具有相关性的用户数据进行整合处理。
(2)数据视图功能。能够根据整合成的用户数据,生成数据视图(即用户数据在相应数据存储节点的映射关系视图,以下同),用于与不同的数据存储节点进行交互。进一步的,数据联邦节点可将数据视图提供给用户数据中心(UDR)。数据联邦节点所展示的数据视图是虚拟的。所谓虚拟的含义是指数据联邦节点本身不保存任何实际的数据,提供给用户的并不是数据本身,用户所能看到的实际上是各数据存储节点在数据联邦节点中的一个映射。采用数据联邦之后,数据仍然是分散在各个数据存储节点中,分散的数据在数据联邦中有自己的映射,对外则表现为一个整体。
由于数据联邦节点还可以直接与数据存储节点连接,因此数据联邦节点在生成并维护的数据视图中还包括与该数据联邦节点连接的数据存储节点的相关用户数据的视图。
可以看出,与数据聚合节点不同,数据联邦节点中的数据聚合功能除了要将数据整合在一起,生成用户数据的全视图外,还可能需要将数据按照统一的数据模型进行整合存储,以保证用户数据中心(UDR)中数据的完整性。
(3)数据访问功能。可包括对数据的查询、增加、删除、修改以及订阅、通知等功能。数据联邦节点对这些分布的数据存储节点进行整合,提供了统一的访问方法(可能包括ODBC,JDBC,NFS,甚至时SOAP),并对集成后的数据进行访问控制,以保证数据的安全性。
(4)数据同步功能。进一步的,除数据汇聚的部分功能外,数据联邦节点还可完成用户数据中心中的完整的用户数据与各个数据存储节点中的用户数据的数据同步工作。数据同步可实时(如通过事件触发)或/和定期进行。数据同步过程基本与数据汇聚和联邦过程类似,具体可以是:需要进行数据同步时,数据汇聚节点对各数据存储节点中具有相关性的待同步的用户数据进行整合,更新数据视图(在数据视图有变化的情况下),并将整合后的用户数据提供给数据联邦节点;数据联邦节点根据数据汇聚节点汇聚的用户数据进行整合处理,更新数据视图(在数据视图有变化的情况下),并将整合处理后的用户数据提供给用户数据中心;用户数据中心根据接收到的用户数据对其所存储的用户数据进行数据同步处理。由于数据联邦节点还可以直接与数据存储节点连接,因此在数据同步过程中,如果待同步数据存储于与数据联邦节点连接的数据存储节点,则数据联邦节点对这些数据存储节点中的待同步数据进行整合处理,更新数据视图(在数据视图有变化的情况下),并将整合后的数据发送给用户数据中心进行数据同步。
对于结构化数据,事务控制是非常重要的,否则不能保证数据的完整性。数据联邦节点还提供了事务控制特性,用户可以将不同数据源(甚至是异构数据源)的数据在同一个事务中进行操作。数据联邦节点的事务处理可以是基于两阶段提交的分布式数据库处理方式,也可以是通过消息服务来获得与各数据存储节点协调事务处理过程,当然还有其它的方法,这是由数据联邦节点的具体实现决定的,当然这个过程对用户来说是不可见的。
用户数据中心(UDR)主要用于将数据联邦节点转换的“统一数据模型”的数据进行存储,以及根据前端节点(FE)的数据访问请求进行相应数据处理。用户数据中心存储的用户数据除了来源于数据联邦节点,对于满足以下条件之一或任意组合的用户数据,可优先存储到用户数据中心中:
时效性较强的数据(如用户位置信息),这种数据访问的延时要求比较严格;
访问较为频繁的数据(如鉴权数据);
重要性较高的数据(如计费信息);
数据量较小的数据。
参见图4,为本发明实施例提供的用户数据联邦流程示意图。如图所示,该流程可包括:
步骤401,数据汇聚节点进行用户数据汇聚,并提交给数据联邦节点。
具体的,如果多个数据存储节点具有相关性,则数据汇聚节点将各个数据存储节点中获取的数据进行组合。组合依据为按用户进行组合。即,同一用户的各类数据组合为一套数据。例如,将A用户的好友信息、位置信息、状态信息整合为一套数据。具体汇聚方式同前所述,在此不再赘述。
步骤402,数据联邦节点进行数据整合处理,生成数据视图,将整合处理后的数据提交给用户数据中心(UDR),进一步的,还可以将数据视图提交给用户数据中心。
具体的,数据联邦节点根据前述方式进行数据整合以及生成数据视图。由于各个数据存储节点中的数据格式往往不同,数据联邦节点可完成各种数据格式到统一数据模型的转换,即,数据联邦节点负责将多种“不同数据模型”转换到“统一数据模型”。统一的数据模型是指用户数据中心(UDR)中的数据按照“统一的数据模型”进行存储。数据联邦节点可采用直接配置等数据寻址方式进行寻址。例如,用户A的飞信好友信息(数据)在飞信业务平台中,以关系(表型)数据库的方式进行存储,数据模型转换功能将其转换为用户数据中心(UDR)可存储的数据模型。
如果数据联邦节点连接有数据存储节点,则数据联邦节点对其连接的数据存储节点中的具有相关性的用户数据进行整合处理,并生成相应的数据视图。
步骤403,UDR存储整合处理后的用户数据,并在数据联邦节点提供数据视图的情况下存储接收到的数据视图。
具体的,UDR可实现数据关联。即,将用户数据与UDR中对应的用户数据相组合。例如,将用户A好友信息存储到UDR中A用户的用户数据之下。
通过上述数据联邦流程可实现某个单一数据源和其它多个数据源的数据关联。如果各个数据源的数据格式不同,数据汇聚节点或数据联邦节点能够完成协议的转换:一方面能够通过不同的通信协议与各个数据存储节点或数据汇聚节点交互,另一方面能够用UDR所支持的通信协议和UDR进行交互(数据联邦节点作为UDR的一部分时,无需与UDR交互)。
参见图5,为本发明实施例提供的用户数据订阅流程。通过数据联邦流程建立起数据关联关系之后,用户数据中心可利用数据汇聚节点和数据联邦节点与各个数据存储节点之间建立数据订阅关系。可能为周期性订阅(定期更新数据),也可能为实时订阅(数据一旦发生变化即时更新)。如图5所示,用户数据订阅流程可包括:
步骤501,用户数据中心(UDR)向数据联邦节点发送订阅请求,请求订阅用户数据。
步骤502,数据联邦节点接收到订阅请求后,根据其所维护的数据视图,查找所要订阅的用户数据关联的数据存储节点,并将查找到的数据存储节点信息发送给数据汇聚节点。
步骤503,数据汇聚节点向相应的数据存储节点发送订阅请求,使相应数据存储节点进行订阅处理,从而建立与UDR的订阅关系。
上述流程中,在数据联邦节点连接有数据存储节点的情况下,并且查找到的数据存储节点中包括有该数据联邦节点连接的数据存储节点,则数据联邦节点向这些数据存储节点发送订阅请求,使相应数据存储节点进行订阅处理。
用户数据中心(UDR)在接收到前端节点(FE)的数据访问请求后,可对存储在用户数据中心(UDR)中的用户数据进行相应处理。
参见图6,为本发明实施例提供的用户数据查询流程示意图。如图所示,该流程可包括:
步骤601,用户数据中心(UDR)接收前端设备(FE)发送的数据查询请求。
步骤602,UDR根据该数据数据查询请求查询其所存储的“统一数据模型”的用户数据,并在查询到所需数据后返回给该前端设备。
参见图7,为本发明实施例提供的用户数据增加流程示意图,如图所示,该流程可包括:
步骤701,用户数据中心(UDR)接收前端设备(FE)发送的添加数据的请求。
步骤702,UDR根据该请求,在其存储的“统一数据模型”的用户数据中进行数据添加操作,并将处理结果发送给数据联邦节点。
步骤703,数据联邦节点接收到处理结果后,根据其所维护的数据视图,查找到与添加的用户数据关联的数据存储节点,并将查找到的数据存储节点的信息和处理结果(添加的用户数据)发送给数据汇聚节点。
步骤704,数据汇聚节点根据接收到的处理结果和数据存储节点的信息,向相应数据存储节点发送添加用户数据的数据处理命令。
步骤705,数据存储节点接收到该数据处理命令以及添加的数据后,进行数据添加操作。
上述流程中,在数据联邦节点连接有数据存储节点的情况下,如果请求访问的数据存储于与数据联邦节点连接的数据存储节点,则数据联邦节点在根据其所维护的数据视图查找到这些数据存储节点后,将处理结果和数据处理命令发送给这些数据存储节点,以使这些数据存储节点进行相应数据处理操作。
用户数据删除、修改流程基本与此类似,在此不再赘述。
需要说明的是,如果FE对数据的实时性及准确性有较高的要求,UDR可以根据其所存储的数据视图,将所请求访问(如查询、增加、修改或删除等)的数据所关联的数据存储节点的相关信息(如地址)返回给FE,以使FE向相应数据存储节点发起数据访问请求。
本发明实施例可适用于以下应用场景:
(1)对及时投入生产要求较高的应用,上述数据联邦方式允许应用直接访问数据,而不需要耗时较长的数据架构的调整。
(2)如果数据安全性要求较高的企业,不允许对数据进行复制和备份的场景下,上述数据联邦方式是很好的解决方案。
(3)要求实时访问的。数据可以是结构化的,也可以是非结构化的。
(4)在数据经常变换的环境下,上述数据联邦方式是灵活性和扩展性高的解决方案。
通过对比本发明实施例与相关的现有技术可以看出至少存在以下差别:
(1)两者在架构不同。本发明实施例的数据存储架构不存在类似GUP的“瓶颈”(由于UDR本身是数据存储系统,其可靠性、容量和接口能力都很容易得到保证);并且,本发明实施例的数据存储架构能够较为灵活的吸纳新的数据源加入,而不像GUP方案中每添加数据源都要重新配置GUP。
(2)对数据的处理方式不同。本发明中合理的区分了数据类型,将满足上述条件的数据在UDR中进行整合并存储,从而方便FE进行访问,提高了数据访问的效率,这一方式也降低了数据管理难度。
(3)数据访问流程不同。不同的数据存储位置也带来了不同的数据访问流程,本发明实施例提供的数据访问流程更加高效。
(4)本发明实施例支持更多的功能。由于UDR中存储有数据,因此能够建立UDR到数据源的订阅/通知关系,由数据源自动、实时的上报数据变化情况,保证了数据的时效性,并且降低了数据维护/同步的难度。
通过以上描述可以看出,本发明实施例实现了数据融合统一,寻址方便,支持复杂应用;系统结构简单,现有设备利用率高,易于升级扩展,维护和升级成本低;对于前端而言,方便引入第三方应用,对于后端而言,便于引入不同系统数据。具体的,本发明实施例可以实现以下技术效果:
(1)数据融合系统能够提供全面的用户数据,解决了原有网络中数据源分散、数据访问困难的问题;
(2)系统具有较高的路由效率,能够满足电信网络对延时的严格要求;
(3)系统具有较高的设备利用率。业务逻辑处理和数据存储的分离,使系统的部署更加的灵活。系统还可支持数据存储及数据访问两方面的负载均衡机制;
(4)能够实现对较大规模网络的支持,以提供对海量数据存储的支持;
(5)用户数据融合并对应用提供开放的接口,将推动业务创新,可使运营商为用户提供更多的增值服务,提升用户ARPU(Average Revenue Per User,每用户平均收入)值。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台终端设备(可以是手机,个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视本发明的保护范围。

Claims (13)

1.一种用户数据存储系统,其特征在于,包括:用户数据中心、数据联邦节点、数据汇聚节点和数据存储节点;其中,
数据存储节点,用于存储用户数据;
数据汇聚节点,用于接收数据存储节点中具有相关性的用户数据,生成并维护用户数据在相应数据存储节点的映射关系视图,并将用户数据提供给数据联邦节点;
数据联邦节点,用于对所述数据汇聚节点提供的用户数据或/和与所述数据联邦节点连接的数据存储节点存储的用户数据进行整合处理,生成并维护整合处理后的用户数据在相应数据存储节点的映射关系视图,并将整合处理后的用户数据提供给用户数据中心;
用户数据中心,用于存储整合处理后的用户数据,并在接收到前端设备的用户数据访问请求后,根据存储的用户数据进行相应数据处理。
2.如权利要求1所述的用户数据存储系统,其特征在于,所述用户数据中心具体用于,在接收到前端设备发送的用户数据查询请求后,根据存储的用户数据查询到所请求的用户数据后,将查询到的用户数据返回给所述前端设备;或者
所述用户数据中心具体用于,在接收到前端设备发送的用户数据增加、修改或删除的请求后,对其所存储的相应用户数据进行相应数据处理,并将处理结果发送给所述数据联邦节点;所述数据联邦节点还用于,根据所述处理结果和其所维护的映射关系视图,查询与所处理的用户数据关联的数据存储节点,并将处理结果和查询到的数据存储节点的信息发送给所述数据汇聚节点,或/和,将处理结果和数据处理命令发送给相应的数据存储节点,并在其所维护的映射关系视图变化的情况下更新该映射关系视图;所述数据汇聚节点还用于,根据接收到的处理结果和数据存储节点的信息,向相应数据存储节点发送相应的数据处理命令,并在其所维护的映射关系视图变化的情况下更新该映射关系视图。
3.如权利要求1所述的用户数据存储系统,其特征在于,所述数据联邦节点还用于,将其生成并维护的用户数据在相应数据存储节点的映射关系视图提供给所述用户数据中心;
所述用户数据中心还用于,存储接收到的所述用户数据在相应数据存储节点的映射关系视图,并在接收到前端设备的用户数据访问请求后,根据存储的映射关系视图查询与所请求访问的用户数据关联的数据存储节点,并将查询到的数据存储节点的信息返回给所述前端设备。
4.如权利要求1所述的用户数据存储系统,其特征在于,所述数据汇聚节点还用于,在需要进行数据同步时,对各数据存储节点中的具有相关性的待同步的用户数据进行同步,在其所维护的映射关系视图变化的情况下更新该映射关系视图,并将同步后的具有相关性的用户数据提供给数据联邦节点;
所述数据联邦节点还用于,根据所述数据汇聚节点提供的用户数据或/和与所述数据联邦节点连接的数据存储节点中的待同步数据进行整合处理,在其所维护的映射关系视图变化的情况下更新该映射关系视图,并将整合处理后的用户数据提供给用户数据中心;
所述用户数据中心还用于,根据接收到的用户数据对其所存储的用户数据进行同步处理。
5.如权利要求1所述的用户数据存储系统,其特征在于,所述用户数据中心还用于,向数据联邦节点发送用户数据订阅请求;
所述数据联邦节点还用于,根据其所维护的映射关系视图,查找所要订阅的用户数据关联的数据存储节点,并将查找到的数据存储节点的信息发送给数据汇聚节点,或/和在查找到的数据存储节点为与所述数据联邦节点连接的数据存储节点时,向该数据存储节点发送用户数据订阅请求;
所述汇聚节点还用于,根据接收到的数据存储节点的信息向相应的数据存储节点发送用户数据订阅请求;
所述数据存储节点还用于,根据接收到的用户数据订阅请求进行用户数据订阅处理。
6.如权利要求1项所述的用户数据存储系统,其特征在于,所述数据联邦节点还用于,在根据所述数据汇聚节点提供的用户数据进行整合处理时,将整合处理后的用户数据的数据结构转换为所述用户数据中心所支持的数据结构。
7.如权利要求1所述的用户数据存储系统,其特征在于,所述数据联邦节点还用于,使用所述数据汇聚节点所支持的通信协议与所述数据汇聚节点进行信息交互,使用所述用户数据中心支持的通信协议与所述用户数据中心进行信息交互。
8.如权利要求1至7任一项所述的用户数据存储系统,其特征在于,所述数据联邦节点独立于所述用户数据中心,或者所述数据联邦节点内嵌于所述用户数据中心;所述数据存储节点至少为两个。
9.一种基于如权利要求1至7之一所述的用户数据存储系统实现的用户数据访问方法,其特征在于,包括:
用户数据中心接收前端设备的数据访问请求;
所述用户数据中心根据所述数据访问请求,以及所述用户数据中心中存储的用户数据进行相应数据处理。
10.如权利要求9所述的方法,其特征在于,所述数据访问请求为数据查询请求时,所述用户数据中心根据所述数据访问请求,以及所述用户数据中心中存储的用户数据进行相应数据处理,包括:
所述用户数据中心根据存储的用户数据查询到所请求的用户数据后,将查询到的用户数据返回给所述前端设备;
所述数据访问请求为数据增加、删除或修改的请求时,所述用户数据中心根据所述数据访问请求,以及所述用户数据中心中存储的用户数据进行相应数据处理,包括:
所述用户数据中心在接收到前端设备发送的用户数据增加、修改或删除的请求后,对其所存储的相应用户数据进行相应数据处理,并将处理结果发送给所述数据联邦节点;
所述数据联邦节点根据所述处理结果和其所维护的映射关系视图,查询与所处理的用户数据关联的数据存储节点,并将处理结果和查询到的数据存储节点的信息发送给所述数据汇聚节点,或/和,将处理结果和数据处理命令发送给与其连接的相应的数据存储节点,并在其所维护的映射关系视图变化的情况下更新该映射关系视图;
所述数据汇聚节点根据接收到的处理结果和数据存储节点的信息,向相应数据存储节点发送相应的数据处理命令,并在其所维护的映射关系视图变化的情况下更新该映射关系视图;
数据存储节点接收到处理结果和数据处理命令后进行相应的数据处理。
11.如权利要求9所述的方法,其特征在于,在所述用户数据中心中存储有用户数据在相应数据存储节点的映射关系视图的情况下,所述用户数据中心根据所述数据访问请求,以及所述用户数据中心中存储的用户数据进行相应数据处理,包括:
所述用户数据中心在接收到前端设备的用户数据访问请求后,根据存储的映射关系视图查询与所请求访问的用户数据关联的数据存储节点,并将查询到的数据存储节点的信息返回给所述前端设备。
12.如权利要求9所述的方法,其特征在于,还包括:
所述汇聚节点在需要进行数据同步时,对各数据存储节点中的具有相关性的待同步的用户数据进行同步,在其所维护的映射关系视图变化的情况下更新该映射关系视图,并将同步后的具有相关性的用户数据提供给数据联邦节点;
所述数据联邦节点根据所述数据汇聚节点提供的用户数据或/和与所述数据联邦节点连接的数据存储节点中的待同步数据进行整合处理,在其所维护的映射关系视图变化的情况下更新该映射关系视图,并将整合处理后的用户数据提供给用户数据中心;
所述用户数据中心根据接收到的用户数据对其所存储的用户数据进行同步处理。
13.如权利要求9所述的方法,其特征在于,还包括:
所述用户数据中心向数据联邦节点发送用户数据订阅请求;
所述数据联邦节点根据其所维护的映射关系视图,查找所要订阅的用户数据关联的数据存储节点,并将查找到的数据存储节点的信息发送给数据汇聚节点,或/和在查找到的数据存储节点为与所述数据联邦节点连接的数据存储节点时,向该数据存储节点发送用户数据订阅请求;
所述汇聚节点根据接收到的数据存储节点的信息,向相应的数据存储节点发送用户数据订阅请求;
所述数据存储节点根据接收到的用户数据订阅请求进行用户数据订阅处理。
CN201110068913.3A 2011-03-22 2011-03-22 一种用户数据存储系统及其数据访问方法 Active CN102694824B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110068913.3A CN102694824B (zh) 2011-03-22 2011-03-22 一种用户数据存储系统及其数据访问方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110068913.3A CN102694824B (zh) 2011-03-22 2011-03-22 一种用户数据存储系统及其数据访问方法

Publications (2)

Publication Number Publication Date
CN102694824A true CN102694824A (zh) 2012-09-26
CN102694824B CN102694824B (zh) 2015-03-11

Family

ID=46860110

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110068913.3A Active CN102694824B (zh) 2011-03-22 2011-03-22 一种用户数据存储系统及其数据访问方法

Country Status (1)

Country Link
CN (1) CN102694824B (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103885887A (zh) * 2012-12-21 2014-06-25 腾讯科技(北京)有限公司 用户数据存储方法、读取方法及系统
CN105635340A (zh) * 2016-01-07 2016-06-01 国家电网公司 电力企业信息系统用户和电话用户集中整合的方法及系统
CN107220363A (zh) * 2017-06-07 2017-09-29 中国科学院信息工程研究所 一种支持全局复杂检索的跨地域查询方法及系统
CN109726563A (zh) * 2017-10-31 2019-05-07 阿里巴巴集团控股有限公司 一种数据统计的方法、装置以及设备
CN110852721A (zh) * 2019-11-14 2020-02-28 浙江军盾信息科技有限公司 一种信息通报系统、方法、设备及介质
WO2021022717A1 (zh) * 2019-08-02 2021-02-11 深圳前海微众银行股份有限公司 联邦学习中特征相关性分析方法、装置及可读存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020078064A1 (en) * 2000-12-18 2002-06-20 Ncr Corporation Data model for analysis of retail transactions using gaussian mixture models in a data mining system
CN101039405A (zh) * 2006-03-16 2007-09-19 华为技术有限公司 广播数据传输装置和广播数据传输方法
CN101477547A (zh) * 2009-01-20 2009-07-08 中国测绘科学研究院 一种基于规则的空间数据整合方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020078064A1 (en) * 2000-12-18 2002-06-20 Ncr Corporation Data model for analysis of retail transactions using gaussian mixture models in a data mining system
CN101039405A (zh) * 2006-03-16 2007-09-19 华为技术有限公司 广播数据传输装置和广播数据传输方法
CN101477547A (zh) * 2009-01-20 2009-07-08 中国测绘科学研究院 一种基于规则的空间数据整合方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103885887A (zh) * 2012-12-21 2014-06-25 腾讯科技(北京)有限公司 用户数据存储方法、读取方法及系统
CN103885887B (zh) * 2012-12-21 2018-07-27 腾讯科技(北京)有限公司 用户数据存储方法、读取方法及系统
CN105635340A (zh) * 2016-01-07 2016-06-01 国家电网公司 电力企业信息系统用户和电话用户集中整合的方法及系统
CN105635340B (zh) * 2016-01-07 2017-02-15 国网山东省电力公司信息通信公司 电力企业信息系统用户和电话用户集中整合的方法及系统
CN107220363A (zh) * 2017-06-07 2017-09-29 中国科学院信息工程研究所 一种支持全局复杂检索的跨地域查询方法及系统
CN107220363B (zh) * 2017-06-07 2020-09-22 中国科学院信息工程研究所 一种支持全局复杂检索的跨地域查询方法及系统
CN109726563A (zh) * 2017-10-31 2019-05-07 阿里巴巴集团控股有限公司 一种数据统计的方法、装置以及设备
US10860728B2 (en) 2017-10-31 2020-12-08 Advanced New Technologies Co., Ltd. Data storage nodes collaboration and data processing for data statistical analysis
US11205006B2 (en) 2017-10-31 2021-12-21 Advanced New Technologies Co., Ltd. Data storage nodes collaboration and data processing for data statistical analysis
WO2021022717A1 (zh) * 2019-08-02 2021-02-11 深圳前海微众银行股份有限公司 联邦学习中特征相关性分析方法、装置及可读存储介质
CN110852721A (zh) * 2019-11-14 2020-02-28 浙江军盾信息科技有限公司 一种信息通报系统、方法、设备及介质

Also Published As

Publication number Publication date
CN102694824B (zh) 2015-03-11

Similar Documents

Publication Publication Date Title
US7890463B2 (en) Apparatus and method for a distributed storage global database
CN102694824B (zh) 一种用户数据存储系统及其数据访问方法
CN101540775B (zh) 内容分发方法、装置与内容分发网络系统
CN101064630B (zh) 一种数据同步方法及系统
RU2518194C2 (ru) Система видеонаблюдения с распределенными узлами и способ управления такой системой
CA2447544C (en) Method and apparatus for removing client from an interactive tv network
CN108234816A (zh) 一种监控设备之间监控资源信息实时同步的方法及装置
CN101184082B (zh) 群组用户注册方法、状态更新方法、处理装置、ims网络实体和通信系统
WO2007115477A1 (fr) Procédé et système de synchronisation de données
CN106572087B (zh) 语音外呼系统
CN101562578B (zh) 一种用户数据订阅通知方法及装置
US20040088186A1 (en) Distributed convergent service control platform
CN113826424B (zh) 用于向网络提供外部业务的实体
CN101540969A (zh) 号码携带在短消息系统中的实现方法和装置
US20100035592A1 (en) Service processing method, service processing system, and service control point
CN100574439C (zh) Iptv系统中实现第三方音视频内容上传的系统和方法
CN105792142A (zh) 一种lte数字集群系统中的临时组呼方法
CN103685485A (zh) 移动终端VoIP通讯音频管理系统
CN110213156A (zh) 一种跨中心群组即时通信方法和系统
WO2014019545A1 (zh) 内容发布系统及其内容发布方法
CN111212119B (zh) 一种dubbo服务调用方法及系统
CN101753340A (zh) 数据修改的通知方法、设备及系统
CN101552695B (zh) 一种跨多专业网的统一网络管理方法及系统
CN101552773B (zh) 一种数据同步中处理数据项标识符映射的方法、设备和系统
CN102904739A (zh) 一种实现事件转发的方法及通用信息模型cim服务器

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant