CN110619007A - 一种数据关联方法、装置、设备和存储介质 - Google Patents

一种数据关联方法、装置、设备和存储介质 Download PDF

Info

Publication number
CN110619007A
CN110619007A CN201910877558.0A CN201910877558A CN110619007A CN 110619007 A CN110619007 A CN 110619007A CN 201910877558 A CN201910877558 A CN 201910877558A CN 110619007 A CN110619007 A CN 110619007A
Authority
CN
China
Prior art keywords
data
distributed database
broadband dialing
broadband
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910877558.0A
Other languages
English (en)
Inventor
万月亮
冯建业
刘世平
王涛
高琪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Ruian Technology Co Ltd
Original Assignee
Beijing Ruian Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Ruian Technology Co Ltd filed Critical Beijing Ruian Technology Co Ltd
Priority to CN201910877558.0A priority Critical patent/CN110619007A/zh
Publication of CN110619007A publication Critical patent/CN110619007A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G06F16/2458—Special types of queries, e.g. statistical queries, fuzzy queries or distributed queries
    • G06F16/2471—Distributed queries
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/27—Replication, distribution or synchronisation of data between databases or within a distributed database system; Distributed database system architectures therefor

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computing Systems (AREA)
  • Fuzzy Systems (AREA)
  • Mathematical Physics (AREA)
  • Probability & Statistics with Applications (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明实施例公开了一种数据关联方法、装置、设备和存储介质，其中该方法包括：获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据；将宽带拨号数据存储至分布式数据库中；将IP数据与分布式数据库中的用户数据进行匹配；根据匹配结果对IP数据进行标记。本发明实施例提供的技术方案，利用分布式数据库的实时性特点，将宽带拨号数据存储至分布式数据库中，再与IP数据进行实时匹配和标记，优化了数据关联方案，在确保数据关联的实时性的基础上，提高了准确性，降低了延时。

Description

一种数据关联方法、装置、设备和存储介质
技术领域
本发明实施例涉及数据通信技术领域，尤其涉及一种数据关联方法、装置、设备和存储介质。
背景技术
随着家庭宽带的普及，越来越多的网民开始使用非对称数字用户线路(Asymmetric Digital Subscriber Line，ADSL)拨号上网。在城域组网架构中，核心路由器与省出口路由器之间采集到的数据包，是宽带拨号之后网络地址转换了的公网IP地址，而宽带拨号时分配给上网终端的是私网IP地址。现有技术中，无法将上网终端的远程认证拨号用户服务(Remote authentication dial-in user service，RADIUS)上下文消息(即宽带拨号数据)与公网的IP数据流分发到同一处理设备，导致IP数据流与用户相关信息无法建立联系。
现有技术中，IP数据流与用户相关信息建立联系，一般是通过RADIUS上下文消息与IP数据流落地后实现离线关联。但是这种方法有一些较难克服的缺陷，当上网数据量增大的时候，需要花费较多离线计算资源处理数据，同时无法处理当天数据，影响业务实时效果，并且关联的正确性不能满足需求。
发明内容
本发明实施例提供一种数据关联方法、装置、设备和存储介质，以优化数据关联方案，在确保数据关联的实时性的基础上，提高准确性。
第一方面，本发明实施例提供了一种数据关联方法，包括：
获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
将所述宽带拨号数据存储至分布式数据库中；
将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
根据匹配结果对所述IP数据进行标记。
第二方面，本发明实施例还提供了一种数据关联装置，该装置包括：
数据获取模块，用于获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
数据存储模块，用于将所述宽带拨号数据存储至分布式数据库中；
数据匹配模块，用于将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
数据关联模块，用于根据匹配结果对所述IP数据进行标记。
进一步的，所述数据存储模块具体用于：
按照所述宽带拨号数据的动作类型标识和IP地址，将所述宽带拨号数据存储至分布式数据库中，所述分布式数据库为Redis分布式数据库。
进一步的，所述数据存储模块包括：
第一存储单元，用于若所述动作类型标识为开始标识，则以所述IP地址为键值存储所述宽带拨号数据中的目标数据至所述分布式数据库中，其中所述目标数据包括用户数据和网络地址转换端口数据。
进一步的，所述数据存储模块包括：
第二存储单元，用于若所述动作类型标识为结束标识，则根据所述IP地址删除所述分布式数据中的宽带拨号数据。
进一步的，所述数据匹配模块具体用于：
根据IP地址和网络地址转换端口数据，将所述IP数据中每个数据流与所述分布式数据库中的用户数据进行匹配。
进一步的，所述数据关联模块具体用于：
将匹配成功的用户数据标记至对应的数据流中。
进一步的，所述装置还包括：
清除模块，用于根据匹配结果对所述IP数据进行标记之后，根据回填记录清除指令清除超时用户数据在对应的数据流中的标记，其中所述回填记录清除指令为对所述宽带拨号数据进行轮询生成的指令，所述超时用户数据为超过设定时间未接收到结束标识的用户数据。
第三方面，本发明实施例还提供了一种设备，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如上所述的数据关联方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如上所述的数据关联方法。
本发明实施例通过获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据，将宽带拨号数据存储至分布式数据库中，并将IP数据与分布式数据库中的用户数据进行匹配，根据匹配结果对IP数据进行标记。本发明实施例提供的技术方案，利用分布式数据库的实时性特点，将宽带拨号数据存储至分布式数据库中，再与IP数据进行实时匹配和标记，优化了数据关联方案，在确保数据关联的实时性的基础上，提高了准确性，降低了延时。
附图说明
图1为本发明实施例一提供的一种数据关联方法的流程图；
图2为本发明实施例二提供的一种数据关联方法的流程图；
图3为本发明实施例二提供的一种数据关联方法的示意图；
图4为本发明实施例三提供的一种数据关联装置的结构示意图；
图5为本发明实施例四提供的设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1为本发明实施例一提供的一种数据关联方法的流程图，本实施例可适用于在宽带组网架构中实现IP数据与用户相关信息关联的情况，该方法可以由数据关联装置执行，该装置可以采用软件和/或硬件的方式实现，该装置可配置于设备中，例如该设备可以为智能手机、电脑或平板电脑等。如图1所示，该方法具体可以包括：
S110、获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据。
其中，宽带拨号数据为城域组网架构中上网终端的远程认证拨号用户服务(Remote Authentication Dial-In User Service，RADIUS)上下文消息。IP数据为城域组网架构中核心路由器传输的数据流。其中，RADIUS是一种在网络接入设备和认证服务器之间承载认证、授权、计费和配置信息的协议，RADIUS采用典型的客户/服务器(Client/Server)结构，它的客户端可以是任意运行RADIUS客户端软件的计算机。
宽带拨号数据和IP数据中所包括数据的数量本实施例中不作限定，宽带拨号数据中包括至少一个用户数据。宽带拨号数据可以包括分配公网互联网协议地址(InternetProtocol Address，IP地址)、网络地址转换(Network Address Translation，NAT)端口数据、用户数据、记录时间和动作类型标识等数据，其中NAT端口数据可以包括NAT起始端口和NAT结束端口，动作类型标识可以包括开始标识和结束标识，IP数据可以包括源IP地址、源端口、目的IP地址、目的端口和行为描述信息等数据。
具体的，数据关联装置可以通过预设的程序或者算法分别获取宽带拨号数据和IP数据。
S120、将宽带拨号数据存储至分布式数据库中。
其中，分布式数据库可以为具备实时性的存储数据库，本实施例对具体的类型不作限定，可以实现本实施例中的方法的数据库均适用，以Redis分布式数据库为例进行说明。
具体的，将宽带拨号数据存储至分布式数据库中，可以包括：按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中。宽带拨号数据中包括的每一个数据均具有其对应的IP地址，因此，根据该IP地址将宽带拨号数据存储至Redis分布式数据库中。
可选地，按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中，可以包括：若动作类型标识为开始标识，则以IP地址为键值存储宽带拨号数据中的目标数据至分布式数据库中，其中目标数据包括用户数据和网络地址转换端口数据。其中IP地址为公网IP地址，当动作类型标识为开始标识时，以该公网IP地址为键值，将宽带拨号数据中的目标数据存储至Redis分布式数据库中。
可选地，按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中，可以包括：若动作类型标识为结束标识，则根据IP地址删除分布式数据中的宽带拨号数据。当动作类型标识为结束标识时，说明该宽带拨号数据当前拨号已经停止，不需要再与用户数据关联，因此可以根据IP地址将Redis分布式数据库中对应的宽带拨号数据删除。
S130、将IP数据与分布式数据库中的用户数据进行匹配。
具体的，数据关联装置将宽带拨号数据存储至分布式数据库中之后，可以根据IP地址和网络地址转换端口数据，将IP数据中每个数据流与分布式数据库中的用户数据进行匹配。根据IP数据中每个数据流的IP地址在Redis分布式数据库中查找对应的用户数据，针对查找到的用户数据，判断当前数据流的源端口是否在对应的NAT开始端口和NAT结束端口的范围内，若是，则该用户数据与当前数据流匹配成功，若不是，则当前数据流没有匹配到对应的用户数据，继续在Redis分布式数据库中进行匹配。
S140、根据匹配结果对IP数据进行标记。
具体的，数据关联装置将IP数据与分布式数据库中的用户数据进行匹配，若匹配成功，则将匹配成功的用户数据标记至对应的数据流中，若匹配失败，则继续在Redis分布式数据库中进行匹配。
本实施例的技术方案，通过获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据，将宽带拨号数据存储至分布式数据库中，并将IP数据与分布式数据库中的用户数据进行匹配，根据匹配结果对IP数据进行标记。本发明实施例提供的技术方案，利用分布式数据库的实时性特点，将宽带拨号数据存储至分布式数据库中，再与IP数据进行实时匹配和标记，优化了数据关联方案，在确保数据关联的实时性的基础上，提高了准确性，降低了延时。
实施例二
图2为本发明实施例二提供的一种数据关联方法的流程图。本实施例在上述实施例的基础上，进一步优化了上述数据关联方法。相应的，如图2所示，本实施例的方法具体包括：
S210、获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据。
S220、将宽带拨号数据存储至分布式数据库中。
具体的，将宽带拨号数据存储至分布式数据库中，可以包括：按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中。
可选地，按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中，可以包括：若动作类型标识为开始标识，则以IP地址为键值存储宽带拨号数据中的目标数据至分布式数据库中，其中目标数据包括用户数据和网络地址转换端口数据。
可选地，按照宽带拨号数据的动作类型标识和IP地址，将宽带拨号数据存储至分布式数据库中，可以包括：若动作类型标识为结束标识，则根据IP地址删除分布式数据中的宽带拨号数据。
S230、将IP数据与分布式数据库中的用户数据进行匹配。
具体的，数据关联装置将宽带拨号数据存储至分布式数据库中之后，可以根据IP地址和网络地址转换端口数据，将IP数据中每个数据流与分布式数据库中的用户数据进行匹配。
S240、根据匹配结果对IP数据进行标记。
S250、根据回填记录清除指令清除超时用户数据在对应的数据流中的标记。
其中，超时用户数据为超过设定时间未接收到结束标识的用户数据，设定时间可以设置为宽带拨号的周期，即为48小时。
具体的，为保证数据关联的正确性，数据关联装置可以根据Redis分布式数据库中存储的回填记录清楚指令，清除超时用户数据在对应的数据流中的标记。
回填记录清除指令为对宽带拨号数据进行轮询生成的指令，回填记录清除指令的输出过程可以包括：S251-S253(图中未示出)，具体的：
S251、对宽带拨号数据进行轮询。
具体的，可以按照预设时间间隔对Redis分布式数据库中的宽带拨号数据进行轮询。
S252、确定是否存在超时用户数据。
根据每个宽带拨号数据中的动作类型标识是否包括结束标识，判断是否存在超时用户数据，若存在，则执行S253，若不存在，则返回执行S251。
S253、输出超时用户数据的回填记录清除指令。
针对每个超时用户数据，输出对应的回填记录清除指令，以便后续对超时用户数据在IP数据中对应的数据流的标记进行删除，即删除超时用户数据与IP数据的关联关系。
图3为本发明实施例二提供的一种数据关联方法的示意图，获取宽带拨号数据和IP数据之后，可以实时将宽带拨号数据存储进Redis分布式数据库，并在Redis分布式数据库中查找与IP数据中各个数据流匹配的用户数据，将匹配成功的用户数据标记至对应的数据流中；针对标记完成的数据流，根据回填记录清除指令清除超时用户数据在对应的数据流中的标记，之后将标记和清除完成的数据流存储至数据存储中心，以备后续使用。
本实施例中技术方案，通过回填记录清除指令可以进一步提高数据关联的准确性，即使存在宽带拨号数据中结束标识的丢失，也可以保证准确性。
本实施例的技术方案，通过获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据，将宽带拨号数据存储至分布式数据库中，并将IP数据与分布式数据库中的用户数据进行匹配，根据匹配结果对IP数据进行标记，根据回填记录清除指令清除超时用户数据在对应的数据流中的标记。本发明实施例提供的技术方案，利用分布式数据库的实时性特点，将宽带拨号数据存储至分布式数据库中，再与IP数据进行实时匹配和标记，优化了数据关联方案，在确保数据关联的实时性的基础上，提高了准确性，降低了延时；通过回填记录清除指令可以进一步提高数据关联的准确性。
实施例三
图4为本发明实施例三提供的一种数据关联装置的结构示意图，本实施例可适用于在宽带组网架构中实现IP数据与用户相关信息关联的情况。本发明实施例所提供的数据关联装置可执行本发明任意实施例所提供的数据关联方法，具备执行方法相应的功能模块和有益效果。
该装置具体包括数据获取模块310、数据存储模块320、数据匹配模块330和数据关联模块340，其中：
数据获取模块310，用于获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
数据存储模块320，用于将所述宽带拨号数据存储至分布式数据库中；
数据匹配模块330，用于将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
数据关联模块340，用于根据匹配结果对所述IP数据进行标记。
本发明实施例通过获取宽带拨号数据和IP数据，宽带拨号数据包括至少一个用户数据，将宽带拨号数据存储至分布式数据库中，并将IP数据与分布式数据库中的用户数据进行匹配，根据匹配结果对IP数据进行标记。本发明实施例提供的技术方案，利用分布式数据库的实时性特点，将宽带拨号数据存储至分布式数据库中，再与IP数据进行实时匹配和标记，优化了数据关联方案，在确保数据关联的实时性的基础上，提高了准确性，降低了延时。
进一步的，所述数据存储模块320具体用于：
按照所述宽带拨号数据的动作类型标识和IP地址，将所述宽带拨号数据存储至分布式数据库中，所述分布式数据库为Redis分布式数据库。
进一步的，所述数据存储模块320包括：
第一存储单元，用于若所述动作类型标识为开始标识，则以所述IP地址为键值存储所述宽带拨号数据中的目标数据至所述分布式数据库中，其中所述目标数据包括用户数据和网络地址转换端口数据。
进一步的，所述数据存储模块320包括：
第二存储单元，用于若所述动作类型标识为结束标识，则根据所述IP地址删除所述分布式数据中的宽带拨号数据。
进一步的，所述数据匹配模块330具体用于：
根据IP地址和网络地址转换端口数据，将所述IP数据中每个数据流与所述分布式数据库中的用户数据进行匹配。
进一步的，所述数据关联模块340具体用于：
将匹配成功的用户数据标记至对应的数据流中。
进一步的，所述装置还包括：
清除模块，用于根据匹配结果对所述IP数据进行标记之后，根据回填记录清除指令清除超时用户数据在对应的数据流中的标记，其中所述回填记录清除指令为对所述宽带拨号数据进行轮询生成的指令，所述超时用户数据为超过设定时间未接收到结束标识的用户数据。
本发明实施例所提供的数据关联装置可执行本发明任意实施例所提供的数据关联方法，具备执行方法相应的功能模块和有益效果。
实施例四
图5为本发明实施例四提供的设备的结构示意图。图5示出了适于用来实现本发明实施方式的示例性设备412的框图。图5显示的设备412仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图5所示，设备412以通用设备的形式表现。设备412的组件可以包括但不限于：一个或者多个处理器416，存储装置428，连接不同系统组件(包括存储装置428和处理器416)的总线418。
总线418表示几类总线结构中的一种或多种，包括存储装置总线或者存储装置控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(Industry SubversiveAlliance，ISA)总线，微通道体系结构(Micro Channel Architecture，MAC)总线，增强型ISA总线、视频电子标准协会(Video Electronics Standards Association，VESA)局域总线以及外围组件互连(Peripheral Component Interconnect，PCI)总线。
设备412典型地包括多种计算机系统可读介质。这些介质可以是任何能够被设备412访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
存储装置428可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(Random Access Memory，RAM)430和/或高速缓存存储器432。设备412可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统434可以用于读写不可移动的、非易失性磁介质(图5未显示，通常称为“硬盘驱动器”)。尽管图5中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘，例如只读光盘(Compact Disc Read-Only Memory，CD-ROM),数字视盘(Digital Video Disc-Read Only Memory，DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线418相连。存储装置428可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块442的程序/实用工具440，可以存储在例如存储装置428中，这样的程序模块442包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块442通常执行本发明所描述的实施例中的功能和/或方法。
设备412也可以与一个或多个外部设备414(例如键盘、指向终端、显示器424等)通信，还可与一个或者多个使得用户能与该设备412交互的终端通信，和/或与使得该设备412能与一个或多个其它计算终端进行通信的任何终端(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口422进行。并且，设备412还可以通过网络适配器420与一个或者多个网络(例如局域网(Local Area Network，LAN)，广域网(Wide Area Network，WAN)和/或公共网络，例如因特网)通信。如图5所示，网络适配器420通过总线418与设备412的其它模块通信。应当明白，尽管图中未示出，可以结合设备412使用其它硬件和/或软件模块，包括但不限于：微代码、终端驱动器、冗余处理器、外部磁盘驱动阵列、磁盘阵列(Redundant Arrays of Independent Disks，RAID)系统、磁带驱动器以及数据备份存储系统等。
处理器416通过运行存储在存储装置428中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的数据关联方法，该方法包括：
获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
将所述宽带拨号数据存储至分布式数据库中；
将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
根据匹配结果对所述IP数据进行标记。
实施例五
本发明实施例五还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例所提供的数据关联方法，该方法包括：
获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
将所述宽带拨号数据存储至分布式数据库中；
将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
根据匹配结果对所述IP数据进行标记。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或终端上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种数据关联方法，其特征在于，包括：
获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
将所述宽带拨号数据存储至分布式数据库中；
将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
根据匹配结果对所述IP数据进行标记。
2.根据权利要求1所述的方法，其特征在于，将所述宽带拨号数据存储至分布式数据库中，包括：
按照所述宽带拨号数据的动作类型标识和IP地址，将所述宽带拨号数据存储至分布式数据库中，所述分布式数据库为Redis分布式数据库。
3.根据权利要求2所述的方法，其特征在于，按照所述宽带拨号数据的动作类型标识和IP地址，将所述宽带拨号数据存储至分布式数据库中，包括：
若所述动作类型标识为开始标识，则以所述IP地址为键值存储所述宽带拨号数据中的目标数据至所述分布式数据库中，其中所述目标数据包括用户数据和网络地址转换端口数据。
4.根据权利要求2所述的方法，其特征在于，按照所述宽带拨号数据的动作类型标识和IP地址，将所述宽带拨号数据存储至分布式数据库中，包括：
若所述动作类型标识为结束标识，则根据所述IP地址删除所述分布式数据中的宽带拨号数据。
5.根据权利要求1所述的方法，其特征在于，将所述IP数据与所述分布式数据库中的所述用户数据进行匹配，包括：
根据IP地址和网络地址转换端口数据，将所述IP数据中每个数据流与所述分布式数据库中的用户数据进行匹配。
6.根据权利要求1所述的方法，其特征在于，根据匹配结果对所述IP数据进行标记，包括：
将匹配成功的用户数据标记至对应的数据流中。
7.根据权利要求1所述的方法，其特征在于，根据匹配结果对所述IP数据进行标记之后，还包括：
根据回填记录清除指令清除超时用户数据在对应的数据流中的标记，其中所述回填记录清除指令为对所述宽带拨号数据进行轮询生成的指令，所述超时用户数据为超过设定时间未接收到结束标识的用户数据。
8.一种数据关联装置，其特征在于，包括：
数据获取模块，用于获取宽带拨号数据和IP数据，所述宽带拨号数据包括至少一个用户数据；
数据存储模块，用于将所述宽带拨号数据存储至分布式数据库中；
数据匹配模块，用于将所述IP数据与所述分布式数据库中的所述用户数据进行匹配；
数据关联模块，用于根据匹配结果对所述IP数据进行标记。
9.一种设备，其特征在于，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序；
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的数据关联方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的数据关联方法。
CN201910877558.0A 2019-09-17 2019-09-17 一种数据关联方法、装置、设备和存储介质 Pending CN110619007A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910877558.0A CN110619007A (zh) 2019-09-17 2019-09-17 一种数据关联方法、装置、设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910877558.0A CN110619007A (zh) 2019-09-17 2019-09-17 一种数据关联方法、装置、设备和存储介质

Publications (1)

Publication Number Publication Date
CN110619007A true CN110619007A (zh) 2019-12-27

Family

ID=68923489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910877558.0A Pending CN110619007A (zh) 2019-09-17 2019-09-17 一种数据关联方法、装置、设备和存储介质

Country Status (1)

Country Link
CN (1) CN110619007A (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150519A (zh) * 2007-10-30 2008-03-26 杭州华三通信技术有限公司 网络地址转换业务控制方法及装置
CN106603495A (zh) * 2016-11-15 2017-04-26 北京锐安科技有限公司 一种radius信令关联方法及系统
CN106657430A (zh) * 2016-11-04 2017-05-10 北京锐安科技有限公司 Radius协议业务数据的关联方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101150519A (zh) * 2007-10-30 2008-03-26 杭州华三通信技术有限公司 网络地址转换业务控制方法及装置
CN106657430A (zh) * 2016-11-04 2017-05-10 北京锐安科技有限公司 Radius协议业务数据的关联方法及装置
CN106603495A (zh) * 2016-11-15 2017-04-26 北京锐安科技有限公司 一种radius信令关联方法及系统

Similar Documents

Publication Publication Date Title
CN110008045B (zh) 微服务的聚合方法、装置、设备及存储介质
CN112738791B (zh) 基于5g核心网的用户信息关联回填方法、装置、设备和介质
CN111049731B (zh) 一种即时聊天应用监控方法以及系统
CN109714636B (zh) 一种用户识别方法、装置、设备及介质
CN109088872B (zh) 带使用期限的云平台的使用方法、装置、电子设备及介质
CN112887289B (zh) 一种网络数据处理方法、装置、计算机设备及存储介质
CN117201601A (zh) 物联网设备接入方法、装置、设备及存储介质
CN110619007A (zh) 一种数据关联方法、装置、设备和存储介质
CN115297447B (zh) 一种长短信合并方法、系统、设备及存储介质
CN108989902B (zh) 一种弹幕消息的处理方法、装置、终端和存储介质
CN114449523B (zh) 用于卫星测控系统的流量过滤方法、装置、设备及介质
CN114006868B (zh) 流量筛选方法及装置
CN114143079B (zh) 包过滤策略的验证装置及方法
CN112866979B (zh) 基于5g服务化接口的用户信息关联方法、装置、设备和介质
CN114356925A (zh) 标识生成方法、装置、电子设备及存储介质
CN113986995A (zh) 请求分发方法、装置、存储介质及电子设备
CN112866005A (zh) 一种用户访问日志的处理方法、装置、设备及存储介质
CN116367142B (zh) 基于5g的网络流量采集系统、方法、设备及介质
CN115174367B (zh) 一种业务系统边界确定方法、装置、电子设备及存储介质
CN115955521B (zh) 一种私有报文的识别方法及系统
CN113127222B (zh) 数据发送方法、装置、设备和介质
CN113194013B (zh) 一种终端设备接入网络的控制方法、装置和存储介质
CN111600944B (zh) 一种数据处理方法、装置、设备和存储介质
CN110166505B (zh) 一种会话记录存储方法、装置、设备及存储介质
CN114430395A (zh) 流量控制方法、装置、设备以及智能交通管理设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20191227