CN111917899A - 一种域名压缩方法及其相关产品 - Google Patents
一种域名压缩方法及其相关产品 Download PDFInfo
- Publication number
- CN111917899A CN111917899A CN202010742846.8A CN202010742846A CN111917899A CN 111917899 A CN111917899 A CN 111917899A CN 202010742846 A CN202010742846 A CN 202010742846A CN 111917899 A CN111917899 A CN 111917899A
- Authority
- CN
- China
- Prior art keywords
- data
- types
- domain name
- compression
- record
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000007906 compression Methods 0.000 title claims abstract description 122
- 230000006835 compression Effects 0.000 title claims abstract description 121
- 238000000034 method Methods 0.000 title claims abstract description 51
- 238000012545 processing Methods 0.000 claims abstract description 30
- 230000015654 memory Effects 0.000 claims description 15
- 238000004590 computer program Methods 0.000 claims description 14
- 238000004891 communication Methods 0.000 claims description 5
- 238000010586 diagram Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000012937 correction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 230000002688 persistence Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L61/00—Network arrangements, protocols or services for addressing or naming
- H04L61/45—Network directories; Name-to-address mapping
- H04L61/4505—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols
- H04L61/4511—Network directories; Name-to-address mapping using standardised directories; using standardised directory access protocols using domain name system [DNS]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
- H04L69/04—Protocols for data compression, e.g. ROHC
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Computer Security & Cryptography (AREA)
- Information Transfer Between Computers (AREA)
- Compression, Expansion, Code Conversion, And Decoders (AREA)
Abstract
本申请实施例公开了一种域名压缩方法及相关产品,所述域名压缩方法包括:获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;将所述第一数据进行分类,得到五种类型的数据;对所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种域名压缩方法及其相关产品。
背景技术
随着科技水平不断发展和进步,大数据和智能化管理已经植入各行各业,人们的生活得到了极大的便利。而域名压缩,极大地减少人们浏览网页的时间。
目前,在域名压缩领域,在高访问量的场景下,就域名服务器需要对大量域名进行解析操作,此时的DNS服务器会面临较大的处理压力,域名服务器的响应时间变长。因此,对于如何进一步减少域名服务器处理时间,提高域名服务器处理速率,成为了有待解决的问题。
发明内容
本申请实施例的主要目的在于提供一种域名压缩方法及其相关产品,能够有效的解决在高访问的场景下域名服务器处理大量域名速率慢的问题。
第一方面,本申请实施例提供了一种域名压缩方法,所述方法包括:
获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
将所述第一数据进行分类,得到五种类型的数据;
对所述五种类型数据分别进行局部压缩,得到第二数据;
对第二数据进行关联压缩,得到目标数据。
第二方面,本申请实施例提供了一种域名压缩装置,所述域名压缩装置包括:
获取单元,用于获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
分类单元,用于将所述第一数据进行分类,得到五种类型的数据;
局部压缩单元,用于对所述五种类型数据分别进行局部压缩,得到第二数据;
关联压缩单元,用于对第二数据进行关联压缩,得到目标数据。
第三方面,本申请实施例提供了一种电子设备,包括处理器、存储器、通信接口以及一个或多个程序,其中,上述一个或多个程序被存储在上述存储器中,并且被配置由上述处理器执行,上述程序包括用于执行本申请实施例第一方面任一方法中的步骤的指令。
第四方面,本申请实施例提供了一种计算机可读存储介质,其中,上述计算机可读存储介质存储用于电子数据交换的计算机程序,其中,上述计算机程序使得计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。
第五方面,本申请实施例提供了一种计算机程序产品,其中,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如本申请实施例第一方面任一方法中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
可以看出,本申请实施例域名服务器获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;将所述第一数据进行分类,得到五种类型的数据;对所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种域名处理流程示意图;
图2A为本申请实施例提供的一种域名压缩方法的流程示意图;
图2B为本申请实施例提供的一种五种类型的数据的解析记录示意图;
图3为本申请实施例提供的一种域名压缩方法的流程示意图;
图4是本申请实施例提供的一种电子设备的结构示意图;
图5是本申请实施例提供的一种域名压缩装置的功能单元组成框图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象,而不是用于描述特定顺序。此外,术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
在本文中提及“实施例”意味着,结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例,也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是,本文所描述的实施例可以与其它实施例相结合。
DNS是一个域名系统,是万维网上作为域名和IP地址相互映射的一个分布式数据库,能够使用户更方便的访问互联网,而不用去记住能够被机器直接读取的IP数串。DNS的存在意义是为了将域名解析为IP地址。在高访问量的场景下,就需要对大批量域名进行解析操作,此时的DNS服务器会面临处理压力,用户也能明显感受到服务器的响应时间变长。在评价DNS服务性能的参数中,服务器处理时间百分比是重要的评价指标。因此,对于能提升服务器处理时间百分比的域名压缩技术,在DNS领域是很有价值的,这能够帮助网站改善用户体验,营造高品质的网站服务。
现有的域名压缩方法会受到业务规则的约束,压缩过程必须依赖于域名所在数据包的绝对位置,并且仅支持在请求与响应的过程中进行域名的实时压缩,当出现大规模的用户访问时,这种压缩方法无法预判出需要的解析资源,不能让DNS服务器在短时间内处理大量域名,更无法降低响应的实时消耗,不仅不能有效利用系统资源,用户体验也达不到预期。
下面对本申请实施例进行详细介绍。
请参阅图1,图1是本申请实施例提供的一种域名处理流程示意图。
为解决在高访问的场景下域名服务器处理大量域名速率慢的问题,本申请提供了一种域名压缩方法,具体如图2A所示,该方法可以包括但不限于如下步骤:
S201、域名服务器获取第一数据;
其中,第一数据为域名系统协议DNS解析记录的数据。其中,每条DNS解析记录的数据包括:DNS解析记录的主域名、主机记录、记录类型、记录值、域名解析记录在DNS服务器中的存留时间(Time-To-Live,TTL)。其中记录类型包括以下任意一种:地址(Address,A)记录、AAAA记录、别名记录CNAME记录、邮件交换(mail exchanger,MX)记录及域名服务器(Name Server,NS)记录。
S202、域名服务器将所述第一数据进行分类,得到五种类型的数据;
其中,五种类型的数据包括:第一类型数据、第二类型数据、第三类型数据、第四类型数据和第五类型数据。其中,第一类型数据为相同主域名、相同主机记录、相同记录类型的解析记录,记为Ⅰ类;第二类型数据为是相同主域名、相同主机记录的解析记录、不相同记录类型的解析记录,记为Ⅱ类;第三类型数据为相同主域名、不同主机记录、相同记录类型的解析记录,记为Ⅲ类;第四类型数据为相同主域名、不同主机记录、不相同记录类型的解析记录,记为Ⅳ类;第五类型数据为不同主域名、相同主机记录的解析记录,记为Ⅴ类。如图2B所示,图2B为一种五种类型的数据的解析记录示意图。
具体实现中,域名服务器将所述第一数据进行分类,得到五种类型的数据,包括但不限于:域名服务器根据解析记录中的主域名、主机记录、记录类型将第一数据中的解析记录,分成相同主域名、相同主机记录、相同记录类型的解析记录;相同主域名、相同主机记录的解析记录、不相同记录类型的解析记录;相同主域名、不同主机记录、相同记录类型的解析记录;相同主域名、不同主机记录、不相同记录类型的解析记录;不同主域名、相同主机记录的解析记录。
S203、域名服务器对五种类型数据分别进行局部压缩,得到第二数据;
具体实现中,域名服务器对五种类型数据分别进行局部压缩,得到第二数据,包括但不限于:域名服务器根据第一字节偏移表对五种类型数据分别进行局部压缩,得到第二数据。
具体实现中,域名服务器在对五种类型数据分别进行局部压缩,得到第二数据之前,该方法还包括:域名服务器建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;域名服务器检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;若是,则域名服务器将所述五种类型数据中的每种类型数据中的待检测的解析记录的偏移大小保存到所述第一字节偏移表中;若否,则域名服务器在第一字节偏移表中增加上述待检测的解析记录。
需要进一步说明的时,域名服务器建立所述五种类型数据对应的第一字节偏移表,包括但不限于:在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,域名服务器确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;域名服务器根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;域名服务器将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。
S204、域名服务器对第二数据进行关联压缩,得到目标数据。
具体实现中,域名服务器对第二数据进行关联压缩,得到目标数据,包括但不限于:域名服务器根据对第二数据划分为三类区域数据;域名服务器对所述三类区域数据中的解析记录进行关联压缩。
其中,所述三类区域数据包括:第一区域数据、第二区域数据和第三区域数据,所述第一区域数据、所述第二区域数据和所述第三区域数据互不相同。
需要进一步解释的是,域名服务器对所述三类区域数据中的解析记录进行关联压缩,包括但不限于:域名服务器根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;域名服务器根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩。
其中,第二字节偏移表可以是通过以下具体步骤确定的:建立第二字节偏移表;确定三类区域数据的每条解析记录的基准位置、当前位置、偏移位置;将每条解析记录的基准位置、当前位置、偏移位置保存到地位字节偏移表中。
可以看出,本申请实施例域名服务器获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;将所述第一数据进行分类,得到五种类型的数据;对所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,所述将所述第一数据进行分类,得到五种类型的数据,包括:根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据。
其中,五种类型的数据包括:第一类型数据、第二类型数据、第三类型数据、第四类型数据和第五类型数据。其中,第一类型数据为相同主域名、相同主机记录、相同记录类型的解析记录;第二类型数据为是相同主域名、相同主机记录的解析记录、不相同记录类型的解析记录;第三类型数据为相同主域名、不同主机记录、相同记录类型的解析记录;第四类型数据为相同主域名、不同主机记录、不相同记录类型的解析记录;第五类型数据为不同主域名、相同主机记录的解析记录。
其中,五种类型的数据中的DNS解析记录的主域名、主机记录、记录类型、记录值、域名解析记录在DNS服务器中的存留时间。DNS解析记录的数据特征包括:DNS解析记录的主域名、主机记录、记录类型。
具体实现中,域名服务器根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据,包括但不限于:域名服务器根据第一数据中的DNS解析记录的主域名、主机记录、记录类型将第一数据的DNS解析记录划分五种类型,得到五种类型的数据。
举例说明,域名服务器将第一数据中相同主域名、相同主机记录、相同记录类型的解析记录分成五种类型的数据中的第一类型数据;域名服务器将第一数据中相同主域名、相同主机记录、不相同记录类型的解析记录分成五种类型的数据中的第二类型数据;域名服务器将第一数据中相同主域名、不同主机记录、相同记录类型的解析记录分成五种类型的数据中的第三类型数据;域名服务器将第一数据中相同主域名、不同主机记录、不相同记录类型的解析记录分成五种类型的数据中的第四类型数据;域名服务器将第一数据中不同主域名、相同主机记录的解析记录分成五种类型的数据中的第五类型数据。
可以看出,本实施例中域名服务器根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据,所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,所述对所述五种类型数据分别进行局部压缩,得到第二数据,包括:根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据。
具体实现中,根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据,包括但不限于:根据所述第一字节偏移表中每条解析记录中的偏移大小对所述五种类型数据分别进行局部压缩,得到所述第二数据。
可以看出,本实施例中域名服务器根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据,:根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,在所述对所述五种类型数据分别进行局部压缩,得到第二数据之前,所述方法还包括:建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;若是,则将所述五种类型数据中的每种类型数据中的每条待检测的解析记录的偏移大小记录到所述第一字节偏移表中;若否,则在所述第一字节偏移表中增加所述每条待检测的解析记录。
其中,需要进一步说明的是,建立所述五种类型数据对应的第一字节偏移表,包括但不限于:当五种类型数据中的解析记录的属性值发生变化时,触发第一字节偏移表更新操作,更新第一字节偏移表表内与解析记录的属性值的数据,其中,解析记录的属性值包括:DNS解析记录的主域名、主机记录、记录类型。
其中,需要进一步说明的是,若检测到所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录不冗余,则所述第一字节偏移表中增加所述每条待检测的解析记录之后,还包括:将五种类型数据中的每种类型数据中的待检测的解析记录的偏移大小记录到所述第一字节偏移表中。
以第三类型数据的解析记录为例,首先,为第三类型数据的解析记录建立字节偏移表;然后,检测每条解析记录的主域名、主机记录和记录类型是否与已检测过的解析记录冗余;如果冗余,需将主域名、主机记录的相对偏移大小记录到字节偏移表中;如果不冗余,需在字节偏移表中记录原索引值。
可以看出,本实施例中域名服务器建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;若是,则将所述五种类型数据中的每种类型数据中的每条待检测的解析记录的偏移大小记录到所述第一字节偏移表中;若否,则在所述第一字节偏移表中增加所述每条待检测的解析记录,便于提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,所述建立所述五种类型数据对应的第一字节偏移表,包括:在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。
其中,第一位置为所述五种类型数据的每种类型数据中的基准位置,即第一位置为0。
具体实现中,域名服务器建立所述五种类型数据对应的第一字节偏移表,包括:在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,域名服务器确定所述五种类型数据的每种类型的解析记录的第一位置,第一位置为所述五种类型数据的每种类型数据中的基准位置;域名服务器根据所述第一位置计算五种类型数据的每种类型数据对应的第一偏移大小;域名服务器将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。如表1所示,表1为五种类型数据的解析记录对应的第一字节偏移表。
表1
可以看出,本实施例中域名服务器在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表,便于提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,所述对第二数据进行关联压缩,得到目标数据,包括:将所述第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩。
具体实现中,将第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩,包括但不限于:根据五种类型数据将第二数据分成三类区域数据,对所述三类区域数据中的解析记录进行关联压缩。
可以看出,本实施例中域名服务器将所述第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩,便于提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
在一个可能的示例中,所述三类区域数据包括:第一区域数据、第二区域数据和第三区域数据,所述第一区域数据、所述第二区域数据和所述第三区域数据互不相同;所述对所述三类区域数据中的解析记录进行关联压缩,包括:根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩。
具体实现中,将所述第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩,包括但不限于:根据第二数据中的解析记录的主域名和主机记录,完成动态数据字典的建立,并存储已新增的解析记录信息;将第一类型数据对应的第二数据与第二类型数据对应的第二数据划分为一个区域,记作三类区域数据中的第一区域数据,即Ⅰ域;将第三类型数据对应的第二数据与第四类型数据对应的第二数据划分为一个区域,记作三类区域数据中的第二区域数据,即Ⅱ域;将第五类型数据对应的第二数据划分为一个区域,记作三类区域数据中的第三区域数据,即Ⅴ类;通过检索动态数据字典中的解析记录,分别对Ⅰ域、Ⅱ域各自进行跨类型的区域关联压缩;再将Ⅰ域、Ⅱ域与第三区域数据进行关联,记作Ⅲ域,对Ⅲ域进行跨类型的区域关联压缩。
需要进一步解释的是,分别对Ⅰ域、Ⅱ域各自进行跨类型的区域关联压缩,包括:参照第二字节偏移表,先分别对Ⅰ域和Ⅱ域解析记录的主域名和主机记录,执行压缩偏移大小修正操作。
需要进一步解释的是,对Ⅲ域进行跨类型的区域关联压缩,包括:对Ⅲ域解析记录的主域名和主机记录,进行压缩偏移量修正操作。
其中,在将所述第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩之前,需要为每个区域建立字节偏移表,并将关联压缩的偏移大小记录到偏移表。关联压缩的偏移大小的确定步骤为:需要根据解析记录当前位置,动态计算关联压缩的偏移大小,其中,当前位置可以是每个区域的第一个域名解析记录的位置。如表2所示,表2为第二字节偏移表。
表2
可以看出,本实施例中域名服务器根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩,便于提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
下面通过一个具体的例子对本申请实施例进行详细介绍。
与上述图2A所示的实施例一致,请参阅图3,图3是本申请实施例提供的一种基于平台的危险预防方法的流程示意图,所述方法包括:
S301、域名服务器获取第一数据,第一数据为域名系统协议DNS解析记录的数据;
S302、域名服务器根据第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据;
S303、域名服务器根据第一字节偏移表对五种类型数据分别进行局部压缩,得到第二数据;
S304、域名服务器根据对第二数据划分为三类区域数据;
S305、域名服务器对所述三类区域数据中的解析记录进行关联压缩。
可以看出,本申请实施例中域名服务器获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据;根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据;根据对第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩。提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
请参阅图4,图4是本申请实施例提供的一种电子设备400的结构示意图,如图所示,所述电子设备400包括应用处理器410、存储器420、通信接口430以及一个或多个程序421,其中,所述一个或多个程序421被存储在上述存储器420中,并且被配置由上述应用处理器410执行,所述一个或多个程序421包括用于执行以下步骤:
获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
将所述第一数据进行分类,得到五种类型的数据;
对所述五种类型数据分别进行局部压缩,得到第二数据;
对第二数据进行关联压缩,得到目标数据。
在一个可能的示例中,在所述将所述第一数据进行分类,得到五种类型的数据方面,所述一个或多个程序421包括具体用于执行以下步骤:根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据。
在一个可能的示例中,在所述对所述五种类型数据分别进行局部压缩,得到第二数据方面,所述一个或多个程序421包括具体用于执行以下步骤:根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据。
在一个可能的示例中,在所述对所述五种类型数据分别进行局部压缩,得到第二数据之前,所述一个或多个程序421还包括具体用于执行以下步骤:建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;若是,则将所述五种类型数据中的每种类型数据中的每条待检测的解析记录的偏移大小记录到所述第一字节偏移表中;若否,则在所述第一字节偏移表中增加所述每条待检测的解析记录。
在一个可能的示例中,在所述建立所述五种类型数据对应的第一字节偏移表方面,所述一个或多个程序421包括具体用于执行以下步骤:在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。
在一个可能的示例中,在所述对第二数据进行关联压缩,得到目标数据方面,所述一个或多个程序421包括具体用于执行以下步骤:根据对第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩。
在一个可能的示例中,所述三类区域数据包括:第一区域数据、第二区域数据和第三区域数据,所述第一区域数据、所述第二区域数据和所述第三区域数据互不相同;在所述对所述三类区域数据中的解析记录进行关联压缩方面,所述一个或多个程序421包括具体用于执行以下步骤:根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩。
可以看出,本申请实施例域名服务器获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;将所述第一数据进行分类,得到五种类型的数据;对所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是,电子设备为了实现上述功能,其包含了执行各个功能相应的硬件结构和/或软件模块。本领域技术人员应该很容易意识到,结合本文中所提供的实施例描述的各示例的单元及算法步骤,本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分,例如,可以对应各个功能划分各个功能单元,也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。需要说明的是,本申请实施例中对单元的划分是示意性的,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式。
图5是本申请实施例中所涉及的域名压缩装置500的功能单元组成框图。该域名压缩装置500包括:获取单元501、分类单元502、局部压缩单元503、关联压缩单元504:
获取单元501,用于获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
分类单元502,用于将所述第一数据进行分类,得到五种类型的数据;
局部压缩单元503,用于对所述五种类型数据分别进行局部压缩,得到第二数据;
关联压缩单元504,用于对第二数据进行关联压缩,得到目标数据。
其中,所述域名压缩装置500还可以包括存储单元505,用于存储电子设备的程序代码和数据。所述获取单元501可以是收发器,存储单元505可以是存储器。
在一个可能的示例中,在所述将所述第一数据进行分类,得到五种类型的数据方面,分类单元502具体用于:根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据。
在一个可能的示例中,在所述对所述五种类型数据分别进行局部压缩,得到第二数据方面,局部压缩单元503具体用于:根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据。
在一个可能的示例中,在所述对所述五种类型数据分别进行局部压缩,得到第二数据之前,局部压缩单元503还具体用于:建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;若是,则将所述五种类型数据中的每种类型数据中的每条待检测的解析记录的偏移大小记录到所述第一字节偏移表中;若否,则在所述第一字节偏移表中增加所述每条待检测的解析记录。
在一个可能的示例中,在所述建立所述五种类型数据对应的第一字节偏移表方面,局部压缩单元503具体用于:在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。
在一个可能的示例中,在所述对第二数据进行关联压缩,得到目标数据方面,关联压缩单元504具体用于:根据对第二数据划分为三类区域数据;对所述三类区域数据中的解析记录进行关联压缩。
在一个可能的示例中,所述三类区域数据包括:第一区域数据、第二区域数据和第三区域数据,所述第一区域数据、所述第二区域数据和所述第三区域数据互不相同;在所述对所述三类区域数据中的解析记录进行关联压缩方面,关联压缩单元504具体用于:根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩。
可以看出,本申请实施例域名服务器获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;将所述第一数据进行分类,得到五种类型的数据;对所述五种类型数据分别进行局部压缩,得到第二数据;对第二数据进行关联压缩,得到目标数据,提高域名服务器处理大量域名的速率,提高了系统资源的利用率。
本申请实施例还提供一种计算机存储介质,其中,该计算机存储介质存储用于电子数据交换的计算机程序,该计算机程序使得计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤,上述计算机包括电子设备。
本申请实施例还提供一种计算机程序产品,上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质,上述计算机程序可操作来使计算机执行如上述方法实施例中记载的任一方法的部分或全部步骤。该计算机程序产品可以为一个软件安装包,上述计算机包括电子设备。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本申请并不受所描述的动作顺序的限制,因为依据本申请,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本申请所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如上述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储器中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储器中,存储器可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。
以上对本申请实施例进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的一般技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。
Claims (10)
1.一种域名压缩方法,其特征在于,所述方法包括:
获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
将所述第一数据进行分类,得到五种类型的数据;
对所述五种类型数据分别进行局部压缩,得到第二数据;
对第二数据进行关联压缩,得到目标数据。
2.根据权利要求1所述的方法,其特征在于,所述将所述第一数据进行分类,得到五种类型的数据,包括:
根据所述第一数据中的DNS解析记录的数据特征,将第一数据的DNS解析记录划分五种类型,得到五种类型的数据。
3.根据权利要求1所述的方法,其特征在于,所述对所述五种类型数据分别进行局部压缩,得到第二数据,包括:
根据所述第一字节偏移表对所述五种类型数据分别进行局部压缩,得到所述第二数据。
4.根据权利要求1或3所述的方法,其特征在于,在所述对所述五种类型数据分别进行局部压缩,得到第二数据之前,所述方法还包括:
建立所述五种类型数据对应的第一字节偏移表,所述第一字节偏移表用于对所述五种类型数据进行局部压缩;
检测所述五种类型数据中的每种类型数据中的每条待检测的解析记录与所述第一字节偏移表中已检测过的解析记录是否冗余;
若是,则将所述五种类型数据中的每种类型数据中的每条待检测的解析记录的偏移大小记录到所述第一字节偏移表中;
若否,则在所述第一字节偏移表中增加所述每条待检测的解析记录。
5.根据权利要求4所述的方法,其特征在于,所述建立所述五种类型数据对应的第一字节偏移表,包括:
在对所述五种类型数据的每种类型的解析记录分别进行同类内部的局部压缩之后,确定所述五种类型数据的每种类型的解析记录的第一位置,所述第一位置为所述五种类型数据的每种类型数据中的基准位置;
根据所述第一位置设置所述五种类型数据的每种类型数据对应的第一偏移大小;
将所述第一偏移大小和所述第一位置,确定所述第一字节偏移表。
6.根据权利要求1所述的方法,其特征在于,所述对第二数据进行关联压缩,得到目标数据,包括:
根据对第二数据划分为三类区域数据;
对所述三类区域数据中的解析记录进行关联压缩。
7.根据权利要求6所述的方法,其特征在于,所述三类区域数据包括:第一区域数据、第二区域数据和第三区域数据,所述第一区域数据、所述第二区域数据和所述第三区域数据互不相同;
所述对所述三类区域数据中的解析记录进行关联压缩,包括:
根据第二字节偏移表将所述第一区域数据和所述第二区域数据分别进行联合压缩,得到第三数据;
根据所述第二字节偏移表将所述第三数据和所述第三区域数据进行联合压缩。
8.一种域名压缩装置,其特征在于,所述域名压缩装置包括:
获取单元,用于获取第一数据,所述第一数据为域名系统协议DNS解析记录的数据;
分类单元,用于将所述第一数据进行分类,得到五种类型的数据;
局部压缩单元,用于对所述五种类型数据分别进行局部压缩,得到第二数据;
关联压缩单元,用于对第二数据进行关联压缩,得到目标数据。
9.一种电子设备,其特征在于,包括处理器、存储器、通信接口,以及一个或多个程序,所述一个或多个程序被存储在所述存储器中,并且被配置由所述处理器执行,所述程序包括用于执行如权利要求1-7任一项所述的方法中的步骤的指令。
10.一种计算机可读存储介质,其特征在于,其存储用于电子数据交换的计算机程序,其中,所述计算机程序使得计算机执行如权利要求1-7中任一项所述的方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010742846.8A CN111917899B (zh) | 2020-07-28 | 2020-07-28 | 一种域名压缩方法及其相关产品 |
PCT/CN2020/118337 WO2021139240A1 (zh) | 2020-07-28 | 2020-09-28 | 一种域名压缩方法及其相关产品 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010742846.8A CN111917899B (zh) | 2020-07-28 | 2020-07-28 | 一种域名压缩方法及其相关产品 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111917899A true CN111917899A (zh) | 2020-11-10 |
CN111917899B CN111917899B (zh) | 2022-05-17 |
Family
ID=73286636
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010742846.8A Active CN111917899B (zh) | 2020-07-28 | 2020-07-28 | 一种域名压缩方法及其相关产品 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN111917899B (zh) |
WO (1) | WO2021139240A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114168945A (zh) * | 2021-12-09 | 2022-03-11 | 绿盟科技集团股份有限公司 | 一种检测子域名潜在风险的方法及装置 |
CN117749762A (zh) * | 2023-10-19 | 2024-03-22 | 天翼安全科技有限公司 | 一种dns访问请求处理方法、装置、设备及存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040093433A1 (en) * | 2002-11-13 | 2004-05-13 | Armbruster Peter J. | Method for group call address of record compression |
US20070127492A1 (en) * | 2005-11-15 | 2007-06-07 | Nominum, Inc. | Data grouping approach to telephone number management in domain name systems |
US20120079484A1 (en) * | 2010-09-28 | 2012-03-29 | Yiftach Shoolman | System, methods, and media for providing in-memory non-relational databases |
CN102420843A (zh) * | 2011-06-24 | 2012-04-18 | 奇智软件(北京)有限公司 | 一种基于云压缩链接的压缩和解压缩方法、装置及系统 |
US20130173676A1 (en) * | 2011-12-29 | 2013-07-04 | Matthew Thomas | Compression of small strings |
CN103581130A (zh) * | 2012-07-30 | 2014-02-12 | 优视科技有限公司 | 数据压缩处理方法、系统及装置 |
CN105306606A (zh) * | 2014-05-28 | 2016-02-03 | 无锡韩光电器有限公司 | 一种域名解析方法及系统 |
CN105530327A (zh) * | 2014-10-27 | 2016-04-27 | 任子行网络技术股份有限公司 | 一种dns关键信息处理方法和系统 |
CN106331213A (zh) * | 2016-08-29 | 2017-01-11 | 广东欧珀移动通信有限公司 | 一种域名系统dns处理方法及装置 |
CN108989484A (zh) * | 2018-08-07 | 2018-12-11 | 北京奇安信科技有限公司 | 一种域名系统dns日志的压缩存储方法及装置 |
-
2020
- 2020-07-28 CN CN202010742846.8A patent/CN111917899B/zh active Active
- 2020-09-28 WO PCT/CN2020/118337 patent/WO2021139240A1/zh active Application Filing
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040093433A1 (en) * | 2002-11-13 | 2004-05-13 | Armbruster Peter J. | Method for group call address of record compression |
US20070127492A1 (en) * | 2005-11-15 | 2007-06-07 | Nominum, Inc. | Data grouping approach to telephone number management in domain name systems |
US20120079484A1 (en) * | 2010-09-28 | 2012-03-29 | Yiftach Shoolman | System, methods, and media for providing in-memory non-relational databases |
CN102420843A (zh) * | 2011-06-24 | 2012-04-18 | 奇智软件(北京)有限公司 | 一种基于云压缩链接的压缩和解压缩方法、装置及系统 |
US20130173676A1 (en) * | 2011-12-29 | 2013-07-04 | Matthew Thomas | Compression of small strings |
CN103581130A (zh) * | 2012-07-30 | 2014-02-12 | 优视科技有限公司 | 数据压缩处理方法、系统及装置 |
CN105306606A (zh) * | 2014-05-28 | 2016-02-03 | 无锡韩光电器有限公司 | 一种域名解析方法及系统 |
CN105530327A (zh) * | 2014-10-27 | 2016-04-27 | 任子行网络技术股份有限公司 | 一种dns关键信息处理方法和系统 |
CN106331213A (zh) * | 2016-08-29 | 2017-01-11 | 广东欧珀移动通信有限公司 | 一种域名系统dns处理方法及装置 |
CN108989484A (zh) * | 2018-08-07 | 2018-12-11 | 北京奇安信科技有限公司 | 一种域名系统dns日志的压缩存储方法及装置 |
Non-Patent Citations (3)
Title |
---|
潘明惠等: "大型网络办公自动化的域名压缩", 《办公自动化》 * |
王艳峰等: "一种高效的DNS日志压缩算法", 《计算机工程》 * |
闫夏莉, 王骞, 吕万波, 张海阔, 岳巧丽, 曹爽: "基于基址重定位的快速域名压缩算法", 《计算机系统应用》 * |
Also Published As
Publication number | Publication date |
---|---|
CN111917899B (zh) | 2022-05-17 |
WO2021139240A1 (zh) | 2021-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111917899B (zh) | 一种域名压缩方法及其相关产品 | |
CN109905288B (zh) | 一种应用服务分类方法及装置 | |
CN102857369B (zh) | 一种网站日志保存系统及方法和装置 | |
US20100082749A1 (en) | Retrospective spam filtering | |
CN109218457B (zh) | 网络数据处理方法、装置和系统 | |
CN111163072B (zh) | 机器学习模型中特征值的确定方法、装置及电子设备 | |
CN104506493A (zh) | 一种实现hls内容回源和缓存的方法 | |
CN107528812B (zh) | 一种攻击检测方法及装置 | |
CN111008405A (zh) | 一种基于文件Hash的网站指纹识别方法 | |
CN102880613A (zh) | 色情图片的识别方法及其设备 | |
CN108900554B (zh) | Http协议资产检测方法、系统、设备及计算机介质 | |
CN111277461B (zh) | 一种内容分发网络节点的识别方法、系统及设备 | |
CN105978748A (zh) | 一种基于哈希节点的终端设备信息统计的方法及装置 | |
US8554999B2 (en) | Methods for providing a response and systems thereof | |
CN115333966A (zh) | 一种基于拓扑的Nginx日志分析方法、系统及设备 | |
CN114003496B (zh) | 数据处理方法、装置、系统、存储介质及程序产品 | |
KR20010107528A (ko) | 인터넷상의 음란물을 차단하는 방법 및 장치 | |
CN110955855B (zh) | 一种信息拦截的方法、装置及终端 | |
CN109788050B (zh) | 一种获取源站ip地址方法、系统、电子设备和介质 | |
US20210014298A1 (en) | Message display method and device, and storage medium | |
CN109241462B (zh) | 网页黑词处理方法、装置、设备及存储介质 | |
CN106959975A (zh) | 一种转码资源缓存处理方法、装置及设备 | |
CN109241458A (zh) | 一种基于路由器的广告拦截方法和路由器 | |
CN105635225A (zh) | 移动终端访问基于移动互联网络的服务器的方法与系统及移动终端 | |
CN113824644B (zh) | Https业务内容识别方法、装置和设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right | ||
TR01 | Transfer of patent right |
Effective date of registration: 20231027 Address after: 200232 Room 301-2, No. 206 Kaibin Road, Xuhui District, Shanghai Patentee after: Ping An Technology (Shanghai) Co.,Ltd. Address before: 518000 Guangdong, Shenzhen, Futian District Futian street Fu'an community Yitian road 5033, Ping An financial center, 23 floor. Patentee before: PING AN TECHNOLOGY (SHENZHEN) Co.,Ltd. |