CN106484770A - 一种dns增量区域数据文件的处理方法 - Google Patents

一种dns增量区域数据文件的处理方法 Download PDF

Info

Publication number
CN106484770A
CN106484770A CN201610814648.1A CN201610814648A CN106484770A CN 106484770 A CN106484770 A CN 106484770A CN 201610814648 A CN201610814648 A CN 201610814648A CN 106484770 A CN106484770 A CN 106484770A
Authority
CN
China
Prior art keywords
dns
incremental
area data
incremental area
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610814648.1A
Other languages
English (en)
Other versions
CN106484770B (zh
Inventor
李晓东
李洪涛
叶崛宇
张海阔
王楠
闫夏莉
吕万波
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Internet Network Information Center
Original Assignee
China Internet Network Information Center
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Internet Network Information Center filed Critical China Internet Network Information Center
Priority to CN201610814648.1A priority Critical patent/CN106484770B/zh
Publication of CN106484770A publication Critical patent/CN106484770A/zh
Application granted granted Critical
Publication of CN106484770B publication Critical patent/CN106484770B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/13File access structures, e.g. distributed indices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/17Details of further file system functions
    • G06F16/174Redundancy elimination performed by the file system
    • G06F16/1744Redundancy elimination performed by the file system using compression, e.g. sparse files
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/10File systems; File servers
    • G06F16/18File system types
    • G06F16/1805Append-only file systems, e.g. using logs or journals to store data
    • G06F16/1815Journaling file systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Information Transfer Between Computers (AREA)
  • Computer And Data Communications (AREA)

Abstract

本发明提出了一种DNS增量区域数据文件的处理方法,其包括以下步骤:步骤101、建立DNS增量区域数据的索引数据信息;步骤103、将所述索引数据信息存储在索引文件中,建立所述索引数据文件与增量区域数据文件的关联信息;步骤105、根据所述关联信息进行文件处理。用此方法可以提高DNS动态更新的效率,提高DNS查询服务的正确性。

Description

一种DNS增量区域数据文件的处理方法
技术领域
本发明涉及计算机领域,尤其涉及一种DNS增量区域数据文件的处理方法。
背景技术
DNS(Domain Name System,域名系统),因特网上作为域名和IP地址相互映射的一个分布式数据库,能够使用户更方便的访问互联网,而不用去记住能够被机器直接读取的IP数串。通过主机名,最终得到该主机名对应的IP地址的过程叫做域名解析(或主机名解析)。
IXFR(增量区域传送)中增量区域数据压缩是指针对增量区域数据文件进行缩减操作。
Internet(即通过使用TCP/IP协议的网络)如今变得愈加动态化。为了适应这种变化,DNS需要提供动态的增加删除记录的功能(DNS动态更新)。进行DNS动态更新的两种方式为AXFR(全量区域传送)、IXFR(增量区域传送)。如果区域文件过大,AXFR(全量区域传送)就会受到网络传输速度的影响。一旦网络速度慢,DNS动态更新就会很难完成。直接影响整个网络的提供正确的DNS查询服务。IXFR(增量区域传送)解决了在一个大型区域中,动态更新的频率过大造成的DNS动态更新缓慢的问题。在传统的IXFR(增量区域传送)实现中利用一个动态更新日志文件记录区域数据的变化,并通过网络传送对整个网络的区域数据进行更新。当更新数据量太大时,增量区域数据的日志文件的增量区域数据信息也会很大,很难快速的查询所涉及的增量区域数据(bind应用读取整个增量区域数据文件,然后遍历整个增量区域数据来查询可操作增量区域数据),进而影响IXFR(增量区域传送)的效率。尤其是当增量区域数据量已经超出所能承受的范围,对其做增量区域数据的压缩操作时,由于过大的日志文件,压缩速度会很慢,影响着整个网络的DNS动态更新速率。可见一种快速的查询和压缩DNS增量区域数据文件的方法尤为重要,直接影响DNS系统动态更新的速度,影响着DNS正确查询效率,影响着互联网的应用发展。
发明内容
本发明的目的是通过以下技术方案实现的。
本发明提出了一种DNS增量区域数据文件的处理方法,其包括以下步骤:
步骤101、建立DNS增量区域数据的索引数据信息;
步骤103、将所述索引数据信息存储在索引文件中,建立所述索引数据文件与增量区域数据文件的关联信息;
步骤105、根据所述关联信息进行文件处理。
其中,在所述步骤101之前还包括:将DNS增量区域数据与所述DNS增量区域数据的信息数据隔离。
其中,所述步骤103包括:根据DNS增量区域数据SOA序列号递增的特点,将索引数据与所述DNS增量区域数据SOA序列号对应存储为一组有序的数组。
其中,所述步骤105包括当需要查询DNS增量数据文件时,使用二分法对所述索引数据文件进行操作来定位增量数据。
其中,所述步骤105还包括当需要压缩所述DNS增量数据文件时,通过所述索引数据文件定位需要压缩的SOA序列号对应的增量数据,通过直接操作增量数据文件进行压缩。
本发明的优点在于:从根本上解决IXFR(增量区域传送)增量区域数据存储不灵活,对增量区域数据操作效率低下的问题。应用此方法可以提高DNS动态更新的效率,提高DNS查询服务的正确性。
通过修改增量日志文件存储增量信息的方式,可以增加对区域增量区域数据信息的存储管理,并通过建立索引数据信息的方式实现对区域增量信息的快速查找,可以提高IXFR(增量区域传送)的效率。当增量区域数据过大需要执行压缩操作时,可以通过索引信息快速的定位压缩的SOA序列号的增量区域数据,通过直接操作增量区域数据文件提高压缩效率。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
附图1示出了根据本发明某一实施方式的DNS增量区域数据文件处理方法流程图;
附图2示出了根据本发明某一实施方式的DNS增量区域数据文件处理方法流程图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
根据本发明的实施方式,提出了一种DNS增量区域数据文件的处理方法,其包括以下步骤:
步骤101、建立DNS增量区域数据的索引数据信息;
步骤103、将所述索引数据信息存储在索引文件中,建立所述索引数据文件与增量区域数据文件的关联信息;
步骤105、根据所述关联信息进行文件处理。
其中,在所述步骤101之前还包括:将DNS增量区域数据与所述DNS增量区域数据的信息数据隔离。
其中,所述步骤103包括:根据DNS增量区域数据SOA序列号递增的特点,将索引数据与所述DNS增量区域数据SOA序列号对应存储为一组有序的数组。
其中,所述步骤105包括当需要查询DNS增量数据文件时,使用二分法对所述索引数据文件进行操作来定位增量数据。
其中,所述步骤105还包括当需要压缩所述DNS增量数据文件时,通过所述索引数据文件定位需要压缩的SOA序列号对应的增量数据,通过直接操作增量数据文件进行压缩。
本方法含义为针对DNS增量区域数据增量区域数据与增量区域数据的信息数据隔离,建立一种索引数据信息的概念。根据其增量起始授权记录SOA(Start Of Authority)序列号递增的特点实现快速查询区域增量区域数据。最终达成读取少量的索引信息就可以快速的对整个区域增量区域数据的控制的目的。同时在需要对区域增量区域数据文件进行压缩时,能快速定位压缩位置,利用区域增量区域数据的独立性进而直接操作区域增量区域数据文件,提高增量压缩速度的目的;传统的增量区域数据存储方式为增量区域数据与增量区域数据的信息数据存储在同一个日志文件中。增量区域数据信息的信息大小有一定的限制(BIND(Berkeley Internet Name Domain)规定56条信息),这就限制了对增量日志文件操作。降低了更新增量区域数据的效率,减小了增量区域数据日志文件的利用效率。
本发明利用特定数据结构组织增量区域数据的索引数据存贮在索引文件,特定的数据结构组织增量区域数据存贮在增量区域数据文件。建立这种索引数据文件与增量区域数据文件的关联信息。可以做到读取少量的索引信息就可以快速的对整个区域增量区域数据的控制。根据区域数据SOA序列号递增特点,将索引数据根据区域数据SOA序列号递在内存中存储为一组有序的数组。利用二分法查询增量区域数据提高查询速度。DNS增量区域数据的压缩,采用上述结构后,可以通过索引数据快速定位增量区域数据压缩位置,然后利用区域增量区域数据的独立存在的特征,可以通过直接操作增量区域数据文件做到DNS增量区域数据的快速压缩。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (5)

1.一种DNS增量区域数据文件的处理方法,其包括以下步骤:
步骤101、建立DNS增量区域数据的索引数据信息;
步骤103、将所述索引数据信息存储在索引文件中,建立所述索引数据文件与增量区域数据文件的关联信息;
步骤105、根据所述关联信息进行文件处理。
2.如权利要求1所述一种DNS增量区域数据文件的处理方法,其中在所述步骤101之前还包括:将DNS增量区域数据与所述DNS增量区域数据的信息数据隔离。
3.如权利要求1所述一种DNS增量区域数据文件的处理方法,所述步骤103包括:根据DNS增量区域数据SOA序列号递增的特点,将索引数据与所述DNS增量区域数据SOA序列号对应存储为一组有序的数组。
4.如权利要求1所述一种DNS增量区域数据文件的处理方法,其中所述步骤105包括当需要查询DNS增量数据文件时,使用二分法对所述索引数据文件进行操作来定位增量数据。
5.如权利要求1所述一种DNS增量区域数据文件的处理方法,其中所述步骤105还包括当需要压缩所述DNS增量数据文件时,通过所述索引数据文件定位需要压缩的SOA序列号对应的增量数据,通过直接操作增量数据文件进行压缩。
CN201610814648.1A 2016-09-09 2016-09-09 一种dns增量区域数据文件的处理方法 Active CN106484770B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610814648.1A CN106484770B (zh) 2016-09-09 2016-09-09 一种dns增量区域数据文件的处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610814648.1A CN106484770B (zh) 2016-09-09 2016-09-09 一种dns增量区域数据文件的处理方法

Publications (2)

Publication Number Publication Date
CN106484770A true CN106484770A (zh) 2017-03-08
CN106484770B CN106484770B (zh) 2019-08-06

Family

ID=58273511

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610814648.1A Active CN106484770B (zh) 2016-09-09 2016-09-09 一种dns增量区域数据文件的处理方法

Country Status (1)

Country Link
CN (1) CN106484770B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110099117A (zh) * 2019-05-05 2019-08-06 中国互联网络信息中心 一种多版本dns区文件全量下发的方法和装置
CN111885212A (zh) * 2020-06-03 2020-11-03 山东伏羲智库互联网研究院 域名存储方法及装置
CN112839113A (zh) * 2019-11-22 2021-05-25 中国互联网络信息中心 域名存储与解析方法、装置、电子设备及存储介质
CN114943021A (zh) * 2022-07-20 2022-08-26 之江实验室 一种tb级增量数据筛选方法和装置
CN116095172A (zh) * 2023-01-09 2023-05-09 互联网域名系统北京市工程研究中心有限公司 缓存刷新方法、装置、设备和存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102023991A (zh) * 2009-09-21 2011-04-20 中兴通讯股份有限公司 在终端上更新索引并基于其对搜索结果排序的方法及装置
CN102567434A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据块处理方法
CN102567415A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据库的控制方法和装置
CN102929935A (zh) * 2012-09-25 2013-02-13 上海证券交易所 一种基于事务的大容量数据读写方法
US20140222827A1 (en) * 2011-07-06 2014-08-07 Cleversafe, Inc. Storing data and metadata in a distributed storage network
CN105912696A (zh) * 2016-04-25 2016-08-31 中国互联网络信息中心 一种基于对数归并的dns索引创建方法及查询方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102023991A (zh) * 2009-09-21 2011-04-20 中兴通讯股份有限公司 在终端上更新索引并基于其对搜索结果排序的方法及装置
CN102567434A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据块处理方法
CN102567415A (zh) * 2010-12-31 2012-07-11 百度在线网络技术(北京)有限公司 一种数据库的控制方法和装置
US20140222827A1 (en) * 2011-07-06 2014-08-07 Cleversafe, Inc. Storing data and metadata in a distributed storage network
CN102929935A (zh) * 2012-09-25 2013-02-13 上海证券交易所 一种基于事务的大容量数据读写方法
CN105912696A (zh) * 2016-04-25 2016-08-31 中国互联网络信息中心 一种基于对数归并的dns索引创建方法及查询方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110099117A (zh) * 2019-05-05 2019-08-06 中国互联网络信息中心 一种多版本dns区文件全量下发的方法和装置
CN110099117B (zh) * 2019-05-05 2021-10-22 中国互联网络信息中心 一种多版本dns区文件全量下发的方法和装置
CN112839113A (zh) * 2019-11-22 2021-05-25 中国互联网络信息中心 域名存储与解析方法、装置、电子设备及存储介质
CN112839113B (zh) * 2019-11-22 2023-01-31 中国互联网络信息中心 域名存储与解析方法、装置、电子设备及存储介质
CN111885212A (zh) * 2020-06-03 2020-11-03 山东伏羲智库互联网研究院 域名存储方法及装置
CN114943021A (zh) * 2022-07-20 2022-08-26 之江实验室 一种tb级增量数据筛选方法和装置
US11789639B1 (en) 2022-07-20 2023-10-17 Zhejiang Lab Method and apparatus for screening TB-scale incremental data
CN116095172A (zh) * 2023-01-09 2023-05-09 互联网域名系统北京市工程研究中心有限公司 缓存刷新方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN106484770B (zh) 2019-08-06

Similar Documents

Publication Publication Date Title
CN106484770A (zh) 一种dns增量区域数据文件的处理方法
US20210073189A1 (en) Systems and methods of database tenant migration
KR102307957B1 (ko) 다중-스트림 저장 장치를 위한 스트림 선택
WO2021169113A1 (zh) 数据管理方法、装置、计算机设备和存储介质
US10901949B2 (en) Method and apparatus for compressing metadata in a file system
CN104601736B (zh) 一种短url服务的实现方法及装置
US11003719B2 (en) Method and apparatus for accessing a storage disk
WO2015124042A1 (zh) 分布式文件系统列式存储的元数据更新方法、装置、主机
CN103902653A (zh) 一种构建数据仓库表血缘关系图的方法和装置
JP2010519624A (ja) エンティティ向けrest
CN102306168B (zh) 日志操作方法、装置及文件系统
CN107766374B (zh) 一种海量小文件存储读取的优化方法和系统
CN103488704A (zh) 一种数据存储方法及装置
JP2012089094A5 (zh)
CN109033292A (zh) 一种数据库分布式缓存系统及方法
WO2018097846A1 (en) Edge store designs for graph databases
CN105677904B (zh) 基于分布式文件系统的小文件存储方法及装置
CN104021123A (zh) 用于数据迁移的方法和系统
CN114077680A (zh) 一种图数据的存储方法、系统及装置
WO2024169286A1 (zh) 写时拷贝方法、装置、设备及非易失性可读存储介质
WO2015180650A1 (zh) 在存储网络中的键值生成方法及装置
CN110008174A (zh) 一种目录导出方法、系统及相关装置
US12111854B2 (en) Storing and versioning hierarchical data in a binary format
CN112052222B (zh) 异构对象存储集群访问方法、装置、设备及存储介质
WO2016175880A1 (en) Merging incoming data in a database

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant