CN107103034A - 基于ldap的tfas数据信息目录服务方法 - Google Patents
基于ldap的tfas数据信息目录服务方法 Download PDFInfo
- Publication number
- CN107103034A CN107103034A CN201710172880.4A CN201710172880A CN107103034A CN 107103034 A CN107103034 A CN 107103034A CN 201710172880 A CN201710172880 A CN 201710172880A CN 107103034 A CN107103034 A CN 107103034A
- Authority
- CN
- China
- Prior art keywords
- data
- catalogue
- ldap
- metadata
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9027—Trees
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/901—Indexing; Data structures therefor; Storage structures
- G06F16/9017—Indexing; Data structures therefor; Storage structures using directory or table look-up
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于LDAP的TFAS数据信息目录服务方法。步骤如下:基于轻量级目录访问协议即LDAP,依次定义元数据信息模型,定义元数据命名模型,定义元数据功能模型;元数据信息模型定义了能够在目录中存储的数据类型和基本数据对象即条目entry,用LDAP存储各种类型的条目,这些条目用属性对来表示,一个属性保存多个值,禁止在每一个属性后用逗号把一系列值分开;元数据命名模型定义用户组织和引用数据的标准;元数据功能模型定义基于LDPA的目录条目基本操作,分为三类九个操作。本发明能够对历史数据进行再利用和集成,无需改造现有元数据交换分平台,节省资源的同时,保证了数据和信息的完整性和一致性,便于数据维护处理。
Description
技术领域
本发明涉及轻量级目录访问协议(LDAP)技术领域,特别是一种基于LDAP的TFAS数据信息目录服务方法。
背景技术
目前,在交通大数据共享和分析处理平台(TFAS)建设过程中,不同阶段以及不同模块之间因不同需求而构建了不同数据信息的格式和规则,各种传感信息和互联信息之间难以共享和交互,异构信息数据冗余和不一致,使信息交互困难,数据不能被充分利用。
发明内容
本发明的目的在于提供一种基于LDAP的TFAS数据信息目录服务方法,以统一的、标准的访问协议来分布管理,以片级中心为核心的星型布局结构的元数据交换分系统中不同格式的传感数据和互联信息,建立并维护符合交通信息共享要求的目录管理和检索应用,同时提供目录服务,优化对元数据的操作。
实现本发明目的的技术解决方案为:一种基于LDAP的TFAS数据信息目录服务方法,步骤如下:
步骤1,基于轻量级目录访问协议LDAP,定义元数据信息模型;
步骤2,基于轻量级目录访问协议LDAP,定义元数据命名模型;
步骤3,基于轻量级目录访问协议LDAP,定义元数据功能模型。
进一步地,步骤1所述定义元数据信息模型,具体如下:
元数据信息模型定义了能够在目录中存储的数据类型和基本数据对象即条目entry,用LDAP存储各种类型的条目,这些条目用属性对来表示,一个属性保存多个值,禁止在每一个属性后用逗号把一系列值分开。
进一步地,步骤2所述定义元数据命名模型,具体如下:
元数据命名模型定义用户组织和引用数据的标准;基于LDPA,用户将条目放入目录,元数据命名模型以树状的层次结构来组织和引用数据,元数据命名模型不对树结构作任何限定,条目自由地置于树的任意位置,每个元数据条目的标识名DN由两部分组成的:相对DN即RDN和记录在目录中的位置。
进一步地,步骤3所述的定义元数据功能模型,具体如下:
元数据功能模型即基于LDPA的目录条目基本操作,分为三类九个操作:
(1)目录查询,允许用户搜索目录,取回一条或多条目标条数据;
(2)目录更新,允许用户对不同层次目录条目添加、删除和修改;
(3)目录控制,允许客户端向目录证明自己身份,对几个方面会话进行控制。
本发明与现有技术相比,其显著优点为:(1)对历史数据进行再利用和集成,不用对现有的元数据交换分平台进行改造,节省了资源;(2)保证了数据和信息的完整性和一致性,便于数据维护处理。
附图说明
图1是元数据交换分系统布局拓扑图。
图2是主目录库目录树示意图。
图3是目录服务器在TFAS中的设计示意图。
具体实施方式
轻量级目录访问协议(LDAP)是一种基于X.500目录的跨平台的开放标准,其提出的原始目的是为了优化数据的查询。随着轻量级目录访问协议(LDAP)的诞生、发展和成熟,LDAP可以直接允许在TCP/IP协议族上,采用Client/Server工作模式。LDAP使用广泛,且方便快捷,使其成为独立的成熟的目录服务,现今主流浏览器都支持LDAP协议,很多大型云服务器也采用LDAP目录作为网络数据库。而且,由于LDAP是跨平台的和标准的协议,采用Internet的标准,应用程序就不用再考虑LDAP目录存放的服务器。
利用轻量级目录访问协议,使交通大数据共享和分析处理平台(TFAS)上的传感数据、互联信息进行交互共享,以一种统一的、标准的访问协议来分布管理这些不同格式的传感数据和互联信息。基于轻量级目录访问协议的TFAS,以统一的、标准的访问协议来分布管理以片级中心为核心的星型布局结构的元数据交换分系统中不同格式的传感数据和互联信息,建立并维护符合交通信息共享要求的目录管理和检索应用,同时提供目录服务注册管理的方法,对交通大数据共享和分析处理平台的历史数据进行整合,以统一的数据格式对传感数据和互联信息进行索引和分布式存储,以统一的访问协议进行数据的访问和分布式管理。
本发明基于LDAP的TFAS数据信息目录服务方法,步骤如下:
步骤1,基于轻量级目录访问协议LDAP,定义元数据信息模型;
步骤2,基于轻量级目录访问协议LDAP,定义元数据命名模型;
步骤3,基于轻量级目录访问协议LDAP,定义元数据功能模型。
进一步地,步骤1所述定义元数据信息模型,具体如下:
元数据信息模型定义了能够在目录中存储的数据类型和基本数据对象即条目entry,用LDAP存储各种类型的条目,这些条目用属性对来表示,一个属性保存多个值,禁止在每一个属性后用逗号把一系列值分开。
进一步地,步骤2所述定义元数据命名模型,具体如下:
元数据命名模型定义用户组织和引用数据的标准;基于LDPA,用户将条目放入目录,元数据命名模型以树状的层次结构来组织和引用数据,元数据命名模型不对树结构作任何限定,条目自由地置于树的任意位置,每个元数据条目的标识名DN由两部分组成的:相对DN即RDN和记录在目录中的位置。
进一步地,步骤3所述的定义元数据功能模型,具体如下:
元数据功能模型即基于LDPA的目录条目基本操作,分为三类九个操作:
(1)目录查询,允许用户搜索目录,取回一条或多条目标条数据;
(2)目录更新,允许用户对不同层次目录条目添加、删除和修改;
(3)目录控制,允许客户端向目录证明自己身份,对几个方面会话进行控制。
实施例1
本实施例基于LDAP的TFAS数据信息目录服务方法,包括以下步骤:
步骤1:基于轻量级目录访问协议(LDAP),定义元数据信息模型;
元数据信息模型定义了能够在目录中存储的数据类型和基本数据对象(条目,entry),用LDAP存储各种类型的条目,这些条目以属性对集合的方式表示,每个属性可保存多个值,禁止在每个属性后用逗号把一系列值分开。目前TFAS上具有的数据类型有五类:优先级别为1的数据,地磁传感数据、地感线圈数据、光或波数据;优先级别为2的数据,分别存放视频数据、电子卡口信息、电子警察数据、信号灯的绿信比、其他路面数据;优先级别为3的数据,分别存放车流量、占有率、平均车速、平均排队长度数据;优先级别为4的数据,分别存放环境数据、研判数据;优先级别为5的数据,专门用于收集片级中心由于缺报而发送的数据和存放向片中心发送的补调数据。对五个优先级共16种数据类型定制LDAP对象:
(1)先定义基本数据对象Data:
表1基本数据对象类Data
(2)由于LDAP的特性,每个条目可以直接继承多个对象类,同时继承各种属性。若多个对象父类中有相同属性,条目继承后保留1个属性。对象类规定了基本信息的属性,必须包含(Must,必要属性),扩展信息的属性,可以含有(May,可选属性)。TFAS中具体数据对象类继承自Data类,这些对象类可以便捷的方式定义TFAS目录中的条目类型。由(1)得基本数据对象Data类继承Top类,具体数据对象类继承自Data类。举例,表1给出了具体地磁传感数据对象类的定义:
表1地磁传感数据对象
步骤2:基于轻量级目录访问协议(LDAP),定义元数据命名模型;
元数据命名模型定义TFAS组织和引用数据的标准。基于轻量级目录访问协议的便捷性,用户以一种易于管理的方式将条目放入目录。元数据命名模型以树状的层次结构来组织和引用数据,元数据命名模型不对树结构作任何限定,条目可以置于树中任意位置。元数据命名模型记录的标识名(Distinguished Name,简称DN)用来读取单个记录,以及回溯到树的顶部,每个元数据条目的DN由两部分组成:相对DN(RDN)和记录在目录中的位置。
在TFAS中,元数据交换分系统是实现信息统一管理、共享策略管理的基础,它将部署到片级和各个区域中心,形成一个分布式的共享交换网络。元数据交换分系统采用以片级中心为核心的星型布局结构,其布局拓扑如图1所示。
在元数据交换分系统中,区域中心建立NoSQL服务器云服务,使用五个NoSQL服务器作为元数据库,分别是:NoSQL1,存放五类优先级别为1的数据,分别存放地磁传感数据、地感线圈数据、光或波数据;NoSQL2,存放优先级别为2的数据,分别存放视频数据、电子卡口信息、电子警察数据、信号灯的绿信比、其他路面数据;NoSQL3,存放优先级别为3的数据,分别存放车流量、占有率、平均车速、平均排队长度数据;NoSQL4,存放优先级别为4级的数据,分别存放环境数据、研判数据;NoSQL5,专门用于收集片级中心由于缺报而发送的数据和存放向片中心发送的补调数据。如图2所示,给出主目录库中目录树。
步骤3:基于轻量级目录访问协议(LDAP),定义元数据功能模型;
元数据功能模型即基于LDPA的目录条目基本操作,为三类九个操作:
(1)目录查询允许用户搜索目录,取回一条或多条目标条数据;如图3所示,区域中心从目录服务器从主目录服务器复制部分目录时,服务器使用基于“推”和“拉”的技术,用简单或基于安全证书的安全验证,复制一部分或所有的数据。例如,某区域中心从目录服务器地址为TFAS.com,端口为300。区域中心要使用此服务器,用户也可以在非指定区域查询此服务器上的数据信息。片级中心的主目录服务器运行在相同服务器上,端口号是1300。基于安全和隐私的考虑,区域中心不可获取到所有数据,无关技术人员不可看到主目录服务器的所有目录。因此,数据维护服务器有选择地把子目录树于主目录服务器复制到从目录服务器上,隐藏信息不复制。在区域中心管理数据信息时,可以建立从ldap.TFAS.com:1300到ldap.TFAS.com:300的连接进行数据复制,用户通过区域中心的查询下载服务器连接到从目录服务器获取所需目录条目。
(2)目录更新允许用户对不同层次目录条目进行添加、删除和修改;通过数据录入服务器对数据进行审核录入和管理,对元数据库更新的同时对片级中心的主目录服务器更新,片级中心的数据维护服务器对主目录服务器维护。各区域中心的数据录入服务器负责处理数据添加申请和向数据维护中心提交请求,片级中心对主目录库任何修改操作通过基于LDAP的目录复制功能,由主库实时反映到区域中心的从目录库中。各个区域中心可建立本地备份,从目录库对主目录库的修改操作日志定期检查保持与主目录库的一致性。
(3)目录控制允许客户端向目录证明自己的身份,对几个方面会话进行控制。例如,区域中心的数据管理终端通过数据管理服务器对片级中心的数据维护服务器进行申请操作,请求绑定、解绑定、放弃等操作,由片级中心的数据维护服务器对主目录服务器进行维护。如(2)所述,片级中心对主目录库任何修改操作可通过基于LDAP的目录复制功能,由主目录库实时反映到区域中心从目录库中。各个区域中心可建立本地备份,从目录库对主目录库的修改操作日志进行定期检查保持与主目录库的一致性。
Claims (4)
1.一种基于LDAP的TFAS数据信息目录服务方法,其特征在于,步骤如下:
步骤1,基于轻量级目录访问协议LDAP,定义元数据信息模型;
步骤2,基于轻量级目录访问协议LDAP,定义元数据命名模型;
步骤3,基于轻量级目录访问协议LDAP,定义元数据功能模型。
2.根据权利要求1所述基于LDAP的TFAS数据信息目录服务方法,其特征在于,步骤1所述定义元数据信息模型,具体如下:
元数据信息模型定义了能够在目录中存储的数据类型和基本数据对象即条目entry,用LDAP存储各种类型的条目,这些条目用属性对来表示,一个属性保存多个值,禁止在每一个属性后用逗号把一系列值分开。
3.根据权利要求1所述基于LDAP的TFAS数据信息目录服务方法,其特征在于,步骤2所述定义元数据命名模型,具体如下:
元数据命名模型定义用户组织和引用数据的标准;基于LDPA,用户将条目放入目录,元数据命名模型以树状的层次结构来组织和引用数据,元数据命名模型不对树结构作任何限定,条目自由地置于树的任意位置,每个元数据条目的标识名DN由两部分组成的:相对DN即RDN和记录在目录中的位置。
4.根据权利要求1所述基于LDAP的TFAS数据信息目录服务方法,其特征在于,步骤3所述的定义元数据功能模型,具体如下:
元数据功能模型即基于LDPA的目录条目基本操作,分为三类九个操作:
(1)目录查询,允许用户搜索目录,取回一条或多条目标条数据;
(2)目录更新,允许用户对不同层次目录条目添加、删除和修改;
(3)目录控制,允许客户端向目录证明自己身份,对几个方面会话进行控制。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710172880.4A CN107103034A (zh) | 2017-03-22 | 2017-03-22 | 基于ldap的tfas数据信息目录服务方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710172880.4A CN107103034A (zh) | 2017-03-22 | 2017-03-22 | 基于ldap的tfas数据信息目录服务方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107103034A true CN107103034A (zh) | 2017-08-29 |
Family
ID=59675623
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710172880.4A Pending CN107103034A (zh) | 2017-03-22 | 2017-03-22 | 基于ldap的tfas数据信息目录服务方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107103034A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107888655A (zh) * | 2017-10-09 | 2018-04-06 | 成都启航信息技术有限公司 | 一种目录服务数据管理方法及系统 |
CN109344159A (zh) * | 2018-10-15 | 2019-02-15 | 北京天融信网络安全技术有限公司 | 用于ldap的查找方法、装置、电子设备及存储介质 |
CN111737326A (zh) * | 2019-10-28 | 2020-10-02 | 埃睿迪信息技术(北京)有限公司 | 一种数据湖环境下异构数据源数据汇聚的实现方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060123024A1 (en) * | 2004-12-03 | 2006-06-08 | Oracle International Corporation | System for persistent caching of LDAP metadata in a cluster LDAP server topology |
WO2007044230A2 (en) * | 2005-10-07 | 2007-04-19 | Citrix Systems, Inc. | Methods for selecting between a predetermined number of execution methods for an application program |
CN105468599A (zh) * | 2014-08-21 | 2016-04-06 | 西安慧泽知识产权运营管理有限公司 | 一种存储虚拟化系统的元数据层次管理方法 |
-
2017
- 2017-03-22 CN CN201710172880.4A patent/CN107103034A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20060123024A1 (en) * | 2004-12-03 | 2006-06-08 | Oracle International Corporation | System for persistent caching of LDAP metadata in a cluster LDAP server topology |
WO2007044230A2 (en) * | 2005-10-07 | 2007-04-19 | Citrix Systems, Inc. | Methods for selecting between a predetermined number of execution methods for an application program |
CN105468599A (zh) * | 2014-08-21 | 2016-04-06 | 西安慧泽知识产权运营管理有限公司 | 一种存储虚拟化系统的元数据层次管理方法 |
Non-Patent Citations (2)
Title |
---|
于雷易: "基于空间数据网格的空间数据共享技术研究", 《中国优秀硕士学位论文全文数据库》 * |
范春晓: "《异构物联网互操作关键技术及解决方案》", 31 October 2015 * |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107888655A (zh) * | 2017-10-09 | 2018-04-06 | 成都启航信息技术有限公司 | 一种目录服务数据管理方法及系统 |
CN109344159A (zh) * | 2018-10-15 | 2019-02-15 | 北京天融信网络安全技术有限公司 | 用于ldap的查找方法、装置、电子设备及存储介质 |
CN109344159B (zh) * | 2018-10-15 | 2022-03-11 | 北京天融信网络安全技术有限公司 | 用于ldap的查找方法、装置、电子设备及存储介质 |
CN111737326A (zh) * | 2019-10-28 | 2020-10-02 | 埃睿迪信息技术(北京)有限公司 | 一种数据湖环境下异构数据源数据汇聚的实现方法 |
CN111737326B (zh) * | 2019-10-28 | 2023-08-18 | 埃睿迪信息技术(北京)有限公司 | 一种数据湖环境下异构数据源数据汇聚的实现方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20200183932A1 (en) | Optimizing write operations in object schema-based application programming interfaces (apis) | |
CN105684387B (zh) | 用于利用基于通知的无效缓存内容的系统和方法 | |
CN107003906A (zh) | 云计算技术部件的类型到类型分析 | |
CN109328335A (zh) | 智能配置发现技术 | |
CN108701182A (zh) | 多租户身份云服务的数据管理 | |
CN109997126A (zh) | 事件驱动提取、变换、加载(etl)处理 | |
CN109074387A (zh) | 分布式数据存储区中的版本化分层数据结构 | |
US20030088639A1 (en) | Method and an apparatus for transforming content from one markup to another markup language non-intrusively using a server load balancer and a reverse proxy transcoding engine | |
CA3025493A1 (en) | Optimizing read and write operations in object schema-based application programming interfaces (apis) | |
CN110036382A (zh) | 多租户非关系型平台对象 | |
WO2018036324A1 (zh) | 一种智慧城市信息共享的方法和装置 | |
CN112148679A (zh) | 基于多种数据平台的数据交互方法、系统、装置及存储介质 | |
CN110362727A (zh) | 用于搜索系统的第三方搜索应用 | |
SG181621A1 (en) | Unified user login for co-location facilities | |
CN104852965B (zh) | 一种用户账号项目管理方法及系统 | |
CN106126540A (zh) | 数据库访问系统及其访问方法 | |
CN104769607B (zh) | 利用预定义的查询来过滤视图 | |
CN105868231A (zh) | 缓存数据的更新方法及装置 | |
CN109063138A (zh) | 用于在区块链即服务平台搜索数据的方法、设备及存储介质 | |
WO2020024903A1 (zh) | 用于搜索区块链数据的方法、设备及计算机可读存储介质 | |
CN110447025A (zh) | 在物联网中启用语义混搭 | |
US20110022688A1 (en) | Obtaining and displaying network topology information | |
CN111506589B (zh) | 基于联盟链的区块链数据服务系统、访问方法及存储介质 | |
CN107832392A (zh) | 一种元数据管理系统 | |
CN107103034A (zh) | 基于ldap的tfas数据信息目录服务方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170829 |
|
RJ01 | Rejection of invention patent application after publication |