CN106844751A - 一种实现铁塔费用数据清洗和稽核的自动化工具 - Google Patents
一种实现铁塔费用数据清洗和稽核的自动化工具 Download PDFInfo
- Publication number
- CN106844751A CN106844751A CN201710083930.1A CN201710083930A CN106844751A CN 106844751 A CN106844751 A CN 106844751A CN 201710083930 A CN201710083930 A CN 201710083930A CN 106844751 A CN106844751 A CN 106844751A
- Authority
- CN
- China
- Prior art keywords
- data
- steel tower
- cleaning
- checked
- expense
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 229910000831 Steel Inorganic materials 0.000 title claims abstract description 74
- 239000010959 steel Substances 0.000 title claims abstract description 74
- 238000004140 cleaning Methods 0.000 title claims abstract description 29
- 238000012795 verification Methods 0.000 claims description 12
- 230000008676 import Effects 0.000 claims description 9
- 238000004458 analytical method Methods 0.000 claims description 7
- 238000012423 maintenance Methods 0.000 claims description 3
- 239000011159 matrix material Substances 0.000 claims description 3
- 230000001568 sexual effect Effects 0.000 claims description 3
- 238000005728 strengthening Methods 0.000 claims 1
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 abstract description 6
- 229910052742 iron Inorganic materials 0.000 abstract description 3
- 238000000034 method Methods 0.000 abstract description 3
- 230000000875 corresponding effect Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 3
- 238000009795 derivation Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000002045 lasting effect Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005065 mining Methods 0.000 description 1
- 230000008092 positive effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
- G06Q10/063—Operations research, analysis or management
- G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
- G06Q10/06311—Scheduling, planning or task assignment for a person or group
- G06Q10/063118—Staff planning in a project environment
Landscapes
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Human Resources & Organizations (AREA)
- Theoretical Computer Science (AREA)
- Economics (AREA)
- Quality & Reliability (AREA)
- Databases & Information Systems (AREA)
- Strategic Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Entrepreneurship & Innovation (AREA)
- General Engineering & Computer Science (AREA)
- Educational Administration (AREA)
- Development Economics (AREA)
- Game Theory and Decision Science (AREA)
- Data Mining & Analysis (AREA)
- Marketing (AREA)
- Operations Research (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- General Factory Administration (AREA)
Abstract
本发明公开了一种实现铁塔费用数据清洗和稽核的自动化工具，属于铁塔公司与运营商铁塔费用结算领域，通过对铁塔费用计算过程中涉及到的数据进行清洗、分析、稽核的基础上，自动定位问题并给出问题解决参考方案，同时根据反馈情况不断增强定位问题的精确性；提供数据质量闭环管理，对自动清洗的数据进行工单派发，将问题解决聚焦到指定负责人，避免问题重复发生。本发明通过对铁塔基础新、运营商产品配置数据及铁塔、机房、配套的共享信息数据进行清洗，自动将问题定位并给出对应解决方案，快速、高效提升数据质量，更加快速准确的核算出铁塔费用，确保铁塔费用定价公平准确。
Description
技术领域
本发明涉及铁塔公司与运营商铁塔费用结算领域，具体地说是一种实现铁塔费用数据清洗和稽核的自动化工具。
背景技术
目前铁塔已从运营商剥离出来，运营商以租赁的方式租用铁塔，铁塔费用应用于铁塔公司和运营商结算场景，铁塔费用计算涉及的因素包括塔型、天线挂高、铁塔产权属性、铁塔共享运营商数、产品单元数、产品配置等。但是由于天线挂高、塔高等为哑资源，天线、铁塔资源现场核对需要进行爬塔，现场采集核对难度较大，造成系统内数据更新和维护的频率较低，导致当前系统内数据与现场一致性还存在诸多问题。目前主要的难点如下：
无自动进行数据清洗的手段，目前尚无系统手段对铁塔及产品数据进行自动清洗，造成数据质量参差不齐、数据质量不高、数据质量提升缓慢等问题。
无法自动定位问题，传统的人工核查主要取决于现场人员对网络的熟悉程度，采用人工逐站核查的方式，不仅效率低且准确性不能保证，还存在定位不准、漏查问题。虽经过多轮核查数据质量提升效果不明显。
传统核查无法进行闭环管理，传统核查手段无法进行闭环管理，对核查效果不能进行有效和准确评估。各分公司积极性不高。
发明内容
本发明的技术任务是针对以上不足之处，提供一种实现铁塔费用数据清洗和稽核的自动化工具，通过对铁塔基础新、运营商产品配置数据及铁塔、机房、配套的共享信息数据进行清洗，自动将问题定位并给出对应解决方案，快速、高效提升数据质量，更加快速准确的核算出铁塔费用，确保铁塔费用定价公平准确。
本发明解决其技术问题所采用的技术方案是：
一种实现铁塔费用数据清洗和稽核的自动化工具，通过对铁塔费用计算过程中涉及到的数据进行清洗、分析、稽核的基础上，自动定位问题并给出问题解决参考方案，同时根据反馈情况不断增强定位问题的精确性；提供数据质量闭环管理，对自动清洗的数据进行工单派发，将问题解决聚焦到指定负责人，避免问题重复发生；
数据采集包括运营商和铁塔公司两部分，针对运营商提供数据导入功能，运营商可从工具中下载导入模板，将维护的铁塔及产品数据填入模板，使用工具的导入功能自行导入数据；针对铁塔公司使用数据接口进行数据同步，根据与铁塔公司制定的数据接口规范，定期定时读取数据；
数据清洗建立参与铁塔费用计算属性的数据字典，使用字符串相似度矩阵算法分别计算各属性与其对应数据字典相似性，并取大于最低相似度且相似度最高值对应的字典值作为该属性的规范化结果；
定位问题是根据第一步数据清洗结果，将无法清洗数据进行问题归类，同时对工程、退网相关数据进行排除，提高数据清洗质量，数据二次清洗是对铁塔、机房配套及产品进行逻辑性关系分析。
优选的，所述无法清洗数据指相似度最高值低于制定的最低相似度的数据。
优选的，无法清洗数据类型包括数据不完整即值缺失、填写数据不在枚举范围内、数据填写不规范。
优选的，所述二次清洗是基于集团规范、业务实际，制定出合理的校验规则对铁塔、机房、天线进行自动化分析。
优选的，工单派发实现数据质量闭环管理针对数据清洗中发现的问题派发到相关数据提交人处进行问题解决，实现数据质量的可持续化管理，包括工单流转；工单查看；工单派发、实施；系统校验。
工单流转环节：
工单流转流程采用地市接口人受理、区县处理人实施，并且白名单环节由省公司进行审核，然后通过系统校验方式校验工单是否通过，再由地市接口人确认，工单进行归档。
工单查看：
可查看工单详细信息，问题数据已分不同的标签页分类展示；提供解决问题的方案。
工单派发、实施：
在派单信息-区县处理人实施部分点击派发对象选择，搜索相应的处理人进行转派（可模糊匹配）；区县处理人可根据工单内容处理问题，可以导出工单中的表格数据进行处理。如果短期内无法解决的问题，可申请白名单流转至上级进行确认。
系统校验：
系统对每个工单都设置时限并会检测当前工单问题否都已经落实处理，若接近时限工单仍未处理会修改工单优先级，优先处理临期工单。针对超期工单进行通报。
优选的，铁塔费用计算及稽核针对清洗后的数据计算其铁塔租赁费，并与铁塔公司提供的费用进行比对稽核，制定数据波动阈值，若计算出的铁塔费用与铁塔公司提供数据差值超过阈值则进行预警。
结果呈现：
1、基础数据核查结果
该工具支持通过条件查询各类型数据核查结果信息，并列表呈现。
输入：选择地市（或区县）进行查询；
输出：地市、小区中文名、核查结果等信息，并可进行导出操作。
呈现方式：表格
2、可视化管理
可视化管理可实时展现各地市、区县完成情况及效果，有效提升数据质量核查的积极性和主动性。
本发明的一种实现铁塔费用数据清洗和稽核的自动化工具和现有技术相比，具有以下有益效果：
多维数据分析、清洗，实现对塔型、塔高、共享方、产品配置等数据自动化清洗；将问题定位并分类，便于工单接收人解决问题；闭环管理，确保数据质量的持续提升；可视化管理，实现对计算因素数据质量的考核管理。
有效提升计算铁塔费用的相关源数据质量，实现数据源清洗与稽核，开发自动化稽核工具。基于集团要求、各省重点关注以及结合实际需求，对铁塔费用计算相关数据进行清洗和稽核，并进行工单派发解决问题，实现数据质量闭环管理。实现对参与计算数据的自动化清洗，挖掘数据质量问题，减少人力资源投入；基于可配置、灵活的规则进行数据稽核，提升数据质量和工作效率；通过工单派发实现闭环管理，实现跟踪和分析机制，确保问题解决。
具体实施方式
下面结合具体实施例对本发明作进一步说明。
一种实现铁塔费用数据清洗和稽核的自动化工具，通过对铁塔费用计算过程中涉及到的数据进行清洗、分析、稽核的基础上，自动定位问题并给出问题解决参考方案，同时根据反馈情况不断增强定位问题的精确性；提供数据质量闭环管理，对自动清洗的数据进行工单派发，将问题解决聚焦到指定负责人，避免问题重复发生；
数据采集包括运营商和铁塔公司两部分，针对运营商提供数据导入功能，运营商可从工具中下载导入模板，将维护的铁塔及产品数据填入模板，使用工具的导入功能自行导入数据；针对铁塔公司使用数据接口进行数据同步，根据与铁塔公司制定的数据接口规范，定期定时读取数据；
数据清洗建立参与铁塔费用计算属性的数据字典，使用字符串相似度矩阵算法分别计算各属性与其对应数据字典相似性，并取大于最低相似度且相似度最高值对应的字典值作为该属性的规范化结果；
定位问题是根据第一步数据清洗结果，将无法清洗数据进行问题归类，同时对工程、退网相关数据进行排除，提高数据清洗质量，数据二次清洗是对铁塔、机房配套及产品进行逻辑性关系分析。所述无法清洗数据指相似度最高值低于制定的最低相似度的数据。无法清洗数据类型包括数据不完整即值缺失、填写数据不在枚举范围内、数据填写不规范。二次清洗是基于集团规范、业务实际，制定出合理的校验规则对铁塔、机房、天线进行自动化分析。
工单派发实现数据质量闭环管理针对数据清洗中发现的问题派发到相关数据提交人处进行问题解决，实现数据质量的可持续化管理，包括工单流转；工单查看；工单派发、实施；系统校验。
工单流转环节：
工单流转流程采用地市接口人受理、区县处理人实施，并且白名单环节由省公司进行审核，然后通过系统校验方式校验工单是否通过，再由地市接口人确认，工单进行归档。
工单查看：
可查看工单详细信息，问题数据已分不同的标签页分类展示；提供解决问题的方案。
工单派发、实施：
在派单信息-区县处理人实施部分点击派发对象选择，搜索相应的处理人进行转派（可模糊匹配）；区县处理人可根据工单内容处理问题，可以导出工单中的表格数据进行处理。如果短期内无法解决的问题，可申请白名单流转至上级进行确认。
系统校验：
系统对每个工单都设置时限并会检测当前工单问题否都已经落实处理，若接近时限工单仍未处理会修改工单优先级，优先处理临期工单。针对超期工单进行通报。
优选的，铁塔费用计算及稽核针对清洗后的数据计算其铁塔租赁费，并与铁塔公司提供的费用进行比对稽核，制定数据波动阈值，若计算出的铁塔费用与铁塔公司提供数据差值超过阈值则进行预警。
结果呈现：
1、基础数据核查结果，该工具支持通过条件查询各类型数据核查结果信息，并列表呈现。
输入：选择地市（或区县）进行查询；
输出：地市、小区中文名、核查结果等信息，并可进行导出操作。
呈现方式：表格
2、可视化管理，可视化管理可实时展现各地市、区县完成情况及效果，有效提升数据质量核查的积极性和主动性。
通过上面具体实施方式，所述技术领域的技术人员可容易的实现本发明。但是应当理解，本发明并不限于上述的具体实施方式。在公开的实施方式的基础上，所述技术领域的技术人员可任意组合不同的技术特征，从而实现不同的技术方案。
除说明书所述的技术特征外，均为本专业技术人员的已知技术。
Claims (6)
1.一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于通过对铁塔费用计算过程中涉及到的数据进行清洗、分析、稽核的基础上，自动定位问题并给出问题解决参考方案，同时根据反馈情况不断增强定位问题的精确性；提供数据质量闭环管理，对自动清洗的数据进行工单派发，将问题解决聚焦到指定负责人，避免问题重复发生；
数据采集包括运营商和铁塔公司两部分，针对运营商提供数据导入功能，运营商可从工具中下载导入模板，将维护的铁塔及产品数据填入模板，使用工具的导入功能自行导入数据；针对铁塔公司使用数据接口进行数据同步，根据与铁塔公司制定的数据接口规范，定期定时读取数据；
数据清洗建立参与铁塔费用计算属性的数据字典，使用字符串相似度矩阵算法分别计算各属性与其对应数据字典相似性，并取大于最低相似度且相似度最高值对应的字典值作为该属性的规范化结果；
定位问题是根据第一步数据清洗结果，将无法清洗数据进行问题归类，同时对工程、退网相关数据进行排除，提高数据清洗质量，数据二次清洗是对铁塔、机房配套及产品进行逻辑性关系分析。
2.根据权利要求1所述的一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于所述无法清洗数据指相似度最高值低于制定的最低相似度的数据。
3.根据权利要求1或2所述的一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于无法清洗数据类型包括数据不完整即值缺失、填写数据不在枚举范围内、数据填写不规范。
4.根据权利要求1所述的一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于所述二次清洗是基于集团规范、业务实际，制定出合理的校验规则对铁塔、机房、天线进行自动化分析。
5.根据权利要求1所述的一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于工单派发实现数据质量闭环管理针对数据清洗中发现的问题派发到相关数据提交人处进行问题解决，实现数据质量的可持续化管理，包括工单流转；工单查看；工单派发、实施；系统校验。
6.根据权利要求1所述的一种实现铁塔费用数据清洗和稽核的自动化工具，其特征在于铁塔费用计算及稽核针对清洗后的数据计算其铁塔租赁费，并与铁塔公司提供的费用进行比对稽核，制定数据波动阈值，若计算出的铁塔费用与铁塔公司提供数据差值超过阈值则进行预警。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710083930.1A CN106844751A (zh) | 2017-02-16 | 2017-02-16 | 一种实现铁塔费用数据清洗和稽核的自动化工具 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710083930.1A CN106844751A (zh) | 2017-02-16 | 2017-02-16 | 一种实现铁塔费用数据清洗和稽核的自动化工具 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106844751A true CN106844751A (zh) | 2017-06-13 |
Family
ID=59127560
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710083930.1A Pending CN106844751A (zh) | 2017-02-16 | 2017-02-16 | 一种实现铁塔费用数据清洗和稽核的自动化工具 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106844751A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107464052A (zh) * | 2017-07-31 | 2017-12-12 | 中国铁塔股份有限公司 | 一种站址物业成本监控方法及装置 |
-
2017
- 2017-02-16 CN CN201710083930.1A patent/CN106844751A/zh active Pending
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN107464052A (zh) * | 2017-07-31 | 2017-12-12 | 中国铁塔股份有限公司 | 一种站址物业成本监控方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110231528B (zh) | 基于负荷特征模型库的变压器户变异常识别方法及装置 | |
| CN104317681B (zh) | 针对计算机系统的行为异常自动检测方法及检测系统 | |
| CN106250927A (zh) | 基于k最近邻分类算法的配电网拓扑结构校验方法 | |
| CN107862450A (zh) | 绩效考核系统及方法 | |
| CN108846592A (zh) | 一种基于大数据的企业评价报告生成方法及装置 | |
| CN105184455A (zh) | 一种面向城市电力数据分析的高维可视化分析方法 | |
| CN106131158A (zh) | 一种云数据中心环境下基于云租户信用度的资源调度装置 | |
| CN107240014A (zh) | 一种基于企业征信业务的信用评级方法 | |
| CN109784689B (zh) | 一种电网基建工程报表数据处理方法 | |
| CN110175909A (zh) | 一种企业关联关系确定方法及系统 | |
| CN107958354A (zh) | 一种电网层设备利用率主要影响因素的分析方法 | |
| CN111178680A (zh) | 风电场工程质量全过程管理系统、方法及设备 | |
| CN109767374A (zh) | 一种房屋征收平台 | |
| CN110991985A (zh) | 一种项目进度数据处理方法 | |
| CN106960393A (zh) | 一种智慧水产系统的监测数据共享与租赁方法 | |
| CN105005874A (zh) | 网格员考核方法和系统 | |
| CN106844751A (zh) | 一种实现铁塔费用数据清洗和稽核的自动化工具 | |
| CN112419124B (zh) | 一种低效工业用地的快速识别方法、装置及其存储介质 | |
| CN108197194A (zh) | 一种报案信息的处理方法及系统 | |
| CN107944841A (zh) | 薪酬计算系统及方法 | |
| Hashemy et al. | Facilitation of operation and maintenance activities of irrigation networks using ak‐means clustering method: case study of the ghazvin irrigation network | |
| CN110941646A (zh) | 基于10kv工程三率数据挖掘的项目进度管控系统 | |
| CN103309980B (zh) | 演出数据处理方法、装置及系统 | |
| CN110009246A (zh) | 一种基于大数据画像技术的输电线路运行状态评估方法 | |
| CN114897345A (zh) | 一种基于员工数据自动生成指标分的方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| WD01 | Invention patent application deemed withdrawn after publication | ||
| WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20170613 |