CN106815327A - 一种用于移动运营数据资源更新方法 - Google Patents

一种用于移动运营数据资源更新方法 Download PDF

Info

Publication number
CN106815327A
CN106815327A CN201611242035.1A CN201611242035A CN106815327A CN 106815327 A CN106815327 A CN 106815327A CN 201611242035 A CN201611242035 A CN 201611242035A CN 106815327 A CN106815327 A CN 106815327A
Authority
CN
China
Prior art keywords
data
keyword
platform
update
resource
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611242035.1A
Other languages
English (en)
Inventor
石光捷
张莉
葛建科
陆萍
汪双
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Xinwang Internet Information Technology Co Ltd
Original Assignee
Nanjing Xinwang Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Xinwang Internet Information Technology Co Ltd filed Critical Nanjing Xinwang Internet Information Technology Co Ltd
Priority to CN201611242035.1A priority Critical patent/CN106815327A/zh
Publication of CN106815327A publication Critical patent/CN106815327A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/21—Design, administration or maintenance of databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明属于互联网领域，具体涉及到移动深度运营平台数据资源的更新方法。包括以下步骤：步骤一：资源库预处理阶段：对平台的资源库中的每条数据进行分配相应的ID,每个ID对应有一个关键词；步骤二：数据更新准备阶段：步骤三：对数据进行分类阶段：数据处理系统先获取需要更新的数据的关键词，将所获得的关键词与平台的资源库中已经存在的各个ID相应的关键词进行对比检索是否存在相同的关键词；步骤四：批量更新阶段：将步骤三分类阶段经过处理的ID和与该ID相关联的数据导入平台资源库。本发明通过相关资源每天进行增量更新，能够达到快速更新资源的目的，减少各个运营商的数据库之间交互，提高业务执行的效率。

Description

一种用于移动运营数据资源更新方法
技术领域
本发明属于互联网领域，具体涉及到移动深度运营平台数据资源的更新方法。
背景技术
移动深度运营平台中，需要将多个渠道多个运营商具有的不同的资源以及不同的数据库导入同一个平台进行统一管理。作为一个综合性的运营平台需要将不同的运营商的数据库资源库整合到一个平台的资源库进行管理，所以整个平台的资源库的容量很大，需要处理的数据信息比较复杂，交叉性很强。特别是各个运营商的数据库在不停的更新中那么势必也就要求平台也要随之更新。这样就会带来以下的问题：平台在更新的过程中各个运营商数据库之间的交互多，对于平台的服务器消耗大，更新需要用到时间长。
现有技术中，针对移动运营数据的更新主要采用以下方式：当业务程序需要更新数据库中的某些数据时，先获取所需要的相关资源，再通过程序处理，对相关资源的数据进行一次性批量全部更新 。由于进行的是批量全部的更新，上述方式会对平台的资源库产生很大的侵入性，涉及到相关数据所在的报表的全部，并且服务器消耗大，更新时间长， 增加业务执行的平均时耗，降低业务的执行效率。
发明内容
1、所要解决的技术问题：
针对上述的问题，本发明解决了在移动运营平台上导入的不同渠道不同运营商的不同的数据库的资源更新，通过相关资源每天进行增量更新，能够达到快速更新资源的目的，减少各个运营商的数据库之间交互，提高业务执行的效率。
2、技术方案：
本发明提供一种用于移动运营数据资源更新方法，包括以下步骤：
步骤一：资源库预处理阶段：对平台的资源库中的每条数据进行分配相应的ID,每个ID对应有一个关键词；
步骤二：数据更新准备阶段：各个渠道接收到新的数据，将需要更新的数据传输至平台输入端口；平台系统设置预设时间点，每天到达该时间点输入端口将要更新的内容传输至平台的数据处理系统；只有到达预设的时间点更新的内容才传输至平台系统进行处理。
步骤三：对数据进行分类阶段：数据处理系统先获取需要更新的数据的关键词，将所获得的关键词与平台的资源库中已经存在的各个ID相应的关键词进行对比检索是否存在相同的关键词；
如果平台资源库中存在相同的关键词，则检索到的数据的ID即为需要更新的数据的ID，同时将所述新的数据内容关联上该关键词；
如果不存在相同的关键词，则将所要更新的数据分配一个新的ID,同时将该关键词与ID相关联；
步骤四：批量更新阶段：将步骤三分类阶段经过处理的ID和与该ID相关联的数据导入平台资源库。
进一步地, 步骤三还包括平台资源库中原有的与新的数据无关的数据，其ID地址不变。
进一步地，步骤二还包括各个渠道确定所需要导入平台的数据。
3、有益效果：
（1）本发明通过平台的数据处理系统对数据进行分类并分配各个数据的对应的ID，通过识别各个ID对应的关键词从而识别与平台相关的资源，能够根据平台需要的内容进行精准的更新数据。
（2）本发明在预处理阶段，各个运营商先将需要导入平台的资源事先输入到平台的输入端口，并且通过识别不同的ID的关键词只是对数据的增量进行更新，更新的数据比较少，不涉及全表的操作，因而减少不同的数据库的交互，使数据更新的时间更短。
附图说明
图1本发明的流程图。
具体实施方式
图1为本发明的流程图，在实时本流程之前，平台的数据库要经过一个预处理阶段。通过预处理，使本平台的资源库并不是简单的数据报表，而是将每条数据通过关键词分配一个相应的ID，通过该ID地址方便访问该条数据，访问时只需要访问与该关键词相关的内容，并不需要涉及整个报表，从而减轻了处理器的负担。
从图中可以看出本发明以下的一个流程：
1、各个运营商从海量数据中确定想在本平台上呈现给客户的数据，将该数据导入到平台输入端口。运营商的导入可以没有时间的限制，而且通过运营商对数据的甄选，可以对平台需要的资源进行初步的定位。
2、由于平台系统的输入端口预设一个时间点，当每日到达该时间点平台才可以对平台的资源库进行更新，
将数据输入端导入的数据经过数据解析分类，归入不同的ID地址；会存在以下的情况：
第一种是找到关键词的ID地址，将需要更新的内容进行更新，包括可以进行增添，也可以进行覆盖。
第二种是没有找到关键词的数据，系统将会分配一个新的ID地址与该关键词相关。
第三种是没有新的数据与资源库中的ID地址的关键词相同，则该数据不变。
3、将上述的第一种与第二种的处理过的数据导入到本平台的资源库。可以看出上述处理过的数据仅仅是对资源库的数据的增量进行导入，对不需要的内容并没有涉及，因而能够做到减少数据库的交互，使数据更新的时间更短。
虽然本发明已以较佳实施例公开如上，但它们并不是用来限定本发明的，任何熟习此技艺者，在不脱离本发明之精神和范围内，自当可作各种变化或润饰，因此本发明的保护范围应当以本申请的权利要求保护范围所界定的为准。

Claims (3)

1.一种用于移动运营数据资源更新方法，其特征在于，包括以下步骤：
步骤一：资源库预处理阶段：对平台的资源库中的每条数据进行分配相应的ID,每个ID对应有一个关键词；
步骤二：数据更新准备阶段：各个渠道接收到新的数据，将需要更新的数据传输至平台输入端口；平台系统设置预设时间点，每天到达该时间点输入端口将要更新的内容传输至平台的数据处理系统；
步骤三：对数据进行分类阶段：数据处理系统先获取需要更新的数据的关键词，将所获得的关键词与平台的资源库中已经存在的各个ID相应的关键词进行对比检索是否存在相同的关键词；
如果平台资源库中存在相同的关键词，这该关键词关联的ID即为需要更新的数据的ID，同时将所述新的数据内容关联上该关键词；
如果不存在相同的关键词，则将所要更新的数据分配一个新的ID,同时将该关键词与ID相关联；
步骤四：批量更新阶段：将步骤三分类阶段经过处理的ID和与该ID相关联的数据导入平台资源库。
2.根据权利要求1所述的一种用于移动运营数据资源更新方法，其特征在于：步骤三还包括平台资源库中原有的与新的数据无关的数据，其ID地址不变。
3.根据权利要求1所述的一种用于移动运营数据资源更新方法，其特征在于：步骤二还包括各个渠道确定所需要导入平台的数据。
CN201611242035.1A 2016-12-29 2016-12-29 一种用于移动运营数据资源更新方法 Pending CN106815327A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611242035.1A CN106815327A (zh) 2016-12-29 2016-12-29 一种用于移动运营数据资源更新方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611242035.1A CN106815327A (zh) 2016-12-29 2016-12-29 一种用于移动运营数据资源更新方法

Publications (1)

Publication Number Publication Date
CN106815327A true CN106815327A (zh) 2017-06-09

Family

ID=59110744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611242035.1A Pending CN106815327A (zh) 2016-12-29 2016-12-29 一种用于移动运营数据资源更新方法

Country Status (1)

Country Link
CN (1) CN106815327A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104023056A (zh) * 2014-05-30 2014-09-03 华为技术有限公司 更新数据的方法和相关设备
CN104657170A (zh) * 2013-11-25 2015-05-27 腾讯科技（上海）有限公司 一种数据更新方法、装置及系统
CN105373541A (zh) * 2014-08-22 2016-03-02 博雅网络游戏开发（深圳）有限公司 数据库的数据操作请求的处理方法和系统
CN105868231A (zh) * 2015-12-01 2016-08-17 乐视体育文化产业发展（北京）有限公司 缓存数据的更新方法及装置
US20160335339A1 (en) * 2015-05-13 2016-11-17 Rovi Guides, Inc. Methods and systems for updating database tags for media content

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104657170A (zh) * 2013-11-25 2015-05-27 腾讯科技（上海）有限公司 一种数据更新方法、装置及系统
CN104023056A (zh) * 2014-05-30 2014-09-03 华为技术有限公司 更新数据的方法和相关设备
CN105373541A (zh) * 2014-08-22 2016-03-02 博雅网络游戏开发（深圳）有限公司 数据库的数据操作请求的处理方法和系统
US20160335339A1 (en) * 2015-05-13 2016-11-17 Rovi Guides, Inc. Methods and systems for updating database tags for media content
CN105868231A (zh) * 2015-12-01 2016-08-17 乐视体育文化产业发展（北京）有限公司 缓存数据的更新方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
余洋等: "异构数据库间数据同步的方法实现", 《信息系统工程》 *

Similar Documents

Publication Publication Date Title
US11157473B2 (en) Multisource semantic partitioning
US20160357860A1 (en) Natural language search results for intent queries
CN104408159B (zh) 一种数据关联、加载、查询方法及装置
DE112012005533T5 (de) Unterstützende Abfrage und ein Abfragen
US10296614B2 (en) Bulk data insertion in analytical databases
US20090024654A1 (en) Multi-value property storage and query support
CN106168963B (zh) 实时流数据的处理方法、装置及服务器
CN109145003B (zh) 一种构建知识图谱的方法及装置
US9984081B2 (en) Workload aware data placement for join-based query processing in a cluster
CN106815258B (zh) 一种数据存储方法和协调节点
TW201401210A (zh) 業務對象推送的方法以及裝置
CN105069074B (zh) 策略配置文件处理方法、装置和系统
US20170212923A1 (en) Big-Data Processing Method and Apparatus
CN106649385B (zh) 基于HBase数据库的数据排序方法和装置
CN110532282A (zh) 数据查询方法及装置
CN107562762A (zh) 数据索引构建方法及装置
CN107277095B (zh) 会话分割方法及装置
CN106855862A (zh) 一种快速比较方法及装置
CN106815327A (zh) 一种用于移动运营数据资源更新方法
CN103150365B (zh) 银行后台系统模糊搜索的方法及设备
CN104239486A (zh) 一种数据处理的方法、系统以及相关设备
CN104636384B (zh) 一种处理文档的方法及装置
CN106776617B (zh) 日志文件的保存方法和装置
CN104008191B (zh) 一种数据查询方法
CN104794237B (zh) 网页信息处理方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170609