CN110309176A - 一种数据处理方法和数据中转站 - Google Patents
一种数据处理方法和数据中转站 Download PDFInfo
- Publication number
- CN110309176A CN110309176A CN201810213702.6A CN201810213702A CN110309176A CN 110309176 A CN110309176 A CN 110309176A CN 201810213702 A CN201810213702 A CN 201810213702A CN 110309176 A CN110309176 A CN 110309176A
- Authority
- CN
- China
- Prior art keywords
- data
- request
- basic
- relay station
- basic data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 21
- 238000000034 method Methods 0.000 claims description 30
- 238000012545 processing Methods 0.000 claims description 20
- 238000011012 sanitization Methods 0.000 claims description 17
- 241001269238 Data Species 0.000 claims description 11
- 230000001960 triggered effect Effects 0.000 claims description 3
- 238000013075 data extraction Methods 0.000 abstract description 3
- 238000000605 extraction Methods 0.000 description 25
- 230000003993 interaction Effects 0.000 description 16
- 239000000284 extract Substances 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 238000012216 screening Methods 0.000 description 10
- 238000004891 communication Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000000151 deposition Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 230000008520 organization Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000012550 audit Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000000802 evaporation-induced self-assembly Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000007474 system interaction Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/245—Query processing
- G06F16/2455—Query execution
- G06F16/24552—Database cache management
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/254—Extract, transform and load [ETL] procedures, e.g. ETL data flows in data warehouses
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computational Linguistics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Information Transfer Between Computers (AREA)
Abstract
本申请实施例提供了一种数据处理方法和数据中转站，用于提高基础数据提取的效率。具体技术方案如下：数据中转站接收业务系统的数据请求；所述数据中转站向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；所述数据中转站向所述业务系统反馈所述数据请求对应的基础数据。
Description
技术领域
本申请涉及计算机领域，尤其涉及一种数据处理方法和数据中转站。
背景技术
企业内部或者组织机构内部会建设大量的内部系统，而这些系统可能需要使用一些相同的基础数据。在保证基础数据的唯一性的基础上，需要将这些基础数据保存到一个数据库，因此在该内部系统需要使用这些基础数据的时候，该内部系统需要向基础数据所在的数据库发起数据请求获取相应的基础数据。
在存在大量内部系统连接存储这些基础数据的数据库的情况下，即该数据库接收大量的数据访问，同时由于每个内部系统需要的数据字段可能不一样，因此对该数据库处理数据请求的速率有影响，从而导致提取数据的性能受到限制。
发明内容
本申请实施例提供了一种数据处理方法和数据中转站，用于提高基础数据提取的效率。
一方面，本申请实施例提供一种数据处理方法，包括：
该数据中转站接收到业务系统的数据请求之后，该数据中转站向基础数据中心请求与该数据请求对应的基础数据，其中，该基础数据中心的基础数据由该数据中转站将基础数据库的基础数据复制之后存储，而该基础数据库用于存储业务系统所需的基础数据；然后该数据中转站将该数据请求对应的基础数据反馈给该业务系统。
本申请实施例提供的技术方案中，通过增加数据中转站将基础数据库的基础数据复制存储在基础数据中心，并通过数据中转站与业务系统进行数据交互，减少了基础数据库的数据提取压力，从而提高基础数据的提取速率。
另一方面，本申请实施例提供一种数据中转站，该数据中转站具有实现上述方法中数据中转站的功能。该功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。
一种可能实现方式中，该数据中转站包括：
接收模块，用于接收业务系统的数据请求；
处理模块，用于向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
反馈模块，用于向所述业务系统反馈所述数据请求对应的基础数据。
另一种可能实现方式中，该数据中转站包括：
收发器，处理器和总线；
所述收发器与所述处理器通过所述总线相连；
所述收发器，执行如下步骤：
接收业务系统的数据请求；
所述处理器，执行如下步骤：
向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
所述收发器，执行如下步骤：
向所述业务系统反馈所述数据请求对应的基础数据。
另一方面，本申请实施例提供一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，所述计算机执行上述方法。
另一方面，本申请实施例提供一种包含指令的计算机程序产品，当所述计算机程序产品在计算机上运行时，所述计算机执行上述方法。
另一方面，本申请实施例提供一种数据处理系统，该数据处理系统包括该业务系统、所述数据中转站，所述基础数据中心以及所述基础数据库，该数据中转站执行上述方法，该基础数据中心用于存储所述数据中转站从所述基础数据库复制的基础数据，所述基础数据库用于存储所有业务系统所需的基础数据。
从以上技术方案可以看出，本申请实施例具有以下优点：通过增加数据中转站将基础数据库的基础数据复制存储在基础数据中心，并通过数据中转站与业务系统进行数据交互，减少了基础数据库的数据提取压力，从而提高基础数据的提取速率。
附图说明
图1为现有数据处理方法的系统架构图；
图2为本申请实施例中数据处理方法的系统架构图；
图3为本申请实施例中数据处理方法的一个实施例示意图；
图4为本申请实施例中数据处理方法的另一个实施例示意图；
图5为本申请实施例中数据处理方法的另一个实施例示意图；
图6为本申请实施例中数据处理方法的另一个实施例示意图；
图7为本申请实施例中数据处理方法的一个流程示意图；
图8为本申请实施例中数据中转站的一个实施例示意图；
图9为本申请实施例中数据中转站的另一个实施例示意图；
图10为本申请实施例中数据处理系统的一个实施例示意图。
具体实施方式
本申请实施例提供了一种数据处理方法和数据中转站，用于提高基础数据提取的效率。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
企业内部或者组织机构内部会建设大量的内部系统，比如企业内部各个部门的人员即时通信系统或者企业内部的考勤系统等。而这些系统可能需要使用一些相同的基础数据，比如企业内部员工的个人信息等等。为了保证基础数据的唯一性，企业内部通常会将这些基础数据保存在一个数据库(本申请实施例中称之为基础数据库)。如图1所示，该内部业务系统都与该基础数据相连，当该内部业务系统需要使用该基础数据时，该内部业务系统将会向该基础数据库发起数据请求，然后该基础数据库向该内部业务系统反馈该数据请求对应的基础数据。在这种直接从基础数据库提取数据的方式下，若该基础数据库接收到大量的数据请求，且各个数据请求需要的数据不一样的情况下，该基础数据库提取数据的速率将会降低，从而导致提取数据的性能受到限制。
本申请实施例提供一种数据处理方法，应用于如图2所示的系统架构。图2所示的系统架构中包括业务系统、数据中转站、基础数据中心以及基础数据库。
其中，业务系统是指需要使用基础数据的系统，如员工即时通信系统。该业务系统主要与数据中转站进行交互，单向从数据中转站中获取基础数据。
该数据中转站负责所有业务系统与基础数据的数据交互。
该基础数据中心负责以文件的方式存储该数据中转站从数据库同步的数据，不与其他系统交互。
该基础数据库负责存储所有的数据，并可以响应数据中转站的请求，同时可以按照需求向该数据中转站推送数据。
本申请实施例提供的技术方案具体如下：该数据中转站在接收到业务系统的数据请求之后，向基础数据中心请求与该数据请求对应的基础数据；最后将该基础数据中心返回的该基础数据反馈给该业务系统。
本申请实施例中，该数据中转站为一种文件中转的系统名称，可以为服务器，也可以是其他可以与业务系统进行数据交互的实体装置，只要可以实现本申请实施例中数据中转的功能，具体实体装置，此处不做限定。同时，本申请实施例中，基础数据均以文件存储的方式存储在基础数据库、基础数据中心和数据中转站中，用以更方便实现该基础数据的共享。
具体请参阅图3所示，本申请实施例中数据处理方法的一个实施例，包括：
301、数据中转站接收业务系统的数据请求。
该数据中转站接收业务系统发起的数据请求。
本实施例中，该业务系统的数量并不限定，即所有需要向该基础数据库请求基础数据的业务系统都可以向该数据中转站发送数据请求。比如在企业内部，该业务系统可以包括该企业员工之间的即时通信系统、该企业员工的考勤系统和该企业员工的账务报销系统等。而各个业务系统之间都需要员工的个人信息，比如员工的工号、员工的姓名、员工的年龄、员工的工作年限、员工的请假天数等等。若该企业在进行考勤统计时，需要统计在当月之内有请假的员工，则该考勤系统需要在基础数据库里提取员工的个人信息然后再进行筛选。
302、该数据中转站向基础数据中心请求所述数据请求对应的基础数据。
本实施例中，该数据中转站将该基础数据库里的基础数据进行复制，然后再将这些基础数据存储在基础数据中心中。然后该数据中转站在判断该业务系统有权限请求数据的情况下，该数据中转站向该基础数据中心发送该数据请求，该基础数据中心查询与该数据请求对应的基础数据；然后该基础数据中心返回该数据请求对应的基础数据给数据中转站。
可选的，该数据中转站与该基础数据库里的基础数据在第一次完成复制之后，该数据中转站还可以按照预设周期接收该基础数据库的更新数据，然后将更新数据存储在该基础数据中心。这样可以有效的实现该基础数据中心与该基础数据库之间的数据的同步。同时该预设周期可以为24小时或者是12小时等用户设定的时间段，具体情况，此处不做限定。
303、该数据中转站向所述业务系统反馈所述数据请求对应的基础数据。
该数据中转站将该数据请求对应的基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
本实施例提供的技术方案中，该数据中转站代替该基础数据库与该业务系统进行数据交互，且将该基础数据库的数据同步至该基础数据中心，可以有效缓减该基础数据库的数据提取压力，从而提高基础数据的提取速率。
可以理解的是，该数据中转站作为一个数据交互实体装置，该数据中转站还可以包括存储器作为其本地机器缓存(即本地缓存)，同时该本地缓存也是可以缓存部分的基础数据，因此该数据中转站在与该业务系统进行数据交互时，还可以执行如下技术方案，具体请参阅图4所示，本申请实施例中数据处理方法的另一个实施例，包括：
401、该数据中转站接收业务系统的数据请求。
该数据中转站接收业务系统发起的数据请求。
本实施例中，该业务系统的数量并不限定，即所有需要向该基础数据库请求基础数据的业务系统都可以向该数据中转站发送数据请求。比如在企业内部，该业务系统可以包括该企业员工之间的即时通信系统、该企业员工的考勤系统和该企业员工的账务报销系统等。而各个业务系统之间都需要员工的个人信息，比如员工的工号、员工的姓名、员工的年龄、员工的工作年限、员工的请假天数等等。若该企业在进行考勤统计时，需要统计在当月之内有请假的员工，则该考勤系统需要在基础数据库里提取员工的个人信息然后再进行筛选。
402、该数据中转站查询本地缓存中是否存在该数据请求对应的基础数据，若是，则执行步骤403和步骤405，若否，则执行步骤404和步骤405。
该数据中转站在接收到该业务系统的数据请求之后，在本地缓存中查询是否存在该数据请求对应的基础数据，若存在，则该数据中转站可以直接获取自身本地缓存保存的该基础数据，即执行步骤403，然后将该基础数据反馈给业务系统，即执行步骤405；若不存在，则该数据中转站可以向该基础数据中心获取该基础数据，即执行步骤404，然后再将该基础数据反馈给该业务系统，即执行步骤405。
403、该数据中转站从该本地缓存中获取该基础数据。
该数据中转站在确定该业务系统有权限请求数据的情况下，直接从自身的本地缓存中提取该基础数据。
404、该数据中转站向基础数据中心请求所述数据请求对应的基础数据。
本实施例中，该数据中转站将该基础数据库里的基础数据进行复制，然后再将这些基础数据存储在基础数据中心中。然后该数据中转站在判断该业务系统有权限请求数据的情况下，该数据中转站向该基础数据中心发送该数据请求，该基础数据中心查询与该数据请求对应的基础数据；然后该基础数据中心返回该基础数据给数据中转站。
可选的，该数据中转站与该基础数据库里的基础数据在第一次完成复制之后，该数据中转站还可以按照预设周期接收该基础数据库的更新数据，然后将更新数据存储在该基础数据中心。这样可以有效的实现该基础数据中心与该基础数据库之间的数据的同步。同时该预设周期可以为24小时或者是12小时等用户设定的时间段，具体情况，此处不做限定。
405、该数据中转站向该业务系统反馈该基础数据。
该数据中转站将该基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
可选的，在本实施例中，在该数据中转站从该基础数据中心获取到该基础数据之后，该数据中转站的本地缓存可以将该基础数据进行保存。这样可以方便下次再次请求该基础数据时，该数据中转站可以直接从该本地缓存中提取该基础数据，减少与基础数据中心之间的数据交互，减少网络资源的消耗。
本实施例提供的技术方案中，该数据中转站在自身的本地缓存中存储基础数据，并在本地缓存中存在业务系统需要的基础数据时，直接由该本地缓存的基础数据反馈给业务系统；然后在该本地缓存中不存在业务系统需要的基础数据时再向该基础数据中心请求该基础数据，从而减少了该数据中转站与基础数据中心之间的数据交互，可以有效的提高数据的提取，并减少网络资源的消耗。
可以理解的是，本申请实施例中的数据中转站还可以具有条件和/或字段过滤的功能，因此该数据中转站在与该业务系统进行数据交互时，还可以执行如下技术方案，具体请参阅图5所示，本申请实施例中数据处理方法的另一个实施例，包括：
501、该数据中转站接收业务系统的数据请求。
该数据中转站接收业务系统发起的数据请求。
本实施例中，该业务系统的数量并不限定，即所有需要向该基础数据库请求基础数据的业务系统都可以向该数据中转站发送数据请求。比如在企业内部，该业务系统可以包括该企业员工之间的即时通信系统、该企业员工的考勤系统和该企业员工的账务报销系统等。而各个业务系统之间都需要员工的个人信息，比如员工的工号、员工的姓名、员工的年龄、员工的工作年限、员工的请假天数等等。若该企业在进行考勤统计时，需要统计在当月之内有请假的员工，则该考勤系统需要在基础数据库里提取员工的个人信息然后再进行筛选。若该数据请求之中还包括条件和/或字段筛选，比如该数据请求的筛选条件为请假的员工。
502、该数据中转站查询本地缓存中是否存在该数据请求对应的基础数据，若是，则执行步骤503和步骤505至步骤507，若否，则执行步骤504至步骤507。
该数据中转站在接收到该业务系统的数据请求之后，在本地缓存中查询是否存在该数据请求对应的基础数据，若存在，则该数据中转站可以直接获取自身本地缓存保存的该基础数据，然后根据条件或字段对基础数据进行筛选，即执行步骤503和步骤505；若不存在，则该数据中转站可以向该基础数据中心获取该基础数据，然后根据条件或字段对基础数据进行筛选，即步骤504至步骤505。
503、该数据中转站从本地缓存中获取该基础数据。
该数据中转站直接从自身的本地缓存中提取该基础数据。
504、该数据中转站向基础数据中心请求所述数据请求对应的基础数据。
本实施例中，该数据中转站将该基础数据库里的基础数据进行复制，然后再将这些基础数据存储在基础数据中心中。然后该数据中转站向该基础数据中心发送该数据请求，该基础数据中心查询与该数据请求对应的基础数据；然后该基础数据中心返回该基础数据给数据中转站。
可选的，在本实施例中，在该数据中转站从该基础数据中心获取到该基础数据之后，该数据中转站的本地缓存可以将该基础数据进行保存。这样可以方便下次再次请求该基础数据时，该数据中转站可以直接从该本地缓存中提取该基础数据，减少与基础数据中心之间的数据交互，减少网络资源的消耗。
可选的，在本实施例中，在该数据中转站从该基础数据中心获取到该基础数据之后，该数据中转站的本地缓存可以将该基础数据进行保存。这样可以方便下次再次请求该基础数据时，该数据中转站可以直接从该本地缓存中提取该基础数据，减少与基础数据中心之间的数据交互，减少网络资源的消耗。
505、该数据中转站确定该数据请求中是否包括条件和/或字段过滤，若是，则执行步骤506至步骤507，若不存在，则执行步骤508。
该数据中转站解析该数据请求，判断该数据请求中是否包括相应的条件筛选或者是字段筛选，若存在，则该数据中转站执行步骤506至步骤507；若不存在，则该数据中转站执行步骤508。
比如，企业内部进行考勤统计时，该考勤系统需要的基础数据为员工的个人信息，则该数据请求是用于向该数据中转站请求该企业内部的员工的个人信息。若用户在操作过程中，需要统计员工的请假情况，则该数据请求中还可以包括“请假”这一条件或者是字段；若当前还需要根据请假天数进行一个阶段统计，则该数据请求中还可以包括“请假天数大于5天”等条件或字段，具体的条件或字段，根据实际需求有不同的设定，此处不做限定。
506、该数据中转站根据该条件和/或字段从该基础数据中筛选相应的目标基础数据。
该数据中转站根据该数据请求中的条件和/或字段对该基础数据进行筛选，得到目标基础数据。
比如，在企业内部进行考勤统计时，该考勤系统需要的基础数据为员工的个人信息，则该数据请求是用于向该数据中转站请求该企业内部的员工的个人信息。假设该企业内部的员工有30人，其中当月请假人数为20人，请假天数大于5天的人数为3个。则该数据中转站在接收到该数据请求之后，获取是该企业内部的全部员工的个人信息，本实施例中将之称为全集数据(即该企业内部的30人的个人信息)。若该数据请求中包括了“请假”这一条件或者是字段，则该数据请求将该全部员工的个人信息中请过假的员工的个人信息提取出来生成第一数据集(即该企业内部当月请假的20人的个人信息)；若当前还需要根据请假天数进行一个阶段统计，即该数据请求中还包括“请假天数大于5天”这个条件或字段，则该数据中转站可以从该第一数据集中提取请假天数据大于5天的员工的个人信息生成第二数据集(即该企业内部当月请假天数大于5天的员3个的个人信息)，该第二数据集即为该目标基础数据。
507、该数据中转站向该业务系统反馈该目标基础数据。
该数据中转站将该目标基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
508、该数据中转站向该业务系统反馈该基础数据。
该数据中转站将该基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
本实施例提供的技术方案中，该数据中转站在自身的本地缓存中存储基础数据，并在本地缓存中存在业务系统需要的基础数据时，直接由该本地缓存的基础数据反馈给业务系统；然后在该本地缓存中不存在业务系统需要的基础数据时再向该基础数据中心请求该基础数据，从而减少了该数据中转站与基础数据中心之间的数据交互，可以有效的提高数据的提取，并减少网络资源的消耗。同时，该数据中转站根据条件和/或字段对基础数据进行筛选提取，可以有效的降低数据的单次提取量，提高数据的提取速度。
可以理解的是，为了方便可以对本申请实施例中的数据提取进行审计，本申请实施例中数据中转站还可以执行如下技术方案，具体请参阅图6所示，本申请实施例中数据处理方法的另一实施例，包括：
601、该数据中转站接收业务系统的数据请求。
该数据中转站接收业务系统发起的数据请求。
本实施例中，该业务系统的数量并不限定，即所有需要向该基础数据库请求基础数据的业务系统都可以向该数据中转站发送数据请求。比如在企业内部，该业务系统可以包括该企业员工之间的即时通信系统、该企业员工的考勤系统和该企业员工的账务报销系统等。而各个业务系统之间都需要员工的个人信息，比如员工的工号、员工的姓名、员工的年龄、员工的工作年限、员工的请假天数等等。若该企业在进行考勤统计时，需要统计在当月之内有请假的员工，则该考勤系统需要在基础数据库里提取员工的个人信息然后再进行筛选。若该数据请求之中还包括条件和/或字段筛选，比如该数据请求的筛选条件为请假的员工。
602、该数据中转站查询本地缓存中是否存在该数据请求对应的基础数据，若是，则执行步骤603和步骤605至步骤606，若否，则执行步骤604至步骤606。
该数据中转站在接收到该业务系统的数据请求之后，在本地缓存中查询是否存在该数据请求对应的基础数据，若存在，则该数据中转站可以直接获取自身本地缓存保存的该基础数据，然后根据条件或字段对基础数据进行筛选，即执行步骤603和步骤605；若不存在，则该数据中转站可以向该基础数据中心获取该基础数据，然后根据条件或字段对基础数据进行筛选，即步骤604至步骤605。
603、该数据中转站从本地缓存中获取该基础数据。
该数据中转站在确定该业务系统有权限请求数据的情况下，直接从自身的本地缓存中提取该基础数据。
604、该数据中转站向基础数据中心请求所述数据请求对应的基础数据。
本实施例中，该数据中转站将该基础数据库里的基础数据进行复制，然后再将这些基础数据存储在基础数据中心中。然后该数据中转站在判断该业务系统有权限请求数据的情况下，该数据中转站向该基础数据中心发送该数据请求，该基础数据中心查询与该数据请求对应的基础数据；然后该基础数据中心返回该基础数据给数据中转站。
可选的，该数据中转站与该基础数据库里的基础数据在第一次完成复制之后，该数据中转站还可以按照预设周期接收该基础数据库的更新数据，然后将更新数据存储在该基础数据中心。这样可以有效的实现该基础数据中心与该基础数据库之间的数据的同步。同时该预设周期可以为24小时或者是12小时等用户设定的时间段，具体情况，此处不做限定。
可选的，在本实施例中，在该数据中转站从该基础数据中心获取到该基础数据之后，该数据中转站的本地缓存可以将该基础数据进行保存。这样可以方便下次再次请求该基础数据时，该数据中转站可以直接从该本地缓存中提取该基础数据，减少与基础数据中心之间的数据交互，减少网络资源的消耗。
605、该数据中转站确定该数据请求中是否包括条件和/或字段过滤，若是，则执行步骤606至步骤607和步骤609，若不存在，则执行步骤608至步骤609。
该数据中转站解析该数据请求，判断该数据请求中是否包括相应的条件筛选或者是字段筛选，若存在，则该数据中转站执行步骤606至步骤607和步骤609；若不存在，则该数据中转站执行步骤608至步骤609。
比如，企业内部进行考勤统计时，该考勤系统需要的基础数据为员工的个人信息，则该数据请求是用于向该数据中转站请求该企业内部的员工的个人信息。若用户在操作过程中，需要统计员工的请假情况，则该数据请求中还可以包括“请假”这一条件或者是字段；若当前还需要根据请假天数进行一个阶段统计，则该数据请求中还可以包括“请假天数大于5天”等条件或字段，具体的条件或字段，根据实际需求有不同的设定，此处不做限定。
606、该数据中转站根据该条件和/或字段从该基础数据中筛选相应的目标基础数据。
该数据中转站根据该数据请求中的条件和/或字段对该基础数据进行筛选，得到目标基础数据。
比如，在企业内部进行考勤统计时，该考勤系统需要的基础数据为员工的个人信息，则该数据请求是用于向该数据中转站请求该企业内部的员工的个人信息。假设该企业内部的员工有30人，其中当月请假人数为20人，请假天数大于5天的人数为3个。则该数据中转站在接收到该数据请求之后，获取是该企业内部的全部员工的个人信息，本实施例中将之称为全集数据(即该企业内部的30人的个人信息)。若该数据请求中包括了“请假”这一条件或者是字段，则该数据请求将该全部员工的个人信息中请过假的员工的个人信息提取出来生成第一数据集(即该企业内部当月请假的20人的个人信息)；若当前还需要根据请假天数进行一个阶段统计，即该数据请求中还包括“请假天数大于5天”这个条件或字段，则该数据中转站可以从该第一数据集中提取请假天数据大于5天的员工的个人信息生成第二数据集(即该企业内部当月请假天数大于5天的员3个的个人信息)，该第二数据集即为该目标基础数据。
607、该数据中转站向该业务系统反馈该目标基础数据。
该数据中转站将该目标基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
608、该数据中转站向该业务系统反馈该基础数据。
该数据中转站将该基础数据反馈给业务系统，以使得该业务系统使用该基础数据完成相关的操作。
609、该数据中转站记录该业务系统的数据请求对应的日志。
该数据中转站记录该业务系统此次发送该数据请求，然后该数据中转站反馈该数据请求的操作过程作为日志。该日志包括该业务系统的名称，该业务系统的IP地址，该数据请求的相关信息、该业务系统此次请求的基础数据的相关信息。可以理解的是，该基础数据的相关信息包括该基础数据的类型等，该数据请求的相关信息包括该数据请求的字段和/或条件等。
该数据中转站可以根据记录的日志进行分析，并在接收到新的业务系统的数据请求之后，将该新的业务系统的数据请求与该日志进行匹配，若该新的业务系统的数据请求与该日志存在一样的关联性，则该数据中转站可以推荐相关的条件或者是字段过滤对该新的业务系统的数据请求。
比如，该企业内部的用户再次进行考勤统计时，该数据请求中并没有加入相应的条件或字段过滤，则该数据中转站根据该考勤系统的名称与该日志中的匹配结果确定此次的考勤系统与该日志中的考勤系统为同一系统，则该数据中转站可以将日志的条件或字段向用户推荐，使得的用户在新的数据请求中加入该条件或字段过滤。
本实施例提供的技术方案中，该数据中转站在自身的本地缓存中存储基础数据，并在本地缓存中存在业务系统需要的基础数据时，直接由该本地缓存的基础数据反馈给业务系统；然后在该本地缓存中不存在业务系统需要的基础数据时再向该基础数据中心请求该基础数据，从而减少了该数据中转站与基础数据中心之间的数据交互，可以有效的提高数据的提取，并减少网络资源的消耗。同时，该数据中转站根据条件和/或字段对基础数据进行筛选提取，可以有效的降低数据的单次提取量，提高数据的提取速度。同时，该数据中转站根据记录的日志，可以在再次有同类型或者相似的业务系统进行数据请求时，进行精确的数据提取，从而减少数据的单次提取量。
下面以一个实际场景对本申请实施例中的数据处理方法进行说明，具体请参阅图7所示：
第一步，该业务系统向该数据中转站发送数据请求；
第二步，该数据中转站判断该业务系统是否拥有权限可以请求数据，若该业务系统没有权限，则该数据中转站向该业务系统反馈失败码以及失败原因为该业务系统没有权限；若该业务系统拥有权限，则该数据中转站进入第三步；
第三步，该数据中转站判断自身的本地缓存是否存在该数据请求对应的基础数据的全集，若不存在，则该数据中转站进入第四步；若存在，则该数据中转进入第五步；
第四步，该数据中转站向该基础数据中心请求该数据请求对应的全集基础数据；若该基础数据中心存在该全集基础数据，则该数据中转站提取该全集基础数据；若该基础数据中心不存在该全集基础数据，则该数据中转站向该业务系统返回失败码以及失败原因为不存在数据。
第五步，该数据中转站读取全集基础数据。
第六步，该数据中转站判断该数据请求是否有条件过滤；若存在条件过滤，则根据该业务系统传入的条件在该全集基础数据中进行过滤，得到过滤后的第一数据集合；若无条件过滤，则该数据中转站将该全集基础数据作为该第一数据集合。
第七步，该数据中转站判断该数据请求是否有字段过滤；若存在字段过滤，则根据该业务系统传入的字段在该第一数据集合中进行过滤，得到过滤后的第二数据集合，若无字段过滤，则该数据中转站将该第一数据集合作为该第二数据集合。
可以理解的是，该第六步与该第七步之间的执行顺序并不限定。
第八步，该数据中转站计算该第二数据集合的消息摘要算法值。可以理解的是该消息摘要算法值可以是MD5，也可以为以后其他任意可能的消息摘要算法值，具体此处不做限定。
第九步，该数据中转站向该业务转发该第二数据集合和该第二数据集合的消息摘要算法值。
第十步，该数据中转站记录本次请求日志，该请求日志包括该业务系统的名称、该业务系统的IP、该数据请求的相关信息、本次请求的完成状态等信息。
第十一步，本次请求结束。
上面对本申请实施例中的数据处理方法进行描述，下面对本申请实施例中数据中转站进行说明；
具体请参阅图8所示，本申请实施例中数据中转站的一个实施例，包括：
接收模块801，用于接收业务系统的数据请求；
处理模块802，用于向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
反馈模块803，用于向所述业务系统反馈所述数据请求对应的基础数据。
可选的，所述处理模块802，还用于查询自身的本地缓存中是否存在所述数据请求对应的基础数据；
若所述本地缓存中存在所述数据请求对应的基础数据，则在所述本地缓存中获取所述数据请求对应的基础数据；
所述反馈模块803，用于向所述业务系统反馈所述数据请求对应的基础数据；
若所述本地缓存中不存在所述数据请求对应的基础数据，则触发所述处理模块802根据所述数据请求向所述基础数据中心请求所述数据请求对应的基础数据。
可选的，所述数据中转站还包括：
存储模块804，用于将所述数据请求对应的基础数据保存在所述本地缓存中。
可选的，所述接收模块801，还用于以预设周期接收所述基础数据库的更新数据；
所述处理模块802，还用于将所述更新数据存储在所述基础数据中心。
可选的，所述处理模块802，还用于在所述数据请求包括条件过滤的情况下，获取与所述条件对应的基础数据；
在所述数据请求包括字段过滤的情况下，获取与所述字段对应的基础数据；
在所述数据请求包括字段过滤和条件过滤的情况下，获取与所述条件和所述字段对应的基础数据。
可选的，所述数据中转站包括存储模块804，所述存储模块804，用于记录所述数据请求对应的日志，所述日志包括所述业务系统的名称、所述业务系统的网络协议IP地址、所述数据请求的相关信息和所述基础数据的相关信息。
本申请实施例中接收模块801、处理模块802、反馈模块803以及存储模块804均可以实现上述图3至图7中任一个实施中的相应的步骤，具体实现方式，此处不做赘述。
本实施例提供的技术方案中，该数据中转站在自身的本地缓存中存储基础数据，并在本地缓存中存在业务系统需要的基础数据时，直接由该本地缓存的基础数据反馈给业务系统；然后在该本地缓存中不存在业务系统需要的基础数据时再向该基础数据中心请求该基础数据，从而减少了该数据中转站与基础数据中心之间的数据交互，可以有效的提高数据的提取，并减少网络资源的消耗。同时，该数据中转站根据条件和/或字段对基础数据进行筛选提取，可以有效的降低数据的单次提取量，提高数据的提取速度。同时，该数据中转站根据记录的日志，可以在再次有同类型或者相似的业务系统进行数据请求时，进行精确的数据提取，从而减少数据的单次提取量。
具体请参阅图9，本申请实施例中数据中转站的另一个实施例包括：
收发器901，处理器902，总线903；
该收发器901与该处理器902通过该总线903相连；
该总线903可以是外设部件互连标准(peripheral component interconnect，简称PCI)总线或扩展工业标准结构(extended industry standard architecture，简称EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示，图9中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
处理器902可以是中央处理器(central processing unit，简称CPU)，网络处理器(network processor，简称NP)或者CPU和NP的组合。
处理器902还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit，简称ASIC)，可编程逻辑器件(programmable logic device，简称PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complex programmable logic device，简称CPLD)，现场可编程逻辑门阵列(field-programmable gate array，简称FPGA)，通用阵列逻辑(generic array logic,简称GAL)或其任意组合。
参见图9所示，该数据中转站还可以包括存储器904。该存储器904可以包括易失性存储器(volatile memory)，例如随机存取存储器(random-access memory，简称RAM)；存储器也可以包括非易失性存储器(non-volatile memory)，例如快闪存储器(flash memory)，硬盘(hard disk drive，简称HDD)或固态硬盘(solid-state drive，简称SSD)；存储器904还可以包括上述种类的存储器的组合。
可选地，存储器904还可以用于存储程序指令，处理器902调用该存储器904中存储的程序指令，可以执行图3至图7中所示实施例中的一个或多个步骤，或其中可选的实施方式，实现上述方法中数据中转站的功能。
该收发器901，执行如下步骤：
接收业务系统的数据请求；
该处理器902，执行如下步骤：
向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
该收发器901，执行如下步骤：
向所述业务系统反馈所述数据请求对应的基础数据。
可选的，所述处理器902，还用于查询自身的本地缓存中是否存在所述数据请求对应的基础数据；
若所述本地缓存中存在所述数据请求对应的基础数据，则在所述本地缓存中获取所述数据请求对应的基础数据；
所述收发器901，用于向所述业务系统反馈所述数据请求对应的基础数据；
若所述本地缓存中不存在所述数据请求对应的基础数据，则触发所述处理器902根据所述数据请求向所述基础数据中心请求所述数据请求对应的基础数据。
可选的，所述数据中转站还包括：
存储器904，用于将所述数据请求对应的基础数据保存在所述本地缓存中。
可选的，所述收发器901，还用于以预设周期接收所述基础数据库的更新数据；
所述处理器902，还用于将所述更新数据存储在所述基础数据中心。
可选的，所述处理器902，还用于在所述数据请求包括条件过滤的情况下，获取与所述条件对应的基础数据；
在所述数据请求包括字段过滤的情况下，获取与所述字段对应的基础数据；
在所述数据请求包括字段过滤和条件过滤的情况下，获取与所述条件和所述字段对应的基础数据。
可选的，所述数据中转站包括存储器904，所述存储器904，用于记录所述数据请求对应的日志，所述日志包括所述业务系统的名称、所述业务系统的网络协议IP地址、所述数据请求的相关信息和所述基础数据的相关信息。
本申请实施例中收发器901、处理器902以及存储器904均可以实现上述图3至图7中任一个实施中的相应的步骤，具体实现方式，此处不做赘述。
本实施例提供的技术方案中，该数据中转站在自身的本地缓存中存储基础数据，并在本地缓存中存在业务系统需要的基础数据时，直接由该本地缓存的基础数据反馈给业务系统；然后在该本地缓存中不存在业务系统需要的基础数据时再向该基础数据中心请求该基础数据，从而减少了该数据中转站与基础数据中心之间的数据交互，可以有效的提高数据的提取，并减少网络资源的消耗。同时，该数据中转站根据条件和/或字段对基础数据进行筛选提取，可以有效的降低数据的单次提取量，提高数据的提取速度。同时，该数据中转站根据记录的日志，可以在再次有同类型或者相似的业务系统进行数据请求时，进行精确的数据提取，从而减少数据的单次提取量。
具体请参阅图10所示，本申请实施例数据处理系统的一个实施例，具体包括：
该数据处理系统包括业务系统1001、数据中转站1002、基础数据中心1003和基础数据库1004；
其中，该业务系统1001与该数据中转站1002相连；
该基础数据中心1003与该数据中转站1002相连；
该基础数据库1004与该数据中转站1002相连；
其中，该业务系统1001具有上述图3至图7中任一实施例业务系统的功能；该数据中转站1002具有上述图3至图7中任一实施例中数据中转站的功能；该基础数据中心1003具有上述图3至图7中任一实施例中基础数据中心的功能；该基础数据库1004具有上述图3至图7中任一实施例中基础数据库的功能。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，以上实施例仅用以说明本申请的技术方案，而非对其限制；尽管参照前述实施例对本申请进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
Claims (15)
1.一种数据处理方法，其特征在于，包括：
数据中转站接收业务系统的数据请求；
所述数据中转站向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
所述数据中转站向所述业务系统反馈所述数据请求对应的基础数据。
2.根据权利要求1所述的方法，其特征在于，所述数据中转站接收业务系统的数据请求之后，所述数据中转站向基础数据中心请求所述数据请求对应的基础数据之前，所述方法还包括：
所述数据中转站查询自身的本地缓存中是否存在所述数据请求对应的基础数据；
若所述本地缓存中存在所述数据请求对应的基础数据，则所述数据中转站在所述本地缓存中获取所述数据请求对应的基础数据，然后向所述业务系统反馈所述数据请求对应的基础数据；
若所述本地缓存中不存在所述数据请求对应的基础数据，则触发所述数据中转站根据所述数据请求向基础数据中心请求所述数据请求对应的基础数据。
3.根据权利要求1或2所述的方法，其特征在于，所述数据中转站根据所述数据请求向基础数据中心请求所述数据请求对应的基础数据之后，所述方法还包括：
所述数据中转站将所述数据请求对应的基础数据保存在所述本地缓存中。
4.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述数据中转站以预设周期接收所述基础数据库的更新数据；
所述数据中转站将所述更新数据存储在所述基础数据中心。
5.根据权利要求1所述的方法，其特征在于，所述方法还包括：
在所述数据请求包括条件过滤的情况下，所述数据中转站获取与所述条件对应的基础数据；
在所述数据请求包括字段过滤的情况下，所述数据中转站获取与所述字段对应的基础数据；
在所述数据请求包括字段过滤和条件过滤的情况下，所述数据中转站获取与所述条件和所述字段对应的基础数据。
6.根据权利要求1所述的方法，其特征在于，所述方法还包括：
所述数据中转站记录所述数据请求对应的日志，所述日志包括所述业务系统的名称，所述业务系统的网络协议IP地址，所述基础数据的相关信息。
7.根据权利要求1至6中任一项所述的方法，其特征在于，所述数据中转站接收业务系统的数据请求之后，所述数据中转站向基础数据中心请求所述数据请求对应的基础数据之前，所述方法还包括：
所述数据中转站判断所述业务系统是否有权限请求所述数据请求对应的基础数据；
若所述业务系统无权限请求所述数据请求对应的基础数据，则所述数据中转站向所述业务系统反馈失败码以及失败原因，所述失败原因为所述业务系统无权限；
若所述业务系统有权限请求所述数据请求对应的基础数据，则触发所述数据中转站向基础数据中心请求所述数据请求对应的基础数据的动作。
8.一种数据中转站，其特征在于，包括：
接收模块，用于接收业务系统的数据请求；
处理模块，用于向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库获得，所述基础数据库用于存储业务系统所需的基础数据；
反馈模块，用于向所述业务系统反馈所述数据请求对应的基础数据。
9.根据权利要求8所述的数据中转站，其特征在于，所述处理模块，还用于查询自身的本地缓存中是否存在所述数据请求对应的基础数据；
若所述本地缓存中存在所述数据请求对应的基础数据，则在所述本地缓存中获取所述数据请求对应的基础数据；
所述反馈模块，用于向所述业务系统反馈所述数据请求对应的基础数据；
若所述本地缓存中不存在所述数据请求对应的基础数据，则触发所述处理模块根据所述数据请求向所述基础数据中心请求所述数据请求对应的基础数据。
10.根据权利要求8或9所述的数据中转站，其特征在于，所述数据中转站还包括：
存储模块，用于将所述数据请求对应的基础数据保存在所述本地缓存中。
11.根据权利要求8所述的数据中转站，其特征在于，所述接收模块，还用于以预设周期接收所述基础数据库的更新数据；
所述处理模块，还用于将所述更新数据存储在所述基础数据中心。
12.根据权利要求8所述的数据中转站，其特征在于，所述处理模块，还用于在所述数据请求包括条件过滤的情况下，获取与所述条件对应的基础数据；
在所述数据请求包括字段过滤的情况下，获取与所述字段对应的基础数据；
在所述数据请求包括字段过滤和条件过滤的情况下，获取与所述条件和所述字段对应的基础数据。
13.根据权利要求8所述的数据中转站，其特征在于，所述数据中转站包括存储模块，所述存储模块，用于记录所述数据请求对应的日志，所述日志包括所述业务系统的名称、所述业务系统的网络协议IP地址、所述数据请求的相关信息和所述基础数据的相关信息。
14.一种数据中转站，其特征在于，包括：
收发器，处理器和总线；
所述收发器与所述处理器通过所述总线相连；
所述收发器，执行如下步骤：
接收业务系统的数据请求；
所述处理器，执行如下步骤：
向基础数据中心请求所述数据请求对应的基础数据，所述基础数据中心的基础数据由所述数据中转站从基础数据库复制存储，所述基础数据库用于存储所有业务系统所需的基础数据；
所述收发器，执行如下步骤：
向所述业务系统反馈所述数据请求对应的基础数据。
15.一种计算机可读存储介质，包括指令，当所述指令在计算机上运行时，所述计算机执行上述权利要求1至权利要求7所述的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810213702.6A CN110309176B (zh) | 2018-03-15 | 2018-03-15 | 一种数据处理方法和数据中转站 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201810213702.6A CN110309176B (zh) | 2018-03-15 | 2018-03-15 | 一种数据处理方法和数据中转站 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN110309176A true CN110309176A (zh) | 2019-10-08 |
| CN110309176B CN110309176B (zh) | 2024-04-05 |
Family
ID=68073340
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201810213702.6A Active CN110309176B (zh) | 2018-03-15 | 2018-03-15 | 一种数据处理方法和数据中转站 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110309176B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112765212A (zh) * | 2020-12-31 | 2021-05-07 | 广州技象科技有限公司 | 中转设备数据处理方法及装置 |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100235431A1 (en) * | 2009-03-16 | 2010-09-16 | Microsoft Corporation | Datacenter synchronization |
| WO2011027654A1 (ja) * | 2009-09-04 | 2011-03-10 | 株式会社シンクロア | データ同期システムおよびデータ同期方法 |
| CN102426589A (zh) * | 2011-10-31 | 2012-04-25 | 合一网络技术(北京)有限公司 | 一种用于数据库信息检索的中间层系统及信息检索方法 |
| US20120173485A1 (en) * | 2010-07-02 | 2012-07-05 | Salesforce.Com, Inc. | Optimizing data synchronization between mobile clients and database systems |
| CN103150409A (zh) * | 2013-04-08 | 2013-06-12 | 深圳市宜搜科技发展有限公司 | 一种用户检索词推荐的方法及系统 |
| CN103390041A (zh) * | 2013-07-18 | 2013-11-13 | 杭州东信北邮信息技术有限公司 | 一种基于中间件提供数据服务的方法和系统 |
| CN103716375A (zh) * | 2013-12-05 | 2014-04-09 | 北京用友政务软件有限公司 | 基于分布式缓存的多级财政数据交互方法及系统 |
| CN104378234A (zh) * | 2014-11-19 | 2015-02-25 | 北京数迅科技有限公司 | 跨数据中心的数据传输处理方法及系统 |
| CN104796389A (zh) * | 2014-01-21 | 2015-07-22 | 上海联影医疗科技有限公司 | 一种基础数据共享系统及其方法 |
| CN105224554A (zh) * | 2014-06-11 | 2016-01-06 | 阿里巴巴集团控股有限公司 | 推荐搜索词进行搜索的方法、系统、服务器和智能终端 |
| CN105335391A (zh) * | 2014-07-09 | 2016-02-17 | 阿里巴巴集团控股有限公司 | 基于搜索引擎的搜索请求的处理方法和装置 |
| CN106357735A (zh) * | 2016-08-26 | 2017-01-25 | 北京百度网讯科技有限公司 | 用于操作云计算架构的基础设施层的方法和装置 |
| US20170116206A1 (en) * | 2015-10-27 | 2017-04-27 | TalkCycle LLC dba FrontSpin | Real-time synchronization of data between disparate cloud data sources |
| CN107016027A (zh) * | 2016-12-08 | 2017-08-04 | 阿里巴巴集团控股有限公司 | 实现业务信息快速搜索的方法和装置 |
| CN107402963A (zh) * | 2017-06-20 | 2017-11-28 | 阿里巴巴集团控股有限公司 | 搜索数据的构建方法、增量数据的推送方法及装置和设备 |
-
2018
- 2018-03-15 CN CN201810213702.6A patent/CN110309176B/zh active Active
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20100235431A1 (en) * | 2009-03-16 | 2010-09-16 | Microsoft Corporation | Datacenter synchronization |
| WO2011027654A1 (ja) * | 2009-09-04 | 2011-03-10 | 株式会社シンクロア | データ同期システムおよびデータ同期方法 |
| US20120173485A1 (en) * | 2010-07-02 | 2012-07-05 | Salesforce.Com, Inc. | Optimizing data synchronization between mobile clients and database systems |
| CN102426589A (zh) * | 2011-10-31 | 2012-04-25 | 合一网络技术(北京)有限公司 | 一种用于数据库信息检索的中间层系统及信息检索方法 |
| CN103150409A (zh) * | 2013-04-08 | 2013-06-12 | 深圳市宜搜科技发展有限公司 | 一种用户检索词推荐的方法及系统 |
| CN103390041A (zh) * | 2013-07-18 | 2013-11-13 | 杭州东信北邮信息技术有限公司 | 一种基于中间件提供数据服务的方法和系统 |
| CN103716375A (zh) * | 2013-12-05 | 2014-04-09 | 北京用友政务软件有限公司 | 基于分布式缓存的多级财政数据交互方法及系统 |
| CN104796389A (zh) * | 2014-01-21 | 2015-07-22 | 上海联影医疗科技有限公司 | 一种基础数据共享系统及其方法 |
| CN105224554A (zh) * | 2014-06-11 | 2016-01-06 | 阿里巴巴集团控股有限公司 | 推荐搜索词进行搜索的方法、系统、服务器和智能终端 |
| CN105335391A (zh) * | 2014-07-09 | 2016-02-17 | 阿里巴巴集团控股有限公司 | 基于搜索引擎的搜索请求的处理方法和装置 |
| CN104378234A (zh) * | 2014-11-19 | 2015-02-25 | 北京数迅科技有限公司 | 跨数据中心的数据传输处理方法及系统 |
| US20170116206A1 (en) * | 2015-10-27 | 2017-04-27 | TalkCycle LLC dba FrontSpin | Real-time synchronization of data between disparate cloud data sources |
| CN106357735A (zh) * | 2016-08-26 | 2017-01-25 | 北京百度网讯科技有限公司 | 用于操作云计算架构的基础设施层的方法和装置 |
| CN107016027A (zh) * | 2016-12-08 | 2017-08-04 | 阿里巴巴集团控股有限公司 | 实现业务信息快速搜索的方法和装置 |
| CN107402963A (zh) * | 2017-06-20 | 2017-11-28 | 阿里巴巴集团控股有限公司 | 搜索数据的构建方法、增量数据的推送方法及装置和设备 |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112765212A (zh) * | 2020-12-31 | 2021-05-07 | 广州技象科技有限公司 | 中转设备数据处理方法及装置 |
| CN112765212B (zh) * | 2020-12-31 | 2023-10-24 | 广州技象科技有限公司 | 中转设备数据处理方法及装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN110309176B (zh) | 2024-04-05 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103888547B (zh) | 一种账单处理方法和服务器 | |
| CN102375837B (zh) | 数据采集系统和方法 | |
| CN108509392B (zh) | 多机构对账方法、系统、计算机设备和存储介质 | |
| CN101753344B (zh) | 一种记录日志的方法、装置及系统 | |
| CN105989539A (zh) | 一种金融交易行情获取系统以及获取方法 | |
| CN104754036A (zh) | 一种基于kafka的消息处理系统及处理方法 | |
| CN106101080A (zh) | 页面访问控制方法和装置 | |
| CN109614403B (zh) | 集群服务节点的数据一致性校验方法及装置 | |
| CN109740129B (zh) | 基于区块链的报表生成方法、装置、设备及可读存储介质 | |
| CN106101290A (zh) | 一种服务器集群管理的方法及系统 | |
| CN110795166B (zh) | 一种数据处理方法及装置 | |
| CN105989163A (zh) | 数据实时处理方法及系统 | |
| CN111782473A (zh) | 分布式日志数据处理方法、装置及系统 | |
| CN111126940A (zh) | 业务申请的处理方法、装置、设备及计算机可读存储介质 | |
| CN112417050A (zh) | 数据同步方法和装置、系统、存储介质及电子装置 | |
| CN101383814A (zh) | 一种实现基于连接池的数据访问的设备和方法 | |
| CN106992940A (zh) | 报文处理方法、装置、系统及终端 | |
| CN108989101A (zh) | 一种日志输出系统、方法及电子设备 | |
| CN111311360A (zh) | 资源的退还方法和装置、存储介质、电子装置 | |
| CN110309176A (zh) | 一种数据处理方法和数据中转站 | |
| CN104539449B (zh) | 一种故障信息处理方法与相关装置 | |
| CN109189813B (zh) | 一种数据共享方法及装置 | |
| CN110933145A (zh) | 异地调度方法、装置、设备及介质 | |
| CN109684279B (zh) | 一种数据处理方法及系统 | |
| CN101827068A (zh) | 一种业务场景还原方法与装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TG01 | Patent term adjustment |