CN112181374A - 一种数据整合方法、装置、电子设备及存储介质 - Google Patents

一种数据整合方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112181374A
CN112181374A CN202011021645.5A CN202011021645A CN112181374A CN 112181374 A CN112181374 A CN 112181374A CN 202011021645 A CN202011021645 A CN 202011021645A CN 112181374 A CN112181374 A CN 112181374A
Authority
CN
China
Prior art keywords
entry file
function module
determining
integrated
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011021645.5A
Other languages
English (en)
Other versions
CN112181374B (zh
Inventor
林浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Lizhi Network Technology Co ltd
Original Assignee
Guangzhou Lizhi Network Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Lizhi Network Technology Co ltd filed Critical Guangzhou Lizhi Network Technology Co ltd
Priority to CN202011021645.5A priority Critical patent/CN112181374B/zh
Publication of CN112181374A publication Critical patent/CN112181374A/zh
Application granted granted Critical
Publication of CN112181374B publication Critical patent/CN112181374B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/20—Software design
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90—Details of database functions independent of the retrieved data types
    • G06F16/95—Retrieval from the web
    • G06F16/958—Organisation or management of web site content, e.g. publishing, maintaining pages or automatic linking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/30—Creation or generation of source code
    • G06F8/38—Creation or generation of source code for implementing user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/40—Transformation of program code
    • G06F8/41—Compilation
    • G06F8/42—Syntactic analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F8/00—Arrangements for software engineering
    • G06F8/40—Transformation of program code
    • G06F8/41—Compilation
    • G06F8/42—Syntactic analysis
    • G06F8/425—Lexical analysis
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Data Mining & Analysis (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本申请提供了一种数据整合方法、装置、电子设备及存储介质，涉及网页构建技术领域。该数据整合方法，应用于服务器，服务器与数据库通信连接，首先获取网页原码关联的入口文件，然后对入口文件进行分析，并依据入口文件确定关键词，再依据关键词从数据库中确定入口文件依赖的函数模块，最后将确定的函数模块与入口文件进行整合，并生成整合后的数据，以依据整合后的数据构建网页。本申请提供的数据整合方法、装置、电子设备及存储介质具有不会造成资源的浪费，且加载耗时也更短的优点。

Description

一种数据整合方法、装置、电子设备及存储介质
技术领域
本申请涉及网页构建技术领域，具体而言，涉及一种数据整合方法、装置、电子设备及存储介质。
背景技术
目前，在网页构建中，一般需要将整个数据库的数据与入口文件相关联，然而，构建的网页中，可能只用到了数据库中的部分数据。
因此，一方面，通过该方式构建的网页，造成了资源的浪费，另一方面，当加载页面时，其加载耗时也更长。
发明内容
本申请的目的在于提供一种数据整合方法、装置、电子设备及存储介质，以解决现有技术中，构建网页时存在的资源浪费及加载耗时长的问题。
为了实现上述目的，本申请实施例采用的技术方案如下：
第一方面，本申请实施例提供了一种数据整合方法，应用于服务器，所述服务器与数据库通信连接，所述方法包括：获取网页原码关联的入口文件；对所述入口文件进行分析，并依据所述入口文件确定关键词；依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块；将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据，以依据所述整合后的数据构建网页。
可选地，所述依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块的步骤包括：判断所述入口文件是否依赖整个函数模块；如果是，则将整个函数模块确定为待整合函数模块；如果否，则确定所述入口文件依赖的子函数模块，并将所述子函数模块确定为待整合函数模块；所述将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据的步骤包括：将确定的所述待整合函数模块与所述入口文件进行整合，并生成整合后的数据。
可选地，所述判断所述入口文件是否依赖整个函数模块的步骤包括：依据所述函数模块的层级，沿最低层级逐级升高，并依次判断所述入口文件是否依赖所有层级的所有子函数模块；或，判断所述入口文件是否依赖最高层级的函数模块。
可选地，所述对所述入口文件进行分析，并依据所述入口文件确定关键词的步骤包括：对所述入口文件进行词法分析及语法分析，并确定关键词。
可选地，所述对所述入口文件进行词法分析及语法分析，并确定关键词的步骤：依据ASP语法对所述入口文件进行词法分析及语法分析。
第二方面，本申请实施例提供了一种数据整合装置，应用于服务器，所述服务器与数据库通信连接，所述装置包括：数据获取单元，用于获取网页原码关联的入口文件；数据处理单元，用于对所述入口文件进行分析，并依据所述入口文件确定关键词；函数模块确定单元，用于依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块；数据整合单元，用于将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据，以依据所述整合后的数据构建网页。
可选地，所述函数模块确定单元包括：判断子单元，用于判断所述入口文件是否依赖整个函数模块；模块确定子单元，用于在所述入口文件依赖整个函数模块时，将整个函数模块确定为待整合函数模块；模块确定子单元，用于在所述入口文件不依赖整个函数模块时，确定所述入口文件依赖的子函数模块，并将所述子函数模块确定为待整合函数模块；所述数据整合单元用于将确定的所述待整合函数模块与所述入口文件进行整合，并生成整合后的数据。
可选地，所述判断子单元用于：依据所述函数模块的层级，沿最低层级逐级升高，并依次判断所述入口文件是否依赖所有层级的所有子函数模块；或，判断所述入口文件是否依赖最高层级的函数模块。
第三方面，本申请实施例还提供了一种电子设备，包括：存储器，用于存储一个或多个程序；处理器；当所述一个或多个程序被所述处理器执行时，实现上述的数据整合方法。
第四方面，本申请实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的数据整合方法。
相对于现有技术，本申请实施例具有以下有益效果：
本申请提供了一种数据整合方法、装置、电子设备及存储介质，该数据整合方法应用于服务器，服务器与数据库通信连接，首先获取网页原码关联的入口文件，然后对入口文件进行分析，并依据入口文件确定关键词，再依据关键词从数据库中确定入口文件依赖的函数模块，最后将确定的函数模块与入口文件进行整合，并生成整合后的数据，以依据整合后的数据构建网页。由于本申请实施例中对入口文件进行分析，然后依据分析得到的关键字确定入口文件依赖的函数关系，因此在数据整合过程中，只会对入口文件依赖的函数模块进行整合，更加具有针对性，使得整合后的数据不再是针对整个数据库，而仅为入口文件需要调用的文件，不会造成资源的浪费，且加载耗时也更短。
为使本申请的上述目的、特征和优点能更明显易懂，下文特举较佳实施例，并配合所附附图，作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本申请的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它相关的附图。
图1为本申请实施例提供的电子设备的框图。
图2为本申请实施例提供的数据整合方法的示意性流程图。
图3为本申请实施例提供的服务器与数据库的交互示意图。
图4为本申请实施例提供的图2中S106的子步骤的路程图。
图5为本申请实施例提供的数据整合装置的模块示意图。
图6为本申请实施例提供的数据处理单元的子模块示意图。
图中：100-电子设备；101-处理器；102-存储器；103-通信接口；200-服务器；300-数据库；400-数据整合装置；410-数据获取单元；420-数据处理单元；430-函数模块确定单元；440-数据整合单元；421-判断子单元；433-模块确定子单元。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。
因此，以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围，而是仅仅表示本申请的选定实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。同时，在本申请的描述中，术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。
需要说明的是，在本文中，诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
在本申请的描述中，需要说明的是，术语“上”、“下”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该申请产品使用时惯常摆放的方位或位置关系，仅是为了便于描述本申请和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本申请的限制。
在本申请的描述中，还需要说明的是，除非另有明确的规定和限定，术语“设置”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本申请中的具体含义。
下面结合附图，对本申请的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
正如背景技术中所述，在网页构建中，一般需要将整个数据库的数据与入口文件相关联，然而，构建的网页中，可能只用到了数据库中的部分数据。若将入口文件直接与数据库关联，则会导致资源的浪费以及加载耗时变长。
例如，数据库中包括26个函数模块，其分别为A、B、C、D…X、Y、Z，然而，在构建网页时，入口文件可能仅用到其中的A、B、C、D四个模块，换言之，另外的22个函数模块实际并未使用，此时若仍将入口文件与数据库直接关联，则在加载页面时，需要同时对整个数据库进行加载，加载的耗时变长，其存在22个函数模块未使用，造成资源的浪费。
有鉴于此，为解决上述问题，本申请实施例提供了一种数据整合方法，通过对入口文件进行处理，进而依据入口文件确定出关键词，并依据关键词确定出入口文件依赖的函数模块，在进行数据整合时，仅需要对部分的函数模块进行数据整合，避免了资源的浪费以及加载时间过长的问题。
需要说明的是，本申请提供的数据整合方法可以应用于电子设备100中，该电子设备可以是服务器，图1示出本申请实施例提供的电子设备100的一种示意性结构框图，电子设备100包括存储器102、处理器101和通信接口103，该存储器102、处理器101和通信接口103相互之间直接或间接地电性连接，以实现数据的传输或交互。例如，这些元件相互之间可通过一条或多条通讯总线或信号线实现电性连接。
存储器102可用于存储软件程序及模块，如本申请实施例提供的数据整合装置400对应的程序指令或模块，处理器101通过执行存储在存储器102内的软件程序及模块，从而执行各种功能应用以及数据处理，进而执行本申请实施例提供的数据整合方法的步骤。该通信接口103可用于与其他节点设备进行信令或数据的通信。
其中，存储器102可以是，但不限于，随机存取存储器（Random Access Memory，RAM），只读存储器（Read Only Memory，ROM），可编程只读存储器（Programmable Read-OnlyMemory，PROM），可擦除只读存储器（Erasable Programmable Read-Only Memory，EPROM），电可擦除可编程只读存储器（Electric Erasable Programmable Read-Only Memory，EEPROM）等。
处理器101可以是一种集成电路芯片，具有信号处理能力。该处理器101可以是通用处理器，包括中央处理器（Central Processing Unit，CPU）、网络处理器（NetworkProcessor，NP）等；还可以是数字信号处理器（Digital Signal Processing，DSP）、专用集成电路（Application Specific Integrated Circuit，ASIC）、现场可编程门阵列（Field－Programmable Gate Array，FPGA）或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
可以理解，图1所示的结构仅为示意，电子设备100还可以包括比图1中所示更多或者更少的组件，或者具有与图1所示不同的配置。图1中所示的各组件可以采用硬件、软件或其组合实现。
下面以电子设备100作为示意性执行主体，对本申请实施例提供的数据整合方法进行示例性说明。
图2示出了本申请实施例提供的数据整合方法的一种示意性流程图，可以包括以下步骤：
S102，获取网页原码关联的入口文件。
S104，对入口文件进行分析，并依据入口文件确定关键词。
S106，依据关键词从数据库中确定入口文件依赖的函数模块。
S108，将确定的函数模块与入口文件进行整合，并生成整合后的数据，以依据整合后的数据构建网页。
请查阅图3，在构建网页后，服务器200分别与数据库300、客户端之间通信连接，并且，客户端可获取服务器提供的网页界面，同时，服务器200可调用数据库300中的函数模块。
当在进行网页构建时，可以获取网页原码，并对网页构建进行优化。一般地，可通过获取入口文件的方式确定网页原码，其中，该入口文件可以为代码。
在获取入口文件时，即可对入口文件进行分析，进而确定出入口文件中的关键词。需要说明的是，该关键词可以用于确定入口文件关联的函数模块，并且，关键词的数量可以为一个或多个，本申请对此并不做任何限定。此外，关键词可以为一个词、一个字或者一段话，对此也并不做任何限定。
其中，通过关键词可以从数据库中确定入口文件依赖的函数模块。例如，其中一个关键词为“搜索”，则可确定入口文件依赖搜索函数模块，或者，另一个关键词为“车型”，则可确定入口文件依赖车型函数模块，以此类推。
本实施例所述的依赖，指在用户访问构建的网页时，服务器需要调用的函数模块，换言之，在网页构建时，与入口文件之间存在关联，且在网页运行时，需要调用的函数模块。
在确定入口文件依赖的函数模块后，可将函数模块与入口文件整合成一个文件，其中，函数模块的数量可以为多个，例如，函数的数量为3个。通过利用入口文件与函数模块同时进行整合，可以起到不更改入口文件，而仅对其依赖关系进行优化的作用，不会影响入口文件的正常运行，同时增加了入口文件与函数模块的依赖关系。
例如，整合后的数据可以表示为（入口文件，依赖的函数模块），并依据该整合后的数据构建网页。当用户访问网页时，服务器可根据整合后的数据中包括的“依赖的函数模块”，确定数据库中的需要调用的函数模块，并进行调用，节省资源的同时起到了减少了加载耗时的效果。
作为一种可选的实现方式，S104的步骤包括：
对入口文件进行词法分析及语法分析，并确定关键词。
可选地，可依据ASP（Active Server Page，活动服务器网页）语法对入口文件进行词法分析及语法分析。
利用ASP语法能够自动从入口文件中识别出与函数模块关联的关键词。
同时，作为一种实现方式，每个函数模块中可能包括按层级排布的多个子模块。例如，在函数模块A中，包括一级子模块A1与A2，同时，一级子模块A1中包括二级子模块A11与A12，一级子模块A2中包括A22与A23，当然，二级子模块中还可能包括三级子模，以此类推，本申请对其层级数量的并不做具体限定。
在此基础上，入口文件可能只是依赖其中一个或多个子模块，例如，入口文件依赖一级子模块A1，若在整合时，直接利用函数模块A进行整合，则在网页运行过程中，实际并不会调用A函数模块中的一级子模块A12，造成了部分资源的浪费，同时导致了加载耗时较长。
有鉴于此，请参阅图4，S106的步骤包括：
S1061，判断入口文件是否依赖整个函数模块，如果是，则执行S1062，如果否，则执行S1063。
S1062，将整个函数模块确定为待整合函数模块。
S1063，确定入口文件依赖的子函数模块，并将子函数模块确定为待整合函数模块。
同时，S108的步骤为：
将确定的所述待整合函数模块与所述入口文件进行整合，并生成整合后的数据。
即在确定关键词后，在对依赖关系进行确定时，需要判断入口文件是否与整个函数模块关联。本实施例中，当与整个函数模块关联时，则 表示在访问网页时，服务器会调用整个函数模块，此时在进行数据整合时，需要将整个函数模块进行整合。以上述的函数模块A为例，若需要将整个函数模块进行整合，则需要将函数模块A中包含的所有一级子模块及二级子模块进行整合。
并且，还需要说明的是，作为一种实现方式，对于数据库中存在多个函数模块的情况时，服务器需要先识别出入口文件中依赖的函数模块，例如，数据库中包含A、B、C、D四个函数模块，但入口文件仅依赖其中的A与B两个函数模块。在确定出依赖的函数模块后，服务器还需要确定入口文件是否依赖A的整个函数模块以及B的整个函数模块，然后确定待整合的数据。
而当入口文件并不是依赖整个函数模块时，则表示其仅依赖其中的部分子函数模块，例如，对于函数模块A而言，入口文件仅依赖其一级子模块A1，在此基础上，则仅需将一级子模块A1作为待整合函数模块，然后对数据进行整合。换言之，无需对其它的一级子模块A2进行整合。需要说明的是，当入口文件依赖于层级高的模块时，则表明入口文件也依赖于附属于该模块的低层级的子函数模块；例如，当入口文件依赖一级子模块A1时，则表示入口文件也必然依赖该一级子模块包括的二级子模块A11与A12，当然地，当二级子模块A11与A12存在三级子模块时，入口文件也必然依赖三级子模块。然而，反之却并不一定。例如，当入口文件依赖二级子模块时，无法判断出入口文件是否一定依赖一级子模块。
因此，可以理解地，在确定的待整合函数模块中，可能包括函数模块A的二级子模块A11，以及函数模块B的整个模块。当然地，也可以包括其它模块。
由于在确定待整合函数模块时，采用最小功能单元所在的模块进行整合，因此，整合后的数据在网页构建时，只与需要加载的最小功能模块关联，因此不会造成资源的浪费，且加载耗时缩短。
作为一种实现方式，在判定入口文件是否依赖整个函数模块时，可以采用为依据函数模块的层级，沿最低层级逐级升高，并依次判断入口文件是否依赖所有层级的所有子函数模块的方式，作为另一种实现方式，也可采用判断入口文件是否依赖最高层级的函数模块的方式。
可以理解地，当通过沿最低层级逐级判断时，需要对每个子模块是否与入口文件存在依赖关系进行判断，若其中任意一个子模块不与入口文件之间存在依赖关系，则表明入口文件并不依整个函数模块。通过该实现方式，能够在某个函数模块存在多个分支时，快速确定入口文件依赖的子模块。例如，当二级子模块A11与入口文件之间不存在依赖关系时， 则表示一级子模块A1也不与入口文件之间存在依赖关系，进而可重新判断另外的分支，实现更加快速的判断。
而利用判断入口文件是否依赖最高层级的函数模块的方式，可以迅速确定出入口文件是否依赖整个函数模块。例如，当函数模块A包括一级子模块A1与A2时，当入口文件同时依赖A1与A2时，则可判定出入口文件依赖整个函数模块。
基于与上述数据整合方法相同的发明构思，请参阅图5，本申请实施例还提供了一种数据整合装置400，该数据整合装置400包括数据获取单元410、数据处理单元420、函数模块确定单元430以及数据整合单元440，其中，
数据获取单元410，用于获取网页原码关联的入口文件。
可以理解地，通过数据获取单元410能够执行上述的S102。
数据处理单元420，用于对入口文件进行分析，并依据入口文件确定关键词。
可以理解地，通过数据处理单元420能够执行上述的S104。
函数模块确定单元430，用于依据关键词从数据库300中确定入口文件依赖的函数模块。
可以理解地，通过数据处理单元420能够执行上述的S106。
数据整合单元440，用于将确定的函数模块与入口文件进行整合，并生成整合后的数据，以依据整合后的数据构建网页。
可以理解地，通过数据整合单元440能够执行上述的S108。
其中，请参阅图6，函数模块确定单元430包括：
判断子单元421，用于判断入口文件是否依赖整个函数模块。
可以理解地，通过判断子单元421能够执行上述的S1061。
模块确定子单元433，用于在入口文件依赖整个函数模块时，将整个函数模块确定为待整合函数模块。
可以理解地，通过模块确定子单元433能够执行上述的S1062。
模块确定子单元433，用于在入口文件不依赖整个函数模块时，确定入口文件依赖的子函数模块，并将子函数模块确定为待整合函数模块；
可以理解地，通过模块确定子单元433能够执行上述的S1063。
数据整合单元用于将确定的待整合函数模块与入口文件进行整合，并生成整合后的数据。
综上所述，本申请提供了一种数据整合方法、装置、电子设备及存储介质，该数据整合方法应用于服务器，服务器与数据库通信连接，首先获取网页原码关联的入口文件，然后对入口文件进行分析，并依据入口文件确定关键词，再依据关键词从数据库中确定入口文件依赖的函数模块，最后将确定的函数模块与入口文件进行整合，并生成整合后的数据，以依据整合后的数据构建网页。由于本申请实施例中对入口文件进行分析，然后依据分析得到的关键字确定入口文件依赖的函数关系，因此在数据整合过程中，只会对入口文件依赖的函数模块进行整合，更加具有针对性，使得整合后的数据不再是针对整个数据库，而仅为入口文件需要调用的文件，不会造成资源的浪费，且加载耗时也更短。
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，也可以通过其它的方式实现。以上所描述的装置实施例仅仅是示意性的，例如，附图中的流程图和框图显示了根据本申请实施例的装置、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或代码的一部分，所述模块、程序段或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。
也应当注意，在有些作为替换的实现方式中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。
也要注意的是，框图和或流程图中的每个方框、以及框图和或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。
另外，在本申请实施例中的各功能模块可以集成在一起形成一个独立的部分，也可以是各个模块单独存在，也可以两个或两个以上模块集成形成一个独立的部分。
所述功能如果以软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本申请实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器、随机存取存储器、磁碟或者光盘等各种可以存储程序代码的介质。
虽然本发明披露如上，但本发明并非限定于此。任何本领域技术人员，在不脱离本发明的精神和范围内，均可作各种更动与修改，因此本发明的保护范围应当以权利要求所限定的范围为准。

Claims (10)

1.一种数据整合方法，其特征在于，应用于服务器，所述服务器与数据库通信连接，所述方法包括：
获取网页原码关联的入口文件；
对所述入口文件进行分析，并依据所述入口文件确定关键词；
依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块；
将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据，以依据所述整合后的数据构建网页。
2.如权利要求1所述的数据整合方法，其特征在于，所述依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块的步骤包括：
判断所述入口文件是否依赖整个函数模块；
如果是，则将整个函数模块确定为待整合函数模块；
如果否，则确定所述入口文件依赖的子函数模块，并将所述子函数模块确定为待整合函数模块；
所述将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据的步骤包括：
将确定的所述待整合函数模块与所述入口文件进行整合，并生成整合后的数据。
3.如权利要求1所述的数据整合方法，其特征在于，所述判断所述入口文件是否依赖整个函数模块的步骤包括：
依据所述函数模块的层级，沿最低层级逐级升高，并依次判断所述入口文件是否依赖所有层级的所有子函数模块；或，
判断所述入口文件是否依赖最高层级的函数模块。
4.如权利要求1所述的数据整合方法，其特征在于，所述对所述入口文件进行分析，并依据所述入口文件确定关键词的步骤包括：
对所述入口文件进行词法分析及语法分析，并确定关键词。
5.如权利要求4所述的数据整合方法，其特征在于，所述对所述入口文件进行词法分析及语法分析，并确定关键词的步骤：
依据ASP语法对所述入口文件进行词法分析及语法分析。
6.一种数据整合装置，其特征在于，应用于服务器，所述服务器与数据库通信连接，所述装置包括：
数据获取单元，用于获取网页原码关联的入口文件；
数据处理单元，用于对所述入口文件进行分析，并依据所述入口文件确定关键词；
函数模块确定单元，用于依据所述关键词从所述数据库中确定所述入口文件依赖的函数模块；
数据整合单元，用于将确定的所述函数模块与所述入口文件进行整合，并生成整合后的数据，以依据所述整合后的数据构建网页。
7.如权利要求6所述的数据整合装置，其特征在于，所述函数模块确定单元包括：
判断子单元，用于判断所述入口文件是否依赖整个函数模块；
模块确定子单元，用于在所述入口文件依赖整个函数模块时，将整个函数模块确定为待整合函数模块；
模块确定子单元，用于在所述入口文件不依赖整个函数模块时，确定所述入口文件依赖的子函数模块，并将所述子函数模块确定为待整合函数模块；
所述数据整合单元用于将确定的所述待整合函数模块与所述入口文件进行整合，并生成整合后的数据。
8.如权利要求7所述的数据整合装置，其特征在于，所述判断子单元用于：
依据所述函数模块的层级，沿最低层级逐级升高，并依次判断所述入口文件是否依赖所有层级的所有子函数模块；或，
判断所述入口文件是否依赖最高层级的函数模块。
9.一种电子设备，其特征在于，包括：
存储器，用于存储一个或多个程序；
处理器；
当所述一个或多个程序被所述处理器执行时，实现如权利要求1-5中任一项所述的方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1-5中任一项所述的方法。
CN202011021645.5A 2020-09-25 2020-09-25 一种数据整合方法、装置、电子设备及存储介质 Active CN112181374B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011021645.5A CN112181374B (zh) 2020-09-25 2020-09-25 一种数据整合方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011021645.5A CN112181374B (zh) 2020-09-25 2020-09-25 一种数据整合方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112181374A true CN112181374A (zh) 2021-01-05
CN112181374B CN112181374B (zh) 2024-03-12

Family

ID=73943880

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011021645.5A Active CN112181374B (zh) 2020-09-25 2020-09-25 一种数据整合方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN112181374B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112380188A (zh) * 2020-11-12 2021-02-19 海光信息技术股份有限公司 工作环境及代码数据库的构建方法、电子设备、存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001077883A1 (en) * 2000-04-06 2001-10-18 Netseek Pty Ltd System and method for creating and searching web sites
CN103176778A (zh) * 2011-12-21 2013-06-26 北大方正集团有限公司 网页开发方法和装置
CN103761089A (zh) * 2014-01-14 2014-04-30 清华大学 基于寄存器传输语言确定动态函数调用关系的方法
CN103838556A (zh) * 2012-11-23 2014-06-04 苏州精易会信息技术有限公司 一种客户端程序的设计实现方法
US20140298294A1 (en) * 2013-03-28 2014-10-02 Tata Consultancy Services Limited System and Method for Analyzing Software Application in View of Entry Points
CN104899016A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 调用堆栈关系获取方法及装置
US20160188304A1 (en) * 2014-12-24 2016-06-30 International Business Machines Corporation Execution optimization of mobile applications
CN106547527A (zh) * 2015-09-22 2017-03-29 阿里巴巴集团控股有限公司 一种JavaScript文件构建方法及装置
WO2017124952A1 (zh) * 2016-01-21 2017-07-27 阿里巴巴集团控股有限公司 一种网页脚本加载方法和装置
CN108804159A (zh) * 2018-06-14 2018-11-13 腾讯科技（深圳）有限公司 javascript模块加载方法及其预处理方法、装置和计算机设备
CN110704096A (zh) * 2019-09-12 2020-01-17 北京达佳互联信息技术有限公司 前端项目的打包方法、装置、存储介质及电子设备
CN110795455A (zh) * 2019-09-06 2020-02-14 中国平安财产保险股份有限公司 依赖关系解析方法、电子装置、计算机设备及可读存储介质

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2001077883A1 (en) * 2000-04-06 2001-10-18 Netseek Pty Ltd System and method for creating and searching web sites
CN103176778A (zh) * 2011-12-21 2013-06-26 北大方正集团有限公司 网页开发方法和装置
CN103838556A (zh) * 2012-11-23 2014-06-04 苏州精易会信息技术有限公司 一种客户端程序的设计实现方法
US20140298294A1 (en) * 2013-03-28 2014-10-02 Tata Consultancy Services Limited System and Method for Analyzing Software Application in View of Entry Points
CN103761089A (zh) * 2014-01-14 2014-04-30 清华大学 基于寄存器传输语言确定动态函数调用关系的方法
CN104899016A (zh) * 2014-03-07 2015-09-09 腾讯科技（深圳）有限公司 调用堆栈关系获取方法及装置
US20160188304A1 (en) * 2014-12-24 2016-06-30 International Business Machines Corporation Execution optimization of mobile applications
CN106547527A (zh) * 2015-09-22 2017-03-29 阿里巴巴集团控股有限公司 一种JavaScript文件构建方法及装置
WO2017124952A1 (zh) * 2016-01-21 2017-07-27 阿里巴巴集团控股有限公司 一种网页脚本加载方法和装置
CN108804159A (zh) * 2018-06-14 2018-11-13 腾讯科技（深圳）有限公司 javascript模块加载方法及其预处理方法、装置和计算机设备
CN110795455A (zh) * 2019-09-06 2020-02-14 中国平安财产保险股份有限公司 依赖关系解析方法、电子装置、计算机设备及可读存储介质
CN110704096A (zh) * 2019-09-12 2020-01-17 北京达佳互联信息技术有限公司 前端项目的打包方法、装置、存储介质及电子设备

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
佚名: "打包工具：webpack", pages 1 - 5, Retrieved from the Internet <URL:《https://www.blogs.com/smile1065249097/p/12081076.html》> *
刘灿: "基于Bigpipe与Node.js的Web框架的设计与实现", 《中国优秀硕士学位论文全文数据库 (信息科技辑)》, pages 139 - 120 *
贾荻: "基于数据库的在线函数调用图工具", 《小型微型计算机系统》, pages 422 - 427 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112380188A (zh) * 2020-11-12 2021-02-19 海光信息技术股份有限公司 工作环境及代码数据库的构建方法、电子设备、存储介质
CN112380188B (zh) * 2020-11-12 2023-12-05 海光信息技术股份有限公司 工作环境及代码数据库的构建方法、电子设备、存储介质

Also Published As

Publication number Publication date
CN112181374B (zh) 2024-03-12

Similar Documents

Publication Publication Date Title
CN106897343B (zh) 执行计划的查找方法、存储方法及装置
US8626786B2 (en) Dynamic language checking
CN110795455A (zh) 依赖关系解析方法、电子装置、计算机设备及可读存储介质
CN109189395B (zh) 一种数据解析方法及装置
CN104320312A (zh) 网络应用安全测试工具及模糊测试用例生成方法和系统
CN110633211A (zh) 对于多接口的测试方法、装置、服务器及介质
CN102662825A (zh) 一种面向堆操作程序的内存泄漏检测方法
CN114238381A (zh) 数据质量校验方法、设备及计算机可读存储介质
US9195730B2 (en) Verifying correctness of a database system via extended access paths
CN112181430A (zh) 代码变更统计方法、装置、电子设备及存储介质
CN109901991B (zh) 一种分析异常调用的方法、装置和电子设备
CN113626558B (zh) 一种基于智能推荐的字段标准化的方法和系统
CN112181374B (zh) 一种数据整合方法、装置、电子设备及存储介质
CN113360300B (zh) 接口调用链路生成方法、装置、设备及可读存储介质
CN113407752A (zh) 图数据库内存管理方法、系统、电子设备及存储介质
CN111563094A (zh) 一种数据查询方法及装置、电子设备、计算机可读存储介质
CN116483888A (zh) 程序评估方法及装置、电子设备和计算机可读存储介质
CN116560661A (zh) 代码优化方法、装置、设备及存储介质
CN115878654A (zh) 一种数据查询的方法、装置、设备及存储介质
CN114528313A (zh) 数据处理方法、装置和电子设备
CN114896269A (zh) 结构化查询语句检测方法、装置、电子设备及存储介质
CN114358596A (zh) 指标计算方法及装置
CN112948478A (zh) 基于链路的代码分析方法、装置、电子设备及存储介质
CN112907198A (zh) 业务状态流转维护方法、装置及电子设备
CN112181831A (zh) 基于关键词的脚本性能校验方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant